请教javascript和html高手如何批量抓取网页数据
发布网友
发布时间:2022-05-11 12:59
我来回答
共2个回答
热心网友
时间:2023-10-12 22:00
用JS如何能抓,除非配上反向代理,才能解决JS跨域才能抓。不同域名下,JS是无法访问的。
接口在这里
http://www.thfund.com.cn/calculator.do
POST方式
参数在这 'method=find&date='+d_date+'&fundcode='+c_fundcode,
用PHP的CURL或者JAVA,或者PYTHON的PURL
好吧,它这个貌似GET方式提交也是可行的
http://www.thfund.com.cn/calculator.do?method=find&date=2013-09-12&fundcode=000198追问首先谢谢你的回答,但是如何批量抓取数据呢?
追答遍历 + 循环
其中date部分的参数就是你要循环的部分。
热心网友
时间:2023-10-12 22:00
这个用八爪鱼采集器就可以,需要定时采集的话也是支持的