问一个关于网页抓取的问题:如果目标网站用的是javascript进行翻页,url中也没有关于页的参数怎么实现抓取阿???
如果目标网站用的是javascript进行翻页,url中也没有关于页的参数怎么实现抓取阿???
[解决办法]
嵌入一个javascript解释器比如使用, 这个难度就有点高了.
比如在perl中有个Javascript模块可以解释 javascript脚本, python中也有相应的module
都是调用spidermonkey这个javascript解释器, spidermonkey也用在firefox里.