def on_start(self):
self.crawl('https://www.taobao.com/', callback=self.index_page,validate_cert=False,fetch_type='js')
添加 fetch_type ='js'即可
对于某些使用js渲染的网站使用pyspider无法查看的解决方法
最新推荐文章于 2020-10-20 16:38:40 发布
def on_start(self):
self.crawl('https://www.taobao.com/', callback=self.index_page,validate_cert=False,fetch_type='js')
添加 fetch_type ='js'即可