python爬虫框架PySplider安装配置
使用pyspider框架爬数据时,跳转网页添加参数 validate_cert=False,如:
self.crawl(网页url, **validate_cert=False**, callback=self.index_page)
爬取的字符串数据设置编码为gbk encode(“gbk”),如:response.doc('#info').text().encode("gbk")
...
原创
2020-08-28 19:52:07 ·
254 阅读 ·
0 评论