![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
Weby-Weby
前端码农,也写写cocoscreator游戏,研究下新技术什么的,回复消息可能较慢,敬请谅解。
展开
-
使用scrapy爬网页出现403错误
报错内容如下:2019-09-27 13:32:17 [scrapy.core.engine] DEBUG: Crawled (403) <GET https://movie.douban.com/robots.txt> (referer: None)2019-09-27 13:32:17 [scrapy.core.engine] DEBUG: Crawled (403) &l...原创 2019-09-27 13:42:27 · 3818 阅读 · 1 评论 -
谷歌浏览器插件xpath helper 的安装和使用
xpath helper是用来在页面上快速定位元素的一个插件,方便爬虫的时候编写解析代码。安装:下载之后,直接双击,或者拖进扩展程序可以安装。如果出现错误无效,可以将插件后缀改为.rar,然后解压出来。点击“加载已解压的扩展程序” ,选择刚刚解压的目录即可。使用:安装完成,必须重启浏览器。使用的快捷键为:ctrl + shift + x按住 ctrl + sh...原创 2019-09-27 16:24:43 · 2608 阅读 · 0 评论