![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python-scrapy框架的体会
马走日_ZouR-Ma
我们的生活可以比电影还要精彩,还要励志,就看我们怎么对待它
展开
-
关于python-scrapy框架爬取微博转发的信息
代码请移步GitHub SinaInfoSpider 爬虫的功能: 将转发某条的微博的信息信息爬取下来,主要是转发者转发时的文字内容,转发人的uid, 转发 后的点赞数,以及转发的时间。 同时用到了IP代理,emmm,这里可能需要一笔钱,要是家里有矿就不谈了,家里没矿的买一两天的玩玩也就行了,IP代理见: 无忧代理     p原创 2018-08-05 16:06:29 · 1338 阅读 · 1 评论 -
python-scrapy框架的入门知识、随便写写。
安装scrapy前记得要安python!!!,我的环境是python 3.6的。 安装scrapy框架: 首先是windows的,先用pip install wheel,要是在线安装不行的话,就去这个网站 https://www.lfd.uci.edu/~gohlke/pythonlibs/ ,去找你要下的XXX.whl。 再安装一个twiste,也是pip install twiste 不...原创 2018-08-06 15:35:44 · 246 阅读 · 0 评论