- 博客(3)
- 收藏
- 关注
原创 基于requests和lxml库爬取优信二手车
工具:requests库和lxml库具体代码:# _*_ coding:utf-8 _*_import requestsimport reimport timeimport MySQLdbimport MySQLdb.cursorsfrom lxml import etreefrom urllib import parsefrom random import randint...
2018-11-26 20:19:04 546
原创 小白的Scrapy入门之路2 ————爬取脚本之家
来到了小编学习之路的第二站,使用crawlspider爬取脚本之家的文章。 创建项目之类的就不多说了,我们直接就看代码吧。首先,我们来看看Item的代码:其实也没什么特别的,只是把插入数据的语句也放到了这里面。我们的重点是蜘蛛,下面让我们来看看蜘蛛的代码吧。这里我们继承的是scrapy内置的crawlspider,Rule()实例就是制定蜘蛛...
2018-11-20 14:03:35 253
原创 小白的Scrapy入门之路 ----爬取菜鸟教程的python页面
小白的Scrapy入门之路 ----爬取菜鸟教程的python页面这是我的第一篇博文,不当之处请各位大神指教 话不多说,让我们进入正题吧! 安装 首先,少不了的肯定是python以及scrapy的安装了。可以在python的官网下载安装,官网地址:www.python.org。 由于小编使用的是w...
2018-11-14 23:20:12 6934 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人