爬虫
发蝴蝶和大脑斧
这个作者很懒,什么都没留下…
展开
-
scrapy入门,爬图片
以freebuf首页图片为例。新建工程,命令行输入:scrapy startproject 工程名(本项目为scrapy startproject Test)然后 cd 工程名然后 scrapy genspider 爬虫文件名 目标网址 (本项目为scrapy genspider MySpider freebuf.com)得到工程模板。1.修改item.py文件items.py文件#...原创 2019-07-13 21:24:51 · 131 阅读 · 0 评论 -
scrapy翻页+云主机离线跑程序
一断开云主机本地的shell连接就会结束进程,离线泡程序用screen首先pip安装screen然后创建screen:screen -S screen名字在新创建的screen中运行程序,这时候关了也没关系。重新连接shell时查看有哪些screen:screen -ls连接到想连结的:screen -r 编号.名字...原创 2019-07-31 10:20:40 · 213 阅读 · 0 评论