Python Scrapy爬虫入门 - 使用Crontab实现Scrapy爬虫的定时执行
最近在做Python Scrapy框架搭建数据中心的项目,边做边学,手敲代码,现在spider已经可以采集数据了,但是还没有写定时执行的脚本。根据以前的工作经验,简单的任务可以使用Crontab来实现脚本的定时执行。不过因为工作的变动,而且当时对shell的了解也只是皮毛,还是出了点问题:crontab -e 添加一个最简单的计划任务:0 */1 * * * cd /data/spid
原创
2017-05-25 07:00:13 ·
4588 阅读 ·
0 评论