最近自学了下爬虫,想让爬虫在电脑上自动运行,查了一些资料,记录一下
1,scrapy爬虫开发,这个就没啥好说的
2,创建bat文件。新建txt文件,写入‘scrapy crawl beike’ ,beike就是需要运行的爬虫程序。然后把文件名改为beike.bat
3,将文件beike.bat放在项目中,大概是在这个层级,跟cfg文件一个层级
4,创建windows任务计划程序。
我的电脑->右键管理->
一步步操作下来,最后点完成,然后到时间了就会自动运行了。你可以在创建的时候把下次运行时间推迟几分钟,就能看到运行结果。本人的
参考链接:Win10环境配置Python定时爬虫任务Win10环境配置Python定时爬虫任务
Windows设置exe或者bat文件开机启动的几种方法汇总Windows设置exe或者bat文件开机启动的几种方法汇总