scrapy 定时爬取小技巧

在spider目录下 新建py文件写入如下代码

import os
import time

if __name__ == '__main__':
    # os.system('pwd')
    while True:
        os.system("scrapy crawl aqy")
        # 每２个小时执行一次　６０＊６０＊２

        time.sleep(7200)

每两小时执行一次