cmdline.execute执行完第一个爬虫主程序就停止了,怎么顺序执行多个爬虫

# -*- coding:utf-8 -*-

from scrapy import cmdline
from scrapy.cmdline import execute
import sys,time,os

#会全部执行爬虫程序
os.system('scrapy crawl ccdi')
os.system('scrapy crawl ccxi')
#-----------------------------------------------------

#只会执行第一个
cmdline.execute('scrapy crawl ccdi'.split())
cmdline.execute('scrapy crawl ccxi'.split())
#-----------------------------------------------------

#只会执行第一个
sys.path.append(os.path.dirname(os.path.abspath(__file__)))  
execute(["scrapy", "crawl", "shanghaione"])  
time.sleep(30)  

sys.path.append(os.path.dirname(os.path.abspath(__file__)))  
execute(["scrapy", "crawl", "shanghaitwo"]) 

  • 3
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 11
    评论
评论 11
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值