vscode 调试和运行scrapy

本文参考博文https://blog.csdn.net/zhaomengszu/article/details/88885852。

1.在settings.py文件所在的目录下新建run.py文件（名字随意）；

2.run.py内容如下所示

from scrapy.cmdline import execute
import sys
import os
# 获取当前脚本路径
dirpath = os.path.dirname(os.path.abspath(__file__))
#运行文件绝对路径
print(os.path.abspath(__file__))
#运行文件父路径
print(dirpath)
# 添加环境变量
sys.path.append(dirpath)
#切换工作目录
os.chdir(dirpath)
# 启动爬虫,第三个参数为爬虫name
execute(['scrapy','crawl','demo'])

3.在spiders下的工作文件设置断点即可调试