一、安装
首先是想在pycharm里去用scrapy,于是就想直接安装这个库,但是出现了各种问题,比如层层依赖什么的,在windows下安装的话,还是极度推荐使用Anoconda这个包管理软件去做一个pycharm下的scrapy开发环境的。
python什么的都不用下,下了也没事,从环境变量里去掉换上anoconda的就可以,网上有相关教程。
二、搭建
1、pycharm直接newProject,如图新建项目;
2、在自带的terminal输入搭建命令:scrapy startproject 项目名
然后会在当前目录生成文件目录,类似(红色下划线main文件自己加的,方便调试):
tips:为了不每次执行在terminal打命令,直接在pycharm调试,如上图加入main文件,内容为:
然后如下图调整执行的main文件位置:
下划线处换成刚加入的main文件路径,之后就可以直接在pycharm调试了。
3、搭建最后一步,如图创建文件,至此一个scrapy项目大致框架搭建完成;文件及其内容具体含义后续再研究。