1.创建爬虫项目命令,在Terminal命令窗口执行:scrapy startproject project_name(project_name代表项目名字)
2.在项目目录下的spiders文件如何创建爬虫项目文件的命令 ,在Terminal命令窗口执行:scrapy genspider get_data(项目的名字) baidu.com(要爬取数据的网址后缀)
3.1启动项目的命令,在Terminal命令窗口执行:scrapy crawl project_name (要先切换到项目路径,可以新建窗口打开项目,这样就不用了切换到项目的路径 project_name代表的是项目名字)
3.2也可以在项目下创建py文件begin.py
内容是:
这样就可以右键执行不用输入命令这么麻