Scrapy框架学习笔记(一)
下面是我通过网课学习的scrapy框架的笔记,想分享一下,也记录一下自己的成长
安装
我是通过pychram来安装scrapy的,打开pychram的setting
代码里import scrapy 没有报错就代表成功了
创建scrapy项目
点开pychram下面的Terminal这个框(不懂这个框什么,
应该是和cmd命令一样的黑框那个意思。)输入scrapy可以验证有没有安装成功scrapy。
输入"scrapy startproject module",module是你要命名的类似于大项目的名字
例如我写了一个"xiaoshuo"的名字,他给我返回了如图提示,按照提示
cd xiaoshuo
然后
scrapy genspider example example.com
这里example就是你要爬取的的url的域名,例如www.baidu.com的话example就是baidu
创建完成啦