python 爬虫框架scrapy的安装以及基本操作

scrapy是什么？：     

      scrapy是为了爬取网站数据的应用框架，当你需要从网站上回去信息，但该网站没有提供apl(应用程序接口，他是提供给用户来编程的)或者通过程序获取信息的机制时，scrapy可以帮助你。scrapy不仅包含了爬虫的特性，还可以将爬虫数据保存到CSV，json等文件中。

serapy的安装：

按下window键搜索anaconda输入：conda install scrapy    如图：

 

 

 

 第二种安装方式在终端上输入：pip install scrapy

如果安装不成功就需要下载scrapy的whl包，下载地址，

根据你的python版本安装相应包，我的python版本是3.6   cp36是python3.6的意思 amd32是python位数

 

将下载好的包拖到桌面在终端上输入以下命令：

 

 

 

 以上就是scrapy的安装，安装好了就可以进行一些操作了。以下是我的例子

先在桌面创建一个文件夹，在里面再建一个文件夹，并在pycharm中打开，然后打开终端在终端里输入以下代码

接下来继续看图：

 未完待续，我要睡觉了。