scrapy爬虫之scrapy框架安装

centos7安装scrapy

方式1(源码安装)

首先你已经安装python环境：python安装过程

#git scrapy源码
git clone https://github.com/scrapy/scrapy.git
cd scrapy/
python3 setup.py install
安装过程中可能会报错，一般都是缺少python依赖包，缺少啥用pip安装啥就可以
#做scrapy命令的软连接，这个命令下篇介绍
ln -s /usr/local/python3/bin/scrapy /usr/bin/

方式2(yum方式)

#下边依赖包，其实直接pip就行
sudo yum update
sudo yum -y install libxslt-devel pyOpenSSL python-lxml python-devel gcc
#下边二选一
sudo easy_install scrapy
pip install scrapy