在centos6.5下安装Scrapy爬虫框架,python版本为3.6.0
依次执行如下命令:
更新yum
1、yum -y update
安装gcc及扩展包
2、yum install gcc libffi-devel python-devel openssl-devel
安装开发工具包
3、yum groupinstall -y development
安装libxslt-devel支持lxml
4、yum install libxslt-devel
安装pip
5、yum -y install python-pip
安装Scrapy
6、 pip install scrapy
测试是否安装成功:
输入命令:scrapy version