Scrapy的安装通常会有许多坑,包括软件版本太低、所需安装包被墙等。为了安装方便,我使用Anaconda安装Python所需的运行环境.
Anaconda 是一个用于科学计算的 Python 发行版,支持 Linux, Mac, Windows, 包含了众多流行的科学计算、数据分析的 Python 包。
然后设置anaconda使用境内的镜像源网站,最后就可以简简单单的使用conda install scrapy来进行安装了。
安装Anaconda
- Anaconda的下载地址,截止到现在已经发布到5.0.1版本,分为Python3.6版和Python2.7版,依据个人需要选择。
- 有时候可能因为网速问题下载太慢,毕竟500多M的安装包。推荐使用清华的镜像网站
- 添加Anaconda的安装路径和Scripts文件夹目录到系统环境变量path中
- 测试安装成功与否
在CMD中输入conda –version,如果成功将会显示Anaconda版本号,不成功则提示非系统命令
安装时建议安装在非C盘目录,避免因为权限问题导致的麻烦。
设置Anaconda镜像仓库
在CMD中运行下面的命令:
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --set show_channel_urls yes
即可添加Anaconda Python免费库,然后就可以愉快的使用>conda install *< 安装所需要的包了。
安装Scrapy
运行命令
conda install scrapy
即可安装Scrapy所需安装包和环境