Scrapy是一款基于Python的开源的网络爬虫框架,使用起来快速、简单、可扩展性强。
Scrapy开源运行在Python2.7和Python3.4以及更高版本。
可以使用conda进行安装
conda install -c conda-forge scrapy
使用pip安装(
关于pip请自行Google或百度)
pip install Scrapy
笔者推荐使用pipenv安装(
Pipenv 是 Python 项目的依赖管理器,关于pipenv请自行Google或百度)
pipenv install Scrapy