#简介
python 爬虫工具
#入门教程
http://scrapy-chs.readthedocs.io/zh_CN/0.24/intro/tutorial.html
#安装
pip install Scrapy
#查看所有可用命令
scrapy -h
#创建项目
scrapy startproject myproject
#项目管理
cd myproject
#生成spider
scrapy genspider mydomain mydomain.com
#使用spider进行爬取并保存到json文件中。
scrapy crawl myspider -o myspider.json
#shell终端交互
scrapy shell url
#退出终端
ctrl+D
python 爬虫工具
#入门教程
http://scrapy-chs.readthedocs.io/zh_CN/0.24/intro/tutorial.html
#安装
pip install Scrapy
#查看所有可用命令
scrapy -h
#创建项目
scrapy startproject myproject
#项目管理
cd myproject
#生成spider
scrapy genspider mydomain mydomain.com
#使用spider进行爬取并保存到json文件中。
scrapy crawl myspider -o myspider.json
#shell终端交互
scrapy shell url
#退出终端
ctrl+D