scrapy库的常用命令

scrapy是专业的python爬虫框架，它的命令需要在命令行中执行。

scrapy命令行格式：

>scrapy <command> [options] [args]

 

scrapy常用命令：

1. startproject    创建一个新工程    scrapy startproject <name> [dir]
2. genspider    创建一个爬虫    scrapy genspider [options] <name> <domain>
3. settings    获得爬虫配置信息    scrapy settings [options]
4. crawl    运行一个爬虫    scrapy crawl [options]
5. list    列出工程中所有爬虫    scrapy list
6. shell    启动url调试命令行    scrapy shell [url]