dump 到 JSON 格式文件:
scrapy crawl myspider -o items.json #内容是JSON格式
另外我们还可以每一个item输出一行JSON,输出后缀为jl,为jsonline的缩写,命令如下:
scrapy crawl myspider -o items.jl 或 scrapy crawl myspider -o items.jsonlines
dump 到 CSV 格式文件:
scrapy crawl myspider -o items.csv
dump 到 XML 格式文件:
scrapy crawl myspider -o items.xml
dump输出pickle格式文件:
scrapy crawl myspider -o items.pickle
dump输出marshal格式文件:
scrapy crawl myspider -o items.marshal
ftp输出需要正确配置用户名、密码、地址、输出路径,否则会报错
scrapy crawl myspider -o ftp://user:pass@ftp.example.com/path/to/items.csv
scrapy将item 转存(dump)到 JSON/CSV/XML/PICKLE/MARSHAL 格式文件以及ftp远程输出
最新推荐文章于 2019-08-24 10:27:14 发布