转: 基本概念介绍1-scrapy命令行工具(常用)

原文:https://blog.csdn.net/u010155229/article/details/51530148

1、scrapy –help 查看帮助信息
2、scrapy –version 查看scrapy版本
3、scrapy –version -v 查看scrapy中各个依赖主键的版本
4、scrapy startproject projectName 创建工程
5、scrapy genspider spiderName websiteName 创建spider并添加一些网站名称信息
如:scrapy genspider aaa aaa.com
6、scrapy list 列出当前工程有多少spider
7、scrapy view 网页url :用于明明你认为这个页面有这样的信息,但是实际运行结果就是没有这个信息,
可以使用该命令去查看该页面是什么样子
如:scrapy view http://www.baidu.com 在浏览器中会打开新的页面并跳转到百度
8、scrapy parse url:用于在工程中解析某个页面(可以用于该工程的parse的逻辑是否正确)
9、scrapy shell:用于调试数据、检测xpath、查看页面源码、并且会产生一些全局变量等等
执行shell不需要具体的工程

10、scrapy runspider spiderFileName:运行自包含的spider(单独的文件,没有工程)
11、scrapy bench:执行基准测试;用于检测scrapy是否安装成功

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值