scrapy 出现Unknown command: crawl Use "scrapy" to see available commands错误

最新推荐文章于 2024-05-12 21:46:18 发布
最新推荐文章于 2024-05-12 21:46:18 发布
阅读量1.7w 收藏 6
点赞数 15
文章标签： scrapy 错误
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wayne1000/article/details/102804879
版权

在终端使用scrapy出现以下错误：

Unknown command: crawl 
Use "scrapy" to see available commands

原因是没有切换到要crawl的项目目录下:比如
在这里插入图片描述

C:\Users\Administrator\PycharmProjects>scrapy crawl douban

是错误的！

得进入到douban项目里面才可以！

C:\Users\Administrator\PycharmProjects>douban>scrapy crawl douban
wayne1000
关注
  • 15
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
pycharm创建scrapy项目教程及遇到的坑解析
09-18
主要介绍了pycharm创建scrapy项目教程及遇到的坑解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
在pycharm下实现scrapy爬虫，解决NO module named‘‘&Use “scrapy“ to see available commands的问题
qq_45926809的博客
09-29 2999
在pycharm中利用python实现scrapy爬虫。以例子来记忆最好懂，我也只是把老师写好的步骤自己执行，做出结果。写在这里方便以后自己查看，希望能够对你们有所帮助 目标内容 1.内容：爬取传智播客C/C++讲师的姓名、职称以及个人简介。 2.目标网址：http://www.itcast.cn/channel/teacher.shtml 3.使用scrapy框架实现爬虫，运用xpath解析方式 步骤 1.创建scrapy项目工程 （1）下载scrapy，在file–>setting–>pro
scrapy crawl时报Unknown command: crawl
最新发布
05-12 478
命令之前，你需要先在项目目录中初始化一个 Scrapy 项目。确保你已经在项目目录中执行了。如果没有startproject直接genspider然后crawl就会报这个错误。
scrapy遇到的常见错误-Unknown command: crawl
reg183的专栏
10-08 1248
没有cd到项目根目录，因为crawl会去搜搜cmd目录下的scrapy.cfg。1、在cmd中输入scrapy crawl mySpider 提示如下。
Pycharm运行Scrapy报错:no active project Unknown command: crawl Use “scrapy“ to see available commands
Cheng.py的博客
08-18 5985
出现这个错误的原因是： Pycharm的工作目录设置有误，造成无法识别 scrapy的crawl命令。 1. 查看目录里是否少了个 scrapy.cfg 文件 少了就添加如下 新建个scrapy.cfg文件，内容如下。 [settings] default = 项目名.settings [deploy] #url = http://localhost:6800/ project = 项目名 2. 再就是查看scrapy目录中Settings文件，，查看名称与路径是否出错 3. 别忘了看看并调整.
运行scrapy项目报错
木子的博客
05-11 566
问题： 我从git拉下来的scrapy项目运行scrapy crapy spidername报错。 Scrapy 2.4.1 - no active project Unknown command: crawl Use “scrapy” to see available commands 解决方案： 检查当前项目下是否有scrapy.cfg文件，如果没有则新建一个 内容为 # Automatically created by: scrapy startproject # # For more informa
Pycharm调试scrapy报错：Unknown command: crawl Use "scrapy" to see available commands
第一段代码的博客
07-17 1万+
crawl  是我们调试运行python爬虫的命令 在终端命令中，我们输入 scrapy crawl projectname  就可以运行我们的爬虫 然而在终端cmd中调用成功，发现在Pycharm执行却报错误： Unknown command: crawl Use "scrapy" to see available commands 出现这个错误的原因是： Pycharm的工作目录设...
如何在django中运行scrapy框架
09-17
在Django中运行Scrapy框架是一项实用的技术，它允许开发者结合两个强大的Python工具，以便在一个统一的环境中进行数据抓取和Web应用开发。下面将详细解释如何实现这一目标。 首先，你需要创建一个新的Django项目。...
scrapy-crawl-once:Scrapy中间件，仅允许抓取新内容
05-05
pip install scrapy-crawl-once 用法 要启用它，请修改settings.py： SPIDER_MIDDLEWARES = { # ... 'scrapy_crawl_once.CrawlOnceMiddleware': 100, # ... } DOWNLOADER_MIDDLEWARES = { # ... 'scrapy_crawl...
scrapy-playwright::performing_arts:适用于Scrapy的Playwright集成
03-28
Scrapy的Playwright集成 该项目提供了一个Scrapy下载处理程序，该程序使用执行请求。 它可用于处理需要JavaScript的页面。 该软件包不会干扰常规的Scrapy工作流程，例如请求计划或项目处理。动机在发布后，其中包括...
scrapy-selenium:Scrapy中间件使用Selenium处理javascript页面
04-30
Scrapy中间件可使用Selenium处理javascript页面。 安装 $ pip install scrapy-selenium 您应该使用python> = 3.6 。 您还将需要一种与Selenium。 配置 添加要使用的浏览器，驱动程序可执行文件的路径，以及将要传递...
解决Scrapy安装错误:Microsoft Visual C++ 14.0 is required...
09-21
下面小编就为大家带来一篇解决Scrapy安装错误:Microsoft Visual C++ 14.0 is required...的问题。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
Scrapy运行项目时出错：Scrapy 0.16.2 – no active project，Unknown command: crawl，Use "scrapy" to see available...
weixin_30646505的博客
12-25 531
【问题】 通过Scrapy创建好了项目： 1 E:\Dev_Root\python\Scrapy>scrapy startproject songtaste 运行项目，结果出错： 1 2 3 4 5 6 E:\Dev_Root\python\Scrapy>scrap...
Scrapy运行错误：Unknown command: crawl Use "scrapy" to see available commands
陈起之快乐的皮皮的博客
11-02 7211
在终端使用cd进入指定的爬虫文件目录下运行：scrapy crawl xxx
python学习笔记（七）
EaSoNgo111的博客
03-16 418
出现这个错误的原因是因为在字符串中包含了一个非数字字符“&”，但是在使用int()函数将其转换为整数时出现了错误。这样就可以正确地生成URL链接，避免出现ValueError错误。它是一个字典，可以用于在请求之间传递数据。将base_url的格式进行修改，使其能够正确地接收关键字参数。当我们需要在请求之间传递数据时，可以使用 Request 的。然后使用format()方法将关键字参数传递给。只返回了二级页面的内容，但没有一级页面的内容。对象，并将结果存储到其中。将列表对象转换为字符串对象。
Unknown command: crawl（爬虫框架Scrapy遇到的常见错误）
ITMAN009的博客
03-18 3566
前言序锦 今天在用scrapy框架运行多爬虫的时候，遇到了一个比较棘手的问题，刚开始进行了各种尝试，却还是不行，最后终于还是找到了原因！ 正文 当我们在cmd中或者PyCharm中使用Terminal输入scrapy crawl lieping（lieping是我项目里的爬虫的名字，name = “lieping”，爬取猎聘网的职位信息），总会报如下的错误： E:\Study\Python...
菜鸟教程中的scrapy入门教程遇到的小问题和解决方法
weixin_44348465的博客
05-15 437
关于菜鸟教程中的scrapy入门教程的一些问题，记录以下： 1.在终端运行 scrapy crawl itcast 代码时出错： Scrapy 1.5.0 - no active project Unknown command: crawl Use “scrapy” to see available commands 原因是：默认crawl 命令是cd 到项目的根目录的！！！如图：scrapy_1即为我的根目录名。而scrapy.cfg是存放在mySpider目录下。 解决：打开命令行： step1:
菜鸟写Python-Pycharm执行Scrapy项目报：Scrapy-no active project 和（或）Unknown command: crawl错误
热门推荐
第一段代码的博客
08-10 1万+
菜鸟写Python：Pycharm执行Scrapy项目报：Scrapy-no active project 和（或）Unknown command: crawl错误 Scrapy和寻常的py文件不同，它不能直接在编辑器中通过run来运行，究其原因是因为 Scrapy 是通过 Scrapy 的解释器 scrapy.exe 完成的（通常的python文件是通过python.exe编译的），因而官方出...
更换了OpenSSL版本后出现Unknown command: crawl Use "scrapy" to see available commands
04-30
这个错误可能是因为你更换了 OpenSSL 版本后，重新安装了 Scrapy，但是没有正确配置 Scrapy。 你可以尝试以下步骤解决该问题： 1. 确认 OpenSSL 版本是否正确配置。可以通过在终端中输入以下命令进行检查： ``` openssl version ``` 如果输出的 OpenSSL 版本与你安装的版本不一致，请重新配置 OpenSSL。 2. 确认 Scrapy 是否正确安装。可以通过在终端中输入以下命令进行检查： ``` scrapy version ``` 如果输出了 Scrapy 版本信息，则说明 Scrapy 已经正确安装。 3. 如果 Scrapy 已经正确安装，请确认是否设置了正确的环境变量。在终端中输入以下命令进行检查： ``` echo $PATH ``` 如果 Scrapy 所在的路径没有包含在 PATH 环境变量中，则需要手动添加。可以通过在终端中输入以下命令进行添加： ``` export PATH=$PATH:/path/to/scrapy ``` 4. 如果以上步骤都没有解决问题，可以尝试重新安装 Scrapy。 ``` pip uninstall scrapy pip install scrapy ``` 如果以上步骤都没有解决问题，请提供更多详细信息，我会尽力帮助你解决问题。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值