windows 10 下pyspider安装与试错

最新推荐文章于 2023-05-15 19:02:13 发布
最新推荐文章于 2023-05-15 19:02:13 发布
阅读量176 收藏 1
点赞数 1
文章标签： python cmd
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huahua_9011/article/details/105043163
版权
在Windows 10上安装pyspider时，遇到命令行执行`python`指令失效、`pyspider all`报错等问题。解决方法包括：调整环境变量以使`python`可用，使用`pip`安装pyspider，用PyCharm编辑pyspider源码替换`async`关键字，卸载并安装低版本的wsgidav和werkzeug。最终成功运行`pyspider all`并在浏览器中访问localhost:5000启动pyspider界面。
摘要由CSDN通过智能技术生成

windows 10 下pyspider安装与试错

1.如果cmd中无法通过 python指令，则在环境变量 ->path 中添加 ；C:\Users\asus\AppData\Local\Programs\Python\Python38\；C:\Python27\Scripts；
2.安装pyspider 在cmd中输入 pip install pyspider
3.在cmd中执行pyspider all 遇到问题：SyntaxError: invalid syntax，在PyCharm 中打开【file->open】 pyspider（我电脑中的Pyspider地址如下C:\Users\asus\anaconda3\Lib\site-packages\pyspider ），接着在pycharm中打开如下目录：edit->find->find in path…(快捷键Ctrl+shift+f），在In Project 里搜索 async ，替换成shark（CurlAsyncHTTPClient SimpleAsyncHTTPClient async_fetch向这样的不用替换，只需替换掉单个的async。这些要替换调度async来自三个.py文件：run.py ,app.py ,tornado_fetcher.py)
4.在cmd中执行pyspider all 遇到问题：

    ValueError: Invalid configuration:
  - Deprecated option 'domaincontroller': use 'http_authenticator.domain_controller' instead

解决方法&#x

最低0.47元/天 解锁文章
huahua_9011
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
在win10上安装pyspider
wg5foc08的博客
05-27 816
在cmd终端直接pip install pyspider 出现如下错误 需要安装两个工具包 https://www.lfd.uci.edu/~gohlke/pythonlibs/#pycurl， 在这个网站可以找到工具包，找到自己电脑对用对应的版本 下载到自己python对应的库文件下，要安装下载的文件包，两个文件配置好后，再pip install pyspider即可安装。 安装完pyspid...
Win10安装pyspider 避坑
qq_40279560的博客
09-18 350
准备文件： pycurl-7.43.0.4-cp36-cp36m-win_amd64.whl pyspider-0.3.10-py3-none-any.whl phantomjs 以上三个文件再我博客有上传 我的python版本是3.6.8 先装phantomjs，将bin路径添加到环境变量path, 下载两个文件：pycurl-7.43.0.4-cp36-cp36m-win_amd64.whl和pyspider-0.3.10-py3-none-any.whl，先安装pycurl，pip+install+下
windows安装pyspider教程
feng271374203的博客
04-17 2471
小白在Windows下安装pyspider 要安装pyspider首先要安装python。 下载地址：https://www.python.org/downloads/windows/ 我选的是Python 3.5.4 之前装过Python 3.7.3 然后各种问题，我就卸载掉了。 下载完毕以后， 4、 打开cmd，输入安装命令：pip install pyspid...
win7 or win10 64位版本安装pyspider的问题
xmulsm的专栏
03-23 2772
玩爬虫怎么能少得了pyspider这个神扩展，可是由于博主习惯（没钱买mac，用不惯linux）用windows作为开发环境，在安装pyspider的时候居然报错了，我们来看看pyspider的官方解释吧： Does pyspider Work with Windows? Yes, it should, some users have made it work on Windows.
Pyspider安装遇到的所有坑
weixin_48724879的博客
05-15 505
在https://www.lfd.uci.edu/~gohlke/pythonlibs/#pycurl这个地址下载对应的python版本，一定得对应，不然安装不下来。出现 phantomjs not found, continue running without it 这个错误 ，下载phantomjs ，并将phantomjs.exe放到python.exe同级目录下。出现phantomjs exited：打开pyspider->webui->app.py 搜索async，用async_替换async。
Linux/ubuntu 下安装pyspider的过程
09-15
### Linux/Ubuntu 下安装pyspider的过程 #### 引言 Pyspider是一款功能强大的基于Python的网络爬虫工具，它不仅提供了GUI界面，还允许用户在Web界面中轻松地定义爬取任务、抓取数据并导出结果。由于其特性与灵活性...
windows安装pyspider环境
09-02
包含如下依赖环境： python-2.7.12.amd64 lxml-2.2.8.win-amd64-py2.7 ez_setup-0.9.tar pip-8.1.2.tar 结合我的blog文章使用： http://blog.csdn.net/zengraoli/article/details/52415139
windows安装pyspider（32位）环境
09-03
包含如下依赖环境： python-2.7.12 lxml-2.2.8.win32-py2.7 ez_setup-0.9.tar pip-8.1.2.tar phantomjs-2.1.1-windows 结合我的blog文章使用： http://blog.csdn.net/zengraoli/article/details/52415139
Python3爬虫中pyspider的安装步骤
01-21
pyspider是国人binux编写的强大的网络爬虫框架，它带有强大的WebUI、脚本编辑器、任务监控器、项目管理器以及结果处理器，同时支持多种数据库后端、多种消息队列，另外还支持JavaScript渲染页面的爬取，使用起来非常...
Pyspider启动过程中的问题ssl/nss错配问题
木小鱼的笔记
08-13 2227
pysider的配置 pyspider, centos 7.4 , python 3.6.5 问题的提出 在启动pyspider的过程中，碰到如下的问题： 其中的信息如下： [root@AY131203102210033c39Z ~]# pyspider [W 180813 11:23:41 run:413] phantomjs not found, continue running w...
pyspider 启动错误
mozai147的博客
04-05 1675
[W 190405 00:11:42 run:413] phantomjs not found, continue running without it. [I 190405 00:11:44 result_worker:49] result_worker starting... [I 190405 00:11:44 processor:211] processor starting... [I...
win10下安装Pyspider
weixin_34354173的博客
04-09 737
1、安装pythonhttps://www.python.org/downloads/release/python-350/2、安装对应python版本的pycurlhttps://bintray.com/pycurl/pycurl/pycurl/view#files/3、设置windows的环境变量path必须设置两个，一个用于python本身，一个用于pip安装注：此步骤可能需要重启电脑4、 ...
Pyspider windows下的安装
liyadongcn的博客
02-15 8605
pyspider在windows系统下的安装
python27安装pyspider_win10下安装pyspider总结
weixin_31208627的博客
01-29 137
win10下安装pyspider有很多坑，为了记录下来，专门新建了虚拟环境从头安装加以记录，所有出错信息和截图均来自安装过程，不对你的症请找其他大夫，不喜勿喷。安装：pip install pyspider启动：pyspider报错：File "d:\Python\virtualEnv\env10\lib\site-packages\pyspider\webui\app.py", line 59,...
PhantomJS not found on PATH
热门推荐
yueguanyun的专栏
05-08 1万+
转自：https://segmentfault.com/a/1190000008996214使用vue-cli创建项目后，npm init常出现以下问题：PhantomJS not found on PATH原因：这是因为文件phantomjs-2.1.1-windows.zip过大，网络不好容易下载失败。解决：可以使用cnpm安装，这样速度会快一些cnpm的安装方法：npm install -g...
pyspider启动错误解决（Python 3.7）
weixin_33842328的博客
05-04 3734
问题一 安装好pyspider之后，在启动的时候，报出上图错误。 原因 async和await从 python3.7 开始已经加入保留关键字中. 参考: What’s New In Python 3.7, 所以async不能作为函数的参数名. 解决办法 1.打开安装Python的位置：python位置\Lib\site-packages\pyspider 参照地址：D:...
ubuntu系统下面PhantomJS not found on PATH
微电子学与固体电子学-俞驰
03-14 1178
完整报错如下: PhantomJS not found on PATH Downloading https://github.com/Medium/phantomjs/releases/download/v2.1.1/phantomjs-2.1.1-linux-x86_64.tar.bz2 Saving to /tmp/phantomjs/phantomjs-2.1.1-linux-x86_64....
pyspider部署以及遇到的问题（on centos7 with python3.5）
github_36085104的博客
09-08 1341
我是在自己的vps（centos7）上部署的，使用了virtualenv，使用的python版本为3.5.2 注意编译环境一定要装好。 关于centos7安装python3.5，启用virtualenv以及必须的编译环境，请看这里部署# 新建虚拟环境并进入 >>>virtualenv -p /usr/bin/python3 ~/envs/testenv >>>source ~/envs/test
pyspider安装
最新发布
09-21
如果你想在Linux/Ubuntu系统上安装pyspider，你可以参考下面的步骤： 1. 首先，确保你的系统中已经安装了Python 3和pip。 2. 打开终端，运行以下命令来安装pyspider的依赖库： ``` $ sudo apt-get install python3...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值