python连接spark报错【已解决】

在使用PyCharm运行Spark时遇到RuntimeError,提示JavaGatewayProcess退出。问题根源是缺少JDK,下载并配置JDK环境变量后,问题得到解决。重新运行显示Java版本,连接成功。注意,仅在PyCharm内配置环境变量无效,必须安装JDK。
部署运行你感兴趣的模型镜像

错误:raise RuntimeError("Java gateway process exited before sending its port number") RuntimeError: Java gateway process exited before sending its port number

通过cmd安装的spark, 在pycharm运行的

经过尝试,找到了解决办法

下载JDK!!!也就是java

下完之后我给java在电脑配置了下环境变量,今天再用pycharm尝试就可以了。。

建议下载安装java以后可以先试一下,如果不行再配置下环境变量。至于网上说的在pycharm里面改变环境变量,没有啥用,还是得有JDK这个东西

今天重新运行以后提示和b站看得视频一样,就是链接成功了,有显示java版本:

Setting default log level to "WARN".

To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).

23/02/22 15:46:29 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

3.3.2

您可能感兴趣的与本文相关的镜像

Python3.10

Python3.10

Conda
Python

Python 是一种高级、解释型、通用的编程语言,以其简洁易读的语法而闻名,适用于广泛的应用,包括Web开发、数据分析、人工智能和自动化脚本

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值