用pycharm + python写spark（spark-2.0.1-bin-hadoop2.6）

最新推荐文章于 2024-04-12 15:45:00 发布

成伟

最新推荐文章于 2024-04-12 15:45:00 发布

阅读量2.4k

点赞数

分类专栏： python 知识 pycharm spark 文章标签： python spark mac spark2-0-1

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/u013660881/article/details/54090890

版权

本文介绍了如何在Mac上使用PyCharm配置和运行Spark 2.0.1。主要内容包括将pyspark添加到Python路径，设置环境变量如SPARK_CLASSPATH和SPARK_HOME，以及详细描述了如何在spark终端运行命令和修改SPARK_CLASSPATH的步骤。此外，还提及了Spark 2.0.1与1.0版本的区别。

摘要由CSDN通过智能技术生成

一、将pyspark放入：
在pycharm看位置

该目录位置（我的是mac）：
/Library/Python/2.7/site-packages

二、env配置：
步骤1：
配置env1
步骤2：
配置env2
步骤3：

最低0.47元/天解锁文章

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
用pycharm + python写spark（spark-2.0.1-bin-hadoop2.6）

一、将pyspark放入：该目录位置（我的是mac）： /Library/Python/2.7/site-packages二、env配置：步骤1：步骤2：步骤3： SPARK_CLASSPATH /Users/Chaves/workspace/spark/hbase-0.98.3/lib/:/Users/Chaves/workspace/spark/spark-2.
复制链接

扫一扫

专栏目录

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。