Windows7+Pycharm搭建Spark的开发环境

一般,我都会在Eclipse中安装Scala插件,用Scala语言编写Spark程序,之后将程序导出为JAR文件,再复制到Spark平台上运行,因为XX原因,现在想尝试用python写Spark程序,于是在Windows+Pycharm的环境下搭建了相应的开发环境

首先,安装py4j(虽然其实我并不知道这是个什么东东,但是,因为没有安装它搞得一直出问题,所以啊。。。谨慎。。)

本来我最开始是打算这样安装py4j的


不过很可惜,安装不了,后来我直接这样了


结果就好了。。。

接着只要稍微配置下PyCharm就行了

找到python安装目录,之后找到site-packages文件夹,一般是这种路径:Python_Home\lib\site-packages,在该目录下新建pyspark.pth文件,像这样


pyspark.pth的内容为:

Spark安装目录\python\

重新打开PyCharm就搞定了,我之前没有重新打开,结果一直就显示不行

参考网址:http://www.cnblogs.com/porco/p/4895421.html

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值