CDH集群上运行pyspark代码之环境安装——CDH集群使用Parcel包配置Anaconda及提交pypark遇到的问题
CDH集群上运行pyspark代码之环境安装——CDH集群使用Parcel包配置Anaconda现场CDH集群的版本是5.12,操作系统CentOS 6.5,python是2.6.6。我至少需要python2.7+或python3.5+以上的环境,因此需要在CDH集群安装Anaconda。最终我希望利用Ananconda配置一个python2.7的环境。下载Parcel包从Anaconda官网下载Parcel包,这里下载的是Anaconda-4.2.0-el6.parcel,el6是操作系统的版本,
原创
2020-08-27 10:03:05 ·
541 阅读 ·
0 评论