spark python3.6_Spark实战(三)本地连接远程Spark(Python环境)

一、Python环境准备

远程服务器上Python版本要与本地想匹配，这里本地使用Anaconda来进行安装，远程服务器之间安装。

wget --no-check-certificate https://www.python.org/ftp/python/3.6.7/Python-3.6.7.tgz

tar -zxvf Python-3.6.7.tgz

sudo ./configure --prefix=/usr/local/python3

make & make install

建立软连接

mv /usr/bin/python /usr/bin/python.bak

ln -s /usr/local/python3/bin/python3.6 /usr/bin/python

1

2

3

4

5

6

7

本地之间下载Anaconda安装包，会自动安装相关环境。

二、配置PyCharm

在file->setting->project interpreter中新增一个python环境，