从0开始学pyspark（一）：ubuntu pyspark运行环境配置

最近在研究spark，虽然windows下也能安装运行spark（亲测可行，但是开放9000端口还是连接不上docker上部署的hdfs），但是在windows下使用多有不便，于是安装了双系统（网上教程很多），如果在安装过程中出现卡死问题，可以看看这篇能不能解决 https://blog.csdn.net/tonydz0523/article/details/80532615

在ubuntu上配置环境比较简单：
1、安装java
2、安装spark

安装java

1、官网下载jdk的Linux包
http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

下载最新的tar包，别忘了点accept license
2、sudo mkdir /usr/lib/jdk
3、系统默认下载到download文件夹，打开终端cd 到下载文件文件夹，或者文件管理器找到文件夹后右键打开终端
4、sudo tar -zxvf jdk-8u171-linux-x64.tar.gz -C /usr/lib/jdk
5、然后我们需要配置PATH路径，让jdk命令在任何路径下都能够直接执行
sudo gedit /etc/profile
没有安装gedit的可以 vi vim都行
在配置文件后加上

# java
export JAVA_HOME=/usr/lib/jd