spark 安装
本文注意记载了笔者学习使用的spark的过程。
平台:win10 +ubuntu
1,安装方法: pip install pyspark
安装包文件大小217M
安装顺利,无报错。
2,尝试运行pyspark
报错,提示JAVA_HOME not set;
运行java,ubuntu下未安装java,遂安装java
方法如下:1)官网下载java安装包;将压缩包mv至安装位置,tar -zxvf 解压即可,软连接至/bin
3,运行pyspark成功。
version2.4.5 python2.7.17
print('hello world')
>>>hello world