a.先到官网下载安装包
注意第二项要选择和自己hadoop版本相匹配的spark版本,然后在第4项点击下载。若无图形界面,可用windows系统下载完成后传送到centos中。
b.安装spark
保存后,Spark 就可以启动了。
b.spark的简单使用
在 ./examples/src/main 目录下有一些 Spark 的示例程序,有 Scala、Java、Python、R 等语言的版本。我们可以先运行一个示例程序 SparkPi(即计算 π 的近似值),执行如下命令:
如果是Python 版本的 SparkPi, 则需要通过 spark-su如果是Python 版本的 SparkPi, 则需要通过 spark-submit 运行:bmit 运行: