spark学习1之examples运行

最新推荐文章于 2022-04-28 11:59:18 发布

KeepLearningBigData

最新推荐文章于 2022-04-28 11:59:18 发布

阅读量6.6k

点赞数

分类专栏： spark 文章标签： spark

本文链接：https://blog.csdn.net/xubo245/article/details/48548079

版权

spark 专栏收录该内容

70 篇文章 27 订阅

订阅专栏

更多代码请见：https://github.com/xubo245/SparkLearning

spark的examples运行：

spark1.4.1

1. spark-submit：

hadoop@Master:~/cloud/spark-1.4.1$ spark-submit --master local examples/src/main/python/pi.py 10
Pi is roughly 3.142524                                                          
hadoop@Master:~/cloud/spark-1.4.1$ spark-submit --master local examples/src/main/python/pi.py 1000
Pi is roughly 3.141667

2. ./bin/run-example:

xubo@xubo:~/cloud/spark-1.4.1$ ./bin/run-example org.apache.spark.examples.SparkPi 
Pi is roughly 3.1449                                                            
xubo@xubo:~/cloud/spark-1.4.1$ ./bin/run-example org.apache.spark.examples.SparkPi 100
Pi is roughly 3.1423152