一、Local 模式
- Local 模式就是指的只在一台计算机上来运行 Spark
- 通常用于测试的目的来使用 Local 模式, 实际的生产环境中不会使用 Local 模式
- 为什么能用local来测试,因为可以通过指定 local 个数 模拟多线程的运行,一般来说 local测试没问题,生产中一般也不会有什么问题
1. 把刚安装好的spark 拷贝一份出来作为 local 模式
yexiang@hadoop2:<soft>$ cp spark-211-hdp2.7 spark-local -dR
2. 运行官方求 PI 的案例 (100 是给 sparkpi例子的参数,数字越大,算出来的约精确,但是耗时也多)
- 该算法是利用蒙特·卡罗算法求 PI