在 Spark 中创建 RDD 的创建方式可以分为四种:
1、从集合(内存)中创建 RDD
package spark.core.rdd
import org.apache.spark.{
SparkConf, SparkContext}
/**
* 从集合(内存)中创建 RDD
* 1、parallelize
* 2、makeRDD
* 从底层代码实现来讲,makeRDD 方法其实就是 parallelize 方法。
*/
object Spark_RDD_Memory {
def main(args: Array[String]): Unit = {
val sparkConf = new SparkConf().
setMaster("local[*]").
set("spark.driver.host", "localhost