1、创建SparkConf对象:设置Application name 以及运行模式及资源需求。
2、创建SparkContext对象。
3、基于Spark的上下文创建一个RDD,对RDD进行处理。
4、应用程序中要有Action类算子来触发Transformation类算子执行。
5.、关闭Spark上下文对象SparkContext
Spark代码流程
最新推荐文章于 2023-03-08 15:26:16 发布
1、创建SparkConf对象:设置Application name 以及运行模式及资源需求。
2、创建SparkContext对象。
3、基于Spark的上下文创建一个RDD,对RDD进行处理。
4、应用程序中要有Action类算子来触发Transformation类算子执行。
5.、关闭Spark上下文对象SparkContext