Spark
文章平均质量分 73
浮汐
这个作者很懒,什么都没留下…
展开
-
【Scala】Scala语法中=>、->、<-与{}、()的使用
Scala常见符号的用处与含义原创 2022-08-07 00:47:42 · 751 阅读 · 0 评论 -
【Spark】PySpark的RDD与DataFrame的转换与使用
RDD与DataFrameRDD1. SparkSession2. RDD2.1 创建RDD2.1.1 通过读取DataFrame二级目录三级目录RDD1. SparkSession使用Spark核心API的应用以SparkContext对象作为程序主入口,而Spark SQL应用则以SparkSession对象作为程序主入口,在Spark2.0发布之前,Spark SQL应用使用的专用主入口是SQLContext和HiveContext。SparkSession把它们封装为一个简洁而统一的入口。S原创 2021-04-09 21:10:03 · 2841 阅读 · 0 评论