高职大数据竞赛
高职大数据竞赛,核心代码及数据请私聊,公开为入门代码
逍遥哥哥每天都要努力啊
主修大数据,python等 大数据斯卢一条
展开
-
高职大数据赛项离线数据清洗
高职大数据技术赛项原创 2023-01-16 22:07:06 · 1393 阅读 · 1 评论 -
shtd大数据技术与应用赛项pom文件(支持本地调试、集群)
大数据技术与应用赛项pom文件原创 2022-11-07 21:05:43 · 862 阅读 · 0 评论 -
高职大数据赛项增量数据抽取
高职大数据竞赛原创 2023-01-16 22:11:05 · 2149 阅读 · 0 评论 -
Spark全量增量从mysql抽取数据静态动态分区存入Hive
import org.apache.spark.sql.{DataFrame, DataFrameReader, SaveMode, SparkSession}object readmysqlstatic { def main(args: Array[String]): Unit = { System.setProperty("HADOOP_USER_NAME", "root") val spark = SparkSession.builder() .master("l.原创 2021-12-22 21:04:01 · 6352 阅读 · 14 评论 -
Spark全量增量从mysql抽取数据静态动态分区存入Hive
【代码】Spark全量增量从mysql抽取数据静态动态分区存入Hive[2]原创 2022-09-28 21:13:16 · 3084 阅读 · 7 评论