spark
007在学算法
拒绝低效率勤奋,保持高效思考
展开
-
idea中对scala用maven打包的插件
<build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-shade-plugin</artifactId> <version>2.4.2</ver...原创 2020-07-07 22:23:34 · 704 阅读 · 7 评论 -
spark数据类型
RDD 创建RDD 读取文件 并行化 其他方式 RDD操作 Transfermation Action DataFrame DataSet原创 2019-01-17 17:48:19 · 383 阅读 · 0 评论 -
spark-submit
submit jars https://www.jianshu.com/p/ecc6eb298b8f原创 2019-01-16 10:31:32 · 106 阅读 · 0 评论 -
spark 数据存储
格式类型 类型 格式 parquet orc csv原创 2019-03-25 11:18:25 · 297 阅读 · 0 评论