
spark
文章平均质量分 87
zhangbaqing
github地址:https://github.com/GHzbq
展开
-
scala使用Gson解析数组
完整代码在最后哦,可以通过目录跳转文章目录一、背景二、解决方案1. 高版本的解法(2.8.7)2. 低版本的解法(2.8.2)3. 直接解析为实体类三、总结1. 在scala中获取类类型2. 使用@SerializedName注解四、完整代码1. ParseJson.scala2. Result.java3. 使用到的依赖一、背景假设某个HTTP接口的返回值如下,怎么在scala中使用Gson把result解析出来呢?{ "code":0, "message":"OK", .原创 2021-07-01 12:27:44 · 1085 阅读 · 1 评论 -
Spark入门
文章目录一、名词解释1. RDD二、Spark核心概念三、RDD基础1. 转化操作和行动操作的区别2. 创建RDD3. 转化操作4. 行动操作5. 惰性求值6. 常见的转化操作7. 常见的行动操作8. 持久化一、名词解释1. RDD弹性分布式数据集(resilient distributed dataset, 简称RDD)在Spark中,对数据的所有操作不外乎创建RDD、转化已有RDD以及调用RDD操作进行求值。二、Spark核心概念每个Spark 应用都由一个驱动器程序(driver pro原创 2021-06-17 09:31:16 · 1483 阅读 · 0 评论