![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
文章平均质量分 87
zhangbaqing
github地址:https://github.com/GHzbq
展开
-
scala使用Gson解析数组
完整代码在最后哦,可以通过目录跳转 文章目录一、背景二、解决方案1. 高版本的解法(2.8.7)2. 低版本的解法(2.8.2)3. 直接解析为实体类三、总结1. 在scala中获取类类型2. 使用@SerializedName注解四、完整代码1. ParseJson.scala2. Result.java3. 使用到的依赖 一、背景 假设某个HTTP接口的返回值如下,怎么在scala中使用Gson把result解析出来呢? { "code":0, "message":"OK", .原创 2021-07-01 12:27:44 · 667 阅读 · 1 评论 -
Spark入门
文章目录一、名词解释1. RDD二、Spark核心概念三、RDD基础1. 转化操作和行动操作的区别2. 创建RDD3. 转化操作4. 行动操作5. 惰性求值6. 常见的转化操作7. 常见的行动操作8. 持久化 一、名词解释 1. RDD 弹性分布式数据集(resilient distributed dataset, 简称RDD) 在Spark中,对数据的所有操作不外乎创建RDD、转化已有RDD以及调用RDD操作进行求值。 二、Spark核心概念 每个Spark 应用都由一个驱动器程序(driver pro原创 2021-06-17 09:31:16 · 1178 阅读 · 0 评论