Spark
文章平均质量分 62
Better_Zflyee
这个作者很懒,什么都没留下…
展开
-
傻傻分不清楚,大数据及其组件Hadoop、Spark关系介绍,一文就足够了
如果想知道关系,可以直接跳转到1.4节大数据概念及组件介绍一、大数据概念与特性1.1 大数据的概念1.2 大数据的特性1.3 大数据的关键技术1.4 大数据计算模式及其工具1.4.1 大数据计算模式1.4.2 大数据计算工具介绍1.4.2.1 Hadoop1.4.2.2 Spark一、大数据概念与特性1.1 大数据的概念大数据(big data),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。1.原创 2021-12-16 18:07:19 · 1795 阅读 · 0 评论 -
Spark编程——RDD转换与行动操作
这里写自定义目录标题1 转换操作2 行动操作1 转换操作转化操作流程如下:转换操作内容如下:** 注:转换操作只记录转换步骤,不进行具体的计算,如下图所示**2 行动操作行动操作如下:# 3. 持久化操作持久化的方法:1 内存缓存方法:2. 内存和磁盘缓存方法3. 持久化移出方法4. 实例化...原创 2021-10-19 17:22:56 · 280 阅读 · 0 评论