hadoop
文章平均质量分 96
404 Not Bug
这个作者很懒,什么都没留下…
展开
-
hadoop3.X学习笔记进阶篇-MapReduce
MapReduce概述 MapReduce概述 1.1 MapReduce定义 MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架。 MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。 1.2 MapReduce优缺点 1.2.1 优点 1)MapReduce易于编程 它简单的实现一些接口,就可以完成一个分布式程序,这个分布式程序可以分布到大量廉价的PC机器上.原创 2021-12-23 14:51:55 · 585 阅读 · 1 评论 -
hadoop3.X学习笔记进阶篇-HDFS
HDFS概述 1.1HDFS优缺点 1.2HDFS组成架构 1.3HDFS文件块大小(面试重点) HDFS的Shell操作(开发重点) 1.1 命令大全 1.2 命令实操 HDFS的读写流程(面试重点) NameNode和SecondaryNameNode CheckPoint时间设置 DataNode HDFS优缺点HDFS概述 1.1HDFS优缺点 HDFS定义: HDFS(Hadoop Distributed File System),它是一个文件系统,用于存储文件,通过目录.原创 2021-12-15 16:05:52 · 391 阅读 · 0 评论