hadoop
文章平均质量分 96
404 Not Bug
这个作者很懒,什么都没留下…
展开
-
hadoop3.X学习笔记进阶篇-MapReduce
MapReduce概述 MapReduce概述1.1 MapReduce定义MapReduce是一个分布式运算程序的编程框架,是用户开发“基于Hadoop的数据分析应用”的核心框架。MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。1.2 MapReduce优缺点1.2.1 优点1)MapReduce易于编程它简单的实现一些接口,就可以完成一个分布式程序,这个分布式程序可以分布到大量廉价的PC机器上.原创 2021-12-23 14:51:55 · 444 阅读 · 1 评论 -
hadoop3.X学习笔记进阶篇-HDFS
HDFS概述1.1HDFS优缺点1.2HDFS组成架构 1.3HDFS文件块大小(面试重点)HDFS的Shell操作(开发重点)1.1 命令大全1.2 命令实操HDFS的读写流程(面试重点)NameNode和SecondaryNameNodeCheckPoint时间设置DataNodeHDFS优缺点HDFS概述 1.1HDFS优缺点HDFS定义:HDFS(Hadoop Distributed File System),它是一个文件系统,用于存储文件,通过目录.原创 2021-12-15 16:05:52 · 238 阅读 · 0 评论