Hadoop
HelloWord!
IT大数据
展开
-
Hadoop介绍
1.hadoop的特点(优势-4高): (1)高可用性:Hadoop底层维护多个数据副本,所以即使Hadoop某个计算元素或者存储出现故障,也不会导致数据的丢失 (2)高扩展性:在集群分配任务数据,可方便的扩展数以千记得节点 (3)高效性:在MapReduce的思想下,Hadoop是并行工作的,以加快任务处理速度。 (4)高容错性:能够自动将失败的任务重新分配 ...原创 2021-11-16 17:18:32 · 624 阅读 · 0 评论 -
Hadoop的组成-1.x和2.x的区别
原创 2021-11-16 09:17:54 · 457 阅读 · 0 评论 -
HDFS分布式文件系统组件及读写操作
1.HDFS的写操作 2.HDFS的读操作 3.HDFS的组件(文件切成块) 1.Namenode:存储文件元数据,与客户端交互 2.Datanode:在本地系统存储文件块数据,以及块数据的校验和 3.SecondaryNameNode:每一段时间对Namenode元数据备份 ...原创 2021-11-15 23:53:58 · 208 阅读 · 0 评论