hadoop
文章平均质量分 55
地是非曲直的
天道酬勤!
展开
-
1-初识hadoop
hadoop框架中最核心的设计是:mapreduce和HDFS。HDFS(Hadoop Distributed File System):Hadoop分布式文件系统,为分布式计算存储提供底层支持。MapReduce:提供任务的分解与结果的汇总。”Map“就是将一个任务分解成为多个任务;“Reduce”就是将分解后多任务处理的结果汇总起来,得出最后的分析结果。原创 2016-09-12 16:12:11 · 222 阅读 · 0 评论 -
2-HDFS介绍
对外部客户机而言,HDFS就像一个传统的分级文件系统,可以创建、删除、移动、重命名文件等等,其实,HDFS的架构是基于一组特定的结点构建的,这是由它自身的特点决定的。这些节点包括 NameNode(仅一个),它在 HDFS 内部提供元数据服务;DataNode,它为 HDFS 提供存储块。由于仅存在一个 NameNode,因此这是 HDFS 的一个缺点(单点失败)。 存储在 HD原创 2016-09-18 16:39:51 · 463 阅读 · 0 评论