hadoop
阿宇万岁
学无止境
展开
-
HDFS的架构和MapReduce的架构
HDFS的架构主从结构•主节点,只有一个:namenode•从节点,有很多个:datanodesnamenode负责:•接收用户操作请求•维护文件系统的目录结构•管理文件与block之间关系,block与datanode之间关系datanode负责:•存储文件•文件被分成block存储在磁盘上•为保证数据安全,文件会有多个副本MapR原创 2016-01-04 13:14:25 · 500 阅读 · 0 评论 -
hadoop的特点
扩容能力(Scalable):能可靠地(reliably)存储和处理千兆字节(PB)数据。成本低(Economical):可以通过普通机器组成的服务器群来分发以及处理数据。这些服务器群总计可达数千个节点。高效率(Efficient):通过分发数据,hadoop可以在数据所在的节点上并行(parallel)处理它们,这使得处理非常的快速。可靠性(Relia原创 2016-01-04 13:16:53 · 852 阅读 · 0 评论