hadoop
阿宇万岁
学无止境
展开
-
HDFS的架构和MapReduce的架构
HDFS的架构 主从结构 •主节点,只有一个:namenode •从节点,有很多个:datanodes namenode负责: •接收用户操作请求 •维护文件系统的目录结构 •管理文件与block之间关系,block与datanode之间关系 datanode负责: •存储文件 •文件被分成block存储在磁盘上 •为保证数据安全,文件会有多个副本 MapR原创 2016-01-04 13:14:25 · 497 阅读 · 0 评论 -
hadoop的特点
扩容能力(Scalable):能可靠地(reliably)存储和处理千兆字节(PB)数据。 成本低(Economical):可以通过普通机器组成的服务器群来分发以及处理数据。这些 服务器群总计可达数千个节点。 高效率(Efficient):通过分发数据,hadoop可以在数据所在的节点上并行(parallel) 处理它们,这使得处理非常的快速。 可靠性(Relia原创 2016-01-04 13:16:53 · 843 阅读 · 0 评论