- 博客(2)
- 资源 (5)
- 收藏
- 关注
原创 hadoop的特点
扩容能力(Scalable):能可靠地(reliably)存储和处理千兆字节(PB)数据。 成本低(Economical):可以通过普通机器组成的服务器群来分发以及处理数据。这些 服务器群总计可达数千个节点。 高效率(Efficient):通过分发数据,hadoop可以在数据所在的节点上并行(parallel) 处理它们,这使得处理非常的快速。 可靠性(Relia
2016-01-04 13:16:53 843
原创 HDFS的架构和MapReduce的架构
HDFS的架构 主从结构 •主节点,只有一个:namenode •从节点,有很多个:datanodes namenode负责: •接收用户操作请求 •维护文件系统的目录结构 •管理文件与block之间关系,block与datanode之间关系 datanode负责: •存储文件 •文件被分成block存储在磁盘上 •为保证数据安全,文件会有多个副本 MapR
2016-01-04 13:14:25 497
各种各样的java API
2013-11-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人