- 博客(1)
- 资源 (4)
- 收藏
- 关注
原创 HDFS-2.0社区版的HA+Federation的实现解析
在Hadoop的1.x版本中,NN的单点处理能力成为HDFS的主要(容量扩展/性能/可用性)瓶颈,主要表现在:一.NN在管理大规模的命名空间时,所消耗的内存堆必定在10GB/100GB级别,无论是触发的Full Gc(32GB需要2min)还是重启时(元数据加载/操作日志回放/数据块汇报)时间消耗对高可用性来说都是无可忍受的;二是NN在内部用一把全局锁撸遍所有的元数据操作来保证数据的一致性;三是被
2015-03-29 17:01:23 3060
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人