走在前往架构师的路上

专注于分布式计算,大数据,数据挖掘,机器学习算法等领域的研究

HDFS的滚动升级: Rolling Upgrade

HDFS Rolling Upgrade实际操作 下面我们来重点关注HDFS Rolling Upgrade部分的操作.HDFS Rolling Upgrade部分的操作并不是就几条命令的事情,它还要考虑集群是否是HA配置的,HA里又分为是否为federated cluster和非feder...

2016-07-28 19:46:01

阅读数:5440

评论数:3

HDFS的StartupProgress启动跟踪分析

前言 想必HDFS集群的起停操作对于HDFS的使用者来说绝对不是一件陌生的事情.一般情况下我们重启集群服务是出于这2点原因:1).集群新增配置项,需要重启集群服务才能生效.2).对集群相关jar包程序进行了更新,需要重启服务来运行最新的jar包.于是我们重启了集群,一般的我们看它是否启动成功...

2016-07-22 13:52:26

阅读数:3999

评论数:0

再聊HDFS Erasure Coding

前言在之前我的一篇文章中,已经聊到过一次关于HDFS EC方面的内容(文章链接Hadoop 3.0 Erasure Coding 纠删码功能预分析),所以本文算是对其内容的一次补充.之前的文章中主要是从宏观的层面上阐述了HDFS EC的作用以及相应的使用场景,并没有深入到内部相关架构设计以及具体E...

2016-07-16 21:08:27

阅读数:8686

评论数:5

提示
确定要删除当前文章?
取消 删除