- 博客(2)
- 收藏
- 关注
RSS订阅原创 HDFS新运维工具命令之listOpenFiles命令
前言在运维集群的时候，我们有的时候需要去知道哪些文件存在未被及时关闭的情况。否则会造成一定程度上的资源泄露，比如内存无缘无故就被耗掉了。可能有人会想，好端端的文件，为什么会存在未被关闭的情况呢？答案是有可能的，当发生各种异常写文件的情况时，就有可能发生。这在HDFS内部同样也会发生。对此，社区最近在实现添加一项新的管理员命令-listOpenFiles命令来帮助集群管理者获取这些“打开中的文件”，
2017-05-30 10:28:57
1661
原创 聊聊HDFS中的副本放置策略和磁盘选择策略间的选择“矛盾”
前言我们知道，在HDFS里，有2个与文件块写入紧密相连的策略选择类：副本放置策略（BlockPlacementPolicy）和磁盘选择策略（VolumeChoosingPolicy）。这两者有什么作用上的区别呢？前者决定了文件块的目标写入节点，后者决定了目标节点上哪个磁盘目录被写入。之前笔者已经写过相关策略的介绍文章了，感兴趣的同学可以点击此链接：HDFS副本放置策略和DataNode引用计数磁盘
2017-05-14 15:42:26
2371
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人