CDH
文章平均质量分 90
pany8125
这个作者很懒,什么都没留下…
展开
-
一次奇怪的调优
最近这两天发现CDH集群的host频繁swapping,极大影响了集群的性能,导致日常的oozie任务中断。发现有个设置被改了,好奇怪。。。Setting the vm.swappiness Linux Kernel Parametervm.swappiness is a Linux Kernel Parameter that controls how aggressive原创 2015-08-24 18:42:04 · 479 阅读 · 0 评论 -
版本问题的坑
半夜手贱,调整了下集群配置,发现yarn挂了,nodemanager一直起不来,查了下log是个null pointer,没看出来撒,结果google到这玩意。https://issues.apache.org/jira/browse/YARN-2816然后又看到这个https://sskaje.me/2014/11/yarn-nodemanager-failed-star原创 2015-08-22 01:05:53 · 638 阅读 · 0 评论 -
CDH集群调优:内存、Vcores和DRF
原文URL:http://blog.selfup.cn/1631.html#comment-403吐槽最近“闲”来无事,通过CM把vcores使用情况调出来看了一眼,发现不论集群中有多少个任务在跑,已分配的VCores始终不会超过120。而集群的可用Vcores是360(15台机器×24虚拟核)。这就相当于CPU资源只用到了1/3,作为一个半强迫症患者绝对不能容忍这样的事情发生。转载 2015-08-24 18:44:01 · 6568 阅读 · 0 评论 -
Cloudera 从5.2.0升级到最新5.8.2的官方文档翻译
初始文档整理在pages中,怎么转换过来格式都不太好看,先发图片的吧,格式不太好的文字部分在后面。----------------------------------------------我是格式不好的文字的分割线----------------------------------------------------------------------翻译 2016-10-19 16:38:08 · 4026 阅读 · 1 评论