- 博客(5)
- 资源 (1)
- 收藏
- 关注
转载 CDH集群调优:内存、Vcores和DRF
原文URL:http://blog.selfup.cn/1631.html#comment-403 吐槽 最近“闲”来无事,通过CM把vcores使用情况调出来看了一眼,发现不论集群中有多少个任务在跑,已分配的VCores始终不会超过120。而集群的可用Vcores是360(15台机器×24虚拟核)。这就相当于CPU资源只用到了1/3,作为一个半强迫症患者绝对不能容忍这样的事情发生。
2015-08-24 18:44:01 6561
原创 一次奇怪的调优
最近这两天发现CDH集群的host频繁swapping,极大影响了集群的性能,导致日常的oozie任务中断。 发现有个设置被改了,好奇怪。。。 Setting the vm.swappiness Linux Kernel Parameter vm.swappiness is a Linux Kernel Parameter that controls how aggressive
2015-08-24 18:42:04 473
原创 版本问题的坑
半夜手贱,调整了下集群配置,发现yarn挂了,nodemanager一直起不来,查了下log是个null pointer,没看出来撒,结果google到这玩意。 https://issues.apache.org/jira/browse/YARN-2816 然后又看到这个 https://sskaje.me/2014/11/yarn-nodemanager-failed-star
2015-08-22 01:05:53 635
转载 Linux的五个查找命令
原文地址:http://www.ruanyifeng.com/blog/2009/10/5_ways_to_search_for_files_using_the_terminal.html 作者: 阮一峰 日期: 2009年10月 8日 最近,我在学习Linux,下面是一些笔记。 使用电脑的时候,经常需要查找文件。 在Linux中,有很多方法可
2015-08-04 16:39:35 310
转载 wireshark抓包图解 TCP三次握手/四次挥手详解
一. TCP/IP协议族 TCP/IP是一个协议族,通常分不同层次进行开发,每个层次负责不同的通信功能。包含以下四个层次: 1. 链路层,也称作数据链路层或者网络接口层,通常包括操作系统中的设备驱动程序和计算机中对应的网络接口卡。它们一起处理与电缆(或其他任何传输媒介)的物理接口细节。 2. 网络层,也称作互联网层,处理分组在网络中的活动,例如分组
2015-08-03 17:21:06 1025 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人