Turk的专栏

最近部署了一个CDH环境，突然发生了添加主机之后，提示主机状态异常，然后就无法分发CDH  parcel。这个问题困扰了将近半天的时间，一直翻查各种日志，最后在agent的日志中发现了问题。主要原因是第一遍部署CDH环境成功以后，由于mysql重启异常，强制杀死后，导致了CM无法正常连接mysql。然后进行第二遍部署。在第二遍部署的时候，由于第一遍部署完成以

现在大数据一直在使用CDH来作为基础平台。常会面临升级版本，操作中也经常出现各种各样的问题。 这里就整理一个操作步骤指引。1.先升级CM，大部分情况下都应该是离线升级的场景。所以要先从官方网站上下载需要升级版本的rpm包，放到自己搭建的yum源中。 官方地址：http://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/ 切记，自建

中午接到一个同事的消息，说一个有200多个dn节点的集群（CDH）hive没办法创建分区了。重启了多次，都没有效果。后来发现namenode也一直出现故障。收到消息，就联机上去看了一下，果然hive的命令全部都挂起来了，hadoop fs 命令也一样被挂起。在CDH 的管理界面上检查了一下NN节点的状态，发现NN有问题。因为是生产环境，已经有半天没有数据上报了。运维的同事都比较着急。没办法，先来常规