BabyFish13

kudu是一个与hbase类似的列式存储分布式数据库。官方给kudu的定位是:在更新更及时的基础上实现更快的数据分析。hdfs与hbase数据存储的缺点：目前数据存储有了HDFS与hbase，为什么还要额外的弄一个kudu呢?HDFS:使用列式存储格式Apache Parquet，Apache ORC，适合离线分析，不支持单条纪录级别的update操作，随机读写性能差。HBASE:可以进行高效随机读写，却并不适用于基于SQL的数据分析方向，大批量数据获取时的性能较差。正因为HDFS与HBASE有上

问题安装cloudera namager时，cloudera-scm-server可以正常启动，cloudera-scm-agent启动失败。  查看日志 /opt/cm-5.7.0/log/cloudera-scm-agent/cloudera-scm-agent.out的内容，打印一下内容：/opt/cm-5.7.0/lib64/cmf/agent/build/env/li

转自：http://www.cnblogs.com/chenfool/p/3738540.htmlCloudera 的官方介绍：http://www.cloudera.com/content/cloudera-content/cloudera-docs/CM4Ent/4.8.1/Cloudera-Manager-Installation-Guide/cmig_uninstall_CM.ht

关于CDH和Cloudera ManagerCDH是cloudera公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分，分别为Cloudera Manager和CDH软件包。其中Cloudera Manager负责集群的部署与管理。CDH软件包囊括了hdaoop各类的组件的安装包，例如hive、hdfs、Spark等等。CDH (Clouder

1、新加机器环境配置首先得在新的主机环境中安装JDK，关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。2、上传cloudera-manager文件到/opt目录，修改agent配置文件：vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.iniserver

之前，一直在考虑ＣＭ、ＣＤＨ组件按什么样的顺序启动和停止比较好。最近又安装了一下ＣＤＨ集群，他们的安装顺序是如下图所示的：ＣＤＨ的启动和停止也按照这样的顺序应该是比较合理的。

错误明细：Failed to start namenode.java.io.IOException: There appears to be a gap in the edit log. We expected txid 693082, but got txid 693668. at org.apache.hadoop.hdfs.server.namenode.MetaRecoveryC

在CDH5.7下，配置了NameNode的HA后，Hive无正常查询数据了，但是其他的组件HDFS , HBase ,Spark都正常的。Hive新建表出现如下异常：CREATE TABLE `x_test`( `client_ip` string , `time` string , `http_request` string , `node_ip` string