u010476994的博客

HiveMetaStore MetaException(message:Metastore contains multiple versions (3) [ version = 1.2.0, comment = Set by MetaStore... 的处理方法

Hive多用户模式环境搭建：架构： NamenodeDatanodeJournalnodeZookeeperZKFCResourceManagerNodeManagerMySqlMetaStoreServer(服务端)HiveCLI(客户端)node11 11    1  1

常见端口汇总：Hadoop：        50070：HDFS WEB UI端口    8020 ： 高可用的HDFS RPC端口    9000 ： 非高可用的HDFS RPC端口    8088 ： Yarn 的WEB UI 接口    8485 ： JournalNode 的RPC端口    8019 ： ZKFC端口Zookeeper:    2181

使用hive储存数据时，需要对做分区，如果从kafka接收数据，将每天的数据保存一个分区（按天分区），保存分区时需要根据某个字段做动态分区，而不是傻傻的将数据写到某一个临时目录最后倒入到某一个分区，这是静态分区。动态分区的核心就是修改两个配置项。Hive动态分区步骤如下：1、建立某一个源表模拟数据源并插入一些数据create table t_test_p_source ( ...