weixin_38504735的博客

一、我们使用maven时，一般会将中央仓库配置为阿里云的镜像，但是项目中用到的CDH相关的jar包并不存在于该中央仓库中。CDH提供了中央仓库，官方文档参考：https://docs.cloudera.com/documentation/enterprise/6/release-notes/topics/rg_cdh_62_maven_artifacts.html方法一：手动添加（推荐）repos库下载手动添加参考链接：https://blog.csdn.net/weixin_38504735/arti

hbaseApiOperation.java 文件在 src目录 main-》java-》 com.atguigu目录下项目树：

CDH之HBase2字符编码问题以及中文显示,在scan命令后添加,{FORMATTER=>‘toString’} 即可ex：

其原因是需要在windows本地搭建Hadoop环境，下载winutils文件，并将hadoop-2.8.4包内的bin文件替换，将下载文件中hadoop.dll放到C：\Windows\System32下我的是hadoop3.0.0,下载Hadoop3.0：下载链接自己选择一个盘，我这里是 D:\software新建系统变量(1)修改hadoop-env.cmd,改为自己本机的设置jdk目录4、下载winutils的windows版本：下载地址：https://github.com/stevelo

CDH 手动添加jar包

状况: 使用oracle集成Hive在导入Oracle jdbc包的时候，将ojdbc6包升级为jdbc8的包即可网上查阅资料，说是ojdbc6没有T4CConnection.getSchema()此方法，改用ojdbc8成功下载链接下载 ojdbc8-12.2.0.1.jar 2020-02-21 15:51 4036257 即可测试成功...

Could not connect to hadoop02:10000 (code THRIFTTRANSPORT):TTransportException报错原因：由于 HiveServer2 的 Java 堆栈大小（字节）过小，导致意外退出，将HiveServer2配置设置大些即可

问题原因：Linux机器有多张网卡，CDH检测网络时候采集了virbr0网卡的信息，事实上virbr0是不可用的，所以会出现这种错误解决方案：①在该机器的配置中搜索—》 网络—》修改网络接口收集排除正则表达式网络接口收集排除正则表达式：^virbr...

报错解决如果报下面这种的错误 ! 这个是因为你之前安装kafka 错误,或者别的原因 在 kafka的 log和data目录下回生成 一个 meta.properties. 这个里面也有broker.id , 所以解决方法 直接清空这两个目录即可Configured broker.id 2 doesn’t match stored broker.id 0 inmeta.properties.CDH6.2 默认的参考目录是log : /var/log/kafka/logsdata :

转载： http://blog.csdn.net/wulantian/article/details/42706777//CDH6.X完全卸载步骤关闭集群中的所有服务。这个可以通过clouder manger 主页关闭集群。卸载[root@master ~]# /usr/share/cmf/uninstall-cloudera-manager.sh [root@slave1 ~]# service cloudera-scm-agent stop[root@slave1 ~]# servi

问题一Fatal error during KafkaServer startup. Prepare to shutdownkafka.common.InconsistentBrokerIdException: Configured broker.id 56doesn’t match stored broker.id 103 in meta.properties解决办法：找到问题主机（我的是data1主机kafak出现问题），配置文件[root@data1 ~]# find / -name

[root@master ~]# hdfs fsck -list-corruptfileblocksFileSystem is inaccessible due to:java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProtocolBufferException: Protocol message end-group tag did not match expected tag.; Host Det

本配置使用五台虚拟机演示：IP配置172.17.0.102 ntp服务器：本地同步标准时间172.17.0.103 ntp客户端：与内部ntp服务器（85）同步时间172.17.0.104 ntp客户端：与内部ntp服务器（85）同步时间查看ntp是否已经安装：rpm -q ntp如果没有安装则使用命令：yum -y install ntp 安装ntp。如果已经安装（如下）则继续：安装完成后设置ntp开机启动并启动ntp，如下：systemctl enable ntpdsystem

问题原因因为我们的mysql是重新安装的，服务器重新安装mysql的同时，会删除系统原来的mysql，此时会连带着删除 libmysqlclient.s0.18 文件注意：32位的目录是 /usr/lib/mysql/，64位的目录为 /usr/lib64/mysql/一、在一台从未装过mysql的服务器里，可以在 /usr/lib64/mysql/ 下找到 libmysqlclient.s0.18[root@data1 ~]# scp /usr/lib64/mysql/libmysqlclient

之前的cloudera-scm-agent安装过，没有卸载干净（问题环境：在第一次安装资源分发发生节点bad health错误）[root@master ~]# rm -rf /var/lib/cloudera-scm-agent/cm_guid[root@master ~]# systemctl restart cloudera-scm-agent亲测可用...

.启动Cloudera Manager Server--查看是否启动systemctl start cloudera-scm-server--查看状态ps -ef | grep cloudera-scm-serversystemctl status cloudera-scm-server 显示 Active: active (running)6.检查端口是否监听安装 netstatyum install net-toolsnetstat -lnpt | grep 7..