服务器和集群常见问题

1#启动hive报错:
Exception in thread “main” java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V
#解决办法:guava-19.0.jar和hadoopjar包冲突(用hadoop的guava-27.0-jre.jar替换掉hive下的guava-19.0.jar包)
#先找到对应的jar包然后替换
find / -name guava*
用hadoop的guava-27.0-jre.jar替换掉hive下的guava-19.0.jar包

#beeline 拒绝连接

#mysql数据导入导hive中所有字段都导入到了一列解决
–fields-terminated-by ‘\t’
改成
–fields-terminated-by ‘\001’ \

权限问题:相同的sql在不同环境下执行报 /tmp 权限问题
/tmp权限为hive时客户端可以执行
/tmp权限为root时服务器脚本可以执行

2 hive初始化报错:异常如下
org.apache.hadoop.hive.metastore.HiveMetaException: Failed to get schema version.
Underlying cause: java.sql.SQLException : Access denied for user ‘hive’@‘hadoop01.bigdata.com’ (using password: YES)
SQL Error code: 1045
Use --verbose for detailed stacktrace.
*** schemaTool failed ***
解决:修改hive/conf/hive-site.xml中hive的密码与mysql创建hive的账号信息一直,在初始化就会成功
3 hive 初始化报错: Failed to load driver
解决:把mysql的jdbc.jar包放入到hive/lib/目录下
#hbase异常
解决:问题原因是:因为 Hbase 没有将其自身的依赖包添加到 classpath 配置路径所以才会导致找不到自身主类的报错, 添加上就可以了然后保存退出 即可 131行
vim home/hbase/bin/hbase
CLASSPATH= C L A S S P A T H : {CLASSPATH}: CLASSPATH:JAVA_HOME/lib/tools.jar:/home/hbase/lib/*

4 sqoop查看版本报错:sqoop version
Error: Could not find or load main class org.apache.sqoop.Sqoop
解决:找一个其他版本的sqoop解压后吧sqoop-1.4.7.jar放入到该版本sqoop/lib目录下
kerberos创建用户没有生成对应的目录:
解决:systemctl start oddjobd

5 hadoop问题:所有服务都起来了,但是hdfs和hadoop页面打不开
解决办法:关闭防火墙 systemctl stop firewalld

6 kerberos问题:server远程登录没问题,其他服务器登录报 kadmin: GSS-API (or Kerberos) error while initializing kadmin interface
解决:检查时间是否同步,ntp服务重启或者执行client与server定时时间同步

7 hadoop启动问题:配置kerberos后启动报权限问题(子节点能启动主节点启动报权限)
hadoop26: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password,keyboard-interactive)
解决:检查免密(配置免密的时候一定要注意给自己也要配置)

8 hadoop启动hdfs报错:ERROR: Cannot set priority of datanode process 5407
解决:检查kerberos对应的dn等服务是否启动,检查对应的文件权限
9:#Cloudera cm Server启动失败的问题
解决:所有节点jdk安装下oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm yum -y install oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm
10:心跳检测失败
解决:#Heartbeating to server151:7182 failed
检查/etc/hosts下配置有没有同步,有可能没有解析到server服务器对应的ip和主机名
11: #hdfs的gateway启动失败
解决:
#要启动rpcbind
#安装:
yum install nfs-utils rpcbind
#查看状态:
systemctl status rpcbind.service
#启动:
systemctl start rpcbind.service
12: #主机的 NTP 服务未同步至任何远程服务器
解决:https://blog.csdn.net/weixin_35852328/article/details/83376876
vim /etc/ntp.conf
server 主节点ip prefer
server 127.127.1.0
fudge 127.127.1.0 stratum 10
vim /etc/ntp/step-tickers
主节点ip
Step2:重启ntpd服务
service ntpd restart
step3:检查ntpd服务
ntpdc -np
如下表示成功
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值