- 博客(7)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 提交Yarn任务Can‘t create directory
main : run as user is hdfsmain : requested yarn user is hdfsCan't create directory /data1/yarn/nm/usercache/hdfs/appcache/application_xxx- Permission deniedCan't create directory /data2/yarn/nm/usercache/hdfs/appcache/application_xxx- Permissi..
2022-02-25 11:05:39
1832
原创 CDH下No jar path specified for org.apache.phoenix.coprocessor.ScanRegionObserver导致Hbase出现RIT异常
描述：Hbase有配HA，在运行了一段时间之后Master会自动挂掉，CM报Master有以下问题之后通过CM跳转到Hbase的Web UI界面发现如下：有一个Regions server报错，此Regions server是最近新增加的新节点，老节点正常解决方法：1.到对应Regions server上查看出问题时间点的日志，发现报以下问题Failed to load coprocessor org.apache.phoenix.coprocessor.ScanReg.
2020-09-28 16:56:06
583
1
原创 Hue 添加LDAP用户时报Could not get LDAP details for users in pattern xxx
最近在用HUE添加用户的时候报了一个错误，无法创建用户（刚接手的工作）。Could not get LDAP details for users in pattern xxx. 意思是说无法从LDAP模式中获取用户xxx的信息。LDAP是个啥子？它是做统一账户管理的，详细信息大家可以百度。说正事，既然没有这个新用户的信息，那就到对应的ldap服务器上添加对应的用户和组信息就可以了。登录LDAP服务器，跳转到*/usercentry目录执行命令：bashusercentry xx.
2020-08-28 10:56:41
859
原创 解决关于Kerberos的Failed to find any Kerberos tgt问题
错误描述Secure Client Cannot Connect ([Caused by GSSException: No valid credentials provided(Mechanism level: Failed to find any Kerberos tgt)])解决方法：1、一种是由于kerberos的keytab权限问题导致，一般用kinit -kt /var/lib/hadoop-hdfs/hdfs.keytab hdfs/admin 类似的命令可以解决。2..
2020-07-23 14:50:53
14098
原创 linux环境下修改文件或目录的所属用户和所属组
1、修改文件所属用户#将文件或目录file1/dir1的所属用户改为zhangsan用户，-R处理指定目录以及其子目录下的所有文件chown -R zhangsan file1/dir1 2、修改文件所属组chgrp groupAfile1/dir1# 将 file1/dir1的所属组改为groupA组...
2020-07-10 10:35:16
4346
原创 Hive服务停止导致Flume收集数据到Hive后无法通过Hue使用分区查询
首先要说明的是本篇所解决的问题1、hive分区没创建成功。2、分区下面小文件过多。3、合并小文件后新生成的文件没有按指定格式压缩。数据流场景如下图：Hive分区按每小时4个每15分钟生成一个的策略，也就是说每小时会有mm=00、mm=15、mm=30、mm=45 四个分区。问题背景：当时在通过Cloudera Manager做HDFS的HA操作，因此要停止Hive服务执行更新Hive MetaStore NameNode操作，导致执行2个小时的过程中没有生成...
2020-07-07 18:18:51
360
原创 开启Kerberos的CDH增加新节点后刷新集群出现的异常
2020-07-02 14:02:46,504 WARN org.apache.hadoop.security.UserGroupInformation: PriviledgedActionException as:hdfs/xxxx@xxxx.COM (auth:KERBEROS) cause:org.apache.hadoop.ipc.RemoteException(javax.security.sasl.SaslException): GSS initiate failed2020-07-02 .
2020-07-02 16:08:12
1468
1
jdk1.8.0_131和JCE无限制权限策略文件
2020-07-23
springbooot2.x-phoenix-hbase.zip
2020-05-14
云计算入门
2013-05-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人