![](https://img-blog.csdnimg.cn/20201105152202687.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
CDH
CDH日常问题记录及解决方法
Jecky不姓码
忙到没时间更新了
展开
-
CDH环境下给HDFS,Sqoop,HIVE配置LZO
场景还原:上一章说了怎么在CDH中安装LZO,安装完成后现在继续配置HDFS和Hive下的LZO,我的CDH版本为6.2.1,如果你的不一致,请查阅官方文档。链接: 点这里。操作步骤1、修改HDFS配置在HDFS配置项中搜索“压缩编码解码器”,加入com.hadoop.compression.lzo.LzopCodec2、修改Hive配置在Hive配置项中搜索“Hive 辅助 JAR 目录”,加入/opt/cloudera/parcels/GPLEXTRAS/lib/hadoop/lib.原创 2020-11-05 11:34:49 · 376 阅读 · 0 评论 -
[全网最简单]CDH下配置LZO
场景还原:因项目需要到数据清洗,在做知识储备(实则心里慌的一批,小白一枚,结果负责整个项目),涉及到LZO压缩,看到百度上的CDH安装实在太复杂,结果查看官方文档几句话就解决了~(lll¬ω¬)操作步骤:CDH官方文档----LZO:文档操作之前要知道在CDH下的LZO 是什么样的,官方是这样说的:GPL Extras contains functionality for compressing data using the LZO compression algorithm.(GPL Ext.原创 2020-11-05 10:49:34 · 429 阅读 · 0 评论 -
CDH:(时钟偏差)无法找到主机的NTP 服务,或该服务未响应时钟偏差请求
服务器突然断电导致ntpd服务宕机,CDH全部宕机,重启后发现一直有一个错误就是 NTP时钟偏差首次尝试在服务器上开启NTPD服务,但是CDH依旧报错, NTP时钟偏差解决办法:1、重启CDH - agent 服务service cloudera-scm-agent restart2、再重启NTPD服务service ntpd restart3、等待几分钟4、可以使用ntpd进行状态的查看,主要i判别是否启动 ntpdc -c loopinfoWatchDog Timer.原创 2020-10-16 19:01:11 · 2534 阅读 · 0 评论 -
Permission denied: user=hive, access=WRITE, inode=“/tmp“:root:supergroup:drwxr-xr-x
CDH中HIVE报错:Permission denied: user=hive, access=WRITE, inode="/tmp":root:supergroup:drwxr-xr-x权限问题:解决办法hdfs dfs -chmod a+x /user给所有用户权限,这样也省去以后配置用户出现的权限的问题了原创 2020-10-10 14:43:58 · 1064 阅读 · 0 评论 -
CDH entropy was available 问题解决
#链接: 转载解决.转载 2020-10-10 13:50:38 · 289 阅读 · 1 评论 -
Canary 测试无法为 /tmp/.cloudera_health_monitoring_canary_files 创建父目录
链接: 转自这个文档,完美解决.转载 2020-10-10 11:21:49 · 1031 阅读 · 0 评论