1.系统组件的问题:
数据源新增报错:修改redis密码没有同步重启数据源服务
cdh04与cdh集群失联过长:
原因:ssh上去看一下,或者ping一下 如果能连上的考虑是主机名和时间同步问题 查看hostname是不是发生了变化,检查/etc/hosts文件是否一致 查看时间与namenode节点是否一致 确定没有这两方面原因之后,等一段时间后即可获取心跳
执行systemctl restart cloudera -som -agent
2.数据的问题
大表初始化:
开启动态分区
set hive.exec.dynamic.partion=true;
set hive.exec.dynamic.partion.mode=nonstrict;
将2020及以往的旧数据同意插入到2020-12,2012年以后的数据按月动态插入分区
格式问题
建表时注释乱码,
原因:脚本格式有误,回滚数据库,调为utf-8
3.新增服务器提示空间不足
白名单问题,路径问题,代码语法问题