![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
sentry
kevin_wf
总结分享java,大数据相关开发运维工作,欢迎交流,共同进步
展开
-
hive metastore server Failed to sync requested HMS notifications up to the event ID xxxxx
最近遇到hive执行create,drop table语句时出现延时其它语句正常,平时秒级现在都需要200s才完成。经过排查发现有个用户使用手机号做动态分区字段,导致一下有上百万分区写入,hive metastore server出现问题,线程数飙升至1k多,内存升高。将任务停止后线程数下降,内存下降恢复正常水平,但是create,drop table还是不正常耗时200s才执行完成。 sen...原创 2019-12-20 09:00:18 · 1657 阅读 · 0 评论 -
cdh集群sentry 启用HA
cdh集群sentry主用用来进行hive数据权限认证,sentry服务失败后会影响访问hive库的任务。sentry ha的功能是在cdh5.13之后才有的。 开启sentry HA 1. 进入sentry 操作,选择启用HA 2. 选择主机安装另一个sentry实例 3.根据向导,执行完成 ...原创 2019-08-09 21:45:04 · 806 阅读 · 1 评论