- 博客(4)
- 收藏
- 关注
RSS订阅转载 YARN任务监控界面Aggregate Resource Allocation指标解析
在YARN的原生任务监控界面中，我们经常能看到Aggregate Resource Allocation这个指标（图中高亮选中部分），这个指标表示该任务拥有的所有container每秒所消耗的资源（内存、CPU）总和：Aggregate Resource Allocation是在org.a...
2019-08-31 11:33:00
987
转载 ZooKeeper节点数据量限制引起的Hadoop YARN ResourceManager崩溃原因分析（二）
时隔五个月（点击阅读前文），如标题所示的问题再次发生，本次由于我们大数据监控系统的完善，让我对该问题进行了更深一步的研究。以下是整个排查过程和解决方案：一、问题说明从8月8日早上8点12收到第一条ResourceManager服务异常报警，截止到8月11日早上8点，每天早上8点到8点12之...
2019-08-12 19:45:00
831
转载 Apache Sentry实战之旅（二）—— Sentry客户端使用
Apache Sentry虽然可以将HDFS、Hive与Impala三个组件的权限认证统一，但是只能按照给组授予角色的方式来进行授权，不能直接授权给组中的用户，显得不太灵活。有时候为了兼容已有大数据平台的授权体系，比如只使用Sentry控制Impala服务的权限，而不控制Hive和HDFS服务...
2019-07-27 22:06:00
1113
转载 Apache Sentry实战之旅（一）—— Impala+Sentry整合
Impala默认是以impala这个超级用户运行服务，执行DML和DDL操作的，要实现不同用户之间细粒度的权限控制，需要与Sentry整合。Sentry是Apache下的一个开源项目，它基于RBAC的授权模型实现了权限控制，Impala与它整合以后，就能实现不同用户之间在应用层的权限认证，从而...
2019-07-07 11:02:00
774
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人