kylin: build cube Hbase: Region Server 意外退出

63 篇文章 42 订阅 ¥19.90 ¥99.00
在执行Kylin构建Cube任务时,由于数据量较大,导致HBase Region Server出现意外退出,错误提示为OutOfMemory。通过检查发现HBase RegionServer的初始内存设置过小。调整HBase RegionServer的Java配置选项,增大内存限制,解决了该问题。
摘要由CSDN通过智能技术生成

背景
跑kylin 的 build cube 任务,总是在跑任务(数据量200M)的时候挂掉,各种调节yarn的参数都不行。

在这里插入图片描述
关键跑的时候还没涉及到hbase,因为我跑的是kylin on druid,但是总是跑着跑着,直接ERROR,查看hbase发现。

不良 : 该角色在之前的 3 分钟 中遇到 1 次意外退出。这包括由于 OutOfMemory 错误而导致的 1 退出。 临界阈值:任意。

1
2
然后死掉

在这里插入图片描述
在这里插入图片描述

页面上还有这个错

Java HotSpot™ 64-Bit Server VM warning: MaxNewSize (262144k) is equal to or greater than the entire heap (51200k). A new max generation size of 51136k will be used.
1
查看Hbase页面 http://ip:60010/master-status
在这里插入图片描述

在这里插入图片描述
后来查看启动的程序

$ sudo ps -ef |grep regionserver
hbase 14077
/opt/third/jdk/bin/java -Dproc_regionserver
-XX:OnOutOfMemoryError=kill

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值