hbase中的regionserver频繁挂掉

最新推荐文章于 2024-08-09 15:41:02 发布
最新推荐文章于 2024-08-09 15:41:02 发布
阅读量200 收藏 3
点赞数 7
文章标签： hbase 数据库 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_2907021423/article/details/138113958
版权
文章讲述了HBase在使用过程中遇到的ZooKeeper会话过期问题，尝试过调整sessiontimeout但无效，作者寻求关于可能的zk连接数问题以及更有效的解决方案的建议。
摘要由CSDN通过智能技术生成

2024-04-22 15:41:00,773 WARN org.apache.hadoop.hbase.zookeeper.ZKUtil: hconnection-0x64d33cb8-0xff8bc0c1561ed660, quorum=dn1:2181,dn2:2181,dn3:2181,nn1:2181,nn2:2181, baseZNode=/hbase Unable to get data of znode /hbase/meta-region-server
org.apache.zookeeper.KeeperException$SessionExpiredException: KeeperErrorCode = Session expired for /hbase/meta-region-server

 2024-04-22 15:41:00,782 ERROR org.apache.hadoop.hbase.zookeeper.ZooKeeperWatcher: hconnection-0x5d9b3c85-0xff8bc0c1564eba2c, quorum=dn1:2181,dn2:2181,dn3:2181,nn1:2181,nn2:2181, baseZNode=/hbase Received unexpected KeeperException, re-throwing exception
org.apache.zookeeper.KeeperException$SessionExpiredException: KeeperErrorCode = Session expired for /hbase/meta-region-server

这是错误提示，regionserver轮流挂掉

我开始把zookeeper.session.timeout做了一下调整，调成了120s但没有用

后面我想到是不是zk连接数量的问题，但日志上并没有这个错误

暂没解决，请教各位大神解决方案！！！

qq_2907021423
关注
  • 7
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
HBase Regionserver 批量掉线问题排查
Larry的专栏
04-25 231
而该问题是由zk 生成sessionid bug引起：当System.currentTimeMillis（）中的第40位为1时，符号扩展将填充nextSid的前8个字节，并且id不会使会话id唯一，因此当zk大量链接时，有存在生成重复id的可能性，建议将右移改为逻辑移位。通过分析zookeeper日志，发现相同的session id被分配到不同的节点，导致部分节点session id失效。因zk是CDH集群自带版本，升级zk影响较大，因此采用下载源码对该类进行修改编译后，单独打包，然后把补丁优先加载解决。
记一次HBASE META表故障
xtajmh00的专栏
10-14 3864
HBASE菜鸟一枚，欢迎吐槽 hbase版本：0.90.6 共32个节点 17号节点regionserver日志： 2016-10-12 18:02:07,051 WARN org.apache.hadoop.hbase.zookeeper.ZKUtil: regionserver:60020-0x453857482f10009-0x453857482f10009-0x453857
Hbase regionserver频繁突然挂掉的问题处理
王木头的博客
11-10 2322
Hbase regionserver频繁挂掉问题处理
Hbase连接问题
cut.的博客
02-18 1331
Hbase连接问题 在本地调试应用调查询hbase接口时，可能会出现卡住，查不动的状况，这多半是因为自己电脑没有配置域名（hbase确保没出问题的情况下） 2022-02-18 14:05:12.546 ERROR [hconnection-0x26fddb3f-metaLookup-shared--pool2-t1] org.apache.hadoop.hbase.zookeeper.ZooKeeperWatcher 719 ::: hconnection-0x26fddb3f-0x37e7b4580d
HBase错误集
江湖戏子的专栏
03-01 5099
1、hbase 所有配置都做好的，eclipse上面可以运行，部署到服务器上面就不行，连接不上zookeeper：       解决办法：同步服务器的时间和zookeeper节点的时间。 2、运行一段时间后：在取ResultScanner是进入死循环，直到内存溢出：      错误：：[org.apache.hadoop.hbase.zookeeper.ZKUtil.getData] - h
spark任务中报连接不到hbase的错误
leehbing的博客
11-08 4350
17/10/16 20:51:22 INFOzookeeper.ClientCnxn: Opening socket connection to serverlocalhost/0:0:0:0:0:0:0:1:2181. Will not attempt to authenticate using SASL (unknownerror) 17/10/16 20:51:22 WARNzooke
HBase session expired regionserver aborted session timeout
microGP的专栏
07-21 1062
环境信息： HBase 1.2.X，Zookeeper，3.4.X 问题描述： HBase的regionserver进程挂掉，查看日志，发现如下报错： FATAL [main-EventThread] regionserver.HRegionServer: ABORTING region server org.apache.zookeeper.KeeperException$SessionExpiredException: KeeperErrorCode = Session expired 问题
HBase集群中RegionServer崩溃后的快速恢复措施探索
10-17
主要介绍了HBase RegionServer与Zookeeper间的交互过程，阐述RegionServer崩溃后的恢复机制，并在此基础上提出了几点优化的恢复措施。优化后的恢复措施大大缩短了RegionServer崩溃后的故障恢复时间和业务中断时间，...
HBase中文教程.pdf
12-11
本文是从网上汇编的HBase教程，觉得挺好的，分享给大家，如果作者认为侵权，请给我留言，本人删除。 本文教程内容主要来源于：https://www.yiibai.com/hbase
hbase 启动regionserver日志报错： Wrong FS: hdfs:// .regioninfo, expected: file:///
08-14
NULL 博文链接：https://bnmnba.iteye.com/blog/2322332
HBase中文API
11-25
HBase中文API为开发者提供了在中文环境中操作HBase的便利。 1. **入门** - **介绍**: HBase为大数据处理提供了实时读写能力，特别适合于存储海量稀疏数据。 - **快速开始**: 开发者通常需要了解如何创建表、插入...
hbase性能调优
05-06
`hbase.regionserver.global.memstore.upperLimit` 和 `hbase.regionserver.global.memstore.lowerLimit` - **含义**：分别定义了RegionServer所有MemStore占用内存的比例上限和下限。 - **默认值**：分别为0.4和...
黑猴子的家：HBase 之HRegionserver挂死，日志出现Session Expired异常排查
黑猴子的博客
10-22 1447
1、编辑hbase-site.xml配置文件 加大zookeeper会话超时时间，编辑hbase-site.xml文件，添加下面的属性 [victor@hadoop102 hbase]# vim conf/hbase-site.xml <property> <name>zookeeper.session.timeout</name> &l...
HBase RegionServer挂掉导致集群不可用问题
寂寞的博客
07-03 5885
生产中HBase RegionServer挂掉一个，整个集群却不可用了，排查下问题原因
hbase 学习（十六）系统架构图
weixin_34212762的博客
05-04 151
　　HBase 系统架构图 　　 　　组成部件说明 　　Client： 　　使用HBase RPC机制与HMaster和HRegionServer进行通信 　　Client与HMaster进行通信进行管理类操作 　　Client与HRegionServer进行数据读写类操作 　　Zookeeper： 　　Zookeeper Quorum存储-ROOT-表地址、HM...
HBase RegionServer挂掉问题分析
不见其长，日有所长
02-27 2137
0. 前言 HBase在使用中会遇到非常多的问题，最为常见的就是HBase regionserver挂掉（此文中简称regionserver为RS）， 而RS挂掉的原因各不相同。在本文中对遇到过的HBase RS挂掉的情况做一个简单的整理。 1. HBase集群预留内存不足 现象：HBase RS在起来1-2min后马上挂掉 日志为如下日志段的重复： Mon Aug 6 10:23:54 CST...
使用bulkload时HBase Master退出
xygan的专栏
06-30 200
版本信息（注意不同版本之间的差异）： HBase Version : 0.90.3, r1100350Hadoop Version : 0.20.3-SNAPSHOT, r1057313   问题描述 在使用HFileOutputFormat.configureIncrementalLoad()时，MapReduce的job跑的时间在20分钟左右，经常发现Master自动退出，日志的部分信...
NoNode for /hbase/meta-region-server错误解决
LZX的博客
08-09 1752
本人使用hdp3.1.1搭建hbase，spark读取hbase时,获取地址为/hbase/meta-region-server。
列式数据库（HBase） 中实现表与表的关联
最新发布
canduecho的专栏
08-09 462
在 HBase 中，表与表之间的关联查询不像关系型数据库那样可以直接使用JOIN操作。相反，你需要在应用层进行两次查询来实现关联。
hbase的regionserver掉了
04-11
这个问题的意思是HBase的RegionServer掉了。 回答：需要先排查RegionServer掉的原因，可能是硬件故障、网络故障或者其他问题。然后根据具体情况进行相应的修复工作，比如替换故障硬件、检查网络设置等。最后重启...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值