hbase问题-java.io.IOException: error or interrupt while splitting logs

最新推荐文章于 2024-06-22 10:32:14 发布
最新推荐文章于 2024-06-22 10:32:14 发布
阅读量7.8k 收藏 1
点赞数
分类专栏： hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jiangheng0535/article/details/19114415
版权
本文描述了在HBase中遇到的`java.io.IOException: error or interrupt while splitting logs`错误，详细分析了问题原因和解决步骤，包括在`hbase-site.xml`中关闭分布式日志拆分，并探讨了`hbase.master.distributed.log.splitting`参数的作用和原理。
摘要由CSDN通过智能技术生成


【hbase】java.io.IOException: error or interrupt while splitting logs

一.问题描述及初步解决

操作层面报错如下：


[admin@inc-dp-hbase-01 conf]$ hbase shell


HBase Shell; enter 'help<RETURN>' for list of supported commands.


Type "exit<RETURN>" to leave the HBase Shell


Version 0.92.0, r1231986, Mon Jan 16 13:16:35 UTC 2012


 


hbase(main):001:0> list                    //可以查询


TABLE                                                                                                                       


hello                                                                                                                       


jj                                                                                                                           


ssjslkj                                                                                                                     


sunwg                                                                                                                        


test                                                                                                                        


5 row(s) in 0.6560 seconds


 


最低0.47元/天 解锁文章
晚起的鸟
关注
专栏目录
java.io.IOexception:Broken pipe； java.io.IOexception:connection reset by peer
weixin_43115740的博客
08-18 680
java.io.IOexception:Broken pipe； java.io.IOexception:connection reset by peer 语言：java 需求：java连接hbase，进行读写 如标题所示，IO异常了，但是这个时候的报错特别的笼统。根本看不到错误！ 首先查看hbase的master以及regionserver是否启动，日志有无异常，但是很不幸无异常 接下来查看zk的leader日志以及穷情况也无问题 因为是架构师写的代码，最开始根本没有想过代码会有问题，仔细查看代码后发现
【转】HBase Log splitting
SMCwwh
01-28 6437
通常有两种情况日志文件需要进行replay：当集群启动时，或者当服务器出错时。当master启动—(备份master转正也包括在内)—它会检查HBase在文件系统上的根目录下的.logs文件是否还有一些文件，目前没有安排相应的region server。日志文件名称不仅包含了服务器名称，而且还包含了该服务器对应的启动码。该数字在region server每次重启后都会被重置，这样master就能用
HBase Master启动报错java.io.IOException: error or interrupted while splitting logs
数据源的港湾
06-20 2555
今天在一个CDH环境中启动HBase时HBase Master启动发生异常，HBase Master采用的是两台HMaster做一个HA。从CDH管理界面查询启动成功后，HBase Master状态并不太正常（如下图所示）， 以上截图看似正常，实质不正常。正常情况下两个HMaster主备可用时，Master后面应该有一个标识是活动还是备份的状态，但上面图片中缺少状态信息。 于是查看两个HMaster日志，其中一台HBase Master日志信息正常，另外一台HBase Master日志一直在刷SplitL
【Java】已解决java.io.InterruptedIOException异常
最新发布
屿小夏.的知识博客
06-22 584
InterruptedIOException异常通常出现在执行I/O操作时，当前线程被另一个线程通过调用interrupt()方法中断。当线程在等待I/O操作完成时，如果其他线程认为该操作不再需要或应该停止，它可能会调用interrupt()方法。这种中断可能由多种因素引起，如线程被中断或I/O操作超时。为了正确处理InterruptedIOException，我们应该在捕获该异常时恢复线程的中断状态，并在必要时重新抛出InterruptedException。
master.HMaster:Failed to become active master java.io.IOException: error or interrupted while split
破晓的成长之路
09-20 5381
在自己的机器上操作的，之前因为网络出问题强行关闭虚拟机。再次开启时发现HMaster进程启动不了（HRegionServer正常启动，而HMaster启动几秒后挂了），查看日志发现如下： 2019-09-20 20:32:05,519 INFO [main-EventThread] coordination.SplitLogManagerCoordination: task /hbase/spl...
【Hbase】HBase Master启动报错java.io.IOException: error or interrupted while splitting logs
Mrerlou的博客
04-24 507
今天在一个CDH环境中启动HBase时启动发生异常，于是查看HMaster日志，其中一台HBase Master日志信息正常，另外一台HBase Master日志一直在刷相关的日志。
HBase异常：java.io.IOException: Connection reset by peer
w36680130的博客
07-07 466
HBase异常：java.io.IOException: Connection reset by peer
Hadoop报错Caused by: java.io.IOException: Stream closed问题
wangkuangood3200的专栏
11-10 3750
【问题现象】 这几天离线计算平台有个别计算作业运行失败，排查原因，查看平台日志，报错关键信息如下： WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engine (i.e. spark, tez) or using Hive 1.X releases.Error: org.apache.hive.s
关闭HBase ./stop-hbase.sh 出现Stopping hbasecat:/tmp/hbase-root-master.pid:No such file or directory
qq_38332881的博客
03-30 3530
stopping hbasecat: /tmp/hbase-root-master.pid: 没有那个文件或目录 在hbase目录下conf文件夹下 hbase-env.sh中修改pid文件的存放路径， 看注释， hbase默认注释掉HBASE_PID_DIR， 而hbase默认把pid文件放在/tmp目录下 ，Ubuntu默认重启自动删除/tmp文件夹中的目录 。 删除之后h...
java 连接HABSE报错 java.io.IOException: java.lang.reflect.InvocationTargetException
x_xx_xxx_xxxx的博客
04-24 1万+
卸载JAVA 的 工具 ： https://java.com/en/download/uninstalltool.jsp 老版本 eclispe    :    http://pan.baidu.com/s/1nvTNKKx本人开发环境：Win10  JDK 10.0.1 jre 10.0.1 HBASE 1.1.2eclispe 报错如下：Java错误主要信息：java.io.IOExcepti...
支撑Facebook消息处理的HBase存储系统
05-04
Messaging Data ▪ Small/medium sized data HBase ▪ Message metadata & indices ▪ Search index ▪ Small message bodies ▪ Attachments and large messages Haystack ▪ Used for our existing photo/video store
Cannot Start HBase Master: SplitLogManager: Error Splitting
i am me，haha，么么哒。。。
04-09 1480
I could not start HBase within Cloudera Manager, the service reported errors. I was initially confused because I could start the Master when the RegionServers were stopped, but as soon as I started a
关于 hbase ERROR: java.io.IOException: Table Namespace Manager not ready yet, try again later
书生的博客
06-07 1万+
最近学习hbase时遇到这个问题,一开始安装hbase时create表是可以的,但不知为何后来就不行了,重装hbase但不重装hadoop也不行.说明问题出在hadoop内保存的hbase的数据上面.将hadoop内的hbase文件删除即可; 首先使用该命令检查hadoop内的hbase文件夹: 然后使用下面的命令删除hadoop中的hbase文件: 然后再使用hadoop fs -l
hbase报异常java.io.IOException: error or interrupted while splitting logs in
civci_d的博客
12-25 1231
hadoop fsck -openforwrite 如果报以下错误，需要修改hbase-site.xml 具体配置如下： <property> <name>hbase.master.distributed.log.splitting</name> <value>false</value> </property>
CDH - 启动HbaseMaster时异常
jast
09-14 3357
测试环境 CDH,启动HbaseMaster时，启动失败，提示无法split WALs目录下的数据。 解决方法：删除WALs里的数据解决该问题（数据如不可恢复勿用该方法），重启成功 2018-09-14 14:43:07,254 WARN org.apache.hadoop.hbase.coordination.SplitLogManagerCoordination: Error split...
hadoop hbase hive 常见问题解决
热门推荐
lhy66的专栏
03-24 12万+
Hadoop常见问题，hbase常见问题，hive常见问题。结合网络资料 和自己遇到的整理。
HBase 1.2.5 put 源码分析
左眼皮跳跳
07-30 602
1. HTable 调用 put(final Put put) 方法,本地有一个缓存，不是每一次put就会提交到服务器端. @Override public void put(final Put put) throws IOException { getBufferedMutator().mutate(put); if (autoFlush) { flush...
分析、解决java访问HBase 1.2.4时put数据卡住很久并报错：Failed to get region location
爱我中华之笔耕不缀！
04-13 2万+
终于配置好了完全分布式的HBase1.2.4的环境，zookeeper集群是独立的，即HBase没有托管ZooKeeper的集群，研究清楚了新版本的api的变化，遂写好了简单的demo代码往某张表里put数据，api很简单从略，运行时卡住，程序一直卡着不动，也没有结束，执行到put那一行就彻底卡住了，一个小时后，控制台会报错
hbase链接报错: java.io.ioexception: could not locate executable null\bin\win
09-01
对于报错信息：java.io.IOException: could not locate executable null\bin\win，这是由于系统环境变量配置不正确导致的。在Windows系统中，HBase需要依赖一些可执行文件来执行不同的操作。然而，这个错误消息告诉...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值