java.io.IOexception:Broken pipe; java.io.IOexception:connection reset by peer

本文讲述了在使用Java连接HBase时遇到的`IOException: Broken pipe`和`IOException: Connection reset by peer`错误。经过排查,问题并非出在HBase的master、regionserver或ZooKeeper上,而是在代码中参数设置错误。修复参数并改用BufferedReader后,成功实现了读写并解决了无法关闭connection的问题。这个bug寻找过程历时三天,强调了细致检查代码的重要性。
摘要由CSDN通过智能技术生成

java.io.IOexception:Broken pipe; java.io.IOexception:connection reset by peer

语言:java
需求:java连接hbase,进行读写
如标题所示,IO异常了,但是这个时候的报错特别的笼统。根本看不到错误!在这里插入图片描述

  1. 首先查看hbase的master以及regionserver是否启动,日志有无异常,但是很不幸无异常
  2. 接下来查看zk的leader日志以及穷情况也无问题
  3. 因为是架构师写的代码,最开始根本没有想过代码会有问题,仔细查看代码后发现set参数时少了几个参数。个别参数错误。
  4. 设置完参数后发现能写能读但是无法关闭connection,前面是用的htable进行的读写操作,后续改成beffer完美解决。
  5. 所以慢慢细心的找问题,这个问题我找了三天 ,因为没有各种权限还有就是没有一开始就找代码的问题
      public static void main(String[] args) throws IOException {
   
            Connection connection = HbaseUtils.getConnection("xxxx", "hdfs://nameservice1/hbase",
                "/hbase",true,"","/home/rzfx_chanct/rzfx_chanct.keytab","xxx@QH.HADOOP.COM", Executors.newFixedThreadPool(2));
        System.out.println("connection ====== "+connection);
        TableName tableName = TableName.valueOf("test");
        // BufferedMutator存储
        BufferedMutator bufferedMutator = connection.getBufferedMutator(tableName);
        Put put = new Put(
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Connection reset by peer是指由于对端(peer)的连接被重置而导致的连接错误。该错误通常伴随着ClientAbortException: java.io.IOException: Broken pipe的出现。在采集Metrics发送至ES的过程中,可能会出现在单数整点时正常发送,而在双数整点时发送失败的情况。这可能是因为esClient自动设置的KeepAlive时间为-1,即持续连接,而受到外界因素(如Firewall)的影响导致了TCP连接的单方面断开,从而引发了Connection reset by peer的错误。解决这个问题的方法是调整esClient的KeepAlive时间,确保连接在适当的时间内保持活动状态。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [ES报错:Connection reset by peer 解决经历](https://blog.csdn.net/qq_27327261/article/details/119995930)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* [Connection reset by peer -- 客户端非正常中断连接](https://blog.csdn.net/tobrainto/article/details/127037321)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值