flink任务调用ES报Request cannot be executed； I/O reactor status: STOPPED

最新推荐文章于 2024-04-29 10:59:57 发布
最新推荐文章于 2024-04-29 10:59:57 发布
阅读量1.4k 收藏
点赞数
分类专栏： flink 文章标签： flink es
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40893503/article/details/124443796
版权

复现场景：

flink任务调用ES，刚开始正常运行，但是如果kafka topic很久没有数据进来，再进来数据就会报这个错误。

这个问题官方说是ES自身bug,社区还没有修复。

使用elasticsearch-rest-high-level-client 7.6.1版本

网上说吧 httpclient、httpcore、httpcore-nio包移除然后使用最新版本的包，试了没有用，还是会出现这个问题。

结局办法：

每次调用获取client连接，使用之后再关闭连接。不能把获取client放在open()初始化方法中。

 

关注微信公众号【飞哥大数据】，回复666 获取2022年100+公司面试真题，以及spark与flink面试题汇总

                

        

        

    




    

      

        

            

              
                
                  风中的大数据
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                      0
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    0
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                  1
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
【Elasticsearch】Request cannot be executed；I/O reactor status :STOPPED.

				
			

			

				

					九师兄
				

				

					02-23
					
					1万+
					
				

			

		

		

			
				
1.概述
转载：https://bbs.huaweicloud.com/forum/thread-70234-1-1.html
我也曾经遇到这个错误，但是忘记记录了，现在转载记录
多线程并发写入ES时，连接断开，反馈的报错是error while performing request。修改DEFAULT_CONNECTION_REQUEST_TIMEOUT_MILLIS=-1后，报错Request cannot be executed；I/O reactor status :STOPPED.
2.原因分析


			
		

	



                

              
                



	

		

			

				
					
flink-es7:为了使用Elasticsearch连接器，使用构建自动化工具(如Maven或SBT)的两个项目和带有SQL 

				
			

			

				

					04-12
				

			

		

		

			
				
flink-es7:为了使用Elasticsearch连接器，使用构建自动化工具(如Maven或SBT)的两个项目和带有SQL

			
		

	



                


  
              

                


	

		

			

				
					
关于ES Request cannot be executed； I/O reactor status: STOPPED 异常原因查找

				
			

			

				

					u011983028的博客
				

				

					06-02
					
					8651
					
				

			

		

		

			
				
Request cannot be executed; I/O reactor status: STOPPED 异常原因查找

			
		

	





	

		

			

				
					
Java访问Nacos 报request cannot be executed； i/o reactor status: stopped的处理方法

					
最新发布

				
			

			

				

					whisperzzza的博客
				

				

					04-29
					
					310
					
				

			

		

		

			
				
Java访问Nacos 报request cannot be executed; i/o reactor status: stopped的处理方法

			
		

	



		

			
		



	

		

			

				
					
ES的java接口调用异常信息：java.lang.RuntimeException: Request cannot be executed； I/O reactor status: STOPPED

				
			

			

				

					懒洋洋
				

				

					04-19
					
					4992
					
				

			

		

		

			
				
一、异常信息


java.lang.RuntimeException: Request cannot be executed; I/O reactor status: STOPPED
        at org.elasticsearch.client.RestClient.extractAndWrapCause(RestClient.java:796)
        at org.elasticsearch.client.RestClient.performRequest(RestClient.ja

			
		

	





	

		

			

				
					
Request cannot be executed； I/O reactor status: STOPPED] with root cause

				
			

			

				

					qq_44768464的博客
				

				

					09-04
					
					1820
					
				

			

		

		

			
				
ElasticSearch：Request cannot be executed； I/O reactor status: STOPPED 错误记录
报错中status是STOPPED，也就是被关闭了，大概率是业务程序中多个线程共享restclient，某个线程调用完restclient后关闭了，导致其他线程再去发送请求时报错。
在我的代码中：
SearchResponse searchResponse = restHighLevelClient.search(jd_goods, RequestOption

			
		

	





	

		

			

				
					
Nacos 报错：Request cannot be executed； I/O reactor status: STOPPED

				
			

			

				

					俞兆鹏的博客
				

				

					07-15
					
					1万+
					
				

			

		

		

			
				
报错信息
Nacos集群报错如下：
2021-07-13 16:21:56,363 ERROR [IP-DEAD] failed to delete ip automatically, ip: {"instanceId":"10.200.13.135#3012#DEFAULT#DEFAULT_GROUP@@service-ecs","ip":"10.200.13.135","port":3012,"weight":1.0,"healthy":false,"enabled":true,"ephemeral":

			
		

	





	

		

			

				
					
ElasticSearch：Request cannot be executed； I/O reactor status: STOPPED 错误记录

				
			

			

				

					cr_216的博客
				

				

					12-01
					
					4924
					
				

			

		

		

			
				
**说明
因为网上说明较少，git上issue也有英文的相关问题记载
一、场景
canal监听表–>队列–>es7
二、触发原因
1、bulk批量更新请求过频繁，es的CPU配置不够，线程池核心thread执行任务不过来，另外bulk的 task queue size超出，导致触发拒绝策略，断掉client的连接（目前没碰到）
2、我是updateByQuery更新请求过频繁，es的CPU配置仅仅4C，write queue size=200，更新频率过快，被es端报错拒绝
三、目前解决方案
1

			
		

	





	

		

			

				
					
hbase 启动regionserver日志报错： Wrong FS: hdfs:// .regioninfo, expected: file:///

				
			

			

				

					08-14
				

			

		

		

			
				
NULL 博文链接：https://bnmnba.iteye.com/blog/2322332

			
		

	





	

		

			

				
					
flink如何写入Elasticsearch5和Elasticsearch7

				
			

			

				

					01-30
				

			

		

		

			
				
大数据 flink如何写入Elasticsearch5和Elasticsearch7

			
		

	





	

		

			

				
					
big-whale:Spark、Flink等离线任务的调度以及实时任务的监控

				
			

			

				

					05-13
				

			

		

		

			
				
巨鲸任务调度平台为美柚大数据研发的分布式计算任务调度系统，提供Spark、Flink等批处理任务的DAG调度和流处理任务的运行管理和状态监控，并具有Yarn应用管理、重复应用检测、大内存应用检测等功能。 服务基于Spring...

			
		

	





	

		

			

				
					
大数据处理神器：Fire框架开源源码，助力Spark与Flink任务高效开发

				
			

			

				

					03-25
				

			

		

		

			
				
项目概述：Fire框架是一款由中通大数据团队自主研发并贡献给开源社区的大数据处理利器，专门针对Spark与Flink任务的高效开发而设计。该框架采用Scala为主要编程语言，兼容Java、Shell和HTML等，总计包含1054个文件，...

			
		

	





	

		

			

				
					
ElasticSearch：Request cannot be executed； I/O reactor status: STOPPED

					
热门推荐

				
			

			

				

					qq_43676902的博客
				

				

					11-02
					
					1万+
					
				

			

		

		

			
				
项目场景：
项目添加Elasticsearch7.8统计部分
2020年10月10日部署到测试环境
10月14日突然报错
问题描述：
提示：这里描述项目中遇到的问题：
例如：数据传输过程中数据不时出现丢失的情况，偶尔会丢失一部分数据
APP 中接收数据代码：
java.lang.RuntimeException: Request cannot be executed; I/O reactor status: STOPPED
	at org.elasticsearch.client.RestClient.ex

			
		

	





	

		

			

				
					
Java访问Elasticsearch报错Request cannot be executed； I/O reactor status: STOPPED

				
			

			

				

					陈明亮的博客
				

				

					01-04
					
					1万+
					
				

			

		

		

			
				
简介
使用ES过程中遇到一个Request cannot be executed; I/O reactor status: STOPPED 的异常，大概意思是和server端的连接异常终止了。开始以为是引用的版本不对，或者自己使用问题，后来发现就是因为OOM导致程序宕机，进而引发连接终止。
环境
功能
SpringBoot 的程序通过 SpringDataElasticsearch 访问ES-server 获取数据。
ES-SERVER

版本：7.15.2

ES-CLIENT
ES-CLIENT 就是 

			
		

	





	

		

			

				
					
ES 查询时报错 I/O 异常: Request cannot be executed； I/O reactor status: STOPPED

				
			

			

				

					aCupxxx的博客
				

				

					12-17
					
					5774
					
				

			

		

		

			
				
原因: 使用ES过程中遇到一个Request cannot be executed;I/O reactor status: STOPPED 的异常，大概意思是和server端的连接异常终止了。开始以为是引用的版本不对，或者自己使用问题，后来发现就是因为OOM导致程序宕机，进而引发连接终止.问题: ES 查询时报错 IO 异常, java.lang.IllegalStateException: Request cannot be executed;解决: 排查并解决关联的OOM问题。

			
		

	





	

		

			

				
					
ES7.4.0依赖

				
			

			

				

					咖啡的博客
				

				

					11-07
					
					1792
					
				

			

		

		

			
				
ES7.4.0依赖


        <dependency>
            <groupId>org.elasticsearch.client</groupId>
            <artifactId>elasticsearch-rest-high-level-client</artifactId>
       ...

			
		

	





	

		

			

				
					
elastic search RestHighLevelClient报错 Request cannot be executed i/o reactor status stopped

				
			

			

				

					urnotsupercorn
				

				

					09-24
					
					4250
					
				

			

		

		

			
				
昨天同事反应es项目的接口崩了，接口返回错误信息 Request cannot be executed i/o reactor status stopped

第一反应是不是es崩了？看了一眼kibana没有问题啊，那就是程序哪里出了问题，RestHighLevelClient客户端被关掉了，但是整个项目是没问题的，接口照样能返回封装的错误信息，这就很奇怪了，各种搜索也没找到原因。。既然被关闭了，那就重启大法好。。。但是问题怎么解决，还是没有头绪，有没有遇到的一起讨论一下呀

有人提到是并发大的时候会出现，

			
		

	





	

		

			

				
					
Request cannot be executed； I/O reactor status: STOPPED

				
			

			

				

					selah1的专栏
				

				

					08-03
					
					1万+
					
				

			

		

		

			
				
使用ES报错：

java.lang.RuntimeException: Request cannot be executed; I/O reactor status: STOPPED
 at org.elasticsearch.client.RestClient.extractAndWrapCause(RestClient.java:831)
 at org.elasticsearch.client.RestClient.performRequest(RestClient.java:248)
...

			
		

	





	

		

			

				
					
https://k8s01:6443/apis/apps/v1/namespaces/apache-flink/deployments

				
			

			

				

					10-20
				

			

		

		

			
				
这是一个Kubernetes API的URL，用于访问Apache Flink在Kubernetes集群中的部署。具体来说，它是访问Apache Flink在Kubernetes中的部署的应用程序的URL。在这个URL中，k8s01是Kubernetes集群的主机名，6443是Kubernetes API服务器的端口号，apps/v1是API版本和资源类型，namespaces/apache-flink是命名空间和部署名称。这个URL可以用于管理和监控Apache Flink在Kubernetes中的部署。如果您想了解更多关于Kubernetes和Apache Flink的信息，可以参考相关文档和教程。



			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		
评论 1

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值