Flink 异步IO时 java.util.concurrent.TimeoutException: Async function call has timed out.

Flink 异步IO时 timeout报错

java.lang.Exception: An async function call terminated with an exception. Failing the AsyncWaitOperator.
	at org.apache.flink.streaming.api.operators.async.Emitter.output(Emitter.java:137)
	at org.apache.flink.streaming.api.operators.async.Emitter.run(Emitter.java:85)
	at java.lang.Thread.run(Thread.java:745)
Caused by: java.util.concurrent.ExecutionException: java.util.concurrent.TimeoutException: Async function call has timed out.
	at java.util.concurrent.CompletableFuture.reportGet(CompletableFuture.java:357)
	at java.util.concurrent.CompletableFuture.get(CompletableFuture.java:1895)
	at org.apache.flink.streaming.api.operators.async.queue.StreamRecordQueueEntry.get(StreamRecordQueueEntry.java:68)
	at org.apache.flink.streaming.api.operators.async.Emitter.output(Emitter.java:129)
	... 2 more
Caused by: java.util.concurrent.TimeoutException: Async function call has timed out.
	at org.apache.flink.streaming.api.functions.async.AsyncFunction.timeout(AsyncFunction.java:97)
	at org.apache.flink.streaming.api.operators.async.AsyncWaitOperator$1.onProcessingTime(AsyncWaitOperator.java:215)
	at org.apache.flink.streaming.runtime.tasks.SystemProcessingTimeService$TriggerTask.run(SystemProcessingTimeService.java:281)
	at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
	at java.util.concurrent.FutureTask.run(FutureTask.java:266)
	at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.access$201(ScheduledThreadPoolExecutor.java:180)
	at java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293)
	at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
	at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
	... 1 more
// 当我使用如下代码,进行run,
// 下游写入到1000条(capacity)时,
// 上游不再消费,下游不再写入。
 AsyncDataStream
       //顺序异步IO
       .orderedWait(input, new AsyncDatabaseRequest(), 5000,
TimeUnit.MILLISECONDS, 1000)

这是因为没有处理tiemout方法的。

timeout方法应该要正确的处理ResultFuture, 比如ResultFuture.complete或者completeExceptionally,如果你什么都没做,那么这个异步请求就还没有真的结束。

  override def timeout(input: DebeziumObject, resultFuture: ResultFuture[Int]): Unit = {
    println("time out ... "+input)
//    asyncInvoke(input,resultFuture)
    resultFuture.complete(List(0))
  }

处理后,程序就可以继续进行上下游的操作了。
在这里插入图片描述

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
java.util.concurrent.TimeoutException是一个在Java中常见的异常,表示在等待某个操作完成了。它通常发生在执行异步操作,等待结果的过程中超过了预定的间。在你提供的引用中,这个异常可能是由于异步请求没有在预定的间内完成导致的。 在引用中提到了timeout方法应该正确处理ResultFuture,否则异步请求就没有真正结束。如果没有对ResultFuture进行处理,可能会导致超异常的发生。在这个例子中,timeout方法通过调用resultFuture.complete或completeExceptionally来处理ResultFuture,以确保异步请求的结束,并返回适当的结果。 在引用中提到了Springbootadmin在检查消费者的健康接口,如果返回结果超,会判定该消费者为离线状态。这可能是由于邮箱校验等服务的延迟导致的。为了解决这个问题,可以禁用健康接口的邮件校验,通过在消费者的配置中添加management.health.mail.enabled: false来实现。 另外,在引用中提到,监控健康的超间默认是5秒,可以通过在Springbootadmin所在项目的配置文件中增加spring.boot.admin.monitor.default-timeout来修改超间,以适应实际需求。 综上所述,java.util.concurrent.TimeoutException可能是由于异步请求超或健康接口检查超引起的。可以通过正确处理ResultFuture、禁用邮件校验或调整超间等方式来解决这个问题。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [Flink 异步IO java.util.concurrent.TimeoutException: Async function call has timed out.](https://blog.csdn.net/qq_39261894/article/details/108873808)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [SpringBootAdmin 超踩坑必备](https://blog.csdn.net/u014685642/article/details/128201165)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值