flume系列之：Unexpected error java.util.concurrent.RejectedExecutionException: Task java.util.concurrent

已于 2024-12-15 21:20:39 修改
阅读量73 收藏
点赞数
分类专栏： flume 文章标签： flume系列 Rejected Execution Exception
于 2024-11-06 18:18:39 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/143576433
版权
flume 专栏收录该内容
71 篇文章 24 订阅 ¥29.90 ¥99.00
订阅专栏

flume系列之：ERROR [hdfs-sink1-roll-timer-1] org.apache.flume.sink.hdfs.BucketWriter$2.call:340 - Unexpected error java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.ScheduledThreadPoolExecutor$ScheduledFutureTask@308e7e22 rejected from java.util.concurrent.ScheduledThreadPoolExecutor@18fa7d0[Shutting down, pool size = 5, active threads = 1, queued tasks = 0, completed tasks = 10237]

一、完整报错

  • Exception follows.
    java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@71c81f1c rejected from java.util.concurrent.ThreadPoolExecutor@75f795fd[Terminated, pool size = 0, active threads = 0, queued tasks = 0, completed tasks = 12374301]
    at java.util.concurrent.ThreadPoolExecutor$AbortPolicy.rejectedExecution(ThreadPoolExecutor.java:2063)
    at java.util.concurrent.ThreadPoolExecutor.reject(ThreadPoolExecutor.java:830)
    at java.util.concurrent.ThreadPoolExecutor.execute(ThreadPoolExecutor.java:1379)
    at java.util.concurrent.AbstractExecutorService.submit(AbstractExecutorService.java:134)
    at org.apache.flume.sink.hdfs.BucketWriter.callWithTimeout
了解本专栏 订阅专栏 解锁全文
Java并发编程系列30:抛出异常 java.util.concurrent.RejectedExecutionException
fen_fen的专栏
05-20 9478
1、背景介绍 Java使用线程池newFixedThreadPool针对算法进行并发测试时，出现以下错误java.util.concurrent.RejectedExecutionException Exception in thread "main" java.util.concurrent.RejectedExecutionException: Task com.cipherxxxcrypto.pertest.SM4PerTest$DecTask@76ed5528 rejected from ja
如何解决java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@7566d7cf r...
weixin_42608318的博客
12-24 7242
Java中的java.util.concurrent.RejectedExecutionException异常表示无法将任务提交到线程池中执行。这通常是因为线程池处于关闭状态或者已经达到了最大线程数，无法再接受新的任务。 要解决这个异常，你可以考虑以下几种方法： 检查线程池的状态，确保它处于可以接受新任务的状态。 增加线程池的大小，以便它能够接受更多的任务。 使用带有超时时间的线程池方法，例...
JAVA 多线程报错 java.util.concurrent.RejectedExecutionException
Smileyan's blog
12-30 1万+
java 多线程遇到的问题
java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@8e85cd9 reject
chenwen0326的专栏
03-20 6132
问题：RejectedExecutionException Caused by: java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@8e85cd9 rejected from java.util.concurrent.ThreadPoolExecutor@11106a63[Running, pool size = 10, active threads = 10, queued t
java.util.concurrent.RejectedExecutionException
松门一枝花
05-28 4847
报错日志 java.util.concurrent.RejectedExecutionException: Task java.util.concurrent.FutureTask@12e2cb93 rejected from java.util.concurrent.ThreadPoolExecutor@6ecd396b[Running, pool size = 10, active threads = 10, queued tasks = 200, completed tasks = 0] 原.
【Java】已解决java.util.concurrent.RejectedExecutionException异常
屿小夏.的知识博客
06-19 1805
java.util.concurrent.RejectedExecutionException是Java并发编程中常见的一个异常，它通常发生在使用ExecutorService（如ThreadPoolExecutor）执行异步任务时，当任务提交到线程池但线程池无法处理新任务（比如，因为已经关闭了或者达到了其最大容量）时，就会抛出此异常。在这个例子中，我们使用了ThreadPoolExecutor的构造函数来创建一个线程池，并指定了一个CallerRunsPolicy的拒绝策略。
解决java.util.concurrent.RejectedExecutionException
热门推荐
小一的专栏
08-29 19万+
前言 昨晚12:00运行自动化测试脚本时遇到了java.util.concurrent.RejectedExecutionException这个异常，从异常名称里很容易分析出是提交的任务被线程池拒绝了。查看源码发现是在Activity里，AsyncTask是在自定义的线程池的运行的，但是onDestory函数里确是先显示调用了线程池的shutdown方法，然后才是AsyncTask的cancel
解决：java.util.concurrent.RejectedExecutionException
qyhua的专栏
05-27 1305
当前这个系统这个线程池的线程是用来处理传的是状态，大概有2千个设备，高峰期这2千个设备同时或不断发送状态信息过来，很多状态信息是重复的而且变化时间一般十几分钟，大多数信息基本是同样的状态可以忽略不处理，所以这个错误在这种业务环境下是不影响业务，也可以忽略不调整的。像这种 RejectedExecutionException 错误，表明在Java应用程序中，一个任务尝试提交到线程池（）去执行时被拒绝了，具体原因是线程池达到了其配置的容量限制，无法接纳更多的任务。
flume系列之：java.lang.IllegalArgumentException: Can‘t get Kerberos realm
zhengzaifeidelushang的博客
09-01 1950
flume系列之：java.lang.IllegalArgumentException: Can't get Kerberos realm
flume系列之：flume基于kafka.topics和kafka.topics.regex两种方式匹配Kafka Topic
zhengzaifeidelushang的博客
08-29 748
flume系列之：flume基于kafka.topics和kafka.topics.regex两种方式匹配Kafka Topic
flume1.9往hdfs写报错：java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument
zhengzaifeidelushang的博客
04-24 653
flume往hdfs写报错：java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V 这个错误是因为flume内依赖的guava和hadoop内guava版本不一致导致的。 解决方法： 首先确认hadoop和flume的guava版本 hadoop查看guava路径是：/moudle/hadoop-3.3.0/share/had
flume系列之：解决报错Closing file: ....gz.tmp failed. Will retry again in 180 seconds.ClosedChannelException
最新发布
zhengzaifeidelushang的博客
09-18 154
flume系列之：解决报错Closing file: ....gz.tmp failed. Will retry again in 180 seconds.java.nio.channels.ClosedChannelException at
1]解决java.util.concurrent.RejectedExecutionException
6个日的博客
08-06 2万+
今天学习了java的并发，线程池，同一时间执行一个操作。 报错：java.util.concurrent.RejectedExecutionException，排查发现是等待队列设小了，导致 拒绝策略，当队列满时，处理策略报错异常。 上代码： package aqs; import java.util.concurrent.*; /** * @author WHM * 实现指定时间内做一定事情 * @date 2021年08月06日 16:27 */ public class Cou
已解决java.util.concurrent.RejectedExecutionException异常的正确解决方法，亲测有效！！！
小明的Java问道之路
01-27 1万+
已解决java.util.concurrent.RejectedExecutionException异常的正确解决方法，亲测有效！！！
flumeERROR hdfs.BucketWriter: Unexpected error java.lang.OutOfMemoryError: GC overhead limit exceeded
11-05
flumeERROR hdfs.BucketWriter: Unexpected error java.lang.OutOfMemoryError: GC overhead limit exceeded是由于flume写入HDFS时，内存不足导致的错误。这个错误和HDFS查询yarn日志目录时出现的错误类似，都是由于内存不足导致的。解决方法也类似，可以通过增加flume的heap大小来解决这个问题。可以通过在flume-env.sh文件中设置JAVA_OPTS="-Xmx10240m"来增加heap大小。另外，也可以通过减少flume写入HDFS的速度来减少内存的使用，例如通过调整batch size或者调整写入速率等方式来解决这个问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

快乐骑行^_^

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值