org.springframework.core.task.TaskRejectedException:Executor[]did not accept task异常解决

今天有个需求是优化查询时的效率(使用的hbase无法做关联查询,需要在结果查出来之后组合),结果就遇到了如题的异常。

那么通过查询源码发现问题,上代码

org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor.java

@Override
public void execute(Runnable task) {
Executor executor = getThreadPoolExecutor();
try {
executor.execute(task);
}
catch (RejectedExecutionException ex) {
throw new TaskRejectedException("Executor [" + executor + "] did not accept task: " + task, ex);
}
}``

因为在之前没有遇到过RejectedExecutionException 这个异常,那么去百度看到了很详细的解释,下面是网友的解决方案

Spring ThreadPoolTaskExecutor没有使用阻塞模式将任务加入到对象中，因此对象满的时候会抛出异常，对于这种情况，一般的企业执行环境不能无限制的增大内存队列容量，因此不得不阻塞队列的加入，spring内置提供的异常处理机制不好用，因为ThreadPoolExecutor.CallerRunsPolicy的处理方式是将异常任务放在调用线程中执行，这样对于单个执行时间长的任务，即使队列有空闲了，剩下的任务也要等这个任务在主线程执行完了才能继续往队列里面添加。有一个处理方法就是捕获executor.execute()的异常，只要发现有异常就等待一段时间，直到没有异常为止，这样就能模仿阻塞队列的效果，下面是代码：

while(true){
try{
taskExecutor.execute(new MailSender(tUserIssueInfo));
break;
}catch(TaskRejectedException e){
try{
Thread.sleep(1000);
}catch(Exception e2){}
}
}

之后我又发现ThreadPoolTaskExecutor有一个成员方法可以设置RejectedExecption的抛出规则 ,方法名是setRejectedExecutionHandler()。

什么是RejectedExecutionHandler？

　

RejectedExecutionHandler handler: 用来拒绝一个任务的执行，有两种情况会发生这种情况。

　　一是在execute方法中若addIfUnderMaximumPoolSize(command)为false，即线程池已经饱和；

　　二是在execute方法中, 发现runState!=RUNNING || poolSize == 0,即已经shutdown,就调用ensureQueuedTaskHandled(Runnable command)，在该方法中有可能调用reject。

ThredPoolTaskExcutor的处理流程？

当池子大小小于corePoolSize，就新建线程，并处理请求

　　当池子大小等于corePoolSize，把请求放入workQueue中，池子里的空闲线程就去workQueue中取任务并处理

　　当workQueue放不下任务时，就新建线程入池，并处理请求，如果池子大小撑到了maximumPoolSize，就用RejectedExecutionHandler来做拒绝处理

　　当池子的线程数大于corePoolSize时，多余的线程会等待keepAliveTime长时间，如果无请求可处理就自行销毁

　　其会优先创建 CorePoolSiz 线程， 当继续增加线程时，先放入Queue中，当 CorePoolSiz 和 Queue 都满的时候，就增加创建新线程，当线程达到MaxPoolSize的时候，就会抛出错 误 org.springframework.core.task.TaskRejectedException

　　另外MaxPoolSize的设定如果比系统支持的线程数还要大时，会抛出java.lang.OutOfMemoryError: unable to create new native thread 异常。　

Reject策略预定义有四种：

(1)ThreadPoolExecutor.AbortPolicy策略，是默认的策略,处理程序遭到拒绝将抛出运行时 RejectedExecutionException。

(2)ThreadPoolExecutor.CallerRunsPolicy策略 ,调用者的线程会执行该任务,如果执行器已关闭,则丢弃.

(3)ThreadPoolExecutor.DiscardPolicy策略，不能执行的任务将被丢弃.

(4)ThreadPoolExecutor.DiscardOldestPolicy策略，如果执行程序尚未关闭，则位于工作队列头部的任务将被删除，然后重试执行程序（如果再次失败，则重复此过程）.