核心逻辑概述

ThreadPoolExecutor是Java线程池中最核心的类之一,它能够保证线程池按照正常的业务逻辑执行任务,并通过原子方式更新线程池每个阶段的状态。

ThreadPoolExecutor类中存在一个workers工作线程集合,用户可以向线程池中添加需要执行的任务,workers集合中的工作线程可以直接执行任务,或者从任务队列中获取任务后执行。ThreadPoolExecutor类中提供了整个线程池从创建到执行任务,再到消亡的整个流程方法。本文,就结合ThreadPoolExecutor类的源码深度分析线程池执行任务的整体流程。

在ThreadPoolExecutor类中,线程池的逻辑主要体现在execute(Runnable)方法,addWorker(Runnable, boolean)方法,addWorkerFailed(Worker)方法和拒绝策略上,接下来,我们就深入分析这几个核心方法。

execute(Runnable)方法

execute(Runnable)方法的作用是提交Runnable类型的任务到线程池中。我们先看下execute(Runnable)方法的源码,如下所示。

public void execute(Runnable command) {  //如果提交的任务为空,则抛出空指针异常  if (command == null)    throw new NullPointerException();  //获取线程池的状态和线程池中线程的数量  int c = ctl.get();  //线程池中的线程数量小于corePoolSize的值  if (workerCountOf(c) < corePoolSize) {    //重新开启线程执行任务    if (addWorker(command, true))      return;    c = ctl.get();  }  //如果线程池处于RUNNING状态,则将任务添加到阻塞队列中  if (isRunning(c) && workQueue.offer(command)) {    //再次获取线程池的状态和线程池中线程的数量,用于二次检查    int recheck = ctl.get();    //如果线程池没有未处于RUNNING状态,从队列中删除任务    if (! isRunning(recheck) && remove(command))      //执行拒绝策略      reject(command);    //如果线程池为空,则向线程池中添加一个线程    else if (workerCountOf(recheck) == 0)      addWorker(null, false);  }  //任务队列已满,则新增worker线程,如果新增线程失败,则执行拒绝策略  else if (!addWorker(command, false))    reject(command);}

整个任务的执行流程,我们可以简化成下图所示。

接下来,我们拆解execute(Runnable)方法,具体分析execute(Runnable)方法的执行逻辑。

(1)线程池中的线程数是否小于corePoolSize核心线程数,如果小于corePoolSize核心线程数,则向workers工作线程集合中添加一个核心线程执行任务。代码如下所示。

//线程池中的线程数量小于corePoolSize的值if (workerCountOf(c) < corePoolSize) {  //重新开启线程执行任务  if (addWorker(command, true))    return;  c = ctl.get();}

(2)如果线程池中的线程数量大于corePoolSize核心线程数,则判断当前线程池是否处于RUNNING状态,如果处于RUNNING状态,则添加任务到待执行的任务队列中。注意:这里向任务队列添加任务时,需要判断线程池是否处于RUNNING状态,只有线程池处于RUNNING状态时,才能向任务队列添加新任务。否则,会执行拒绝策略。代码如下所示。

if (isRunning(c) && workQueue.offer(command)) 

(3)向任务队列中添加任务成功,由于其他线程可能会修改线程池的状态,所以这里需要对线程池进行二次检查,如果当前线程池的状态不再是RUNNING状态,则需要将添加的任务从任务队列中移除,执行后续的拒绝策略。如果当前线程池仍然处于RUNNING状态,则判断线程池是否为空,如果线程池中不存在任何线程,则新建一个线程添加到线程池中,如下所示。

//再次获取线程池的状态和线程池中线程的数量,用于二次检查int recheck = ctl.get();//如果线程池没有未处于RUNNING状态,从队列中删除任务if (! isRunning(recheck) && remove(command))  //执行拒绝策略  reject(command);//如果线程池为空,则向线程池中添加一个线程else if (workerCountOf(recheck) == 0)  addWorker(null, false);

(4)如果在步骤(3)中向任务队列中添加任务失败,则尝试开启新的线程执行任务。此时,如果线程池中的线程数量已经大于线程池中的最大线程数maximumPoolSize,则不能再启动新线程。此时,表示线程池中的任务队列已满,并且线程池中的线程已满,需要执行拒绝策略,代码如下所示。

//任务队列已满,则新增worker线程,如果新增线程失败,则执行拒绝策略else if (!addWorker(command, false))  reject(command);

这里,我们将execute(Runnable)方法拆解,结合流程图来理解线程池中任务的执行流程就比较简单了。可以这么说,execute(Runnable)方法的逻辑基本上就是一般线程池的执行逻辑,理解了execute(Runnable)方法,就基本理解了线程池的执行逻辑。

注意:有关ScheduledThreadPoolExecutor类和ForkJoinPool类执行线程池的逻辑,在【高并发专题】系列文章中的后文中会详细说明,理解了这些类的执行逻辑,就基本全面掌握了线程池的执行流程。

在分析execute(Runnable)方法的源码时,我们发现execute(Runnable)方法中多处调用了addWorker(Runnable, boolean)方法,接下来,我们就一起分析下addWorker(Runnable, boolean)方法的逻辑。

addWorker(Runnable, boolean)方法

总体上,addWorker(Runnable, boolean)方法可以分为三部分,第一部分是使用CAS安全的向线程池中添加工作线程;第二部分是创建新的工作线程;第三部分则是将任务通过安全的并发方式添加到workers中,并启动工作线程执行任务。

接下来,我们看下addWorker(Runnable, boolean)方法的源码,如下所示。

private boolean addWorker(Runnable firstTask, boolean core) {  //标记重试的标识  retry:  for (;;) {    int c = ctl.get();    int rs = runStateOf(c);     // 检查队列是否在某些特定的条件下为空    if (rs >= SHUTDOWN &&      ! (rs == SHUTDOWN &&         firstTask == null &&         ! workQueue.isEmpty()))      return false;    //下面循环的主要作用为通过CAS方式增加线程的个数    for (;;) {      //获取线程池中的线程数量      int wc = workerCountOf(c);      //如果线程池中的线程数量超出限制,直接返回false      if (wc >= CAPACITY ||        wc >= (core ? corePoolSize : maximumPoolSize))        return false;      //通过CAS方式向线程池新增线程数量      if (compareAndIncrementWorkerCount(c))        //通过CAS方式保证只有一个线程执行成功,跳出最外层循环        break retry;      //重新获取ctl的值      c = ctl.get();        //如果CAS操作失败了,则需要在内循环中重新尝试通过CAS新增线程数量      if (runStateOf(c) != rs)        continue retry;    }  }    //跳出最外层for循环,说明通过CAS新增线程数量成功  //此时创建新的工作线程  boolean workerStarted = false;  boolean workerAdded = false;  Worker w = null;  try {    //将执行的任务封装成worker    w = new Worker(firstTask);    final Thread t = w.thread;    if (t != null) {      //独占锁,保证操作workers时的同步      final ReentrantLock mainLock = this.mainLock;      mainLock.lock();      try {        //此处需要重新检查线程池状态        //原因是在获得锁之前可能其他的线程改变了线程池的状态        int rs = runStateOf(ctl.get());                if (rs < SHUTDOWN ||          (rs == SHUTDOWN && firstTask == null)) {          if (t.isAlive())            throw new IllegalThreadStateException();          //向worker中添加新任务          workers.add(w);          int s = workers.size();          if (s > largestPoolSize)            largestPoolSize = s;          //将是否添加了新任务的标识设置为true          workerAdded = true;        }      } finally {        //释放独占锁        mainLock.unlock();      }      //添加新任成功,则启动线程执行任务      if (workerAdded) {        t.start();        //将任务是否已经启动的标识设置为true        workerStarted = true;      }    }  } finally {    //如果任务未启动或启动失败,则调用addWorkerFailed(Worker)方法    if (! workerStarted)      addWorkerFailed(w);  }  //返回是否启动任务的标识  return workerStarted;}

乍一看,addWorker(Runnable, boolean)方法还蛮长的,这里,我们还是将addWorker(Runnable, boolean)方法进行拆解。

(1)检查任务队列是否在某些特定的条件下为空,代码如下所示。

// 检查队列是否在某些特定的条件下为空if (rs >= SHUTDOWN &&  ! (rs == SHUTDOWN &&     firstTask == null &&     ! workQueue.isEmpty()))  return false;

(2)在通过步骤(1)的校验后,则进入内层for循环,在内层for循环中通过CAS来增加线程池中的线程数量,如果CAS操作成功,则直接退出双重for循环。如果CAS操作失败,则查看当前线程池的状态是否发生了变化,如果线程池的状态发生了变化,则通过continue关键字重新通过外层for循环校验任务队列,检验通过再次执行内层for循环的CAS操作。如果线程池的状态没有发生变化,此时上一次CAS操作失败了,则继续尝试CAS操作。代码如下所示。

for (;;) {  //获取线程池中的线程数量  int wc = workerCountOf(c);  //如果线程池中的线程数量超出限制,直接返回false  if (wc >= CAPACITY ||    wc >= (core ? corePoolSize : maximumPoolSize))    return false;  //通过CAS方式向线程池新增线程数量  if (compareAndIncrementWorkerCount(c))    //通过CAS方式保证只有一个线程执行成功,跳出最外层循环    break retry;  //重新获取ctl的值  c = ctl.get();    //如果CAS操作失败了,则需要在内循环中重新尝试通过CAS新增线程数量  if (runStateOf(c) != rs)    continue retry;}

(3)CAS操作成功后,表示向线程池中成功添加了工作线程,此时,还没有线程去执行任务。使用全局的独占锁mainLock来将新增的工作线程Worker对象安全的添加到workers中。

总体逻辑就是:创建新的Worker对象,并获取Worker对象中的执行线程,如果线程不为空,则获取独占锁,获取锁成功后,再次检查线线程的状态,这是避免在获取独占锁之前其他线程修改了线程池的状态,或者关闭了线程池。如果线程池关闭,则需要释放锁。否则将新增加的线程添加到工作集合中,释放锁并启动线程执行任务。将是否启动线程的标识设置为true。最后,判断线程是否启动,如果没有启动,则调用addWorkerFailed(Worker)方法。最终返回线程是否起送的标识。

//跳出最外层for循环,说明通过CAS新增线程数量成功//此时创建新的工作线程boolean workerStarted = false;boolean workerAdded = false;Worker w = null;try {  //将执行的任务封装成worker  w = new Worker(firstTask);  final Thread t = w.thread;  if (t != null) {    //独占锁,保证操作workers时的同步    final ReentrantLock mainLock = this.mainLock;    mainLock.lock();    try {      //此处需要重新检查线程池状态      //原因是在获得锁之前可能其他的线程改变了线程池的状态      int rs = runStateOf(ctl.get());            if (rs < SHUTDOWN ||        (rs == SHUTDOWN && firstTask == null)) {        if (t.isAlive())          throw new IllegalThreadStateException();        //向worker中添加新任务        workers.add(w);        int s = workers.size();        if (s > largestPoolSize)          largestPoolSize = s;        //将是否添加了新任务的标识设置为true        workerAdded = true;      }    } finally {      //释放独占锁      mainLock.unlock();    }    //添加新任成功,则启动线程执行任务    if (workerAdded) {      t.start();      //将任务是否已经启动的标识设置为true      workerStarted = true;    }  }} finally {  //如果任务未启动或启动失败,则调用addWorkerFailed(Worker)方法  if (! workerStarted)    addWorkerFailed(w);}//返回是否启动任务的标识return workerStarted;

addWorkerFailed(Worker)方法

在addWorker(Runnable, boolean)方法中,如果添加工作线程失败或者工作线程启动失败时,则会调用addWorkerFailed(Worker)方法,下面我们就来看看addWorkerFailed(Worker)方法的实现,如下所示。

private void addWorkerFailed(Worker w) {  //获取独占锁  final ReentrantLock mainLock = this.mainLock;  mainLock.lock();  try {    //如果Worker任务不为空    if (w != null)      //将任务从workers集合中移除      workers.remove(w);    //通过CAS将任务数量减1    decrementWorkerCount();    tryTerminate();  } finally {    //释放锁    mainLock.unlock();  }}

addWorkerFailed(Worker)方法的逻辑就比较简单了,获取独占锁,将任务从workers中移除,并且通过CAS将任务的数量减1,最后释放锁。

拒绝策略

我们在分析execute(Runnable)方法时,线程池会在适当的时候调用reject(Runnable)方法来执行相应的拒绝策略,我们看下reject(Runnable)方法的实现,如下所示。

final void reject(Runnable command) {  handler.rejectedExecution(command, this);}

通过代码,我们发现调用的是handler的rejectedExecution方法,handler又是个什么鬼,我们继续跟进代码,如下所示。

private volatile RejectedExecutionHandler handler;

再看看RejectedExecutionHandler是个啥类型,如下所示。

package java.util.concurrent; public interface RejectedExecutionHandler {     void rejectedExecution(Runnable r, ThreadPoolExecutor executor);}

可以发现RejectedExecutionHandler是个接口,定义了一个rejectedExecution(Runnable, ThreadPoolExecutor)方法。既然RejectedExecutionHandler是个接口,那我们就看看有哪些类实现了RejectedExecutionHandler接口。

看到这里,我们发现RejectedExecutionHandler接口的实现类正是线程池默认提供的四种拒绝策略的实现类。

至于reject(Runnable)方法中具体会执行哪个类的拒绝策略,是根据创建线程池时传递的参数决定的。如果没有传递拒绝策略,则默认会执行AbortPolicy类的拒绝策略。否则会执行传递的类的拒绝策略。

在创建线程池时,除了能够传递JDK默认提供的拒绝策略外,还可以传递自定义的拒绝策略。如果想使用自定义的拒绝策略,则只需要实现RejectedExecutionHandler接口,并重写rejectedExecution(Runnable, ThreadPoolExecutor)方法即可。例如,下面的代码。

public class CustomPolicy implements RejectedExecutionHandler {   public CustomPolicy() { }   public void rejectedExecution(Runnable r, ThreadPoolExecutor e) {    if (!e.isShutdown()) {      System.out.println("使用调用者所在的线程来执行任务")      r.run();    }  }}

使用如下方式创建线程池。

new ThreadPoolExecutor(0, Integer.MAX_VALUE,                       60L, TimeUnit.SECONDS,                       new SynchronousQueue(),                       Executors.defaultThreadFactory(),           new CustomPolicy());

至此,线程池执行任务的整体核心逻辑分析结束。

(转载)

作者:冰 河

原文链接:https://blog.csdn.net/l1028386804/article/details/104480010

END

点击

hibernate 并发获取session失败 空指针_高并发之|通过ThreadPoolExecutor类的源码深度解析线程池执行任务的核心流程...相关推荐

  1. spring源码深度解析---创建AOP代理之获取增强器

    spring源码深度解析-创建AOP代理之获取增强器 在上一篇的博文中我们讲解了通过自定义配置完成了对AnnotationAwareAspectJAutoProxyCreator类型的自动注册,那么这 ...

  2. 前端为什么有的接口明明是成功回调却执行了.catch失败回调_前端进阶高薪必看-手写源码篇(高频技术点)...

    前言 此系列作为笔者之前发过的前端高频面试整理的补充 会比较偏向中高前端面试问题 当然大家都是从新手一路走过来的 感兴趣的朋友们都可以看哈 初衷 我相信不少同学面试的时候最怕的一个环节就是手写代码 大 ...

  3. Spring源码深度解析(郝佳)-学习-Bean Id 获取

    首先上图,我们要获取类PropertySourcesPlaceholderConfigurer的id属性值 AbstractBeanDefinitionParser.java protected St ...

  4. java 缘起_小豹子带你看源码:Java 线程池(一)缘起 计划

    1 缘起 怎么想起来看线程池的代码? 很简单,因为我不会用. 原先遇到用线程池一直是 Executors 直接构造一个出来.啊,newFixedThreadPool 就是创建定容线程池,线程数是固定的 ...

  5. 20210423# 《Spring源码深度解析(第2版)》_郝佳

    backTo : https://blog.csdn.net/qq_17079255/article/details/115365608 目录 第一章 Spring整体架构和环境搭建 1.1 Spri ...

  6. 【笔记-vue】《imooc-vue.js高仿饿了么》、《imooc-vue 音乐app》、《imooc-vue.js源码全方位解析》

    20170709 - 20171128:<imooc-vue.js高仿饿了么> 一.第一章 课程简介 1-1课程简介 1.需求分析-脚手架工具-数据mock-架构设计-代码编写-自测-编译 ...

  7. 【Camera专题】Camera驱动源码全解析_下

    系列文章 1.手把手撸一份驱动 到 点亮 Camera 2.Camera dtsi 完全解析 3.Camera驱动源码全解析上 4.Camera驱动源码全解析下 上篇文章分析了C文件函数的实现,本文继 ...

  8. 高通(Qualcomm)LK源码深度分析(三)

    本编文章的内容主要是分析 boot/recovery 的启动过程,其中的 boot 就是 android 的kernel, 是整个 android 系统的核心.本文的分析是紧接着 aboot_init ...

  9. 【Android 安全】DEX 加密 ( 代理 Application 开发 | 加载 dex 文件 | 使用反射获取方法创建本应用的 dexElements | 各版本创建 dex 数组源码对比 )

    文章目录 一.不同 Android 系统创建 dex 数组源码对比 二.不同 Android 系统创建 dex 数组源码对比 三. Android 5.1 及以下系统反射方法并创建 Element[] ...

最新文章

  1. CUDA运行时 Runtime(一)
  2. 在Ubuntu 14.04 64bit上生成ATS本地离线文档
  3. 【dotnet跨平台】Visual Studio Code常见问答
  4. hadoop(ha)hbase(双master)安装
  5. sql server cvs 导入
  6. Java程序和MySQL数据库中关于小数的保存问题
  7. Android P 网络报错 : java.io.IOException: Cleartext HTTP traffic to ***.com not permitted
  8. C++高级编程篇-如何编写高效的C++篇
  9. 又烧一辆!蔚来ES8维修时起火烧到只剩底盘 官方回应:已开启调查
  10. java8 interface_Java8新特性:函数式接口@FunctionalInterface使用说明
  11. 压力测试就是一种破坏性的性能测试
  12. win7下安装VC6LineNumberAddin方法[VC6行号插件]
  13. 【渝粤教育】国家开放大学2018年春季 0133-21T大学物理 参考试题
  14. 好用的BUS调试工具-Bus Hound
  15. URI与URL的区别
  16. IE Internet选项快捷键
  17. 月老在线牵盲盒+交友盲盒+一元交友+小纸条盲盒+交友匹配+同城交友小程序源码
  18. pythonmacd指标编写_利用python编写macd、kdj、rsi、ma等指标
  19. 推荐系统应用---新闻资讯类
  20. add new color number to the color drop down in enovia PLM

热门文章

  1. mysql排序规则英文 数字_如何在MySQL中为日语设置模式排序规则
  2. XBMC源代码分析 7:视频播放器(dvdplayer)-输入流(以libRTMP为例)
  3. 小米鸿蒙最新信息,小米新机将搭载鸿蒙系统?还得等鸿蒙进一步的消息!
  4. 搭建ElasticSearch7.4.2集群
  5. linux文件系统的总体架构,Linux NFS的整体架构与核心代码解析
  6. php两个字符串怎么比较,php比较两个字符串的函数strcasecmp()
  7. git命令行删除远程文件
  8. erp系统源码php_最新仿金蝶 PHP电商ERP进销存系统软件 带扫描功能
  9. ie浏览器查看vue中js_浅析 Vue.js 中那些空间换时间的操作
  10. 程序如何在两个gpu卡上并行运行_【他山之石】如何支撑上亿类别的人脸训练?显存均衡的模型并行(PyTorch实现)...