Doug Lea老爷子的Executor线程池

2023-11-02 01:20

本文主要是介绍Doug Lea老爷子的Executor线程池,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Executor框架是指java5中引入的一系列并发库中与executor相关的一些功能类,其中包括线程池,Executor,Executors,ExecutorService,CompletionService,Future,Callable等。他们的关系为:

并发编程的一种编程方式是把任务拆分为一些列的小任务,即Runnable,然后在提交给一个Executor执行,Executor.execute(Runnalbe)。Executor在执行时使用内部的线程池完成操作。



Executor:一个接口,其定义了一个接收Runnable对象的方法executor,其方法签名为executor(Runnable command),
ExecutorService: 是一个比Executor使用更广泛的子类接口,其提供了生命周期管理的方法,以及可跟踪一个或多个异步任务执行状况返回Future的方法
AbstractExecutorService:ExecutorService执行方法的默认实现
ScheduledExecutorService:一个可定时调度任务的接口
ScheduledThreadPoolExecutor:ScheduledExecutorService的实现,一个可定时调度任务的线程池
ThreadPoolExecutor:线程池,可以通过调用Executors以下静态工厂方法来创建线程池 并返回一个ExecutorService对象

一、创建线程池

Executors类,提供了一系列工厂方法用于创先线程池,返回的线程池都实现了ExecutorService接口。

public static ExecutorService newFixedThreadPool(int nThreads)

创建固定数目线程的线程池。

public static ExecutorService newCachedThreadPool()

创建一个可缓存的线程池,调用execute 将重用以前构造的线程(如果线程可用)。如果现有线程没有可用的,则创建一个新线程并添加到池中。终止并从缓存中移除那些已有 60 秒钟未被使用的线程。

public static ExecutorService newSingleThreadExecutor()

创建一个单线程化的Executor。

public static ScheduledExecutorService newScheduledThreadPool(int corePoolSize)

创建一个支持定时及周期性的任务执行的线程池,多数情况下可用来替代Timer类。

Executor executor = Executors.newFixedThreadPool(10);  
Runnable task = new Runnable() {  @Override  public void run() {  System.out.println("task over");  }  
};  
executor.execute(task);  executor = Executors.newScheduledThreadPool(10);  
ScheduledExecutorService scheduler = (ScheduledExecutorService) executor;  
scheduler.scheduleAtFixedRate(task, 10, 10, TimeUnit.SECONDS); 

二、ExecutorService与生命周期

ExecutorService扩展了Executor并添加了一些生命周期管理的方法。一个Executor的生命周期有三种状态,运行关闭终止。Executor创建时处于运行状态。当调用ExecutorService.shutdown()后,处于关闭状态,isShutdown()方法返回true。这时,不应该再想Executor中添加任务,所有已添加的任务执行完毕后,Executor处于终止状态,isTerminated()返回true。

如果Executor处于关闭状态,往Executor提交任务会抛出unchecked exception RejectedExecutionException。

ExecutorService executorService = (ExecutorService) executor;  
while (!executorService.isShutdown()) {  try {  executorService.execute(task);  } catch (RejectedExecutionException ignored) {  }  
}  
executorService.shutdown(); 

 三、使用Callable,Future返回结果

Future<V>代表一个异步执行的操作,通过get()方法可以获得操作的结果,如果异步操作还没有完成,则,get()会使当前线程阻塞。FutureTask<V>实现了Future<V>和Runable<V>。Callable代表一个有返回值得操作。

    Callable<Integer> func = new Callable<Integer>(){  public Integer call() throws Exception {  System.out.println("inside callable");  Thread.sleep(1000);  return new Integer(8);  }         };        FutureTask<Integer> futureTask  = new FutureTask<Integer>(func);  Thread newThread = new Thread(futureTask);  newThread.start();  try {  System.out.println("blocking here");  Integer result = futureTask.get();  System.out.println(result);  } catch (InterruptedException ignored) {  } catch (ExecutionException ignored) {  }  

 ExecutoreService提供了submit()方法,传递一个Callable,或Runnable,返回Future。如果Executor后台线程池还没有完成Callable的计算,这调用返回Future对象的get()方法,会阻塞直到计算完成。

例子:并行计算数组的和。

    package executorservice;  import java.util.ArrayList;  import java.util.List;  import java.util.concurrent.Callable;  import java.util.concurrent.ExecutionException;  import java.util.concurrent.ExecutorService;  import java.util.concurrent.Executors;  import java.util.concurrent.Future;  import java.util.concurrent.FutureTask;  public class ConcurrentCalculator {  private ExecutorService exec;  private int cpuCoreNumber;  private List<Future<Long>> tasks = new ArrayList<Future<Long>>();  // 内部类  class SumCalculator implements Callable<Long> {  private int[] numbers;  private int start;  private int end;  public SumCalculator(final int[] numbers, int start, int end) {  this.numbers = numbers;  this.start = start;  this.end = end;  }  public Long call() throws Exception {  Long sum = 0l;  for (int i = start; i < end; i++) {  sum += numbers[i];  }  return sum;  }  }  public ConcurrentCalculator() {  cpuCoreNumber = Runtime.getRuntime().availableProcessors();  exec = Executors.newFixedThreadPool(cpuCoreNumber);  }  public Long sum(final int[] numbers) {  // 根据CPU核心个数拆分任务,创建FutureTask并提交到Executor  for (int i = 0; i < cpuCoreNumber; i++) {  int increment = numbers.length / cpuCoreNumber + 1;  int start = increment * i;  int end = increment * i + increment;  if (end > numbers.length)  end = numbers.length;  SumCalculator subCalc = new SumCalculator(numbers, start, end);  FutureTask<Long> task = new FutureTask<Long>(subCalc);  tasks.add(task);  if (!exec.isShutdown()) {  exec.submit(task);  }  }  return getResult();  }  /** * 迭代每个只任务,获得部分和,相加返回 *  * @return */  public Long getResult() {  Long result = 0l;  for (Future<Long> task : tasks) {  try {  // 如果计算未完成则阻塞  Long subSum = task.get();  result += subSum;  } catch (InterruptedException e) {  e.printStackTrace();  } catch (ExecutionException e) {  e.printStackTrace();  }  }  return result;  }  public void close() {  exec.shutdown();  }  }  

Main

    int[] numbers = new int[] { 1, 2, 3, 4, 5, 6, 7, 8, 10, 11 };  ConcurrentCalculator calc = new ConcurrentCalculator();  Long sum = calc.sum(numbers);  System.out.println(sum);  calc.close();  

四、CompletionService

在刚在的例子中,getResult()方法的实现过程中,迭代了FutureTask的数组,如果任务还没有完成则当前线程会阻塞,如果我们希望任意字任务完成后就把其结果加到result中,而不用依次等待每个任务完成,可以使CompletionService。生产者submit()执行的任务。使用者take()已完成的任务,并按照完成这些任务的顺序处理它们的结果。也就是调用CompletionService的take方法是,会返回按完成顺序放回任务的结果,CompletionService内部维护了一个阻塞队列BlockingQueue,如果没有任务完成,take()方法也会阻塞。修改刚才的例子使用CompletionService:

    public class ConcurrentCalculator2 {  private ExecutorService exec;  private CompletionService<Long> completionService;  private int cpuCoreNumber;  // 内部类  class SumCalculator implements Callable<Long> {  ......  }  public ConcurrentCalculator2() {  cpuCoreNumber = Runtime.getRuntime().availableProcessors();  exec = Executors.newFixedThreadPool(cpuCoreNumber);  completionService = new ExecutorCompletionService<Long>(exec);  }  public Long sum(final int[] numbers) {  // 根据CPU核心个数拆分任务,创建FutureTask并提交到Executor  for (int i = 0; i < cpuCoreNumber; i++) {  int increment = numbers.length / cpuCoreNumber + 1;  int start = increment * i;  int end = increment * i + increment;  if (end > numbers.length)  end = numbers.length;  SumCalculator subCalc = new SumCalculator(numbers, start, end);   if (!exec.isShutdown()) {  completionService.submit(subCalc);  }  }  return getResult();  }  /** * 迭代每个只任务,获得部分和,相加返回 *  * @return */  public Long getResult() {  Long result = 0l;  for (int i = 0; i < cpuCoreNumber; i++) {              try {  Long subSum = completionService.take().get();  result += subSum;             } catch (InterruptedException e) {  e.printStackTrace();  } catch (ExecutionException e) {  e.printStackTrace();  }  }  return result;  }  public void close() {  exec.shutdown();  }  }  




这篇关于Doug Lea老爷子的Executor线程池的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/327116

相关文章

JDK21对虚拟线程的几种用法实践指南

《JDK21对虚拟线程的几种用法实践指南》虚拟线程是Java中的一种轻量级线程,由JVM管理,特别适合于I/O密集型任务,:本文主要介绍JDK21对虚拟线程的几种用法,文中通过代码介绍的非常详细,... 目录一、参考官方文档二、什么是虚拟线程三、几种用法1、Thread.ofVirtual().start(

Java 虚拟线程的创建与使用深度解析

《Java虚拟线程的创建与使用深度解析》虚拟线程是Java19中以预览特性形式引入,Java21起正式发布的轻量级线程,本文给大家介绍Java虚拟线程的创建与使用,感兴趣的朋友一起看看吧... 目录一、虚拟线程简介1.1 什么是虚拟线程?1.2 为什么需要虚拟线程?二、虚拟线程与平台线程对比代码对比示例:三

Java 线程池+分布式实现代码

《Java线程池+分布式实现代码》在Java开发中,池通过预先创建并管理一定数量的资源,避免频繁创建和销毁资源带来的性能开销,从而提高系统效率,:本文主要介绍Java线程池+分布式实现代码,需要... 目录1. 线程池1.1 自定义线程池实现1.1.1 线程池核心1.1.2 代码示例1.2 总结流程2. J

Java JUC并发集合详解之线程安全容器完全攻略

《JavaJUC并发集合详解之线程安全容器完全攻略》Java通过java.util.concurrent(JUC)包提供了一整套线程安全的并发容器,它们不仅是简单的同步包装,更是基于精妙并发算法构建... 目录一、为什么需要JUC并发集合?二、核心并发集合分类与详解三、选型指南:如何选择合适的并发容器?在多

Java中如何正确的停掉线程

《Java中如何正确的停掉线程》Java通过interrupt()通知线程停止而非强制,确保线程自主处理中断,避免数据损坏,线程池的shutdown()等待任务完成,shutdownNow()强制中断... 目录为什么不强制停止为什么 Java 不提供强制停止线程的能力呢?如何用interrupt停止线程s

python 线程池顺序执行的方法实现

《python线程池顺序执行的方法实现》在Python中,线程池默认是并发执行任务的,但若需要实现任务的顺序执行,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋... 目录方案一:强制单线程(伪顺序执行)方案二:按提交顺序获取结果方案三:任务间依赖控制方案四:队列顺序消

SpringBoot实现虚拟线程的方案

《SpringBoot实现虚拟线程的方案》Java19引入虚拟线程,本文就来介绍一下SpringBoot实现虚拟线程的方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录什么是虚拟线程虚拟线程和普通线程的区别SpringBoot使用虚拟线程配置@Async性能对比H

在Java中实现线程之间的数据共享的几种方式总结

《在Java中实现线程之间的数据共享的几种方式总结》在Java中实现线程间数据共享是并发编程的核心需求,但需要谨慎处理同步问题以避免竞态条件,本文通过代码示例给大家介绍了几种主要实现方式及其最佳实践,... 目录1. 共享变量与同步机制2. 轻量级通信机制3. 线程安全容器4. 线程局部变量(ThreadL

Linux线程同步/互斥过程详解

《Linux线程同步/互斥过程详解》文章讲解多线程并发访问导致竞态条件,需通过互斥锁、原子操作和条件变量实现线程安全与同步,分析死锁条件及避免方法,并介绍RAII封装技术提升资源管理效率... 目录01. 资源共享问题1.1 多线程并发访问1.2 临界区与临界资源1.3 锁的引入02. 多线程案例2.1 为

Java中的xxl-job调度器线程池工作机制

《Java中的xxl-job调度器线程池工作机制》xxl-job通过快慢线程池分离短时与长时任务,动态降级超时任务至慢池,结合异步触发和资源隔离机制,提升高频调度的性能与稳定性,支撑高并发场景下的可靠... 目录⚙️ 一、调度器线程池的核心设计 二、线程池的工作流程 三、线程池配置参数与优化 四、总结:线程