Springboot中使用线程池的三种方式

打印 上一主题 下一主题

主题 848|帖子 848|积分 2546

前言


  • 多线程是每个程序员的噩梦,用得好可以提升效率很爽,用得不好就是埋汰的火葬场。
  • 这里不深入介绍,主要是讲解一些标准用法,熟读唐诗三百首,不会作诗也会吟。
  • 这里就介绍一下springboot中的多线程的使用,使用线程连接池去异步执行业务方法。
  • 由于代码中包含详细注释,也为了保持文章的整洁性,我就不过多的做文字描述了。
VisiableThreadPoolTaskExecutor 编写


  • new VisiableThreadPoolTaskExecutor() 方式创建线程池, 返回值是 Executor
点击查看代码
  1. import lombok.extern.slf4j.Slf4j;
  2. import org.springframework.scheduling.concurrent.ThreadPoolTaskExecutor;
  3. import org.springframework.util.concurrent.ListenableFuture;
  4. import java.util.concurrent.Callable;
  5. import java.util.concurrent.Future;
  6. import java.util.concurrent.ThreadPoolExecutor;
  7. /**
  8. * @author love ice
  9. * @create 2023-09-19 0:17
  10. */
  11. @Slf4j
  12. public class VisiableThreadPoolTaskExecutor extends ThreadPoolTaskExecutor {
  13.     @Override
  14.     public void execute(Runnable task){
  15.         showThreadPoolInfo("execute一个参数的方法执行");
  16.     }
  17.     @Override
  18.     public void execute(Runnable task, long startTimeout){
  19.         showThreadPoolInfo("execute两个参数的方法执行");
  20.     }
  21.     @Override
  22.     public Future<?> submit(Runnable task){
  23.         showThreadPoolInfo("submit Runnable task 入参方法执行");
  24.         return super.submit(task);
  25.     }
  26.     @Override
  27.     public <T> Future<T> submit(Callable<T> task){
  28.         showThreadPoolInfo("submit Callable<T> task 入参方法执行");
  29.         return super.submit(task);
  30.     }
  31.     @Override
  32.     public ListenableFuture<?> submitListenable(Runnable task){
  33.         showThreadPoolInfo("submitListenable(Runnable task) 方法执行");
  34.         return super.submitListenable(task);
  35.     }
  36.     @Override
  37.     public <T>ListenableFuture<T> submitListenable(Callable<T> task){
  38.         showThreadPoolInfo("submitListenable(Callable<T> task) 方法执行");
  39.         return super.submitListenable(task);
  40.     }
  41.     private void showThreadPoolInfo(String prefix){
  42.         ThreadPoolExecutor threadPoolExecutor = getThreadPoolExecutor();
  43.         log.info("{}, {}, taskCount[{}], completedTaskCount[{}], activeCount[{}], queueSize[{}]",
  44.                 this.getThreadNamePrefix(), prefix, threadPoolExecutor.getTaskCount(),
  45.                 threadPoolExecutor.getCompletedTaskCount(), threadPoolExecutor.getActiveCount(),
  46.                 threadPoolExecutor.getQueue().size());
  47.     }
  48. }
复制代码
ThreadExceptionLogHandler 编写


  • 主要用于线程池出现异常时的捕获
点击查看代码
  1. import lombok.extern.slf4j.Slf4j;
  2. import org.springframework.stereotype.Component;
  3. /**
  4. * @author love ice
  5. * @create 2023-09-19 0:13
  6. */
  7. @Slf4j
  8. @Component
  9. public class ThreadExceptionLogHandler implements Thread.UncaughtExceptionHandler {
  10.     @Override
  11.     public void uncaughtException(Thread t, Throwable e) {
  12.         log.error("[{}]线程池异常,异常信息为:{}",t.getName(),e.getMessage(),e);
  13.     }
  14. }
复制代码
ExecutorConfig 编写


  • 核心配置类
点击查看代码
  1. import com.test.redis.Infrastructure.handler.ThreadExceptionLogHandler;
  2. import org.springframework.beans.factory.annotation.Autowired;
  3. import org.springframework.beans.factory.annotation.Value;
  4. import org.springframework.context.annotation.Bean;
  5. import org.springframework.context.annotation.Configuration;
  6. import org.springframework.scheduling.annotation.EnableAsync;
  7. import java.util.concurrent.*;
  8. import java.util.concurrent.atomic.AtomicInteger;
  9. /**
  10. * 线程池配置
  11. *
  12. * @author love ice
  13. * @create 2023-09-19 0:09
  14. */
  15. @Configuration
  16. @EnableAsync
  17. public class ExecutorConfig {
  18.     @Value("${thread.pool.coreSize:50}")
  19.     private int coreSize;
  20.     @Value("${thread.pool.maxSize:50}")
  21.     private int maxSize;
  22.     @Value("${thread.pool.queueSize:9999}")
  23.     private int queueSize;
  24.     @Value("${thread.pool.threadNamePrefix:thread-name}")
  25.     private String threadNamePrefix;
  26.     @Value("${thread.pool.keepAlive:60}")
  27.     private int keepAlive;
  28.     @Autowired
  29.     private ThreadExceptionLogHandler threadExceptionLogHandler;
  30.     /**
  31.      * 方式一: new VisiableThreadPoolTaskExecutor() 方式创建线程池,返回值是 Executor
  32.      * 适用于 @Async("asyncServiceExecutor") 注解
  33.      * 也可以
  34.      *  @Autowired
  35.      *  private Executor asyncServiceExecutor;
  36.      *
  37.      * @return Executor
  38.      */
  39.     @Bean
  40.     public Executor asyncServiceExecutor() {
  41.         VisiableThreadPoolTaskExecutor executor = new VisiableThreadPoolTaskExecutor();
  42.         // 配置核心线程数 50
  43.         executor.setCorePoolSize(coreSize);
  44.         // 配置最大线程数 50
  45.         executor.setMaxPoolSize(maxSize);
  46.         // 配置队列大小 9999
  47.         executor.setQueueCapacity(queueSize);
  48.         // 配置线程池中的线程名称前缀 模块-功能-作用
  49.         executor.setThreadNamePrefix(threadNamePrefix);
  50.         // rejection-policy:当pool已经达到max size的时候,如何处理新任务
  51.         // CALLER_RUNS:不在新线程中执行任务,而是有调用者所在的线程来执行
  52.         // 线程池无法接受新的任务并且队列已满时,如果有新的任务提交给线程池,而线程池已经达到了最大容量限制,那么这个任务不会被丢弃,而是由调用该任务的线程来执行。
  53.         // 这样可以避免任务被直接丢弃,并让调用者自己执行任务以减轻任务提交频率。
  54.         // 这个拒绝策略可能会导致任务提交者的线程执行任务,这可能会对调用者的性能产生一些影响,因为调用者线程需要等待任务执行完成才能继续进行其他操作。
  55.         executor.setRejectedExecutionHandler(new ThreadPoolExecutor.CallerRunsPolicy());
  56.         // 线程空闲后的最大存活时间 60
  57.         executor.setKeepAliveSeconds(keepAlive);
  58.         // 执行初始化
  59.         executor.initialize();
  60.         return executor;
  61.     }
  62.     /**
  63.      * 方式二: new ThreadPoolExecutor() 方式创建线程池
  64.      * 适用于:
  65.      * @Autowired
  66.      * private ExecutorService fbWorkerPool;
  67.      * @return ExecutorService
  68.      */
  69.     @Bean
  70.     public ExecutorService workerPool() {
  71.         return new ThreadPoolExecutor(coreSize, maxSize, keepAlive, TimeUnit.MILLISECONDS,
  72.                 new LinkedBlockingDeque<>(20000),
  73.                 new ThreadFactory() {
  74.                     private final AtomicInteger threadNumber = new AtomicInteger(1);
  75.                     @Override
  76.                     public Thread newThread(Runnable runnable) {
  77.                         Thread thread = new Thread(runnable, threadNamePrefix + threadNumber.getAndIncrement());
  78.                         thread.setUncaughtExceptionHandler(threadExceptionLogHandler);
  79.                         return thread;
  80.                     }
  81.                 });
  82.     }
  83. }
复制代码
ExecutorController 编写


  • 演示demo,三种不同的用法, 足以涵盖大部分场景
点击查看代码
  1. import org.springframework.beans.factory.annotation.Autowired;
  2. import org.springframework.scheduling.annotation.Async;
  3. import org.springframework.web.bind.annotation.RequestMapping;
  4. import org.springframework.web.bind.annotation.RestController;
  5. import java.util.ArrayList;
  6. import java.util.Arrays;
  7. import java.util.List;
  8. import java.util.concurrent.CompletableFuture;
  9. import java.util.concurrent.ExecutorService;
  10. import java.util.stream.Collectors;
  11. /**
  12. * 这里是demo演示、把业务写在 controller 了,一般开发都是在 service 层实现的。
  13. *
  14. * @author love ice
  15. * @create 2023-09-19 0:59
  16. */
  17. @RestController
  18. @RequestMapping("/executor")
  19. public class ExecutorController {
  20.     /**
  21.      * demo1: 使用异步注解 @Async("asyncServiceExecutor") 执行方法,适用于没有返回值的情况下
  22.      */
  23.     public void asyncDemo1() {
  24.         // 假设这是从数据库查询出来的数据
  25.         List<String> nameList = new ArrayList<>(Arrays.asList("张三", "李四", "王五"));
  26.         // 把 nameList 进行切分
  27.         int j = 0, size = nameList.size(), batchSize = 10;
  28.         List<List<String>> list = new ArrayList<>();
  29.         while (j < size) {
  30.             List<String> batchList = nameList.stream().skip(j).limit(Math.min(j + batchSize, size) - j).collect(Collectors.toList());
  31.             list.add(batchList);
  32.             j += batchSize;
  33.         }
  34.         // 先把 list 切分成小份数据,在使用 @Async(),异步处理数据
  35.         list.stream().parallel().forEach(this::asynchronousAuthorization1);
  36.     }
  37.     /**
  38.      * 异步注解处理业务逻辑,实际业务开发,需要提取到 Service 层,否则会报错。
  39.      *
  40.      * @param paramList 入参
  41.      */
  42.     @Async("asyncServiceExecutor")
  43.     public void asynchronousAuthorization1(List<String> paramList) {
  44.         paramList.forEach(System.out::println);
  45.         System.out.println("异步执行 paramList 业务逻辑");
  46.     }
  47. //================================分隔符======================
  48.     @Autowired
  49.     private ExecutorService workerPool;
  50.     /**
  51.      * demo2: workerPool.execute() 实现异步逻辑。适用于没有返回值的情况下
  52.      */
  53.     public void asyncDemo2() {
  54.         // 假设这是从数据库查询出来的数据
  55.         List<String> nameList = new ArrayList<>(Arrays.asList("张三", "李四", "王五"));
  56.         // 把 nameList 进行切分
  57.         int j = 0, size = nameList.size(), batchSize = 10;
  58.         List<List<String>> list = new ArrayList<>();
  59.         while (j < size) {
  60.             List<String> batchList = nameList.stream().skip(j).limit(Math.min(j + batchSize, size) - j).collect(Collectors.toList());
  61.             list.add(batchList);
  62.             j += batchSize;
  63.         }
  64.         // 将 list 切分成小份数据,workerPool.execute(),异步处理数据
  65.         list.stream().parallel().forEach(paramList->{
  66.             workerPool.execute(()->asynchronousAuthorization2(paramList));
  67.         });
  68.     }
  69.     public void asynchronousAuthorization2(List<String> paramList) {
  70.         paramList.forEach(System.out::println);
  71.         System.out.println("异步执行 paramList 业务逻辑");
  72.     }
  73. //================================分隔符======================
  74.     /**
  75.      * demo3: futures.add() 实现异步逻辑。适用于有返回值的情况下
  76.      */
  77.     public void asyncDemo3() {
  78.         // 假设这是从数据库查询出来的数据
  79.         List<String> nameList = new ArrayList<>(Arrays.asList("张三", "李四", "王五"));
  80.         // 把 nameList 进行切分
  81.         int j = 0, size = nameList.size(), batchSize = 10;
  82.         List<List<String>> list = new ArrayList<>();
  83.         while (j < size) {
  84.             List<String> batchList = nameList.stream().skip(j).limit(Math.min(j + batchSize, size) - j).collect(Collectors.toList());
  85.             list.add(batchList);
  86.             j += batchSize;
  87.         }
  88.         List<CompletableFuture<String>> futures = new ArrayList<>();
  89.         // 将 list 切分成小份数据,futures.add(),异步处理数据,有返回值的情况下
  90.         list.forEach(paramList->{
  91.             // CompletableFuture.supplyAsync() 该任务会在一个新的线程中执行,并返回一个结果
  92.             // 通过futures.add(...)将这个异步任务添加到futures列表中。这样可以方便后续对多个异步任务进行管理和处理
  93.             futures.add(CompletableFuture.supplyAsync(() -> {
  94.                 asynchronousAuthorization3(paramList);
  95.                return "默认值";
  96.             }, workerPool));
  97.             // 防止太快,让它休眠一下
  98.             try {
  99.                 Thread.sleep(500);
  100.             } catch (InterruptedException e) {
  101.                 throw new RuntimeException(e);
  102.             }
  103.         });
  104.         //new CompletableFuture[0] 创建了一个初始长度为 0 的 CompletableFuture 数组,作为目标数组。然后,futures.toArray(new CompletableFuture[0]) 将 futures 列表中的元素复制到目标数组中,并返回结果数组。
  105.         CompletableFuture<String>[] futuresArray = futures.toArray(new CompletableFuture[0]);
  106.         // 通过将多个异步任务添加到futures列表中,我们可以使用CompletableFuture提供的方法来对这些异步任务进行组合、等待和处理。
  107.         // 例如使用CompletableFuture.allOf(...)等待所有任务完成,或者使用CompletableFuture.join()获取单个任务的结果等。
  108.         CompletableFuture.allOf(futures.toArray(futuresArray)).join();
  109.         // 获取每个任务的结果或处理异常
  110.         List<String> results = new ArrayList<>();
  111.         for (CompletableFuture<String> future :futuresArray) {
  112.             // 处理任务的异常
  113.             future.exceptionally(ex -> {
  114.                 System.out.println("Task encountered an exception: " + ex.getMessage());
  115.                 return "0"; // 返回默认值或者做其他补偿操作
  116.             });
  117.             // 获取任务结果
  118.             String result = future.join();
  119.             results.add(result);
  120.         }
  121.         // 所有任务已完成,可以进行下一步操作
  122.     }
  123.     public void asynchronousAuthorization3(List<String> paramList) {
  124.         paramList.forEach(System.out::println);
  125.         System.out.println("异步执行 paramList 业务逻辑");
  126.     }
  127. }
复制代码
出处:https://www.cnblogs.com/LoveBB/本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须在文章页面给出原文链接,否则保留追究法律责任的权利。
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

祗疼妳一个

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表