Java 线程池技术深度解析与代码实战

为什么线程池总在深夜崩溃?

昨天我这项目又经历了一次爆破——路由推送服务突然崩溃,排查发现线程池队列堆积了几万任务直接把内存撑爆。早上起来看见人都麻了,线程池用不好,分分钟变系统炸弹。今天我们就来系统梳理线程池的实战技巧。


一、四大线程池类型:用错场景就是灾难

1. 单线程池:日志写入的守护者
// 保证日志顺序写入,避免多线程竞争  
ExecutorService single = Executors.newSingleThreadExecutor();  
single.execute(() -> System.out.println("日志1"));  
single.execute(() -> System.out.println("日志2"));  
// 输出顺序:日志1 → 日志2  

典型翻车场景错误用于高并发接口,请求堆积导致响应延迟飙升

2. 固定线程池:数据库连接池的好搭档
ExecutorService fixed = Executors.newFixedThreadPool(5);  
// 提交100个查询任务  
for(int i=0; i<100; i++){  fixed.execute(DB::query);  
}  

隐藏巨坑底层使用无界队列(LinkedBlockingQueue),突发流量直接OOM

3. 缓存线程池:秒杀活动的双刃剑
ExecutorService cached = Executors.newCachedThreadPool();  
// 秒杀瞬间涌入1万请求  
cached.execute(() -> handleSeckillRequest());

致命问题最大线程数=Integer.MAX_VALUE,线程爆炸耗尽CPU

4. 手动参数池:最优解决方案
int cores = Runtime.getRuntime().availableProcessors();  
ThreadPoolExecutor custom = new ThreadPoolExecutor(  2 * cores, // 核心线程数  4 * cores, // 最大线程数  60, TimeUnit.SECONDS,  new ArrayBlockingQueue<>(1000), // 关键!有界队列  new CustomThreadFactory(), // 命名线程  new LoggingPolicy() // 自定义拒绝策略  
);  

最佳实践

  • IO密集型:核心数 = 2 * CPU核数

  • CPU密集型:核心数 = CPU核数 + 1


二、拒绝策略:最后的救命稻草

当队列和线程池全满时,拒绝策略决定了系统生死

1. 四大内置策略对比
策略行为适用场景
AbortPolicy(默认)直接抛异常需要快速失败感知
CallerRunsPolicy提交线程自己执行防止任务丢失但可能阻塞主线程
DiscardPolicy静默丢弃可容忍数据丢失的监控场景
DiscardOldestPolicy丢弃队首任务时效性强的场景(如实时报价)
2. 自定义策略:日志+持久化
class SmartRejectPolicy implements RejectedExecutionHandler {  @Override  public void rejectedExecution(Runnable r, ThreadPoolExecutor e) {  // 1. 告警通知  alert("线程池爆炸!当前堆积:"+e.getQueue().size());  // 2. 持久化到Redis  redis.save("rejected_tasks", r);  // 3. 记录错误日志  log.error("任务被拒绝:"+r.toString());  }  
}  

真实案例电商大促时通过该策略挽回超10万笔订单推送


三、队列优化:性能翻倍的关键

1. Tomcat式线程优先策略
class TomcatQueue extends LinkedBlockingQueue<Runnable> {  @Override  public boolean offer(Runnable task) {  // 优先创建线程而非入队  if (executor.getPoolSize() < executor.getMaximumPoolSize()) {  return false; // 触发创建新线程  }  return super.offer(task);  }  
}  

效果对比

  • 传统策略:先填满队列再创建线程 → 高延迟

  • Tomcat策略:优先创建线程 → 延迟降低40%

2. 延时队列:订单超时关单神器
// 创建延时线程池  
ScheduledExecutorService delayPool = Executors.newScheduledThreadPool(2);  // 30分钟后执行关单任务  
delayPool.schedule(() -> {  if(order.isUnpaid()) order.cancel();  
}, 30, TimeUnit.MINUTES);  

典型场景

  • 订单30分钟未支付自动取消

  • 预约提醒提前15分钟推送

  • 缓存数据定时刷新


四、实战:推送系统线程池全配置

public class PushThreadPool {  // 智能参数配置  private static final int CORE_SIZE = 2 * Runtime.getRuntime().availableProcessors();  private static final int MAX_SIZE = 100;  private static final BlockingQueue<Runnable> QUEUE = new TomcatQueue(5000);  private static final ExecutorService POOL = new ThreadPoolExecutor(  CORE_SIZE, MAX_SIZE, 60, TimeUnit.SECONDS,  QUEUE,  new NamedThreadFactory("push-worker"),  new SmartRejectPolicy()  );  // 提交推送任务  public void push(User user, Message msg) {  POOL.execute(() -> {  // 重试机制(最多3次)  for (int i=0; i<3; i++) {  if (sendPush(user, msg)) break;  }  });  }  
}  

避坑要点

  1. 线程命名 → 故障时快速定位

  2. 有界队列 → 防止内存溢出

  3. 带重试机制 → 应对网络抖动


五、生产环境监控清单

想要线程池稳定运行,这些监控不能少:

// 实时获取线程池状态  
ThreadPoolExecutor pool = (ThreadPoolExecutor) executor;  // 核心指标  
pool.getActiveCount();    // 活动线程数  
pool.getQueue().size();   // 队列堆积数  
pool.getCompletedTaskCount(); // 已完成任务量  // 通过JMX动态调优  
pool.setCorePoolSize(20); // 流量高峰扩容  
pool.setMaximumPoolSize(50);  

告警阈值建议

  • 队列堆积 > 80% 容量 → 微信告警

  • 活动线程 > 最大线程数90% → 扩容

  • 拒绝任务数 > 0 → 立即排查


终极避坑指南

  1. 线程池不是银弹

    • 1000+任务队列?考虑改用消息队列(Kafka/RabbitMQ)

    • 长耗时任务?拆分到专用线程池避免阻塞

  2. 参数没有标准答案

    // 根据压测结果动态调整  
    if(isPeakTime()) {  pool.setCorePoolSize(50);  pool.setMaximumPoolSize(200);  
    }  
  3. 关闭姿势要优雅

    pool.shutdown(); // 温柔拒绝新任务  
    if(!pool.awaitTermination(60, SECONDS)){  pool.shutdownNow(); // 强制终止  
    } 

线程池就像汽车的发动机——参数调得好性能飙升,配错了分分钟爆缸。

记住泪训:永远不用无界队列,始终自定义拒绝策略,关键线程必须命名

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如若转载,请注明出处:http://www.pswp.cn/web/84976.shtml
繁体地址,请注明出处:http://hk.pswp.cn/web/84976.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Gradio可视化构建聊天机器人

Gradio是一个Python库&#xff0c;专门用于快速构建和部署机器学习模型的Web界面。它的名字来源于"Gradient"&#xff08;梯度&#xff09;&#xff0c;最初是为了让机器学习开发者能够快速展示他们的模型而设计的。 1. Gradio是什么&#xff1f; 核心概念 快速原…

selenium如何识别条形验证码,自动输入验证码

在自动化测试或网页爬取中&#xff0c;识别验证码是常见的难点。Selenium 本身不具备直接识别验证码的能力&#xff0c;但可以通过结合第三方工具、OCR 技术或人工介入等方式解决。以下是多种可行方案的详细实现思路及代码示例&#xff1a; 一、方案一&#xff1a;使用第三方验…

SAP将指定EXCEL工作SHEET的数据上传到内表

SAP将指定EXCEL工作SHEET的数据上传到内表 本文描述了一个SAP ABAP类方法upload_excel_2internaltab&#xff0c;用于将Excel文件数据上传到内部表。主要功能包括&#xff1a; 验证Excel行列范围有效性&#xff0c;若起始值大于结束值则抛出异常检查文件是否存在&#xff0c;支…

Spring Boot(九十三):Springboot 整合cfx实现webservice接口

1 服务端 最近项目改造,有一些老项目接口协议是webservice soap1.1,这就需要我们提供webservice服务接口。在Spring Boot中整合CFX(CXF框架)以实现Web服务客户端与服务端的功能,可以分为几个步骤。下面我将详细介绍如何在Spring Boot中设置一个Web服务端点,使用Apache CX…

Triton server的部署、构建、backend插件机制整体介绍

目录 0 引言 1 什么是Trition inference server 2 Trition inference server部署 2.1 下载server 2.2 下载模型 2.3 实验 3 triton inference server的构建 3.1 build时候需要哪些repo 3.2 构建过程做了什么 3.3 构建体验 4 阅读readme整体了解下backend机制 4.1 什…

Paimon在各大公司生产实践和优化总结

这是一篇汇总和个人学习文章&#xff0c;主要目的是总结一下Paimon在各大公司的落地做一个学习笔记。 本文的主要内容是关于Paimon在各大公司包括Vivo、Shopee、阿里、抖音等公司的落地实践&#xff0c;文末有文章来源地址&#xff0c;内容大概分为几个部分&#xff1a; 1.引…

简析自动驾驶产业链及其核心技术体系

一、自动驾驶产业链 自动驾驶产业链可以细分为感知层、决策层、执行层以及通信层等多个环节。上游部分主要包括提供环境感知所需的各种传感器&#xff08;如激光雷达、毫米波雷达、摄像头等&#xff09;、高精度地图服务、定位系统以及其他相关硬件设备&#xff1b;中游涵盖了…

第一节 布局与盒模型-Flex与Grid布局对比

一、核心特性对比​​ 1. ​​布局维度​​ ​​Flex 布局​​&#xff1a; ​​一维布局​​&#xff1a;仅支持单方向&#xff08;水平或垂直&#xff09;的排列&#xff0c;通过 flex-direction 控制主轴方向&#xff08;row 或 column&#xff09;。​​适用场景​​&…

国产USRP X410 PRO/PRO+(相参版):宽频段、大带宽、多通道的4×4高性能软件无线电设备

国产USRP X410 PRO/PRO(相参版)高性能软件无线电&#xff0c;作为USRP X410的进阶版本&#xff0c;X410 PRO/PRO核心均升级为Xilinx XCZU48DR FPGA芯片&#xff0c;显著提升了信号处理能力。平台延续了Xilinx Zynq UltraScale RFSoC的先进架构&#xff0c;集成四核ARM处理器及高…

Mac电脑-Office 2024 长期支持版(Excel、Word、PPT)

Office 2024 mac 是一款专为苹果电脑用户设计的高性能、高安全性的办公软件套装 集成了Word、Excel、PowerPoint、Outlook等经典应用&#xff0c;为用户提供了一站式的办公解决方案。 不仅继承了Office系列一贯的卓越性能&#xff0c;还在功能性和用户体验上进行了全面升级。…

vue2通过leaflet实现图片点位回显功能

需求&#xff1a;在图片上标点了&#xff0c;需要根据标记点在图片上进行回显功能&#xff0c;并且不会根据窗口大小导致标记点移位 1.效果 2.下载插件 用到的是leaflet插件&#xff1a;一个交互式地图 JavaScript 库&#xff0c;我下载是 "leaflet": "^1.9.4&…

OmniDocBench:一键评测PDF解析算法

绝大多数文档格式都能无损转换至PDF&#xff0c;解决了PDF解析&#xff0c;也就相当于解决了绝大多数文档的解析。所以&#xff0c;PDF解析算法是文档服务的基石技术。 PDF解析算法目前有两类技术路线 pipeline方法&#xff0c;整合layout analysis, OCR, formula/table reco…

[按键精灵安卓/ios脚本插件开发] 遍历获取LuaAuxLib函数库命令辅助工具

LuaAuxLib库 LuaAuxLib是按键精灵所有内置命令所在的库文件&#xff0c;有多种方式来获取LuaAuxLib库下的函数命令&#xff0c;例如反编译按键精灵手机端库文件等。这里咱们来介绍一种浅显易懂的方式来获取&#xff0c;直接for循环遍历获取函数名。 ScanLuaAuxLib 我们写一个自…

深度学习和计算机视觉的关系的理解

深度学习和计算机视觉的关系 深度学习作为人工智能的重要分支&#xff0c;近年来在计算机视觉领域取得了革命性突破。计算机视觉的核心任务包括图像分类、目标检测、语义分割等&#xff0c;而深度学习通过神经网络模型自动学习图像特征&#xff0c;极大提升了这些任务的准确率…

springboot开发项目 SLF4J+Logback日志框架集成【最终篇】

在这篇文章之前&#xff0c;实际对于 springboot和SLF4JLogback日志框架的使用 我已经分享过3篇关于springboot 日志的文章了。为什么会在写这篇最终篇&#xff0c;因为 前3篇分享的关于springBoot框架日志的配置方案&#xff0c; 发现了一个问题&#xff1a;只有项目启动的时候…

phpstudy无法启动apache,80端口被占用,完美解决

phpstudy无法启动apache&#xff0c;80端口被占用&#xff0c;完美解决 解决方法一(最推荐) 依次点击网站-管理-修改 将端口由80改为81&#xff0c;再点击确认后即可重新启动apache。 需要注意的是&#xff0c;网站的访问由127.0.0.1变为127.0.0.1:81。默认是80的端口所以可以不…

Loggers 配置解析(log4j.xml)

Loggers 配置解析 我们通过下面的例子来理解 log4j 的 Loggers 配置是如何决定日志输出规则的。 <Loggers><!-- 根Logger&#xff1a;全局配置 --><Root level"debug"><AppenderRef ref"consoleAppender" level"info"/&g…

Java 大视界 -- Java 大数据在智能政务舆情监测与引导中的情感分析与话题挖掘技术(272)

&#x1f496;亲爱的朋友们&#xff0c;热烈欢迎来到 青云交的博客&#xff01;能与诸位在此相逢&#xff0c;我倍感荣幸。在这飞速更迭的时代&#xff0c;我们都渴望一方心灵净土&#xff0c;而 我的博客 正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识&#xff0c;也…

[NocoDB] 在局域网中调整Float类型显示精度的部署经验

在单位局域网环境中,NocoDB有效地连接MySQL数据库和前端服务,做为中间件很方便。然而,在实际应用中,我们也会遇到一些较为隐藏的设置问题,比如此次经历的 float 显示精度不匹配问题。 问题环境 实际数据库:MySQL,表中有 float 类型的数据 原始数据来源:Excel表格 数据转…

Dockerfile 常见指令详解

Dockerfile 是一个文本文件&#xff0c;包含了一系列用于构建 Docker 镜像的指令。以下是 Dockerfile 中常见指令的详细解释&#xff1a; 基础指令 1. FROM 指定基础镜像&#xff0c;必须为第一条指令&#xff08;注释除外&#xff09;。 FROM ubuntu:20.04 FROM python:3.…