1. 一个“卡死”现场:CompletableFuture等不到结果的全过程还原
先别急着聊理论,我想从一个实际翻车现场说起。我在做一个数据同步工具时,用CompletableFuture把一批任务丢到线程池里异步执行,主线程调用allOf(...).join()等待所有任务返回。结果在某个业务量较大的客户环境里,程序直接卡死,日志停在一半,既没有异常,也不往下走。当时为了定位这个问题,耗时接近一个下午。
这个现象如果用一句话解释:CompletableFuture.join()在等待时,依赖线程池里有足够空闲线程去执行任务,而线程池恰好被占满,于是形成了互相等待的僵局。 很多资料会把CompletableFuture简单理解成“高级异步工具”,但它的调度机制和普通线程池一样,也会面临任务排队、池满、饥饿的问题。
完整还原一下现场环境:
- 任务总量:约5000个请求,每个请求需要调用远程接口并对返回结果做解析。
- 线程池配置:固定大小10个线程,队列容量为2000。
- 代码逻辑:使用
CompletableFuture.supplyAsync(() -> doRequest(), executor)包装每个请求,收集future后统一调用CompletableFuture.allOf(futures.toArray(new CompletableFuture[0])).join()。
外部表现是:程序运行到约3000个任务后,日志不再输出新记录,CPU占用率降低到接近空闲。从线程Dump看,主线程处于WAITING状态,等待CompletableFuture完成;而线程池中的10个工作线程,全部处于BLOCKED状态,卡在某个远程接口的超时等待上。
这个案例让我后来养成了一个习惯:凡是涉及多线程等待的入口代码,第一件事就是检查线程Dump,看阻塞点到底是在锁等待、IO等待还是任务队列积压。 线程Dump能直接告诉我们是“任务还没被处理”,还是“任务处理了但结果无法回传”,这两者的排查方向截然不同。
1.1 调整方案:从固定线程池到CallerRunsPolicy动态补偿
当时我采用的修复方案,不是简单地把线程池调大,因为调大后远程接口的响应依然慢,只是把问题爆发时间往后推迟。核心调整是把拒绝策略从默认的AbortPolicy(直接抛出RejectedExecutionException,导致大量的future永远无法完成,主线程一直join等待)改成了CallerRunsPolicy,让提交任务的线程在队列满时自己执行任务。
这样做的实际效果是:当线程池满且队列满时,由主线程帮助执行一部分任务,既保持任务不丢失,又不额外增加线程开销。改完后,整体耗时反而从原来的无法完成降到约6分钟,虽然不算快,但至少能稳定跑完。
后来我在其他项目里再次遇到类似问题时,还会同时考虑任务本身的超时设置。因为如果远程接口一直没有响应边界,线程池再大也无法解决根本问题。CompletableFuture加上orTimeout方法,给每个异步任务加一个兜底超时时间,是避免join()永久卡死的一道必要防线。
code复制CompletableFuture.supplyAsync(() -> doRequest(), executor)
.orTimeout(10, TimeUnit.SECONDS)
.exceptionally(ex -> {
log.warn("task timeout or failed: {}", ex.getMessage());
return null;
});
顺便说一句:orTimeout是Java 9才引入的API,如果项目还停留在Java 8,可以用get(timeout)手动控制等待上限,然后在catch块里做异常处理。不过要注意,Future.get()在超时后如果直接放弃,任务并不会自动中断,最好配合future.cancel(true)处理,避免线程仍在后台空转。
1.2 为什么CompletableFuture默认池会“饿死”任务
CompletableFuture没有显式传线程池时,会使用ForkJoinPool.commonPool()。这个公共池的大小由CPU核数决定,通常等于Runtime.getRuntime().availableProcessors() - 1。
但很多开发者习惯把所有阻塞远程IO操作都塞进默认池,结果就是公共池的线程全部被阻塞在IO等待中,后面的任务即使排队了也无人处理。而且commonPool不止服务于当前程序,同一个JVM里的不同业务模块都在共享它,任何一个使用方只要把任务全部填进来,其他模块就会跟着遭殃。
实际教训:只要任务中包含远程调用、文件读写、数据库操作这类可能阻塞的IO操作,永远不要用默认池,必须显式传入线程池。线程池的线程数也最好不要一次性开到几千,线程切换开销和内存占用都会成为新的性能瓶颈。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. Java for循环内创建线程:一个看似合理实则致命的写法
搜索引擎热搜词里有一条是“java for循环内的多线程”,这条热度一直很高,原因也很现实:很多人在业务开发中第一次接触多线程,就是从for循环里给每条数据起一个Thread开始写起的。
我真实遇到过这样的代码:
code复制for (Order order : orderList) {
new Thread(() -> processOrder(order)).start();
}
这段代码在小数据量(比如几十条订单)时跑起来一点问题没有,但在数据量到达几千上万条时问题就非常明显了:
- 无限制地创建线程,操作系统层面的线程切换成本急剧上升,内存占用也随之增长,最终可能OOM。
- 没有统一的异常处理机制,任何一个线程抛出未捕获异常时,日志里只能看到零散的堆栈,无法定位到是哪条数据出了问题。
- 每个线程的运行结果无法统一收集,主线程既不知道任务是否成功,也不知道哪些任务还需要重试。
2.1 正确的替代方案:任务拆分 + 分批提交 + 结果聚合
后来我在写订单批量重推功能时,换成了这种结构:
- 先把整个订单列表按批次切分,每个批次固定大小(比如200条)。
- 每个批次提交为一个Callable任务,提交给固定大小的线程池。
- 收集所有Future,统一等待,并逐一处理返回值和异常。
- 处理完的批次打印统计结果,区分成功、失败、重试三类。
这么做最大的好处在于:每个线程只负责一个有清晰边界的小任务,任务结果可追踪,线程数量可控,也不会因为个别异常导致整个批次中断。
2.2 循环变量传入线程的隐蔽Bug
补充一个for循环多线程里最常见的隐蔽Bug:循环变量被lambda表达式捕获时,如果变量不是effectively final,编译器会直接报错。但有些写法绕过了这个限制,比如使用一个长度为1的数组来存储循环索引:
code复制for (int i = 0; i < 100; i++) {
int[] idx = {i};
executor.submit(() -> doWork(idx[0]));
}
这样编译不报错,但运行结果大概率是随机乱序的,因为多个线程可能同时读写同一个idx数组的不同下标或相同下标,实际取到的值无法预期。
正确做法是每个循环迭代复制一个局部final变量,或者直接传给方法参数。这个坑我在很多代码评审里看到过,值得警惕。
3. 多线程执行SQL语句且要求顺序执行:一个典型的业务编排需求
热搜词里还有一条非常具体的场景:“java 多线程执行sql语句时,程序等sql执行完毕后,再执行下一条。”这说明提问者需要的是并行查询一批数据,但结果要按照SQL的顺序汇总输出,而不是一条SQL真正执行完才能发起下一条。
如果按字面理解“等SQL执行完再执行下一条”,那直接用for循环逐条同步执行就行了,根本用不上多线程。这类需求的本质其实是要“等所有SQL都返回,再按顺序处理结果”,这就是数据结构中“先提交、后顺序汇总”的典型场景。
我处理此类需求的做法如下:
3.1 方案一:用ExecutorService提交Future列表,再按原顺序get
假设有10条SQL,每条SQL查一个分表的数据,需要把结果合并后排序输出。代码结构为:
code复制List<Callable<List<Record>>> tasks = new ArrayList<>();
for (String sql : sqlList) {
tasks.add(() -> query(sql));
}
List<Future<List<Record>>> futures = executor.invokeAll(tasks);
// invokeAll等待所有任务完成
List<Record> merged = new ArrayList<>();
for (Future<List<Record>> future : futures) {
merged.addAll(future.get());
}
这里invokeAll的语义是阻塞等待所有任务结束,然后遍历futures时,顺序和提交顺序是一致的。相比每个future单独get(),invokeAll更简洁,不会因为某个任务提前完成而阻塞其他任务。
值得留意的是:invokeAll会阻塞等待所有任务完成,但这个“等待”并不会提前中断未完成任务,如果某个SQL执行时间过长,主线程会一直卡在那里。为了防患于未然,我通常会给invokeAll传一个超时时间版本:
code复制executor.invokeAll(tasks, 30, TimeUnit.SECONDS);
如果超时,未完成的任务会被强制cancel掉,然后我们再决定哪些SQL需要标记失败重查。
3.2 方案二:手动计数器 + CountDownLatch
有些历史项目没有使用ExecutorService,而是直接用最底层的Thread,配合CountDownLatch做线程等待。这种方式虽然写法比较笨拙,但在某些老项目里反而改动最小,兼容性最好。
code复制int sqlCount = sqlList.size();
CountDownLatch latch = new CountDownLatch(sqlCount);
ExecutorService executor = Executors.newFixedThreadPool(5);
for (String sql : sqlList) {
executor.submit(() -> {
try {
runQuery(sql);
} finally {
latch.countDown();
}
});
}
latch.await(30, TimeUnit.SECONDS);
注意两点:
countDown()必须放在finally块中,否则一旦SQL执行抛出异常,计数器永远不会归零,主线程会一直等待。- 每个SQL没有对应单独的Future来区分结果,所以如果想收集某个SQL的返回值,需要在
runQuery内部把结果写入一个线程安全的容器(如ConcurrentHashMap,用SQL下标做key),而不是ArrayList直接add。
3.3 多线程写库场景下的顺序边界问题
上面的场景都是读SQL。如果要并行执行多条写SQL,还要保证它们整体事务一致,情况会立刻复杂很多。如果10条写SQL分布在不同的分表或者不同的库里,各自独立提交事务,一个失败不能自动回滚其他成功事务。
我在处理“多线程批量处理订单更新”需求时,为了保证准确率,一般不直接把每条写SQL都丢进独立线程,而是把整个批次的范围作为粒度,按数据量维度拆成几个批次,每个批次用独立事务提交。单个批次内部采用同步执行,所有订单按主键先加锁再更新,确保同一条记录不会被多线程同时修改。
这么做会牺牲一部分并发性能,但换来的结果是订单状态绝不会因为线程竞争而出现错乱。对于电商、支付这类场景,数据正确性永远优先于吞吐量。
4. C++多线程与Python多线程:两个方向的坑与取舍
热搜词里C++多线程和Python多线程并列出现,正好可以对比着说,因为这两者虽然都叫多线程,但底层模型完全不同,踩坑的方向也差异很大。
4.1 C++多线程:资源竞争与生命周期管理
C++多线程最核心的问题不是“怎么创建线程”,而是“如何管理线程生命周期与共享数据”。
我早期用C++写一个音频处理工具时,犯过这样一个错误:主线程启动多个子线程处理音频帧,子线程中使用了主线程栈上的临时变量指针。结果因为主线程提前结束,临时对象被析构,子线程再访问这块地址时程序直接崩溃,而且崩溃现场极难定位——这是典型的“悬垂指针”问题。
后来我的规范是:
- 子线程创建前,一定要确保传入的数据对象生命周期足够长。如果不能确定,就使用
shared_ptr管理数据,让最后一个引用它的线程负责释放。 - 线程退出前必须
join()等待结束,明确使用detach()的场景必须有充分的理由。 - 临界区加锁时,尽量使用
std::lock_guard或者std::scoped_lock,而不是手动调用lock()和unlock()——异常发生时,手动解锁很容易漏执行,造成死锁。 - 如果多个线程需要共享同一个数据集合,优先考虑用无锁队列或者原子变量,实在不行再用互斥锁。
C++多线程的性能调优也很有意思。同一个任务,线程数设成和CPU核心数一致时性能最好;线程数过多时性能反而下降,因为线程切换本身就要消耗大量CPU时间。我在Qt多线程开发中也反复验证过这一点,QThread的工作线程数设置,不是越大越好,而要看实际运行机器上的核心数。
4.2 Python多线程:GIL锁下的IO密集型红利与计算密集型困境
Python多线程因为全局解释器锁的存在,一直存在比较大的争议。
GIL意味着同一时刻只有一个线程能执行Python字节码,所以对于纯计算任务,多线程不能提供真正的CPU并行加速,甚至因为线程切换带来额外开销,可能比单线程更慢。这一点导致很多人说“Python多线程没用”。
但这个结论不能一概而论。如果任务是IO密集型的,比如网络请求、文件读写、数据库查询,线程在等待IO返回时不会占着GIL不放,GIL会释放给其他线程。这种情况下多线程的并发收益非常明显。
我在写爬虫并发下载文件时对比过:
- 串行方案:下载100个文件耗时约3分钟。
- 多线程方案(20个线程):同样的任务耗时约15秒。
- multiprocessing多进程方案:耗时也在15秒左右,但资源占用明显更高,且进程间数据传递比线程间复杂。
所以说,Python选择多线程还是多进程,第一个判断标准不是“哪个技术更高级”,而是“任务到底是计算密集还是IO密集”。
再补充一个Python多线程的真实坑:线程之间的数据共享。如果只是简单的计数,很多人会随手用一个全局变量,然后在多个线程里执行global_count += 1。但Python的+=并不是原子操作,它分三步:读取旧值、加1、写回新值。多线程同时执行时,会丢失更新。
解决办法很简单:用threading.Lock包裹自增逻辑,或者直接用queue.Queue作为线程通信的通道,避免直接共享可变变量。我个人更喜欢后一种做法,因为队列天然就是线程安全的,既传递了数据,又避免了锁的竞争。
4.3 STM32多线程:嵌入式环境下的“轻量线程”与裸机误区
搜索引擎热词里出现了“stm32多线程”,这点比较特殊。STM32是一款单片机,本身没有现代操作系统意义上的线程管理概念。很多人说“STM32多线程”,其实是在说嵌入式实时操作系统中通过任务调度实现的多任务,比如FreeRTOS或RT-Thread。
在这些RTOS中,每个“线程”实际上是一个独立的任务栈,由操作系统内核按照优先级进行时间片调度。任务栈大小的设置需谨慎:栈开大了浪费宝贵的片上RAM,开小了程序运行中栈溢出,可能引起系统HardFault,而且故障点很难定位。
以FreeRTOS为例,每个任务都是通过xTaskCreate创建的,需要指定任务入口函数、任务名称、栈大小、优先级等参数。我调试过的一个项目里,某个任务只要一执行数组操作就进入HardFault,后来排查到是栈大小只留了128字节,而该任务内部的局部变量和函数调用需要的栈空间远超这个值,最终在任务入口处加了一个较大的栈后才稳定。
嵌入式领域的多线程问题,和PC端Java、C++的区别在于,传统的锁机制(如互斥量)在中断上下文里并不直接可用,需要特别处理临界区的关中断和优先级翻转问题。因此做STM32多线程时,不能直接把应用层的多线程经验搬过来,必须理解任务调度、优先级、临界区的底层机制。
5. 多线程面试中的高频考点与我看重的答题逻辑
热词中的“多线程面试题”也在搜索排行前列,这里也一并聊一聊。作为一个经常参与技术面试的人,我发现在线面试中常见的问题基本围绕线程池参数、锁机制、可见性和死锁这几个主题。
先说线程池的七个参数,这是最基础的问题,也是很多人的失分点。线程池的完整构造参数包括:核心线程数、最大线程数、空闲线程存活时间、存活时间单位、阻塞队列、线程工厂、拒绝策略。大多数面试者能说出参数名称,但被问到“核心线程数满了之后新任务去哪里?队列满了之后会怎样?线程数什么时候扩大到最大”时,不少人会回答得很混乱。
实际上,线程池处理任务分为三个阶段:
- 当前线程数小于核心线程数时,来一个新任务就新建一个线程。
- 核心线程数满了后,新任务进入阻塞队列等待。
- 队列也满了时,线程数扩大到最大线程数,如果最大线程数也满了,触发器会走到拒绝策略。
被问到“创建多少线程合适”时,如果只回答“CPU密集任务用CPU核数+1,IO密集任务用CPU核数*2”,虽然能用,但只能说明背了标准答案,还没理解背后的逻辑。
更好的回答框架是:任务分为CPU密集型和IO密集型两类。前者几乎不等待,一个核心同时只跑一个计算任务最有效率;后者大量时间在等待IO返回,这时可以用更多线程把等待期利用起来。线程数理论值的计算公式为:线程数 = CPU核心数 * (1 + 等待时间 / 计算时间)。以这个公式为基础,结合实际压测调整,比背固定倍数要靠谱得多。
关于锁机制,synchronized和ReentrantLock的对比几乎必考题。这两者的主要差异包括:
synchronized是Java内置关键字,由JVM底层实现,不需要手动释放锁;ReentrantLock用起来更灵活,支持公平锁、非公平锁切换,支持超时获取锁,也支持多条件队列。- 性能对比上,JDK 6对大粒度
synchronized做过大量优化(偏向锁、轻量级锁、自旋锁等),两者在大多数场景下性能差距已经微乎其微。 - 对于只需要简单互斥的场景,优先使用
synchronized,代码更简洁;对于需要尝试非阻塞获取锁、超时等待、多条件唤醒等高级功能时,用ReentrantLock更合适。
volatile和synchronized的区别也是常考题。volatile能保证可见性和有序性,但不能保证原子性,它的本质是不加锁的轻量级机制,适合“一写多读”的场景(比如状态标志位)。如果多个线程都同时修改变量值,还是要靠锁来解决。面试中只要答到这里基本能过关;如果还能补充一句“volatile在JDK 9之后就要求变量实际上是final或effectively final才更容易优化,但从语言层面并没有这个硬性要求”,面试官会认为这个人是真的写过代码的。
死锁问题也几乎是必考的。最常见的是两个线程分别持有锁A和锁B,同时又在等待对方手里的锁。有一次,我在一个项目中看到业务代码在一个synchronized方法内部调用另一个synchronized方法,由于这两个方法上的是同一个锁对象,jstack一看就会看到一个线程自我阻塞在同一个monitor上。这种死锁如果不是用工具查,纯靠眼睛看代码很容易忽略。
一个有效的排查方法是:当程序出现疑似死锁时,先执行jstack拿到线程Dump,搜索关键词“Found one Java-level deadlock”,然后查每个线程的locked和waiting to lock部分,就能直接画出循环等待路径。
6. 线程池调优与任务分类:我在生产环境实践出的参数设置心法
项目跑得多了之后,我发现自己对线程池参数的理解已经从“参考别人的最佳实践”进化到“根据自己任务的精确特性计算”。这里分享一个我在生产环境反复使用的小方法论。
6.1 先分任务是短任务还是长任务
- 短任务:比如查缓存、发内部消息、批量更新少量记录,线程池大小可以设为核心数附近。
- 长任务:比如拉取大文件、调用外部接口且响应链路长、批量导数据,线程池要扩大,同时队列容量要控制好,以免内存中积压过多任务。
6.2 给线程池命名才是好习惯
在生产排查问题时,一个没名字的线程池会让jstack输出变得非常痛苦——“pool-3-thread-1”完全看不出是哪个业务模块在跑。我在代码层面用ThreadFactory给线程命名,这样一旦出问题,直接从Dump中对应的线程名就能定位到具体模块。
code复制ThreadFactory namedThreadFactory = new ThreadFactory() {
private final AtomicInteger seq = new AtomicInteger(0);
@Override
public Thread newThread(Runnable r) {
Thread t = new Thread(r);
t.setName("order-sync-" + seq.getAndIncrement());
return t;
}
};
6.3 核心线程数不是越大越好
当线程数过多时,线程竞争CPU和不必要的上下文切换反而会增加。用虚拟代码说明问题:如果你的任务都是纯计算型,没有IO等待,4核机器开100个线程,每个线程分到的时间片变少,总的执行时间往往比不上4个线程的顺序执行。
如果还需要更精确的线程数,通常做法是先估算任务平均等待时间和执行时间,再套用公式。以我处理过的分页拉取第三方接口为例,每次请求等待时间约500ms,实际计算占约20ms,等待时间/计算时间约25倍,假设服务器8核,那么理论线程数:8 * (1 + 25) ≈ 208。考虑到服务器的其他负载,实际降到128后性能最佳。
线程池不是需要频繁重建的对象。我见过有的项目在循环体内部反复调用new ThreadPoolExecutor,每跑一轮就没用了,这种写法既浪费资源,又难管理。线程池应该是应用级单例,作为生命周期管理的一部分,在系统启动时创建,在系统关闭时统一shutdown。
6.4 线程池用完要记得优雅关闭
如果用Executors.newFixedThreadPool创建的线程池,里面所有线程默认都是非守护线程,如果不显式调用shutdown()方法,它们会导致JVM无法退出,特别是在做压测或单元测试时,整个进程一直hang住。
必须强调的是,很多线上故障定位时检查“线程数是否正常”,Java进程能创建的线程数受限于操作系统文件描述符上限。默认情况下Linux中每个进程的文件描述符限制通常是1024,但实际生产服务器需要调大到65535或更高。线程和进程的句柄本质上都属于文件描述符,线程数开得太多很容易碰到句柄上限,导致后续线程无法创建。
7. 各语言线程模型横向对比与我的选择建议
为了让读者在选型时更清楚,把常见语言的线程模型和应用场景做一次对比。
| 语言/框架 | 线程模型 | 典型适用场景 | 主要劣势 |
|---|---|---|---|
| Java | JVM线程映射到操作系统线程 | 高并发服务端、批量任务编排 | 线程创建成本相对高,需配合线程池使用 |
| C++ | std::thread调用操作系统原生线程 | 高性能计算、实时数据处理 | 生命周期和内存管理复杂度高 |
| Python | 系统线程,受GIL保护 | IO密集并发,如爬虫、文件处理 | 纯计算任务无法利用多核并行 |
| Qt | QThread在GUI线程外执行异步操作 | 桌面应用界面不卡顿 | 槽函数与线程对象的绑定需要规范 |
| FreeRTOS/STM32 | 轻量级任务栈+任务调度器 | 嵌入式实时控制 | 栈分配与优先级管理要考虑硬件资源 |
7.1 Java场景下的选择建议
Java并发编程上,优先使用ExecutorService或CompletableFuture做异步编排,避免手写Thread。如果任务之间有明确的依赖关系,CompletableFuture的thenApply、thenCombine系列方法写起来比Future链式组合清晰得多。
Java 8之后,线程池几乎都会使用ThreadPoolExecutor手动配置,而不是Executors类的快捷方法。因为newFixedThreadPool使用了无界队列,当任务量猛增时,队列里的任务数量不受控制,内存会被大量任务对象挤爆,而不是触发拒绝策略来提醒开发者。
7.2 C++场景下的选择建议
C++中,如果只是简单并发任务,std::async可能是最省事的选择。它返回一个std::future,还能选择启动策略std::launch::async,强制在新的线程上运行。但std::async背后的线程管理细节可能交给标准库实现处理,具体调度行为并不完全由开发者控制,在性能敏感场景中需要自己评估。
对于拥有独立生命周期、需要反复创建和销毁线程的场景,我更倾向于使用线程池库,例如ConcurrentQueue或BS::thread_pool(这是一个轻量级头文件库),而不是每次手动new std::thread。
7.3 Python场景下的选择建议
如果任务主要是IO密集型,直接使用concurrent.futures.ThreadPoolExecutor,可用上下文管理器自动管理线程池生命周期。如果任务是CPU密集型的,就别在threading里纠结GIL了,直接上multiprocessing或ProcessPoolExecutor。
这里需要特别警惕一个常见的错误:在Flask或Django等Web框架中,如果在一个请求处理器里使用threading创建线程后没有正确管理生命周期,非常容易导致线程泄漏。我见过一个项目,每个请求都会新建两个线程去查询外部服务,结果请求量一大,系统内存就被占满,最终所有请求都卡住。
更合理的做法是全程复用同一个线程池,比如把ThreadPoolExecutor作为一个应用级单例,每次请求只是往池里丢任务。这样并发请求再多,线程数也是可控的,不会因为大量临时线程的创建造成资源崩溃。
8. 多线程问题定位工具链:从线程Dump到性能剖析的实操小结
多线程的难点不只在于编码,排错和调试同样是其中的重要部分。在这部分,直接用我实际用过的工具来聊。
8.1 jstack与线程状态分析
Java服务端排查线程卡死问题时,jstack是第一个使用的工具。它可以输出整个JVM进程内所有线程的当前状态,包括RUNNABLE、WAITING、TIMED_WAITING、BLOCKED四种状态对应的详细堆栈。
我通常用以下技巧快速抓取线程状态分布:
code复制jstack <pid> | grep "java.lang.Thread.State" | sort | uniq -c
这样能快速看出当前JVM的线程状态总量。如果找到大量WAITING状态集中在同一个锁对象上,往往就是锁竞争或死锁的信号;如果大量RUNNABLE的线程都停在同一个方法上,那多半是这个方法的CPU消耗或资源竞争较大。
对于频繁出现的大对象GC造成的线程停顿问题,jstack看到的是线程处于RUNNABLE状态但长期不推进,真实的性能瓶颈可能不在代码逻辑上,而在GC停顿。这时候最好配合jstat或GC日志来做判断,而不是一直盯着堆栈。
8.2 Linux下的线程级排查
如果Java或者C++程序出现CPU占用异常,需要通过Linux的top命令按CPU排序,找出占用最高的线程ID,用printf转换线程ID为十六进制,再在线程Dump文件里查这个hex值对应的线程。
如果一个线程持续高CPU占用,说明它在进行大量无阻塞计算,可能存在忙等或死循环;如果线程长期处于D状态(不可中断睡眠),可能是在等待磁盘IO等系统资源,需要进一步排查文件系统或磁盘的读取情况。
8.3 VisualVM与Arthas的实践对比
VisualVM适合本地开发和测试环境的监控,可以看到线程时间线、内存占用、GC活动等图形化信息。但在生产环境,受限于安全策略和网络隔离,VisualVM接入并不方便。
Arthas是我在排查线级问题时使用的在线诊断工具。它可以挂在某个运行中的Java进程上,在线输出线程栈、方法调用耗时、入参出参等信息。解决多线程问题时,最常用的命令是thread,直接查看指定线程的完整堆栈,尤其是BLOCKED状态在等什么锁。另一个值得掌握的命令是thread -n 3,直接列出CPU占用最高的三个线程。
不少多线程问题,比如锁竞争、线程饥饿,用Arthas的在线线程分析能秒级定位,比从日志里一点点猜要高效得多。
9. 写在踩坑之后:可以把这几条当成默认规则
过程总结了非常多,但如果只留几句话,我会把这几条牢记在心,也是我在接手任何一个新的多线程项目时首先检查的默认规则:
第一,凡是会执行IO操作的线程池任务,先问一句“如果IO永远不返回怎么办?”所有远程调用、数据库连接、文件读写,必须设置超时,并且把超时当成正常分支来处理,让它能触发兜底补偿机制。
第二,凡是主线程需要等待子线程任务全部完成才能继续的代码,先检查等待逻辑是不是真的能被打断。能设置超时等待的地方,一定不要用无限等待来偷懒。一个不设超时上限的join()或await(),等同于把线上稳定性完全押在系统不会出错这个赌注上。
第三,凡是多个线程要共享可变数据,优先考虑是否能用消息传递(比如队列)的方式代替锁。能用不可变对象就传对象副本,能每个线程独立攒数据最后再合并,就不要用一个全局List让所有线程往里塞。
第四,线程池的名字一定不能省。给线程池里的线程起一个可识别的业务名,一旦线上出了问题,jstack输出可直接定位到问题模块,省去一半以上的排查时间。
这些规则源自一次次线上故障的总结教训,每次遵守它们时,心里都很有底。希望这篇总结能帮读者少走一些我走过的弯路。
