1. 死锁的第一次遇见:从"程序卡住"说起
我印象特别深,刚工作第一年,半夜两点被手机震醒,值班群里甩过来一个连接池耗尽的告警。我登录线上环境,拉了一下线程栈,一眼就看到了那段经典的循环等待:线程A持着锁1等锁2,线程B持着锁2等锁1。两个线程谁都不肯松手,像极了电梯门口两个人面对面站着,你往左我也往左,你往右我也往右,谁都想让对方先让路,结果整整卡了一个晚上。
那是我第一次真正意义上理解什么叫"操作系统对于死锁的理解"。说句实在话,大学课上背概念的时候,死锁的定义就那么几行字:"多个进程因竞争资源而造成的一种互相等待的现象"。背下来容易,但真到线上出了问题,你能不能在几秒之内判断出这是死锁、知道怎么取证、怎么恢复、怎么从根上避免,这才是理论和实战之间真正的鸿沟。
这篇文章我不想写成教科书式的概念罗列,而是想用我踩过的坑、查过的资料、调过的线上问题,把死锁这件事从头到尾梳理一遍。无论你是准备操作系统面试的学生,还是正在排查线上并发问题的工程师,这篇文章都会对你有用。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 死锁的四个必要条件:先搞清楚"为什么会卡住"
2.1 四个条件,缺一不可,但凑齐了就必然出事
教科书上把死锁产生的条件归纳成四条:互斥条件、持有并等待条件、不可剥夺条件、循环等待条件。这四条不是随便凑出来的,是几十年来操作系统领域处理了无数死锁案例之后总结出的最小公因数。你可以把死锁理解成一个"四脚凳子",四条腿全都踩实了凳子才能立住,缺一条腿凳子就塌了,死锁也就自然解开了。
先看互斥条件。它说的是一类资源同一时刻只能被一个进程使用,比如打印机、数据库表行锁、内存中的某个临界区。如果资源本身允许多个进程同时用,比如纯只读的文件,那就不会触发互斥这个前提。
再看持有并等待。这个概念特别容易被人忽略。它描述的是进程手里已经占着一个资源,同时又在等待另一个资源。很多人画死锁图的时候只盯着最后的循环,却忘了所有循环的前提,是每个参与者手里都先攥着东西不撒手。
接下来是不可剥夺条件。意思是一个进程占着的资源,不能被其他进程强行抢走,只能由占用的进程自己主动释放。这个条件在操作系统里往往是"默认设置",因为强行夺走一个进程正在用的资源,轻则数据不一致,重则直接导致系统崩溃。当然,也不是所有资源都不能剥夺,CPU的调度时间片就可以被剥夺,这也是为什么死锁通常跟锁资源、IO资源而不是CPU时间片绑定在一起。
最后是循环等待条件。它描述的是进程之间形成了一条循环等待链,A等B持有的资源,B等C持有的资源,C又等A持有的资源。注意,光有循环等待还不够,前面三个条件全都要满足才行。这也解释了为什么"两个线程互相等待锁"只是死锁的一种最简单形式,真实场景里的循环链往往绕了好几层。
2.2 一个简单的例子把四个条件串起来
假设有进程P1和P2,资源R1和R2。P1先申请到了R1,然后申请R2;P2先申请到了R2,然后申请R1。现在P1等着R2被释放,P2等着R1被释放,两边都不会主动退让,这就在资源分配图上画出了一个闭合的环。
互斥条件显然满足,R1和R2同一时刻只分配给一个进程;持有并等待条件也满足,P1握着R1等R2,P2握着R2等R1;不可剥夺条件同样满足,两个进程都不允许对方从自己手里抢资源;循环等待条件更是直接画在图上。这四个条件全部成立,死锁就板上钉钉了。
我在跟别人讲这个例子的时候,喜欢用"两个人各拿一把钥匙,还要对方的钥匙才能开下一扇门"来类比。门只能由对应的钥匙打开,钥匙只能由拿着的人主动给,两边又都在等对方先给——这就是最朴素也最典型的死锁模型。
3. 死锁的预防:与其事后救火,不如一开始就别给死锁机会
3.1 破坏四个条件里的哪一个最划算
死锁预防的思路是"从源头掐死":在系统设计阶段就让四个必要条件不能同时满足。思路很简单,但落到工程上,你会发现有些条件拆起来轻松,有些条件拆起来代价极大。
- 破坏互斥条件:让资源变成共享的。这个条件在现实系统里极难做到,因为锁、缓冲区、打印机这些东西本质就是独占的。你要是非把独占资源改成共享,就得自己做读写分离、数据副本,引入的一致性开销往往是灾难级的。
- 破坏持有并等待:要求进程一次性申请所有资源,申请不到就全部等待。这个策略好不好?在批处理场景下还行,但在交互式系统里,进程根本不知道自己中途会用到哪些资源,一上来就全占着,资源利用率会低到令人发指。
- 破坏不可剥夺条件:允许系统强行收回进程占用的资源。这对CPU这类可保存上下文、可恢复现场的设施还行,但你要是对一个正在写数据库记录的事务强行剥夺它持有的行锁,后果就是数据回滚、事务重建,开销大得吓人。
- 破坏循环等待条件:给所有资源编号,进程只能按编号递增的顺序申请资源。这条是工程上用得最多的,因为它不需要修改资源本身的语义,只需要约定申请顺序。比如一个系统里同时有锁A和锁B,所有线程都规定必须先拿锁A再拿锁B,就不会出现A等B、B等A的局面了。
3.2 资源排序法在真实代码里的样子
我在一个自己写的多线程缓存组件里实践过资源排序法。组件里有两把锁,一把管索引,一把管数据块。一开始我写代码的时候没注意,有的函数先拿索引锁再拿数据锁,有的函数反着来,结果压测的时候隔几分钟就卡一次。
后来我把锁顺序统一成"先索引锁,后数据锁",并且在代码注释里写明这个约定,还加了一个静态检查规则,谁要是写出了先数据后索引的代码,编译阶段就直接拦截。从那以后,这个组件的死锁问题就再没出现过。
这里有个细节值得说:资源排序法要求的是"全局一致"的顺序,不能你在A函数里把索引当低编号,在B函数里又把数据当低编号。所有代码路径必须遵守同一个次序约定。用大白话说,就是"所有人都靠右走",这比"大家互相让一让"可靠得多。
3.3 预防策略的代价:没有免费午餐
死锁预防的问题在于,它往往通过降低资源利用率来换取安全性。拿"一次性申请所有资源"来说,进程在运行早期就攥着一堆实际上还不需要的资源,这些资源就不能被其他进程使用,系统的并发能力就下来了。所以现代操作系统和中间件,很少单独靠预防一条路走到黑,而是预防、避免、检测三管齐下,根据不同场景选用不同策略。
4. 死锁的避免:银行家算法到底在算些什么
4.1 从银行贷款到资源分配
死锁避免和死锁预防的最大区别在于,避免策略允许进程按需申请资源,也不会强制资源排序,而是在每次分配资源之前,先做一个安全性检查:如果把这批资源分配出去,整个系统还存不存在一种调度顺序,能让所有进程都顺利结束。
这就是著名的银行家算法名字的由来。你去银行申请贷款,银行不会因为你一时缺钱就把钱给你,它要盘算自己的总资金、所有客户的借款上限和已借金额,看看给你批了这笔贷款之后,还能不能保证有足够的钱让所有客户都可能还清贷款。能,就批;不能,就卡住等着。
4.2 银行家算法的核心计算过程
算法里有几个核心数据结构:Available(每种资源的剩余可用数)、Max(每个进程对每种资源的最大需求)、Allocation(每个进程当前已经分到的资源数量)、Need(每个进程还需要的资源数量),其中Need等于Max减去Allocation。
每次进程提出资源请求Request,系统先判断Request是否不超过Need,再判断Request是否不超过Available。两者都满足,才进行试分配。试分配完成之后,系统进入安全性检查:找一个"它需要的所有资源都能被当前可用资源满足"的进程,假设它运行结束,回收它占用的全部资源,然后继续找下一个可满足的进程。如果能把所有进程都排进这个序列,系统就处于安全状态,这次分配可以放行;如果存在某个进程怎么都满足不了,系统就不安全,拒绝本次分配。
我用一个简单例子说明。假设系统里只剩下一个资源,进程A已经分了1个还差2个,进程B已经分了2个还差1个。如果系统把仅剩的1个资源分给A,A还差2个,系统没资源了,B也拿不到资源,两个进程全卡死——这就是不安全状态。但如果把仅剩的1个资源分给B,B就满足了,跑完释放3个资源,A也能继续跑——这就是安全状态。
4.3 银行家算法的工程价值与局限
银行家算法的理论意义非常大,它证明了"只要系统能证明某个状态是安全的,就一定能找到一种方式让所有进程跑到终点"。但落到工程上,它的局限性也很明显:进程必须事先申报自己最大需要多少资源,这在很多动态系统里根本不现实;而且每次分配都要做O(n^2)级别的安全性扫描,进程一多,性能问题就出来了。
所以在现代操作系统的实际调度器里,你很少看到完整版的银行家算法跑在每个资源分配口上,但它把"安全状态"这个概念留了下来,很多数据库、分布式系统的锁管理器在设计的时候,都会参考这种"先试算、再分配"的思想。
5. 死锁的检测与恢复:系统已经卡死了,怎么捞回来
5.1 为什么检测和恢复仍然不可替代
就算你做了预防也做了避免,死锁依然可能从你想不到的角度钻出来。比如第三方库的锁顺序你控制不了,比如某个操作跨了多个服务,每个服务的锁管理策略不同,你没法保证全局一致。这时候你就需要"死锁检测"和"死锁恢复"这两道最后的防线。
死锁检测的做法是,周期性检查系统当前的状态,构建一张"进程-资源等待图",如果图里出现了环,就说明有死锁。检测的触发方式有定时触发和事件驱动两种,定时触发简单但可能错过瞬间发生的死锁,事件驱动开销大但反应快,实践中可以折中:平时定时低频率检查,在资源申请失败率升高时临时加密检查频率。
5.2 检测到死锁之后,恢复手段怎么选
恢复手段分两派。一派是"进程终止":把环上的进程一刀切掉,简单粗暴,但代价是这些进程可能已经做了大量工作,全白费了。所以更稳妥的做法是"重拳命中要害",只终止那个占用资源最多、或者运行时间最短、或者优先级最低的进程,尽量把损失降到最小。
另一派是"资源抢占":从某些进程中强行剥夺资源,分给环上其他快要饿死的进程,然后让被剥夺的进程回滚到安全点再继续。这听起来很美好,但要求系统必须支持事务回滚、检查点这些机制。数据库系统就是这么干的,靠undo日志把事务状态回滚到之前某个提交点,把行锁释放掉,然后重放事务逻辑。
5.3 实际系统里最常见的三种"死锁恢复现场"手段
先说超时机制。这是最简单也最普遍的:拿锁的时候设置一个超时时间,超过了就放弃拿锁,释放自己已经持有的其他锁。这个机制在Java的ReentrantLock.tryLock(timeout)、MySQL的innodb_lock_wait_timeout里都有体现。它不是真正的死锁检测,但它能避免进程无限期傻等下去,给系统一个自我纠正的机会。
再说锁超时后的重试策略。很多人以为超时就完事了,其实不是。超时只是把当前操作放弃掉,如果你紧接着立刻重试同一个操作,很可能又踩进同一个死锁坑里。正确做法是加一个随机化的退避时间,再配合指数退避,让各个线程错开争抢的节奏。这种思路在解决数据库死锁时尤其重要,后面我单独讲。
最后是等待图检测。这是数据库和分布式系统里比较"硬核"的检测方式,系统维护一张所有锁和等待者的关系图,定时检测环。MySQL的SHOW ENGINE INNODB STATUS就能看到事务等待环的信息,但要注意:InnoDB默认是在检测到死锁之后主动回滚其中一个事务,而不是等死锁持续到超时,这个机制对业务方来说其实是透明的,你只需要捕获到死锁错误之后处理好重试逻辑就行。
6. 工程实战:从MySQL到线程池,那些真实世界里遇到过的死锁
6.1 MySQL死锁的排查全过程
MySQL是大家接触死锁概率最高的地方之一。我自己排查过不少线上死锁,最典型的场景是两条SQL以不同顺序更新同一组行。比如订单系统和库存系统同时对订单表和库存表操作,事务1先更新订单表再更新库存表,事务2先更新库存表再更新订单表,两个事务一旦碰上,就是标准的循环等待。
排查的第一步,是看死锁日志。用SHOW ENGINE INNODB STATUS,重点看LATEST DETECTED DEADLOCK这一段,里面会打印出两个事务分别持有哪把锁、在等哪把锁、执行的SQL是什么。InnoDB在检测到死锁时,会选择回滚undo log较少的事务,并把被回滚事务的信息记录在这一段里。
还有一张表也很关键,information_schema.INNODB_TRX,它能看到当前所有未结束的事务,包括事务状态、锁等待时间、执行的SQL。配合performance_schema.data_locks和data_lock_waits这两张表,可以实时查到锁的持有和等待关系。有一次线上排查,我就是靠这三张表定位到了一个"持有三把行锁、还在等第四把行锁"的长事务,它和一个高频查询形成了互等链。
6.2 慢查询和死锁为什么总是成对出现
热搜词里有个说法叫"慢查询 死锁 语句阻塞",这个组合在数据库领域极常见。慢查询会长时间占着行锁不释放,其他事务等这把锁,越等越慢,越慢锁等待时间越长,形成锁等待甚至死锁。很多时候你看到数据库一堆死锁报错,根因其实是某个慢SQL,SQL本身没写索引,全表扫了800万行,把一张表里的几十行都给锁了,其他更新全被堵死。
所以排查死锁的正确顺序,永远不要只盯着死锁本身。先看有没有慢查询,SHOW FULL PROCESSLIST看一下当前所有连接的执行时间和状态,再配合EXPLAIN分析慢SQL的执行计划,把慢SQL优化好,你会发现死锁数量会骤降。我印象里有一次死锁告警每小时几十条,优化掉一条没走索引的UPDATE之后,告警直接归零。
6.3 线程池、连接池与分布式锁里的死锁变体
除了数据库,线程池里也容易出死锁,而且表现形式更隐蔽。有个经典坑是:线程池的核心线程都在处理任务A,任务A里面又往同一个线程池里提交了任务B,并且要等任务B的结果。于是核心线程全去等B的结果了,B又排不上队,因为队列里的任务全是A。这种情况严格来说不叫死锁,因为没有循环抢占资源,但它造成的现象和死锁几乎一样——整个线程池卡死,CPU空闲但任务不推进。
解决这种问题,常见做法有几种:给线程池设最大线程数上限,同时把任务队列改成有界队列,满了之后触发拒绝策略;或者在业务上把"同步等待子任务"改成"异步回调",不要占着线程等结果。更彻底的办法是分两个线程池,一个管主任务,一个管子任务,从结构上掐死"互相占用对方资源"的可能。
连接池里的死锁也值得一说。比如一个系统同时依赖数据库连接池和HTTP连接池,当数据库连接池被占满时,某个线程手里攥着HTTP连接在等数据库连接;另一边其他线程攥着数据库连接在等HTTP连接。两个池上限一碰,系统就卡死了。这个问题特别容易在突发流量下暴露,平时并发低没事,流量一上来两个池同时撑满,循环等待就成立了。
分布式锁的场景就更有意思了。两个服务节点各自持了一把分布式锁,然后都要去调用一个共同的下游接口,而下游接口又需要获取对方持有的那两把锁——这种跨服务的死锁,单靠本地的锁超时机制根本兜不住,只能在设计接口协议时约定全局的加锁顺序,或者在分布式锁客户端里加上带超时的自动续期、自动释放机制。
7. 面试题视角:把死锁这块内容吃透需要掌握哪几个层次
7.1 死锁、活锁、饥饿:三兄弟最容易混
很多人在面试里被问到死锁,上来就背四个必要条件,这当然没错,但面试官真正想听的是你"分得清概念"。死锁是"互相等待、永不前进";活锁是"进程没阻塞,但一直在互相避让,导致谁也推进不了";饥饿是"一个进程永远得不到它需要的资源"。
举个例子说明活锁:两个人迎面走在独木桥上,甲往左让,乙也往左让,甲看到乙也往左了,赶紧往右让,乙也往右让,两人就这样一直让来让去,谁都没掉下桥,但也谁都过不去。这就是活锁,和死锁的差别在于,活锁中的进程状态是运行中的,资源也没有被永久占住。
区分这三个概念,对解决实际问题很重要。死锁靠检测和恢复来解决,活锁靠引入随机退避来打破同步,饥饿靠公平调度(比如Java的公平锁、操作系统的FIFS调度)来兜底。
7.2 从"会背"到"会用":一道经典面试题拆解
面试官最爱问的一道题是:写一段会发生死锁的Java代码。这题其实考察的是两件事:第一,你懂不懂四个必要条件;第二,你能不能把它们映射到代码的锁和资源上。
我来写一个极简版本:
java复制public class DeadLockDemo {
private static final Object lockA = new Object();
private static final Object lockB = new Object();
public static void main(String[] args) {
Thread t1 = new Thread(() -> {
synchronized (lockA) {
System.out.println("t1 持有 lockA");
try { Thread.sleep(100); } catch (InterruptedException e) {}
synchronized (lockB) {
System.out.println("t1 持有 lockB");
}
}
});
Thread t2 = new Thread(() -> {
synchronized (lockB) {
System.out.println("t2 持有 lockB");
try { Thread.sleep(100); } catch (InterruptedException e) {}
synchronized (lockA) {
System.out.println("t2 持有 lockA");
}
}
});
t1.start();
t2.start();
}
}
加上Thread.sleep(100)是为了制造一个窗口期,让两个线程分别拿到第一把锁之后,再尝试拿第二把锁,这样死锁的概率就接近100%。不加休眠,靠运气触发的概率没那么高,写demo的时候容易让面试官觉得你不够严谨。
这题答完之后,面试官通常会追问一句:怎么解决?这时候如果你能说出"两种思路——把锁顺序调成全局一致,或者用tryLock加超时并做退避重试",再配一个实际的例子,这道题基本就满分了。
7.3 操作系统教材里还有哪些隐藏的考点
操作系统教材里关于死锁的内容,除了银行家算法,还有一个常考的点是"资源分配图"的化简。给你一张进程和资源相互连接的有向图,问你这张图里有没有死锁。化简规则是:如果一个进程的所有请求都能被当前可用资源满足,就把这个进程的请求边删掉,再把它占用的资源释放掉,继续找下一个能化简的进程。最终如果所有进程都能被化简,则无死锁;如果化简后还有边剩着,就说明存在环,有死锁风险。
这个考点听起来偏理论,但做一遍能加深你对"安全状态"的理解。我面试候选人的时候,一般会问一个更实际的问题:如果一个线程发现自己等锁已经超过100毫秒了,它是应该立刻放弃锁,还是继续等?很多人的第一反应是立刻放弃——其实不一定,因为立刻放弃也有代价,可能你已经持有其他锁了,放弃意味着当前事务要回滚重来。所以更合理的是分段退避:第一次超时后重试,连续几次都失败,才真正回滚。这也是为什么像乐观锁、CAS、事务重试这类技术,在工程里的地位那么高。
8. 关于死锁,我自己这几年沉淀下来的几条经验
第一条经验,永远不要在持有锁的情况下调用不可控的外部方法。这里说的"不可控"包括:远程接口、过度复杂的回调、动态加载的插件代码。因为你不知道对方会不会反过来调用你持有的资源。如果非得调用,就加超时,并且明确自己手里的锁最多能等多长时间。
第二条经验,把锁的获取顺序画出来,贴在你代码文件的头部。我见过太多次因为"A函数拿锁顺序和B函数不一致"而埋下的死锁隐患,代码过了几周之后没人记得当初的顺序约定。把约定明明白白写在注释里,新人接手也不容易踩坑。
第三条经验,死锁的排查要学会看"等待图",而不是只看代码。有些死锁是跨模块、跨服务触发的,代码层面看不出任何问题,你盯着源码看一天也找不出循环等待。这时候要靠系统工具把运行时状态捞出来,把每个线程持有和等待的资源列成表格,一眼就能看出环来。Linux下用jstack看线程状态,MySQL里用SHOW ENGINE INNODB STATUS和performance_schema,这些都是基础操作,关键是你得养成"先用工具还原现场,再回源码定位"的习惯。
最后一条,死锁的预防和设计一定是"事前"的事。真到故障发生了,你能做的只有"恢复现场"和"降低损失",系统的可用性已经受损了。所以架构评审的时候,凡是涉及多把锁、多个资源申请的代码路径,多问自己一句:如果这里的锁顺序和别人不一样,会怎样?这个问题问多了,你会形成肌肉记忆,写出来的代码天然就会规避掉大多数死锁场景。
