Lamport的《Paxos Made Simple》大概是分布式系统领域最著名的“名不副实”的论文——标题说自己简单,但几乎每个初读它的人都会经历“看的时候都懂,合上论文写代码就崩”的阶段。我自己第一次读这篇论文时也不例外,总觉得那些角色和阶段都能背下来了,可一旦动手模拟几个Acceptor的状态变化,就发现理解里全是漏洞。后来花了很长时间对着原文逐条推演、给每个细节做注解,又在工程里真正写过类似协议,才慢慢把这条逻辑链理顺。
这篇博文就是我从头整理的论文注解笔记,不会做泛泛的科普,也不会把Multi-Paxos、Raft等一堆概念混在一起讲,而是老老实实把单轮Paxos讲透:它解决什么问题、两个阶段到底在干什么、为什么这样设计就能保证安全、工程上又该怎么看待它的活性。适合正在啃论文、想搞清楚证明思路的读者,也适合已经看过不少Paxos技术文章、想真正落地的工程师。先把话说在前面:看完这篇文章不代表你能凭空实现一个生产级Paxos库,但你至少能理解为什么论文要这样设计,以及那些网上吵来吵去的误区到底错在哪。
1. 先看清楚问题:Paxos到底管的是哪一段
1.1 从“复制状态机”反推共识的价值
很多文章一上来就讲Prepare和Accept,但如果你不清楚协议是用来干什么的,读再多细节都容易记混。Paxos最常见的应用场景是复制状态机(Replicated State Machine)。
想象你有一组服务器节点,它们需要对外提供看起来像同一台机器的服务。做法是让每个节点都维护一份日志,日志里按顺序记录一系列操作指令,然后每个节点从第一条日志开始按顺序执行。只要两个节点执行的指令序列完全一致,最终状态就会一致。所以问题的核心就变成:如何保证多个节点在同一位置写入同一条指令,而不是各自为政。
这个“每个日志位置选哪一条指令”的问题,其实就是共识问题的一个具体化:一组节点需要对某个值达成一致。Paxos解决的就是这种“单值共识”,它从日志里抽象出一个值,这个值可能是“指令”“配置项”“谁当主节点”等任何需要全体一致认可的东西。
理解这一点很重要。Paxos不是数据库,不是复制工具,它是一个共识内核。你在系统里用Paxos,本质上是让每个节点对某一串值快速达成一致,再辅助其他机制去应用和执行这些值。很多人在读论文时觉得抽象,是因为Lamport把使用场景完全剥离了,只留下最纯粹的“选出一个值”的结构。
1.2 异步网络模型与两个重要边界
Paxos的数学背景建立在一个异步分布式系统模型上:消息可能延迟、丢失、乱序,节点可能崩溃重启,但消息不会被伪造或篡改——也就是所谓的非拜占庭模型。不同节点之间没有共享时钟,也没有办法通过超时机制来判断全局是否真的故障。这让问题的难度一下子就上来了。
在继续往下之前,必须了解一个著名的负面结论:FLP不可能性定理指出,在一个完全异步、只要有一个节点可能崩溃的系统中,不存在一个确定性算法能同时保证安全性、活性和可终止性。Paxos作为一个实际可用的共识协议,也必须面对这个约束。Lamport在论文里选择了牺牲“活性”:协议可以保证所有被选出的值都满足安全性质——不会出现两个不同值同时被多数派接受,不会出现已选定的值后面被推翻——但它不能保证活锁一定不会发生,也不能保证系统在所有情况下都能最终达成共识。
所以你在阅读Paxos的理论证明时,你会看到论文反复强调安全性质。而“一定能继续推进”这种活性问题,Lamport只在最后花很小篇幅讨论了一下,建议系统选出一个主Proposer来推进。这个取舍不是Lamport偷懒,而是理论框架下能拿到的必然结果。工程里怎么做活性和故障恢复,那是在Paxos这个“安全内核”之上再盖一层楼的事。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 分清角色:Proposer、Acceptor、Learner到底谁在干嘛
2.1 三种职责不是三种服务器
Paxos论文里定义了三种角色:Proposer(提议者)、Acceptor(接受者)、Learner(学习者)。我第一次读的时候以为这对应系统里的三种进程,后来才明白,它们其实是三种职责,一个节点完全可以同时扮演多个角色。
用生活里的比喻来理解:Proposer负责提出新方案,类似开会时的提案人;Acceptor负责投票和表决,类似会议里的审批人;Learner不需要参与投票,只关心最终谁获胜,类似看会议纪要的人。
在工程实现里最常见的做法是:一个节点集群同时扮演所有角色。每个节点自己既可以是某个提案的发起者,也要参与其他提案的表决,还要能把最终决定的结果学习下来并应用到自己状态机上。这样的角色兼任在理论上是完全允许的,Lamport对此也很明确,协议的正确性不依赖某个节点只能扮演一种角色。
2.2 Acceptor的承诺是理解协议的钥匙
要理解Paxos,最重要的是理解Acceptor身上那套看似简单的规则。Acceptor本质上是一个状态机,它需要维护的信息主要有两类:它曾经响应过的最大Prepare编号,以及它已经接受过的最高编号提案及其值。
Acceptor收到Prepare请求时,如果请求的编号大于它曾经响应过的任何Prepare编号,它就需要做出一个承诺:今后不再接受任何编号小于这个编号的提案。同时它要把自己接受过的最高编号提案作为响应返回给Proposer。
这个“承诺”听起来简单,但它其实是Paxos整个安全性的基石。你可以想象一个Acceptor在窗口前发号:看到编号大于历史最大编号的申请单,我就把小于它的一切旧申请都视为过期。如果不记录这个承诺,或者重启后丢失了这段历史,Acceptor会像失忆的人一样对旧编号重新放行,安全保证立刻崩塌。
这也是为什么很多Paxos实现在写入状态时都强调持久化。安全性分析建立在Acceptor能完美记住自己承诺的前提上,你在代码里如果不落盘,进程一重启一切就回到从前,多数派里只要有一个这样失忆的节点,就可能造成两个不同值都被认为选出了。
3. 把两阶段过程拆开看:Prepare和Accept在玩什么游戏
3.1 Phase 1:Prepare为什么要“翻旧账”
第一阶段做的事情可以概括为:Proposer选择一个全局唯一且递增的编号n,然后向一组Acceptor发送Prepare(n)请求。注意这里的“一组”不一定是全体,只要准备联系的是一个多数派即可。
收到Prepare(n)的Acceptor,如果n大于它已经响应过的最大Prepare编号,就返回一个Promise承诺,内容包括两部分:第一,永远不再接受编号小于n的提案;第二,把它当前已经接受过的、编号最大的那一个提案(如果存在的话)返回给Proposer。如果这个Acceptor从未接受过任何提案,就返回空。
很多人在这一步会有一个疑问:既然只是后续承诺,为什么还要让Acceptor返回历史已接受值?这个设计是整个协议的精髓:Prepare请求不只是设立一个“门槛”,它还在向后探测历史。
举个例子:如果上一次某个值v已经被一个多数派接受,而新的Proposer完全不知道,直接自由地提出了一个新值w,那么w就可能覆盖v吗?若只看编号规则,如果w的编号更高,Acceptor是可以合法接受它的,可这样就会导致两个不同值都被接受,破坏共识唯一性。为了避免这一点,Paxos强制Proposer在提出新提案之前,必须先从响应里调查出“历史中编号最大的已接受值是哪个”,如果历史已经存在某个值,新的提案只能继承这个值,不允许自由发挥。
lamport原文在Phase 2a的“value”选择描述已经直接写明了这个逻辑:响应中最高编号的提案如果有值,就用这个值;如果没有,才允许Proposer自由选择值。所以要理解Paxos为什么安全,只要抓住“新提案要么继承旧值,要么在确认没有历史旧值时才能自由选值”这条线就够了。
3.2 Phase 2:Accept与Acceptor的最终判断
如果Proposer已经从多数派那里拿到了Promise,它就可以进入第二阶段。它先统计收集到的响应,从中找出编号最大的那个已接受提案,如果存在就使用其值作为提案的值v,如果没有已接受值,才允许自己随意制定v。然后Proposer向这些Acceptor发送Accept(n, v),要求它们接受这个提案。
这里比较绕的是Acceptor收到Accept请求时的接受条件。论文里的说法是:如果Acceptor还没有对任何编号大于n的Prepare请求做出过承诺,那么它就应该接受这个编号为n的提案;否则就忽略或拒绝它。
我再用大白话翻译一遍:Acceptor不是看到编号比自己接受过的东西小就拒绝,而是看自己有没有答应过更高编号的Prepare请求。假如一个Acceptor对编号5的Prepare做过Promise,之后它收到了编号3的Accept请求,即使编号3大于它以前接受过的任何提案编号,也应拒绝,因为它的承诺已经生效了。反过来,如果它之前对编号5的Prepare给出过Promise,之后收到编号5的Accept请求,这时条件里的“大于5”不成立,就可以接受编号5。这个微妙的边界条件,非常容易被误解,后面我会专门列一个误区清单。
3.3 为什么一定是两阶段,不能一步投票直接决定
如果我们站在设计者的角度反向追问,为什么不能简化成“Proposer提出编号和值,Acceptor直接多数派投票就够了”?答案是:没有第一阶段去“锁存”必要的承诺和历史信息,第二阶段就可能在不知情的情况下推翻一个已经达成的共识。
具体来说,假设没有Prepare阶段,两个Proposer就可能同时发起投票,一个提出编号1的提案A,另一个提出编号2的提案B。如果A先联络了一个多数派,B后来也联络了一个多数派,而两个多数派之间存在交集,那么这个交集节点到底接受过哪个提案呢?如果它们的接受顺序不一致,就可能出现编号1在某个多数集合中被接受,编号2在另一个多数集合中被接受,而两个值不一样的情况。协调者作为Learner去收集“哪个值已被多数接受”时,会看到两份互相对不上的记录。
Prepare阶段的第一重作用是定门槛:让旧编号提案不再可能被新的Acceptor承诺悄悄接受,避免后续提案覆盖已经形成的共识;Prepare阶段的第二重作用是翻旧账:让新提案必须继承旧值。有了这两层,后面的Accept阶段才有明确规则可依。所以两个阶段不是Lamport为了凑论文篇幅硬加出来的,而是安全需求逼出来的结构。
4. 安全性质主线注解:为什么这样做就一定不会选错
4.1 Lamport的P1/P2思路到底在说什么
Lamport论文里的证明看起来有点抽象,主线是一组层层递进的性质。P1说的是一个Acceptor必须接受它收到的第一个提案,这保证了“有人至少会接受点什么”。P2是更强的约束:如果一个值为v的提案已经被选定,那任何一个编号更高的Proposer发出的提案也必须带v。
P2本身是一个安全需求,但它没有被直接作为算法规则要求,而是通过一个叫P2c的条件来构造实现。P2c说的是:若提案编号n携带值v并被发出,那么一定存在一个多数派集合S,使得要么S里的Acceptor都没有接受过任何编号小于n的提案,要么S中接受过的编号小于n的最高编号提案的值就是v。
P2c更接近一个可执行的规则:Proposer发出的提案值不是由它自己随便拍的,而是由一批Acceptor的历史状态决定的。只要每一条编号为n的提案都被P2c约束住,就能推出所有更高编号的提案都有相同值。这个链条是Lamport证明的核心。
读论文时我一开始觉得这些性质来回嵌套很折磨人,后来才发现,它的证明结构和“归纳法”很像。假设编号n的提案值是v且被选择了,那么任何后面更高编号的提案,如果要被选择,它的发出方必须先从某个多数派那里听到历史,而多数派一定和那个选定v的多数派有交集。拿到历史后,新提案就只能继承最高编号值,而这个最高编号值因为归纳法已经被证明一定是v。环环相扣,就这样把“只有唯一一个值会被选择”给焊死了。
4.2 交叠多数派:一场严谨的“少数服从多数”接力
两个多数集一定相交,这是所有基于法定人数的共识算法安全性的基石,但也正因为这个性质过于基础,很多人读论文时会忽略它在证明里被反复使用的分量。
我来展示一种更贴近直觉的理解方式:假设Paxos已经成功选择了一个值,那它一定是在某个编号下被多数派接受过的。现在另一个Proposer带着更大的编号也想闯关,它在第一阶段联系了一批Acceptor。因为第一阶段联系的是多数派,两个多数派必然存在交集节点,这个交集节点会把自己已接受的最高编号提案汇报给新Proposer。
这个“必然汇报历史”的环节,就是多数派交叠真正发力的地方:新Proposer没有办法绕过旧历史的痕迹。它要么根据汇报继承了v,要么因为某个历史节点汇报的内容指向v。只要协议规定它只能沿用最高编号已接受值,那新提案就是v的延续,而不是新选出一个w。
把证明链说得再具体一点,如果旧值v已经由一个多数派M达成,这个多数派里每个节点都已经接受过v(至少接受过编号不够高的旧提案,且所有这些的历史值都可归纳为v)。新Proposer联系多数派N,N与M的交集节点会在Promise中把其本地最高编号已接受值带回给新Proposer,由于这个值所在编号小于当前新编号且值只能回溯到v,新Proposer必然不会绕开v去自选w。这是我的注解版直觉推导,严格证明建议按论文里的P2c归纳来读,但思想上就是这样一回事。
4.3 持久化与“活着但失忆”的节点是安全大敌
在数学抽象的协议模型里,节点状态是永远延续的。可在现实中,进程是会崩溃的。Paxos处理崩溃的方式是让节点能够恢复并重新参与协议,它并没有假设节点崩溃后永远不回来。
问题就出在“恢复”这件事上。如果一个Acceptor在崩溃前收到Prepare(10)并做出了“不再接受小于10的提案”的承诺,崩溃重启后却丢失了这个记录,那它下次看到Prepare(15)时当然没问题,但如果这时来个编号8的Accept请求,它由于忘了自己的承诺,可能会错误地接受。如果这个节点恰好处在两个多数派的交集里,它这一失忆就可能让一个本应失效的旧提案重新复活。
所以我在工程上一直强调:Acceptor的持久化不能只存“接受了哪些提案”,还必须存“对外承诺过的最大Prepare编号”,两者缺一不可。论文在证明正确性时使用了“Acceptor记住了自己的承诺”这个隐藏假设,这不是废话,而是工程实现里要求最高的一条铁律。
5. 读论文最容易读偏的几个高频误区
5.1 误区一:把Accept条件和“自己接受过的编号”挂钩
这是我见过讨论最多、也是最容易误导初学者的一点。很多人在复述算法时会说:“Acceptor会拒绝所有编号小于它已经接受过的提案编号的Accept请求。”这话听起来合理,但和Lamport的原文有微妙区别。
Lamport的条件是:如果Acceptor还对某个编号更大的Prepare请求发过Promise,Acceptor就拒绝当前Accept;如果它并没有做过更大的承诺,即使当前Accept编号小于自己接受过的某提案编号,也有接受的可能。“自己接受了什么”不是拒绝的原因,实际原因是“自己答应了哪个更高的门槛”。
想用一个场景很直观地暴露差异:Acceptor先接受了编号为10的提案,纪录里accepted编号是10。这时过来一个编号为5的Accept请求,如果按“已接受编号”判断必须拒绝。但如果Acceptor在此之前没有对任何大于5的Prepare做过Promise,那编号5的Accept在算法上没有任何被拒绝的理由。Paxos设计的重点从来不是禁止接受编号更小的提案,而是保证任何被多数接受过的历史提案不能被更高的编号强行改掉。
5.2 误区二:认为Promise的响应里返回的“最高编号已接受值”在整个集群中具备全局性
另一个常见的错误是把Proposer在第1阶段得到的回应理解成一个“全局快照”或“全集群共识”。实际上Proposer在第1阶段只联系了一组Acceptor,不是全世界。它收到的“最高编号已接受提案”只来自它这次实际联系到的某个多数派,不代表所有Acceptor的整体视图。
这也正是多数派交叠的意义所在:即使每次Proposer联系的多数派集合都不同,任意两次的联系结果也一定在某个Acceptor上产生交集,从而形成信息传递的连续线索。如果系统要求Proposer必须联系全体Acceptor才能获得历史,那一个节点掉线就会让系统永久停止,Paxos的多数派设计就是为了在容忍故障的同时不丢失历史衔接。
5.3 误区三:把“编号”和“时间”混为一谈
Paxos里的编号只用于定义序,它不依赖任何物理时钟。虽然很多PPT和文章会用时间轴来画出两阶段流程图,但协议本身对“消息什么时刻到达、处理花费多久”没有任何假设。编号可以直接来自Proposer节点唯一ID的一段区间,比如节点A只使用1、10001、20001这样的编号,节点B使用2、10002、20002等编号,保证递增和唯一就可以满足协议要求。物理时间和超时机制只影响系统多久能继续推进,不影响协议的Safety证明。理解这点对消解“网络延迟会导致Paxos不安全吗”这类疑虑很有帮助。
5.4 一张速查表:高频误区对照
| 误区说法 | 论文的正确说法 | 如果按错误理解实现会怎样 |
|---|---|---|
| Acceptor拒绝所有编号小于自己已接受编号的提案 | 只要没有对更大编号做过Prepare承诺,就能接受更小编号的Accept | 可能使某些合法提案无法进入接受流程,但更危险的是在承诺恢复时定位错误 |
| Prepare响应返回的是Acceptor见过的全部状态 | 只返回响应方自身已接受的最高编号提案 | Proposer会误以为全局已经没有历史值,自由选值,可能覆盖已达成共识 |
| 编号落后就完全不能参与之后协商 | Acceptor在后续只要收到更高编号Prepare并给出新承诺,就可以安全接受新提案 | 人为限制参与,轻微影响活性,不影响Safety但没必要 |
| 消息到达顺序决定正确性 | 协议依靠编号而非到达顺序保证正确性 | 用消息序列或时间戳判断,在乱序网络下得出错误结论 |
这个表格不是严谨协议设计的全部,但它能帮你在阅读别人讲解Paxos时快速定位对方是否真的理解了原论文。我身边的同事有时候争论了半天,最后发现分歧就是从哪一条微小的条件理解偏差引起的。
6. 工程化视角:单轮Paxos到落地之间还缺了什么
6.1 Multi-Paxos 和“跳过Prepare”的优化
严格意义的Paxos每一轮只能决定一个值。要复制一条日志,就需要在很多个日志槽位上连续运行Paxos。如果为每个槽位都完整执行两轮协议,消息量会变得非常大,于是就有了Multi-Paxos这种实践性的组合技巧。
Multi-Paxos论文里没有展开讲,但业界通常的做法是先选一个Distinguished Proposer(主节点),主节点任期开始时先运行一次完整的Prepare流程来“占位”,后续所有槽位提交不需要重新Prepare,直接把编号递增后发送Accept请求即可。为什么可以这样做?因为Prepare阶段的本质是保证没有旧值被遗忘、新值不乱选;一旦一个主节点通过Prepare确立了自己是目前最高编号的提案者,并且获得了所有历史已接受值的记录,那在后面连续提交日志时,它就有了足够的“历史背景”继承和其他Proposer不会先活跃的安全前提。
这个优化理解起来容易,实现起来很难。中间涉及日志空洞:某些槽位可能在主切换时没被填充,有些Acceptor已经接受了某一槽位的更高编号提案,而这一事实在下一任主节点上任时又需要被系统发现和补齐。因此许多生产系统实现的所谓“Multi-Paxos”远没有论文里单Paxos那么优雅,它会引入类似Raft里日志匹配、主副本回放等一堆辅助逻辑。
6.2 用代码把Acceptor状态机先跑起来
我建议任何想真正理解Paxos的人都先写个最小模拟程序,不需要网络通信,只需要模拟多个Acceptor节点和一个Proposer的交互时序即可。为了不浪费篇幅,我给出一个简化的Python伪代码骨架,帮你看到状态变量与判断条件是如何一一对应的。
python复制class Acceptor:
def __init__(self):
# 记录响应过的最大 prepare 编号
self.max_promise = 0
# 记录已接受的最大提案编号与值
self.accepted_n = 0
self.accepted_v = None
def on_prepare(self, n):
if n > self.max_promise:
self.max_promise = n
# 返回一个Promise,把本地最高已接受编号与值带回去
return (True, self.accepted_n, self.accepted_v)
else:
return (False, None, None)
def on_accept(self, n, v):
if n >= self.max_promise:
self.accepted_n = n
self.accepted_v = v
return True
else:
return False
这段代码里需要注意两处细节:第一,on_prepare中更新max_promise的时机必须和“返回Promise”同时发生,不能晚;第二,on_accept判断的是n是否大于等于max_promise,而不是n是否大于accepted_n。很多初学实现的bug都出现在这两个边界上。
6.3 模拟实验怎么设计才有意义
写完代码后,别急着去跑复杂场景,先手动构造一组你自己能推演的序列。比如5个Acceptor,先让前三个Acceptor通过一次低编号的Accept流程接受了某个v,再去检查后续Proposer是否能通过一套合法的更高编号流程成功让w当选。理论答案是不可能;如果在你的模型里发生了,那很可能是哪条条件写错了。
还有一个有趣的实验是杀掉一个Acceptor并清空它的状态后重启,看看它是否会对旧编号提议放开应允。用小例子把这条破坏路径走通,你就能直观感知到持久化为什么会
