Multi-hop Byzantine Reliable Broadcast with Honest Dealer Made Practical
我们重新拜占庭宽容可靠广播诚实经销商算法在多跳网络。为了容忍任意分布在网络上的拜占庭故障节点,如果消息未被认证(例如,数字签名不可用),则先前的解决方案需要通过网络发送阶乘数量的消息。我们提出的修改,保留原始未经认证的协议的安全性和活性属性,同时大大降低了他们观察到的消息复杂性时,模拟几类图拓扑结构,可能开放给他们的就业。
2019-09-12 cs.DC
Maximum Metric Spanning Tree made Byzantine Tolerant
自稳定是一种通用的容错方法,因为它允许分布式系统从任意破坏系统中所有存储器内容的任何瞬时故障中恢复。拜占庭容忍是分布式系统的一个有吸引力的特性,它允许处理任意恶意行为。本文重点研究的系统是自稳定和拜占庭宽容。我们认为,在这种情况下,构建一个最大度量树的著名问题。已知将这两个性质结合会导致许多不可能的结果。在本文中,我们提供了关于在存在瞬时和(永久)拜占庭故障的情况下构建最大度量树的前两个不可能性结果。然后,我们提供了一个新的自稳定协议,提供了任意数量的拜占庭故障的最佳遏制。
2011-04-28 cs.DC
Moderately Complex Paxos Made Simple: High-Level Executable Specification of Distributed Algorithms
本文介绍了一种高级语言和方法的应用,在开发更简单的规范更复杂的变种的Paxos算法的分布式共识。这些规范适用于具有抢占、复制状态机和重新配置的Multi-Paxos,并通过状态减少和故障检测进行了优化。语言是DistAlgo。关键是使用非确定性等待和消息历史查询,在高级别上精确地表达复杂的控制流和同步条件。我们获得了完整的可执行规范,几乎完全是声明性的-除了发送和接收的消息集之外,只更新协议轮的一个数字。我们展示了以下结果:1.分布式算法的英文和伪代码描述可以在高层次上完全准确地捕获,而无需添加,删除或重新制定算法细节以适应较低层次,更抽象或更不直接的语言。2.我们创建了比以往所有规范更高层次的控制流和同步条件,得到了更简单、更小的规范,甚至比省略了许多算法细节的抽象规范匹配或更小。3.简单的规范使我们很容易发现无用的回复,不必要的延迟,以及在以前发布的规范中的活性违规(如果消息可能丢失),只需遵循简化的算法流程。4.产生的规范可以直接执行,我们可以清楚地表达优化,产生显着的性能改善,天真的执行和促进合并进程的一般方法。5.我们系统地将由此产生的规范翻译成TLA+,并开发了机器检查的安全证明,这也使我们能够检测和修复早期未发布的规范中的细微安全违规。
2019-08-12 cs.DC cs.PL
Towards an Automatic Proof of Lamport's Paxos
Lamport著名的Paxos共识协议通常被视为一个复杂的难以理解的算法。尽管它的复杂性,在本文中,我们采取了一个步骤,自动证明Paxos的安全性,利用其规范中的三个结构特征:空间规律性在其无序域,时间规律性在其完全有序域,其层次组成。通过仔细集成这些结构特征的IC3PO,一种新的模型检验算法,我们能够推断出一个归纳不变量,完全匹配的人写的一个以前获得了显着的手工努力,使用交互式定理证明。虽然已经进行了各种尝试来验证不同版本的Paxos,但据我们所知,这是Lamport原始Paxos规范的自动推断归纳不变量的第一次演示。我们注意到,这些结构特征并不是Paxos特有的,IC3PO可以作为一个自动通用协议验证工具。
2021-08-19 cs.DC cs.FL cs.LO
XFT: Practical Fault Tolerance Beyond Crashes
尽管经过多年的深入研究,拜占庭容错(BFT)系统尚未在实践中采用。这是由于与崩溃容错(CFT)相比,BFT在资源、协议复杂性和性能方面的额外成本。BFT的这种开销来自于这样的假设:强大的对手不仅可以完全控制拜占庭式的故障机器,而且同时还可以完全控制整个网络的消息传递时间表,从而有效地诱导通信异步并随意划分其他正确的机器。然而,对许多从业者来说,这种强烈的攻击似乎无关紧要。在本文中,我们介绍了交叉容错或XFT,一种新的方法来建立可靠和安全的分布式系统,并将其应用到经典的状态机复制(SMR)问题。简而言之,XFT SMR协议提供了广泛使用的异步CFT SMR协议(如Paxos和Raft)的可靠性保证,但也容忍拜占庭故障与网络冗余的组合,只要大多数副本是正确的并同步通信。这允许以CFT的价格(在实践中已经支付)开发XFT系统,但具有比CFT更强的弹性-有时甚至比BFT本身更强。作为XFT的展示,我们展示了第一个XFT SMR协议XPaxos,并将其部署在地理复制设置中。虽然它在没有额外资源成本的情况下提供了比CFT SMR更强的弹性,但XPaxos的性能与最先进的CFT协议相匹配。
2016-11-08 cs.DC
Consensus Beyond Thresholds: Generalized Byzantine Quorums Made Live
现有的拜占庭容错(BFT)共识协议只解决阈值故障,其中参与节点彼此独立地失败,每个节点失败的可能性相等,并且协议的保证来自于故障节点数量的简单约束。然而,随着拜占庭共识在区块链和分布式账本中的广泛部署,需要更复杂的信任假设。本文提出了第一个实现BFT共识与广义法定人数。它从实践中激发的一些广义的信任结构开始,并探索有效地指定和实现它们的方法。特别是,它表示的信任假设由一个单调布尔公式(MBF)与阈值算子和单调跨度程序(MSP),一个线性代数模型的计算。HotStuff BFT共识使用这些法定人数系统的实现,以及现有的阈值模型进行了描述和比较。在多达40个副本上运行HotStuff的基准测试表明,MBF规范不会导致显着的速度降低,而MSP表达式由于涉及的计算而显着影响延迟和吞吐量。
2020-08-03 cs.DC
Vault: Decentralized Storage Made Durable
National University of Singapore(新加坡国立大学)
Vault通过基于采样的数据放置策略和可验证随机性,实现去中心化存储网络在存储规模、链上开销和拜占庭容忍度的同步扩展。
2026-04-06 cs.DC
Byzantine Machine Learning Made Easy by Resilient Averaging of Momentums
École Polytechnique Fédérale de Lausanne(洛桑联邦理工学院)
拜占庭式的弹性成为分布式机器学习社区中的一个突出话题。从本质上讲,目标是增强分布式优化算法,如分布式SGD,以保证收敛,尽管存在一些行为不端(也称为,{ \em Byzantine})工人。虽然已经提出了无数的技术来解决这个问题,但该领域可以说是建立在脆弱的基础上。这些技术很难证明是正确的,并且依赖于(a)非常不现实的假设,即,在实践中经常被违反,以及(b)异质性,即,使得难以比较方法。我们提出了\emph{RESAM (RESilient Averaging of Momentums)},一个统一的框架,使它简单地建立最佳的拜占庭弹性,只依赖于标准的机器学习假设。我们的框架主要由两个操作符组成:服务器端的\emph{resilient averaging}和工作端的\emph{distributed momentum}。我们证明了一个一般定理,说明分布式SGD下RESAM的收敛性。有趣的是,证明和比较许多现有技术的收敛性成为我们定理的直接推论,而无需采取严格的假设。我们还提出了RESAM的实际意义的实证评估。
2022-05-24 cs.DC cs.LG
Quorum Tree Abstractions of Consensus Protocols
分布式算法解决的一致性问题,如共识或状态机复制是现代容错分布式服务的重要组成部分。他们也是出了名的难以理解和推理。它们的复杂性源于对它们所处环境的不同假设,即,过程或网络链路故障,拜占庭故障等。在本文中,我们提出了一种新的抽象表示,这种协议的动态集中在法定人数的响应(投票)的请求(建议),在运行过程中形成的协议。我们表明,专注于这样的法定人数,一个协议的运行可以被视为工作在一个树结构,不同的分支代表不同的可能结果的协议,目标是稳定的选择一个固定的分支。这种抽象类似于区块链基础设施中使用的最新协议的描述,例如,支持比特币或HotStuff的协议。我们表明,这种抽象支持各种算法的安全性推理,例如,Paxos,PBFT,Raft和HotStuff,以统一的方式。在一般情况下,它提供了一个新的归纳为基础的论据,证明这样的协议是安全的。
2023-01-24 cs.DC
CFT-Forensics: High-Performance Byzantine Accountability for Crash Fault Tolerant Protocols
针对崩溃容错协议易受单个损坏节点破坏的问题,提出问责框架CFT-Forensics,在保证可证明问责的同时大幅降低通信存储开销,并在Raft和OpenCBDC实验中验证了其低延迟与高吞吐性能。
2024-06-03 cs.CR cs.DC
Byzantine Consensus in the Common Case
模块化的方法来转换拜占庭共识协议到那些是快速和通信效率在常见的情况下。称为层的小而短的协议段是定制设计的,以在常见情况下优化性能。当与选择的拜占庭共识协议组成时,它们允许对组合协议在存在故障时的行为和在不存在故障时的性能进行相当大的控制。当在普通情况下运行无故障时,产生的协议在两轮中决定,并需要$2nt$位的通信。对于常见的情况下,假设所有的处理器建议1和没有发生故障,我们展示了一个转换,其中的决定是在一个回合,没有位的通信交换。由此产生的协议实现了更好的常见情况下的复杂性比所有现有的拜占庭共识协议。最后,在不发生常见情况的极少数情况下,对原始共识协议进行转换的复杂性增加了一小部分成本。在通常情况下允许时间和通信效率的这些层的关键成分是使用{ \it静默确认回合},其是在没有任何通信的情况下可以获得相当多的相关信息的回合。
2019-05-15 cs.DC
Dropbear: Machine Learning Marketplaces made Trustworthy with Byzantine Model Agreement
机器学习(ML)模型的市场正在成为组织将模型货币化的一种方式。它们允许模型所有者通过使用云资源执行ML推理请求来保持对托管模型的控制,从而保持模型的机密性。依赖托管模型的客户端需要可信的推理结果,即使模型由第三方管理。虽然可以通过组合多个独立模型来提高推理结果的弹性和鲁棒性,但在当今的市场中无法获得这种支持。我们描述了Dropbear,这是第一个ML模型市场,通过以值得信赖的方式组合多个模型的结果,为客户提供强大的完整性保证。Dropbear在一个模型组中复制推理计算,该模型组由属于不同模型所有者的多个基于云的GPU节点组成。客户端接收使用拜占庭共识协议证明协议的推理证书,即使在模型异构和并发模型更新下也是如此。为了提高性能,Dropbear将推理和共识操作分开处理:它首先在模型组中执行推理计算,然后对请求和模型更新进行排序。尽管有很强的完整性保证,但Dropbear的性能与最先进的ML推理系统相匹配:部署在3个云站点上,它使用ImageNet模型处理800个请求/s。
2022-05-31 cs.CR cs.DC
PISTIS: An Event-Triggered Real-Time Byzantine-Resilient Protocol Suite
社会数字化的加速以及技术的发展扩大了网络物理系统的地理范围。两个主要威胁使得这些系统的可靠和实时的【形】控制具有挑战性:(i)由环境和设备的规模和异质性引起的通信基础设施中的不确定性;以及(ii)恶意地恶化上述通信不确定性的影响的有针对性的攻击,破坏实时的【形】应用的正确性。本文通过展示如何构建分布式协议来解决这些挑战,该协议在概率同步环境中提供实时的【形】实用性能和网络故障和攻击的可扩展性。我们提供了一套实时的【形】拜占庭协议,我们证明是正确的,从一个可靠的广播协议,称为PISTIS,原子广播和共识。该套件简化了强大的分布式和分散式监控和控制应用程序的构建,包括状态机复制。大量的实证模拟展示了PISTIS的鲁棒性、延迟和可扩展性。例如,PISTIS可以承受49个节点的系统中高达50%的消息丢失(和延迟)率,并提供几毫秒量级的有界传递延迟。
2021-03-18 cs.DC
The Bedrock of Byzantine Fault Tolerance: A Unified Platform for BFT Protocol Design and Implementation
拜占庭容错(Byzantine Fault-Tolerant,BFT)协议最近被具有不可信基础设施的分散式数据管理系统广泛使用,许可的区块链。BFT协议涵盖了广泛的设计维度,从基础设施设置(如通信拓扑)到更多的技术特征(如承诺策略),甚至是基本的社会选择属性(如订单公平性)。不同BFT协议的激增使得难以浏览BFT景观,更不用说确定最能满足应用需求的协议了。本文介绍了一个用于BFT协议设计、分析、实现和实验的统一平台Bedrock。Bedrock提出了一个设计空间,由一组设计选择组成,这些设计选择捕获了不同设计空间维度之间的权衡,并为BFT协议的优势和劣势提供了全新的见解。Bedrock使用户能够在合理选择的空间内分析和实验BFT协议,改进当前协议以设计新协议,甚至发现以前未知的协议。我们的实验结果表明,基岩统一评估BFT协议的能力,在新的方式是不可能的,因为这些协议所作的各种假设。结果验证了基岩的能力,分析和推导BFT协议。
2022-08-03 cs.DC
Brief Note: Fast Authenticated Byzantine Consensus
拜占庭容错(BFT)状态机复制(SMR)已经研究了30多年。最近,由于其在许可区块链系统中的应用,它受到了更多的关注。一系列研究工作集中于在常见良好情况下改进SMR协议的提交等待时间,包括具有$3$ -轮等待时间和$n\geq 3f+1$的PBFT以及具有$2$ -轮等待时间和$n\geq 5f+1$的Fab。在本文中,我们提出了一个认证协议,解决了$2$轮BFT SMR只有$n\geq 5f-1$副本,这驳斥了最佳弹性要求在Fab中的$2$轮PBFT风格的BFT协议需要$n \geq 5f+1$。对于$f=1$的特殊情况,我们的协议只需要$4$副本,并严格提高PBFT减少一轮的延迟(即使一个备份是错误的)。
2022-04-29 cs.CR cs.DC
Improved Byzantine Agreement under an Adaptive Adversary
本文研究自适应拜占庭对手下的同步拜占庭协议,提出一个简单随机化协议,将长期以来的 O(t/log n) 轮上界改进为 O(min{t²log n/n, t/log n}) 轮。
2025-06-05 cs.DC cs.DS
Asynchronous BFT Consensus Made Wireless
针对异步BFT共识在无线网络中消息复杂度高且缺乏测试平台的问题,提出ConsensusBatcher批处理协议并开源测试平台,使延迟降低48%-59%、吞吐量提升48%-62%。
2025-04-05 cs.CR cs.DC
Money Transfer Made Simple: a Specification, a Generic Algorithm, and its Proof
最近的研究表明,与人们普遍认为的相反,在存在错误(拜占庭)过程的情况下进行货币转移并不需要像共识这样的强有力的协议。本文更进一步:即,首先提出了一个非顺序规范的货币转移对象,然后提出了一个泛型算法的基础上,一个简单的FIFO顺序之间的每对进程,实现它的genericitydimension在于底层的可靠的广播抽象,必须适合适当的故障模型。有趣的是,无论失败模型是什么,资金转移算法只需要在其消息中添加一个序列号作为控制信息。此外,作为所提出的算法的一个副作用,它遵循的货币转移是一个较弱的问题,比一个安全的/定期的/原子读/写寄存器的异步消息传递崩溃倾向模型的建设。
2021-02-17 cs.DC
Practical Byzantine Reliable Broadcast on Partially Connected Networks (Extended version)
本文针对部分连接网络中的拜占庭可靠广播问题,提出结合分层与跨层优化来改进 Bracha 和 Dolev 协议组合,仿真显示可显著降低信息传输量和延迟。
2024-02-26 cs.DC cs.DS cs.NI
JUMBO: Fully Asynchronous BFT Consensus Made Truly Scalable
针对异步BFT共识在大规模节点下性能退化的问题,提出JUMBO协议,通过聚合与分散QC技术将认证器和消息复杂度降至O(n^2),并添加公平性补丁以抵御洪泛攻击。
2024-03-17 cs.CR cs.DC