A Fault-Tolerant Sequentially Consistent DSM With a Compositional Correctness Proof
我们提出了SC-ABD算法,实现顺序一致的分布式共享内存(DSM)。该算法容忍少于一半的进程是错误的(崩溃停止)。与多写入器ABD算法相比,SC-ABD需要一次而不是两次通信往返来执行写入操作,并且需要相等数量的往返(两次)来执行读取操作。虽然顺序一致性不是组合一致性条件,但提供的正确性证明是组合的。
2016-08-08 cs.DC
Byz-GentleRain: An Efficient Byzantine-tolerant Causal Consistency Protocol
因果一致性是一种广泛使用的弱一致性模型,它允许高可用性,尽管网络分区。有大量的研究原型和工业部署的因果一致的分布式系统。然而,据我们所知,他们都没有考虑拜占庭故障,除了Byz-RCM提出的Tseng等人。Byz-RCM实现因果一致性的客户端-服务器模型与$3f + 1$服务器,其中多达$f$服务器可能遭受拜占庭故障,但假设客户端是非拜占庭。在这项工作中,我们提出了Byz-Gentlerain,这是第一个因果一致性协议,它最多可以容忍每个分区中的$3f + 1$服务器和任何数量的拜占庭客户端中的$f$拜占庭服务器。Byz-GentleRain的灵感来自GentleRain的稳定机制,以实现因果一致性。为了防止由于拜占庭故障而导致的因果违规,Byz-GentleRain依赖PBFT来在服务器之间就全局稳定时间和更新的序列达成一致,并且只有时间戳小于或等于这种公共全局稳定时间的更新对客户端可见。我们证明了Byz-GentleRain实现Byz-CC,在拜占庭故障的存在下的因果一致性变量。我们在阿里云上评估Byz-GentleRain。初步结果表明,Byz-GentleRain在典型工作负载上是有效的。
2021-09-29 cs.DC
Correctness Analysis of IBFT
在本文中,我们分析了伊斯坦布尔BFT(IBFT)的正确性,这是一个拜占庭容错(BFT)的权威证明(PoA)区块链共识协议,确保了即时的终结性。我们发现,IBFT协议不保证拜占庭容错的一致性和活性时,在一个最终同步的网络,我们提出了修改协议,以确保拜占庭容错的一致性和活性在最终同步设置。
2019-08-27 cs.DC
Integrity-Enhancing Replica Coordination for Byzantine Fault Tolerant Systems
强副本一致性通常通过编写确定性应用程序或使用各种机制来呈现副本确定性来实现。有大量的工作是关于如何在良性故障模型下使副本具有确定性。然而,当副本可能会受到恶意故障,以前的大部分工作不再有效。此外,副本的确定性通常被认为是有害的,从安全的角度来看,对于许多应用程序,它们的完整性很大程度上取决于它们的一些内部操作的随机性。这就需要新的方法来实现副本的一致性,同时保持副本的随机性。在本文中,我们提出了两个这样的方法。一种是基于拜占庭协议,另一种是基于阈值抛硬币。每种方法都有其优点和缺点。我们比较了这两种方法的性能,并概述了各自的最佳使用场景。
2008-03-11 cs.DC
DEFT: Distributed, Elastic, and Fault-tolerant State Management of Network Functions
本文提出DEFT状态管理系统,利用分布式共识机制同时实现网络功能的弹性扩展、容错和全局状态强一致性,实验证明其可扩展且吞吐量高、开销极小。
2023-11-30 cs.DC
Efficient Heuristics and Machine Learning Approach for Fault Characterization in Distributed Self-Stabilizing Programs
University of Wyoming(怀俄明大学)
本文针对分布式自稳定程序中的一致性违反故障,提出基于冲突边的状态空间探索与机器学习两种互补方法,以高效表征故障发生位置,提升系统正确性与计算效率。
2026-10-16 cs.DC
Hermes: a Fast, Fault-Tolerant and Linearizable Replication Protocol
当今的数据中心应用程序由负责提供可用性、一致性和性能的数据存储区支撑。为了在出现故障时实现高可用性,这些数据存储区跨多个节点复制数据。这是在可靠的复制协议的帮助下完成的,该协议负责即使在发生故障时也保持副本的强一致性。强一致性优于不能保证客户端直观行为的弱一致性模型。此外,为了满足实时延迟的高需求,数据存储必须提供高吞吐量和低延迟。这项工作介绍了Hermes,一个基于广播的可靠的复制协议,在内存中的数据存储,提供高吞吐量和低延迟,使本地读取和完全并发的快速写入在所有副本。Hermes将逻辑时间戳与缓存一致性启发的无效结合起来,以保证线性化,避免在集中排序点进行写入序列化,在每个副本本地解决写入冲突(从而确保写入永远不会中止),并通过可重放写入提供容错。我们在支持RDMA的可靠路由器上实现了Hermes,其中包含5个副本,这表明Hermes在所有写入比率上都能实现比最先进的基于RDMA的可靠协议(ZAB和CRAQ)更高的吞吐量,同时还显著降低了尾部延迟。在5%写入时,Hermes的尾部延迟比CRAQ和ZAB低3.6倍。
2020-01-27 cs.DC
A Robust Fault-Tolerant and Scalable Cluster-wide Deduplication for Shared-Nothing Storage Systems
在分布式存储系统中,已经大量地采用分布式存储来提高空间效率。传统的去重研究忽略了无共享分布式存储系统的设计要求,如无中心元数据瓶颈、可扩展性和存储重新平衡。此外,去重引入事务性改变,其在系统故障的情况下易于出错,从而导致数据和去重元数据的不一致。在本文中,我们提出了一个强大的,容错和可扩展的集群范围内的重复数据删除,可以消除重复的副本在整个集群。我们设计了一个分布式的重复数据删除元数据分片,它保证了性能的可扩展性,同时保留了无共享存储系统的设计约束。块和去重元数据的放置基于块的内容指纹在群集范围内进行。为了保证事务一致性和垃圾识别,我们采用了基于标志的异步一致性机制。我们在Ceph上实现了建议的重复数据删除。评估结果表明,高磁盘空间节省最小的性能下降,以及在突然的服务器故障的情况下,高鲁棒性。
2018-03-21 cs.DC
Process-Commutative Distributed Objects: From Cryptocurrencies to Byzantine-Fault-Tolerant CRDTs
本文定义了一类仅需单进程操作满足FIFO顺序的新型分布式对象,借助Mazurkiewicz迹实现SEC与PC一致性,提出可适配崩溃和拜占庭故障的通用实现算法,并通过四个实例验证了其实用价值。
2024-03-08 cs.DC
Technical Report: Benefits of Stabilization versus Rollback in Self-Stabilizing Graph-Based Applications on Eventually Consistent Key-Value Stores
在本文中,我们评估和比较两种方法的性能,即自稳定和回滚,处理一致性违反故障(\cvf)时发生的自稳定的分布式基于图的程序上执行最终一致的键值存储。违反一致性的错误是由于键值存储提供的一致性级别较低而导致读取错误的值而引起的。处理这些故障的一种方法是利用回滚,而另一种方法是依赖于期望提供从任意状态恢复的自稳定特性。我们评估这两种方法在不同的案例研究-平面图着色,任意图着色,最大匹配-以及不同的问题维度,如输入数据的特点,工作负载分区,和网络延迟。我们还考虑了执行不稳定算法回滚与类似的稳定算法,不利用回滚的效果。
2020-07-26 cs.DC
Self-Stabilizing Replicated State Machine Coping with Byzantine and Recurring Transient Faults
本文提出首个同时具备拜占庭容错、反复瞬时容错、准确性和自稳定能力的重复拜占庭协议,可从任意配置恢复一致性,并明确给出多类故障下的容忍界。
2025-06-15 cs.CR cs.DC
Consistency models in distributed systems: A survey on definitions, disciplines, challenges and applications
复制机制解决了大数据的一些挑战,如数据持久性,数据访问和容错。然而,复制本身产生了另一个挑战,即分布式系统中的一致性。可伸缩性和可用性是分布式系统中复制所依据的具有挑战性的标准,而分布式系统本身需要一致性。分布式计算系统中的一致性问题已经在三个不同的应用领域得到了应用,如系统体系结构、分布式数据库和分布式系统。一致性模型根据其适用性可从强到弱排序。我们的目标是提出一个新的观点,不同的一致性模型在分布式系统中使用。本研究提出两种不同类别的一致性模型。最初,一致性模型被分为三组:以数据为中心的模型、以客户端为中心的模型和混合模型。每一个,然后分为三个子类的传统,扩展,和新颖的一致性模型。因此,概念和过程用数学术语表示,引入这些术语是为了在没有实现的情况下呈现我们的模型的行为。此外,我们还调查了一致性方面的不同挑战,即,可用性、可伸缩性、安全性、容错、延迟、违规和陈旧,其中后两个,即违规和陈旧,在一致性和权衡平衡方面起着最关键的作用。最后,研究了每种一致性模型的贡献程度以及分布式系统中对它们的需求。
2019-02-08 cs.DC
ezBFT: Decentralizing Byzantine Fault-Tolerant State Machine Replication
我们提出ezBFT,一种新的无领导,分布式共识协议能够容忍拜占庭故障。ezBFT的主要目标是最大限度地减少WAN部署中的客户端延迟。它通过以下方式实现这一点:(i)没有指定的主副本,而是使每个副本能够对其从客户端接收的请求进行排序;(ii)在常见情况下仅使用三个通信步骤来排序请求;以及(iii)让客户端积极参与共识过程。此外,ezBFT最大限度地减少了拜占庭副本对整体系统性能的潜在负面影响。我们在TLA+中开发了ezBFT的形式化规范,表明它提供了BFT协议的经典属性,包括一致性,稳定性和活性,并开发了一个实现。我们的实验评估表明,ezBFT将客户端延迟提高了40%,超过了最先进的拜占庭容错协议,包括PBFT,Fab和Zyzzyva。
2019-04-12 cs.DC
Generalizing and accelerating consistency checking for non-transactional distributed storage systems
Indian Institute of Technology Delhi(印度德里理工学院)
本文泛化WG算法实现了分布式存储系统一致性检查的通用性,可检查Zookeeper等的一致性保证,实验显示该方法速度最高提升370倍,还发现5个现有工具无法检测的新一致性漏洞。
2026-08-19 cs.DC
Inversion-based Measurement of Data Consistency for Read/Write Registers
分布式存储服务的提供者和消费者都受益于一致性违规严重性的量化。然而,现有的方法无法捕捉到一个典型的违规模式-操作之间的混乱与理想的强原子执行。这种混乱经常出现在基于分布式存储服务的互联网应用中,例如即时消息。为此,我们使用一个置换中的逆相对于全序置换来度量数据的一致性。提出了$i$ -原子性模型,并提出了一种受限历史类型的(伪)多项式验证算法.验证算法的基本思想是对具有小于$i$逆的置换进行蛮力搜索,这需要指数代价。从应用场景中提取合理的假设,可以利用修剪的搜索空间,这产生了一个有效的多项式验证算法。
2019-02-18 cs.DC
Byzantine Eventual Consistency and the Fundamental Limits of Peer-to-Peer Databases
Sybil攻击,其中大量的对手控制的节点加入网络,是一个问题,许多对等数据库系统,需要昂贵的对策,如工作量证明。然而,有一类数据库应用程序在设计上对Sybil攻击免疫,因为它们可以容忍任意数量的Byzantine故障节点。在本文中,我们使用一个一致性模型,我们称之为拜占庭最终一致性(BEC)这一类的应用程序的特点。我们介绍了一种算法,保证BEC的基础上拜占庭因果广播,证明其正确性,并在原型实现中表现出接近最佳的性能。
2020-12-01 cs.CR cs.DB cs.DC
PnyxDB: a Lightweight Leaderless Democratic Byzantine Fault Tolerant Replicated Datastore
拜占庭容错(BFT)系统正在迅速成为生产级系统的可行技术,特别是在金融和供应链应用的封闭联盟部署中。不幸的是,大多数算法提出到目前为止,协调这些系统遭受实质性的可扩展性问题,并缺乏重要的功能,实现互联网规模的治理机制。在本文中,我们观察到,许多应用程序的工作负载提供很少的并发性,并提出PnyxDB,一个最终一致的拜占庭容错复制数据库,具有高可扩展性和低延迟。我们的方法是基于有条件的背书,允许节点指定一组交易,必须不提交背书是有效的。除了其高可扩展性外,PnyxDB还支持应用程序级投票,即各个节点能够根据应用程序定义的策略支持或拒绝事务,而不会影响一致性。我们提供了对BFTSMaRt和Tendermint的比较,这两个竞争对手具有不同的设计目标,并表明我们的实现将提交延迟加速了11倍,在全球180个节点的地理分布部署中保持在5秒以下。
2019-11-08 cs.DB cs.DC
Araucaria: Simplifying INC Fault Tolerance with High-Level Intents
Araucaria系统通过意图语言简化网内计算(INC)容错要求的定义与实现,利用细化过程自动转换意图并集成配置,实验证明其可扩展且故障场景下开销可忽略。
2024-04-17 cs.DC cs.NI
Technical Report: Optimistic Execution in Key-Value Store
CAP定理的局限性意味着,如果在存在网络分区的情况下需要可用性,则必须牺牲顺序一致性,这是一种对于系统设计更自然的一致性模型。我们关注的问题是,如果设计师有一个算法可以正确地工作,具有顺序一致性,但面临的是一个底层的键值存储,它提供了一个较弱的(例如,最终或因果)一致性。我们提出了一种基于检测回滚的方法:设计者确定一个正确性谓词,说$P$,并继续运行协议,因为我们的系统监视器$P$。如果违反了$P$(因为底层键值存储提供了较弱的一致性),则系统回滚并在$P$成立的状态下恢复计算。我们评估这种方法与实际的图形应用程序上运行的伏地魔键值存储。我们在Amazon AWS EC2实例上进行的部署实验表明,与顺序一致性相比,使用最终一致性和监控可以提高$50-80\%$的吞吐量。我们还表明,监测本身的开销是低的(通常小于4%)和检测违规的延迟是小的。特别是,在区域AWS网络中,在不到$50$毫秒的时间内检测到超过$99.9\%$的违规行为,在全球AWS网络中,在不到$5$秒的时间内检测到违规行为。
2018-06-24 cs.DC
Self-stabilizing Uniform Reliable Broadcast
我们研究了一个著名的通信抽象称为统一可靠广播(URB)。URB在容错分布式系统的设计和实现中处于核心地位,因为许多非平凡的容错分布式应用程序需要在消息传递上具有可证明保证的通信。我们的研究重点是无时间的消息传递系统,容易发生节点故障的容错实现。此外,我们的目标是设计一个更强大的通信抽象。我们通过自我稳定的镜头来做到这一点--一个非常强大的容错概念。除了节点和通信故障之外,自稳定算法可以在任意瞬时故障发生后恢复;这些故障表示违反系统设计操作所依据的假设(只要算法代码保持完整)。这项工作提出了第一个自稳定URB解决方案的时间自由的消息传递系统,容易发生节点故障。该算法具有O(bufferUnitSize)的稳定时间(异步周期)从任意瞬态故障,其中bufferUnitSize是一个预定义的常数,可以根据可用的内存设置。此外,我们的算法的通信成本是类似的非自稳定的国家的最先进的。主要的区别是,我们的建议,考虑了重复八卦的O(1)比特的消息和处理有界空间(这是自稳定的先决条件)。具体地,每个节点需要存储多达bufferUnitSize n个记录,并且每个记录的大小为O(v + n log n)位,其中n是系统中的节点数,v是编码单个URB实例所需的位数。
2020-01-09 cs.DC
How to Evaluate Distributed Coordination Systems? -- A Survey and Analysis
IBM Research(IBM研究院);University at Buffalo(布法罗大学);University of New Hampshire(新罕布什尔大学);Microsoft(微软)
本文综述并分析分布式协调系统的评估机制,指出现有基准的不足,并提出评估性能、可扩展性、可用性和一致性的关键指标与参数需求。
2025-10-27 cs.DC
EES-CND: Collaborative Neural Decision-Making for Drift-Aware Fault-Tolerant Edge-Cloud Service Placement
Karlstad University(卡尔斯特德大学);Queen’s University Belfast(贝尔法斯特女王大学);Ericsson AB(爱立信)
提出一种基于增强进化策略的协同神经决策方法(EES-CND),通过多个轻量级神经网络联合推断故障时的重部署策略,并在线更新模型以应对性能漂移,显著降低容错成本并提升服务恢复时间、响应时间和可靠性。
2026-06-01 cs.DC
Maxwait: A Generalized Mechanism for Distributed Time-Sensitive Systems
Maxwait是一种通用协调机制,能够处理分布式时间敏感系统中的时间要求与一致性权衡,涵盖多种经典方法并支持实时行为与确定性控制。
2026-01-29 cs.CL cs.DC
Self-Stabilizing Snapshot Objects for Asynchronous Fail-Prone Network Systems
快照对象模拟可以原子读取的单写入器/多读取器共享寄存器数组的行为。Delporte-Gallet等人提出了两种用于异步易崩溃消息传递系统中快照对象的容错算法。他们的第一个算法是\emph{non-blocking};它允许在所有写入操作停止后终止快照操作。它使用$O(n ν)$位的$O(n)$消息,其中$n$是节点数,$ν$是表示对象所需的位数。他们的第二个算法允许快照操作总是独立于写操作终止。它会引发$O(n^2)$消息。Delporte-Gallet等人的故障模型考虑了节点崩溃。我们的目标是通过自我稳定的镜头设计更强大的快照对象-一个非常强大的容错概念。除了Delporte-Gallet et al.的故障模型,我们的自稳定算法可以恢复后发生的瞬态故障,这些故障代表任意违反的假设,根据该系统的设计操作。我们提出了自稳定的变化Delporte-Gallet等人。的非阻塞算法和总是终止算法。我们的算法有类似的Delporte-Gallet等人的通信成本。和$O(1)$恢复时间从瞬态故障。主要的区别是,我们的建议,考虑重复八卦的$O(ν)$位消息和处理有界空间。我们还考虑了一个输入参数,$δ$,我们声称有能力平衡快照操作的成本。我们验证了我们的正确性证明,评估了Delporte-Gallet等人的性能。的算法和我们提出的变化,并通过PlanetLab实验,其中观察到显着的延迟和通信成…
2020-02-28 cs.DC
BlockRaFT: A Distributed Framework for Fault-Tolerant and Scalable Blockchain Nodes
Indian Institute of Technology Hyderabad(印度理工学院海得拉巴分校)
BlockRaFT通过RAFT共识协议提升区块链节点的可扩展性和可靠性,采用状态化与非状态化操作分离策略,并引入并发Merkle树优化以提升性能。
2026-04-17 cs.DC
Multi-Orientation Edge-Minimum Repair for Non-Redundant Fault-Tolerant Broadcasting in Dense Eisenstein--Jacobi Networks
Department of Computer Science, Faculty of Science, Kuwait University(科威特大学理学院计算机科学系)
针对密集Eisenstein-Jacobi网络,提出多方向边最小修复方法EJ-MOEM,通过评估六边形广播树方向、选择容错候选、收缩故障剪枝树并利用外部跨组件修复边重构生成树,证明单故障深度不超过t+1、双故障深度不超过t+2,实验验证至t=200均成功。
2026-06-19 cs.DC cs.IT cs.NI