Searching in Unstructured Overlays Using Local Knowledge and Gossip
分析了P2P非结构化覆盖网络中分布式内容发现的一类传播算法。这些算法是一种混合的协议,采用本地知识的同行的邻居和八卦。通过调整八卦概率和深度k的k-邻域的节点的信息,我们得到不同的传播协议在文献中采用的非结构化P2P覆盖。所提供的分析和仿真结果证实,当适当配置,这些计划是一个可行的方法来建立有效的P2P资源发现在大规模的,动态的分布式系统。
2014-03-12 cs.DC cs.NI
On the Topology Maintenance of Dynamic P2P Overlays through Self-Healing Local Interactions
本文讨论了使用自组织协议来提高动态对等(P2P)覆盖网络的可靠性。我们提出了两种方法,采用本地知识的第二邻域的节点。第一个方案是一个简单的协议,需要节点之间的相互作用和他们的直接邻居。第二种方案通过诉诸边缘聚类系数(ECC)来扩展这种方法,这是一种局部措施,可以识别连接覆盖中不同聚类的边缘。一个模拟评估,评估这些协议在均匀网络,集群网络和无标度网络。考虑了不同的失效模式。结果证明了该建议的可行性。
2014-05-16 cs.DC cs.NI
FlexCast: genuine overlay-based atomic multicast
本文提出首个真正的基于覆盖网络的原子多播协议 FlexCast,利用完整 DAG 覆盖网络和工作负载局部性降低通信开销,并在地理分布式 gTPC-C 实验中优于现有协议。
2023-09-28 cs.DC
Genet: A Quickly Scalable Fat-Tree Overlay for Personal Volunteer Computing using WebRTC
WebRTC使浏览器能够直接交换数据,但到单个源的可能并发连接的数量是有限的。我们克服了组织参与者在胖树覆盖的限制:当一个树节点的连接的最大数量达到时,新的参与者连接到节点的孩子。当大量参与者在短时间内加入时,我们的设计可以快速扩展,依靠一种新的方案,只需要本地信息来路由连接消息:目的地是从消息源和持有消息的节点的组合标识符的哈希值中获得的。该方案提供了确定性路由的一系列连接消息从一个单一的来源和新的连接之间的叶子的概率平衡。我们表明,这种设计将至少83%的节点置于与确定性算法相同的深度,可以在本地网络中在21-55秒内连接1000个浏览器窗口,并且可以部署用于志愿者计算,以在本地网络上在不到30秒的时间内接入320个核心,从而将Collatz应用程序的总吞吐量与单个核心相比增加两个数量级。
2019-04-25 cs.DC
Usable Agent Discovery for Decentralized AI Systems
Department of Computer Science(计算机科学系);University of Pisa(比萨大学);Institute of Information Science and Technologies(信息科学与技术研究所);National Research Council of Italy(意大利国家研究理事会);Institute of Informatics and Telematics(信息学与电信研究所)
本文研究了在双层 churn 情况下去中心化代理发现,比较了不同机制在路由效率、鲁棒性和服务准备度方面的表现。
2026-04-25 cs.AI cs.DC cs.MA
Adaptive Lookup for Unstructured Peer-to-Peer Overlays
在非结构化对等覆盖中的可扩展性和高效的全局搜索在文献中得到了广泛的研究。全局搜索是以牺牲对等点之间的本地交互为代价的。大多数非结构化对等覆盖不提供任何性能保证。在这项工作中,我们提出了一种新的服务质量启用查找非结构化的对等覆盖,将允许用户的查询遍历只有那些覆盖链接,满足给定的约束。此外,它还通过明智地使用覆盖资源来提高可扩展性。我们的方法选择性地转发查询使用QoS指标,如延迟,带宽和覆盖链路状态,以确保在对等加入和离开的程度很高的情况下,提高性能。用户只得到那些可以在给定约束条件下下载的结果。此外,该协议的目的是在覆盖网络上的消息开销最小化。
2015-09-15 cs.DC cs.NI
CliqueStream: an efficient and fault-resilient live streaming network on a clustered peer-to-peer overlay
在最近的对等流媒体文献中,已经提出了几种基于叠加的实时多媒体流媒体平台。在大多数情况下,为了覆盖的鲁棒性,随机选择覆盖邻居。然而,这会导致底层物理网络中距离较远的节点成为邻居,因此数据在到达目的地之前会传输不必要的距离。为了提高多媒体流等大量数据传输的效率,覆盖邻域应该类似于底层网络中的邻近度。在本文中,我们利用最近提出的一个基于集群的覆盖网络,名为eQuus的邻近和冗余属性,建立高效和强大的覆盖多媒体流传播。为了结合树结构覆盖上的内容推送的效率和数据驱动的网格覆盖的鲁棒性,在树结构中组织更高容量的稳定节点以承载长距离业务,并且在局部网格中组织具有间歇性存在的不太稳定的节点。文中详细介绍了覆盖图的构造和故障恢复过程。仿真研究表明该平台具有良好的局部性。分析表明,故障恢复机制引起的中断时间和控制开销是最小的。
2009-03-26 cs.DC cs.MM cs.NI
TRANS-Net: an Efficient Peer-to-Peer Overlay Network Based on a Full Transposition Graph
在本文中,我们提出了一个新的实用的P2P系统的基础上,一个完整的换位网络拓扑结构命名为TRANS-Net。全换位网络在该类换位网络中实现了更高的容错性和更低的拥塞。TRANS-Net提供高效的查找服务,即具有高概率的k跳,其中k满足小于k的Theta(log_n m)小于Theta(log_2 m),其中m表示系统节点的数量,并且n是与m可以采用的最大数量(直到n!)相关的系统参数。实验表明,该算法的查找性能达到了复杂度关系的下限。TRANS-Net还保留了数据局部性,并为多维查询等复杂查询提供了高效的查找性能。
2008-08-30 cs.DC
Relays: A New Approach for the Finite Departure Problem in Overlay Networks
覆盖网络的基本问题是安全地排除离开节点,即,请求离开覆盖网络的节点被排除在覆盖网络之外而不影响其连通性。为了严格研究这个问题的自稳定解,已经提出了有限偏离问题(FDP)[12]。在FDP中,我们给出了一个处于任意状态的进程网络,目标是最终到达(并停留在)一个状态,在该状态下,所有离开的进程都决定离开系统,而对于初始覆盖网络中的所有弱连接组件,该组件中的所有停留进程仍将形成弱连接组件。在标准互连模型中,已知FDP无法通过本地控制协议解决,因此已经研究了允许解决该问题的预言机[12]。为了避免使用预言机,我们引入了一个新的互连模型的基础上继电器。尽管中继模型似乎是相当限制,我们表明,它是普遍的,即,可以将任何弱连接拓扑变换成任何其它弱连接拓扑,这对于作为覆盖网络的有用互连模型是重要的。除此之外,我们的模型允许进程授予和撤销访问权,这就是为什么我们认为它超出了本文的范围。我们展示了如何实现中继层的自我稳定的方式,并确定属性协议需要满足,使中继层可以恢复,同时服务协议请求。
2018-09-13 cs.DC
Physical expander in Virtual Tree Overlay
在本文中,我们提出了一个新的建设constantdegree扩展动机他们的应用在P2P覆盖网络,特别是在鲁棒树覆盖的设计。我们的主要结果可以陈述如下。考虑一棵完全二叉树T,在叶节点和内部节点之间构造一个随机配对树。我们证明了通过收缩所有对(叶内部节点)从T得到的图G以高概率实现恒定的节点扩展。使用我们的结果在提高树覆盖的鲁棒性是直接的。也就是说,如果参与覆盖的每个物理节点管理耦合一个虚拟内部节点和一个虚拟叶节点的随机对,则物理节点层表现出具有高概率的恒定扩展。我们包括困难的随机树虚拟化,提出了一个本地的,自组织和流失弹性均匀随机配对算法O(log2 n)的运行时间。该算法的优点是不需要修改原有的树的虚拟覆盖(只控制物理节点和虚拟节点之间的映射)。因此,我们的计划是通用的,可以应用到大量的树覆盖实现。我们通过大量的模拟验证其在动态环境中的性能。
2011-02-24 cs.DC cs.DS
Balanced Overlay Networks (BON): Decentralized Load Balancing via Self-Organized Random Networks
我们提出了一种新的框架,称为平衡覆盖网络(BON),它提供了可扩展的,分散的负载均衡的分布式计算使用大规模池的异构计算机。基本上,BON将每个节点的可用计算资源信息编码在连接网络中节点的链路结构中。这种分布式编码是自组织的,每个节点通过随机游走采样管理其入度和本地连接。将传入作业分配给具有最多空闲资源的节点也通过经由短随机游走对节点进行采样来完成。大量的模拟表明,由此产生的高度动态和自组织的图结构可以有效地平衡整个大规模网络的计算负载。这些模拟涵盖了广泛的情况,包括可用计算资源的显著异质性和传入负载的高突发性。我们提供了分析结果,证明了BON的可扩展性,真正的大规模网络:特别是我们表明,在某些理想条件下,网络结构收敛到Erdos-Renyi(ER)随机图;我们的模拟结果,但是,表明该算法做得更好,结构似乎接近理想情况下的d-正则随机图。我们还将高负载的BON和著名的球仓随机负载均衡框架联系起来。
2006-01-16 cs.DC
On the Feasibility of Perfect Resilience with Local Fast Failover
为了提供高弹性并对链路故障快速反应,现代计算机网络支持完全分散的流重新路由,也称为本地快速故障转移。简而言之,本地快速故障转移算法的任务是仅使用本地可用信息为每个节点预定义快速故障转移规则。这些规则确定分组可能从其到达的每个输入链路以及本地链路故障的集合(即,发生在节点上的故障链路),分组应该在哪个输出链路上被转发。理想情况下,这种本地快速故障转移算法提供了一个完美的弹性确定性:从任何源发出的数据包可以到达任何目标,只要底层网络保持连接。Feigenbaum等人(ACM PODC 2012)以及Chiesa等人(IEEE/ACM Trans.Netw. 2017)表明,并不总是能够提供完美的弹性。有趣的是,目前对完美弹性的可行性知之甚少。本文重新审视了具有本地快速故障转移的完美恢复能力,无论是在源可以用于还是不能用于转发决策的模型中。我们首先得到几个相当普遍的不可能性结果:通过建立图子和弹性之间的联系,我们证明了它是不可能实现完美的弹性在任何非平面图;此外,虽然平面性是必要的,但它也不足以实现完美的弹性。在积极的一面,我们表明,图形家庭关闭下的链接细分允许简单而有效的故障转移算法,简单地跳过失败的链接。我们证明了这种技术,得到完美的弹性外平面图和相关的情况下,以及在源和目标的拓扑关闭故障后的情况下。
2020-11-03 cs.DC cs.NI
Infinite Unlimited Churn
我们研究了对等覆盖网络中的无限大客户流失问题。在这种扰动下,任意多个对等体可以同时请求加入或离开覆盖网络;而且这些请求可能永远不会停止。我们证明了无限的对抗性流失,其中进程可能只是退出覆盖网络,是无法解决的。我们专注于合作流失退出进程参与流失处理算法。我们定义的问题,无限的无限流失在这种情况下。我们将问题的公平版本(每个请求最终都得到满足)与不公平版本(只是保证进度)区分开来。我们专注于本地解决方案的问题,并证明了本地解决方案的公平无限无限的搅拌是不可能的。然后,我们提出并证明正确的算法UIUC,解决了不公平的无限无限流失问题的线性化对等覆盖网络。我们将此解决方案扩展到跳过列表和跳过图。
2016-08-02 cs.DC cs.DS cs.NI
Overlay Network Construction: Improved Overall and Node-Wise Message Complexity
National University of Singapore(新加坡国立大学)
研究分布式覆盖网络构建问题,在GOSSIP-reply和HYBRID两种模型下提出WFT构建协议,实现了O(n log n)的消息复杂度和对数级的轮数开销。
2025-10-12 cs.DC cs.DS
On the Price of Locality in Static Fast Rerouting
现代通信网络具有完全分散的流重路由机制,使它们能够对链路故障做出快速反应。本文回顾了这种本地快速重路由机制的基本算法问题。是否有可能实现完美的弹性,即,定义本地路由表,只要底层网络仍然连接,就可以保持连接?Feigenbaum等人(ACM PODC'12)和Foerster等人(SIAM APOCS'21)表明,不幸的是,这通常是不可能的。本文绘制了一个比较完整的景观图,探讨了完美复原力的可行性。我们首先展示了一个可能令人惊讶的大价格的本地静态快速重路由机制:即使当源和目的地保持连接的线性数量的链路不相交的路径后,链路故障,本地重路由算法无法找到他们中的任何一个,导致断开的路由级别。这促使我们研究的弹性图,排除某些密集的未成年人,如集团或一个完整的二分图,特别是,提供在不同的路由模型的完美弹性的可能性的表征。我们提供了进一步的见解,局部性的价格显示不可能的结果很少失败,并调查完美的弹性拓扑动物园网络。
2022-04-07 cs.DC cs.NI
A Bounding Box Overlay for Competitive Routing in Hybrid Communication Networks
在这项工作中,我们提出了一种新的方法,在无线Ad Hoc网络的竞争几何路由。一般来说,众所周知,任何在线路由策略在最坏的情况下都表现得很差。主要的困难是无线自组织网络中的未覆盖区域,我们将其表示为无线电空穴。无线电孔的复杂形状(例如之字形形状)使得局部几何布线甚至更加困难,即,当不知道自组织网络时,在去往目的地的方向上转发的消息可能陷入死胡同或者沿着很长的迂回路线被路由。为了获得有关无线电洞的位置和形状的知识,我们使用混合网络的方法。这种方法假设我们不仅可以利用ad hoc网络,还可以利用一些蜂窝基础设施,这些基础设施用于收集有关底层ad hoc网络的知识。通过蜂窝基础设施进行通信会产生费用,因为涉及到手机供应商。因此,我们使用的蜂窝基础设施只计算路由路径的ad hoc网络。实际的数据传输发生在ad hoc网络中。为了找到好的路由路径,我们的目标是计算一个抽象的ad hoc网络中的无线电洞抽象的边界框。边界框作为孔抽象的优点是,我们只需要考虑每个孔的恒定数量的节点。我们证明了边界框是一个合适的孔抽象,使我们能够找到$c$竞争路径的情况下,在ad hoc网络的不相交的边界框。在相交的边界框的情况下,我们通过模拟表明,我们的路由策略显着优于迄今为止最好的无线自组织网络的在线路由策略。最后,我们还提出了一个路由策略,是$c$竞争的情况下,成对相交的边界框。
2019-04-10 cs.DC
Publish-Subscribe Systems via Gossip: a Study based on Complex Networks
本文分析了采用非结构化P2P覆盖网络来构建网络订阅系统。我们考虑一个非常简单的分布式通信协议,基于八卦和本地知识,每个节点有关于其邻居的订阅。特别地,在接收(或生成)新事件时,节点将其发送到订阅与该事件匹配的那些邻居。此外,该节点将该事件传播给其“不感兴趣”的邻居,使得该事件可以通过覆盖层传播。提供了一种数学分析,以估计接收事件的节点的数量,基于网络拓扑结构,用户的数量和八卦概率。将这些结果与通过模拟获得的结果进行比较。结果表明,即使当订阅者的数量代表一个非常小的(但不可忽略的)网络节点的一部分,通过调整八卦概率的事件可以渗透通过覆盖。因此,使用非结构化网络。与简单的传播协议相结合,代表了一种构建对等网络订阅应用程序的可行方法。
2012-06-20 cs.DC cs.NI
Impact of Redundancy on Resilience in Distributed Optimization and Learning
Georgetown University(乔治城大学);École Polytechnique Fédérale de Lausanne (EPFL)(洛桑联邦理工学院)
针对含拜占庭故障和掉队者的服务器式分布式优化与学习场景,提出$(f, r; ε)$-弹性与冗余度概念,证明足够冗余可实现$(f, r; O(ε))$-弹性。
2023-12-14 cs.DC cs.LG
NearBucket-LSH: Efficient Similarity Search in P2P Networks
我们提出了NearBucket-LSH,一个有效的算法相似性搜索在大规模分布式在线社交网络组织为对等覆盖。由于通信是分布式系统中的一个主要考虑因素,我们专注于最大限度地减少网络成本,同时保证良好的搜索质量。我们的算法是基于局部敏感哈希(LSH),它限制了搜索对象的集合,称为桶,有很高的概率是类似的查询。更具体地说,NearBucket-LSH采用了在近桶中搜索的LSH扩展,提高了搜索质量,但也显著增加了网络成本。我们通过考虑LSH和P2P覆盖的内部结构,并利用它们的属性来满足我们的需求,从而降低了网络成本。我们表明,我们的NearBucket-LSH提高了搜索质量为一个给定的网络成本相比,以前的艺术。在许多情况下,搜索质量提高了50%以上。
2015-11-23 cs.DC cs.IR cs.SI