首页/论文/1102.4712

arXiv 1102.47122011-02-23cs.ITcs.CCmath.IT

用于低距离文件同步的有效协议

Effective protocols for low-distance file synchronization

Aleksandr Chuklin

备注：: Russian language, 25 pages, survey

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

摘要英文摘要相关论文

摘要：

假设我们有两个类似的文件存储在不同的计算机上。我们需要将文件从第一台计算机发送到第二台计算机，以尽量减少传输的比特数。本文提出了一个调查的结果已知的情况下，当文件是“相似”的意义上的汉明距离的这种通信复杂性问题。本文主要对20世纪90年代和21世纪初不同作者所取得的成果进行了系统的整理，并讨论了它与编码理论、散列算法以及计算机科学其他领域的联系。在特定情况下，我们提出了一些改进以前的建设。

英文摘要：

Suppose that we have two similar files stored on different computers. We need to send the file from the first computer to the second one trying to minimize the number of bits transmitted. This article presents a survey of results known for this communication complexity problem in the case when files are "similar" in the sense of Hamming distance. We mainly systematize earlier results obtained by various authors in 1990s and 2000s and discuss its connection with coding theory, hashing algorithms and other domains of computer science. In particular cases we propose some improvements of previous constructions.

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

阅读原文

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

本文内容

摘要英文摘要相关论文

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

继续探索

相关论文

数据同步：文件系统的完整理论解决方案

Data Synchronization: A Complete Theoretical Solution for Filesystems

一般的数据协调，特别是文件系统同步，缺乏严格的理论基础。本文提出了，第一次，一个完整的分析同步的两个副本的理论文件系统。同步有两个主要阶段：识别冲突和解决冲突。所有现有的（理论和实践）同步器都是基于操作的：它们使用一些基本原理或逻辑来定义如何解决冲突，而不考虑解决冲突对后续冲突的影响。相反，我们的方法是基于声明的：我们定义了什么构成了所有冲突的解决方案，并为每一种可能的情况下，我们证明了存在的操作/命令序列转换成一个共同的同步状态的副本。这些序列包括回滚某些本地更改的操作，然后是在其他副本上执行的操作。回滚操作集为用户提供了有关所建议的更改的清晰直观的信息，因此用户可以轻松地决定是接受这些更改还是请求其他替代方案。所有可能的同步状态都通过指定一组冲突、描述冲突需要解决的顺序的冲突的部分顺序以及每个决策对后续冲突的影响来描述。使用这种分类，不同的冲突解决策略的结果可以很容易地调查。

2022-11-12cs.ITmath.IT

一种高效的分布式信源编码文件同步方法

Efficient File Synchronization: a Distributed Source Coding Approach

在分布式信源编码框架下，研究了在解码器边信息与信源不同步的情况下重构信源序列的问题。出于实际应用的需要，我们假设删除过程是突发的，并用马尔可夫链来建模。以高概率重构源序列所需的最小速率的特征在于在信息理论表达式方面，其被解释为删除内容的信息量和删除的位置，减去“自然的秘密”，即，给定源和边信息的位置的不确定性。对于小的突发删除概率，计算了最小速率的渐近展开。

2011-07-22cs.ITmath.IT

基于组合设计的非编码PIR协议容量实现

Capacity Achieving Uncoded PIR Protocol based on Combinatorial Designs

在本文中，我们研究的问题，私人信息检索，用户试图从一个集群的$N$非串通服务器检索的$F$文件之一，而不透露所请求的文件的身份。在我们的设置中，服务器受到存储限制，因为它们只能存储每个文件的一小部分$μ=t/N$。此外，我们假设文件以未编码的方式存储。PIR协议的速率被定义为文件大小与下载的比特总数的比率。最大可实现速率称为容量。前面已经表明，当文件大小为$N^F$且完整文件存储在所有服务器上时，存在实现PIR协议的容量。当服务器只存储每个文件的一小部分时，这些结果被进一步扩展。然而，所需文件的子分组化$v$在服务器$N$的数量上是指数级的。我们提出了一种新的未编码的PIR协议的组合设计的基础上，也实现容量时，文件大小为$v \times t^F$。我们的协议有线性的子分组化的服务器的数量在存储约束的未编码的PIR计划以前的工作相比。在建议的PIR协议中，给定的系统被投射到多个实例的减少系统与复制的服务器具有完整的存储容量。存储在这些不同实例中的子文件被分别检索和提升，以解决原始系统的PIR问题。

2021-03-17cs.ITmath.IT

一种可扩展的空间平均协同时间同步协议

A Scalable Protocol for Cooperative Time Synchronization Using Spatial Averaging

时间同步是传感器网络运行的一个重要方面。然而，众所周知，同步误差在多跳上累积。这对大规模、多跳的传感器网络提出了挑战，因为大量的节点分布在广阔的区域。在这项工作中，我们提出了一个协议，使用空间平均，以减少大规模网络中的错误积累。我们提供了一个分析，以量化的同步改进实现空间平均，并发现在一个基本的合作网络中，偏斜和偏移方差减少约为$1/\bar{N}$，其中$\bar{N}$是合作节点的数量。对于一般的网络，仿真结果和基本的合作网络的结果进行比较，以说明同步性能的改善。

2006-11-01cs.ITcs.NImath.IT

利用线性码实现最大距离可分离私有信息检索容量

Achieving Maximum Distance Separable Private Information Retrieval Capacity With Linear Codes

我们提出了三个私人信息检索（PIR）协议的分布式存储系统（DSS）的数据存储使用任意线性代码。前两个协议，命名为协议1和协议2，实现与非共谋节点的情况下的隐私。协议1需要的文件大小是系统中文件数量的指数，而协议2需要的文件大小与文件数量无关，因此更简单。我们证明，对于某些线性码，协议1实现了最大距离可分（MDS）PIR容量，即，对于使用MDS码来存储任何给定（有限和无限）数量的文件的DSS的最大PIR速率（每单位下载数据的检索存储数据量的比率），并且协议2实现渐近MDS-PIR容量（在DSS中具有无限大数量的文件）。特别是，我们提供了一个必要和充分条件的代码，以实现MDS-PIR容量与协议1和2，并证明了循环码，Reed-Muller（RM）码，和一类距离最优的局部重建码实现有限MDS-PIR容量（即，具有任何给定数量的文件）和分别具有协议1和2的渐近MDS-PIR容量。此外，我们提出了第三个协议，协议3，多个勾结节点的情况下，这可以被看作是一个改进的协议最近推出的Freij-Hollanti等人。类似于非合谋的情况下，我们提供了一个必要和充分条件，以实现最大可能的PIR率的协议3。此外，我们提供了一个特定的类的代码，是适合于这个协议，并表明RM码实现最大可能的PIR率的协议。对于所有这三个协议，我们提出了一个算法来优化他们的PIR率。

2019-02-11cs.ITmath.IT

利用文件切片和网络编码实现实时八卦

Timely Gossiping with File Slicing and Network Coding

我们考虑一个系统组成的大型网络的$n$用户和一个图书馆的文件，其中用户间的通信建立在八卦机制的基础上。每个文件最初只存在于一个节点上，该节点被指定为文件\emph{source}。源根据任意分布实时的被更新为文件的较新版本，并且网络中的其他用户希望获得文件的最新可能版本。我们提出了一类gossip协议，实现了$O(1)$年龄在一个典型的节点在一个单一的文件系统和$O(n)$年龄在一个典型的节点为一个给定的文件在一个$n$ -文件系统。我们表明，文件切片和网络编码为基础的协议属于所提出的类协议。数值评估结果证实了上述界限。

2022-02-01cs.ITcs.NIeess.SP

更多相关论文收起更多论文

服务器合谋下量子私有信息检索的容量

Capacity of Quantum Private Information Retrieval with Colluding Servers

量子私有信息检索（QPIR）是一种协议，其中用户通过下载量子系统从$\mathsf{n}$非通信服务器检索多个文件中的一个，而不透露检索的是哪个文件。作为具有更强安全性要求的QPIR的变体，对称QPIR是其中除了目标文件之外没有其他文件被泄露给用户的协议，并且$\mathsf{t}$ -私有QPIR是其中即使至多$\mathsf{t}$服务器可能合谋泄露身份，目标文件的身份也被保密的协议。QPIR容量是文件大小与下载的量子系统大小的最大比值，我们证明了对于任何$1\leq \mathsf{t}< \mathsf{n}$，对称的$\mathsf{t}$ -私有QPIR容量都是$\min\{1,2(\mathsf{n}-\mathsf{t})/\mathsf{n}\}$.我们构造了一个容量实现QPIR协议的稳定器形式主义，并证明了我们的协议的最优性。建议的能力是大于经典的对应。

2021-04-22cs.ITmath.ITquant-ph

弱私有信息检索

Weakly-Private Information Retrieval

私有信息检索（PIR）协议使得可以从数据库中检索文件，而不公开关于被检索文件的身份的任何信息。近年来，从信息理论的角度对这些协议进行了严格的探索。虽然现有的协议严格规定，没有信息泄露的文件的身份，这项工作开始研究的权衡，可以通过放松完美的隐私的要求。如果用户愿意泄漏一些信息的身份检索文件，我们研究如何PIR率，以及上传成本和访问的复杂性，可以提高。对于复制服务器的特殊情况下，我们提出了两个弱私人信息检索计划的基础上，最近的两个PIR协议和一个家庭的计划基于分区。最后，我们比较了所提出的计划的性能。

2019-05-06cs.ITmath.IT

一种确定性多项式时间删除同步协议

A Deterministic Polynomial-Time Protocol for Synchronizing from Deletions

在本文中，我们考虑的节点之间的同步问题$A$和$B$，通过双向通信信道连接。{Node $A$ }包含长度为$n$的二进制文件$X$，而{节点$B$ }包含通过以小的删除率$β$从$X$随机删除比特而生成的二进制文件$Y$。节点$A$或节点$B$不知道删除比特的位置。我们提供了一个确定性的节点$A$和$B$之间的同步方案，需要一个总的$O(nβ\log \frac{1}β)$传输位和重建$X$在节点$B$的错误概率是指数低的大小$X$。按顺序，我们的方案的速率匹配该信道的最佳速率。

2013-08-21cs.ITmath.IT

基于递归内容相关叠瓦的可扩展字符串协调

Scalable String Reconciliation by Recursive Content-Dependent Shingling

我们考虑的问题，调和类似的，但远程，字符串与最小的通信复杂性。这个“字符串协调”问题是各种网络应用程序的基本构建块，包括那些维护大规模分布式网络和执行远程文件同步的应用程序。我们提出了一种新的递归内容相关的搭叠（RCDS）协议，该协议在计算上适用于大型字符串，并与远程字符串之间的编辑距离呈线性关系。我们提供了Rsync的性能比较，Rsync是最流行的文件同步工具之一。我们的实验表明，在最小的工程量下，RCDS在协调GitHub上5000个顶级星级git存储库中约51%的发布版本方面优于经过大量优化的Rsync。这种改进对于那些频繁但很小的更新的存储库来说尤其明显。

2019-10-01cs.ITmath.IT

用于删除、插入和同步的猜测和检查代码

Guess & Check Codes for Deletions, Insertions, and Synchronization

我们考虑的问题，构建代码，可以纠正$δ$删除发生在任意二进制字符串长度$n$位。Varshamov-Tenengolts（VT）码是1965年提出的一种零错单删$(δ=1)$纠错码，具有渐近最优冗余度。寻找$δ\geq 2$缺失的相似编码仍然是一个悬而未决的问题。在这项工作中，我们放松了标准零误差（即，通过假设$δ$删除（或插入）的位置独立于码字，来满足最坏情况）的解码要求。我们的贡献是一个新的家庭的显式代码，我们称之为猜测和检查（GC）代码，可以纠正高概率高达一个常数的$δ$删除（或插入）。GC码是系统的，并且具有确定性的多项式时间编码和解码算法。我们还描述了GC代码在文件同步中的应用。

2018-05-24cs.ITmath.IT

多服务器弱隐私信息检索

Multi-Server Weakly-Private Information Retrieval

私有信息检索（PIR）协议确保用户可以从数据库下载文件，而不会向存储数据库的服务器泄露关于所请求文件的身份的任何信息。虽然现有的协议严格规定，没有信息泄露的文件的身份，这项工作开始研究的权衡，可以通过放松完美的隐私要求。我们将这样的协议称为弱私有信息检索（WPIR）协议。特别是，对于多个noncoluding复制服务器的情况下，我们研究了如何下载速率，上传成本，和访问的复杂性，可以改善时，放松充分的隐私约束。为了量化关于所请求文件的身份的信息泄漏，我们考虑互信息（MI）、最坏情况信息泄漏和最大泄漏（MaxL）。我们提出了两个WPIR计划，表示为方案A和方案B，基于最近的两个PIR协议，并表明前者的下载速率可以通过求解凸优化问题进行优化。我们还表明，方案A实现了改进的下载速率相比，最近提出的方案由Samy等人。根据所谓的$ε$隐私度量。此外，一个家庭的计划的基础上划分。此外，我们提供了一个信息理论上的逆界的最大可能的下载速率的MI和MaxL隐私指标的查询和答案的字母表大小的实际限制下。对于两个服务器和两个文件，在MaxL度量下，边界是紧的，这在此特定情况下确定了WPIR容量。最后，我们比较了所提出的方案的性能和他们的差距的逆界。

2021-11-02cs.ITmath.IT

基于图存储的弱隐私信息检索

Weak Private Information Retrieval for Graph-based Storage

International Institute of Information Technology, Hyderabad（印度信息科技大学海德拉巴分校）

研究基于图存储的弱隐私信息检索问题，提出任意图的G-WPIR方案，确定其在不同泄露度量下速率与隐私的权衡，采用最小子分组化和简单概率查询实现平滑权衡，并扩展到特殊图确定相应权衡。

2026-07-24cs.CRcs.ITmath.IT

IoT设备区块链同步通信流量分析

Analysis of the Communication Traffic for Blockchain Synchronization of IoT Devices

区块链是一种独特的技术，适合在物联网（IoT）生态系统中支持大量交易和智能合约，这要归功于分散的会计机制。在区块链网络中，账户的状态由验证器节点存储和更新，以点对点的方式互连。物联网设备的特点是相对较低的计算能力和低功耗，以及零星和低带宽的无线连接。IoT设备连接到一个或多个验证器节点以观察或修改帐户的状态。为了与账户的最新状态进行交互，设备需要与验证器节点存储的区块链副本同步。在这项工作中，我们描述了通用架构和同步协议，使物联网端点同步到区块链，具有不同的通信成本和安全级别。我们的模型和分析特征的同步协议所产生的流量，并通过数值模拟研究功耗和同步权衡。据我们所知，这是第一项严格模拟无线连接在区块链驱动的物联网系统中的作用的研究。

2018-02-12cs.CRcs.ITmath.IT

改进的用于从删除中同步的交互协议

Improved Interactive Protocol for Synchronizing From Deletions

本文提出一种改进的交互协议，通过整合多删除纠正码和优化分区技术，降低通信成本，实现低冗余的数据同步。

2025-12-07cs.ITmath.IT

基于MDS阵列码的实用私有信息检索

Towards Practical Private Information Retrieval from MDS Array Codes

私有信息检索（PIR）是从$N$服务器中私有地检索出$M$原始文件中的一个的问题，即，每个单独的服务器对用户正在请求的文件一无所知。通常，$M$文件由最大距离可分离（MDS）代码复制或编码，然后跨$N$服务器存储。与单纯的复制相比，MDS编码服务器可以显著降低存储开销。特别地，来自最小存储再生（MSR）编码服务器的PIR可以同时减少修复故障服务器时的修复带宽。来自MSR编码服务器的现有PIR方案要么需要大子分组化水平，要么不能实现容量。本文提出了一种基于MDS阵列码的PIR协议，其中将MSR编码服务器的PIR作为特殊情况。特别是，非串通，诚实，但好奇的服务器的情况下被认为是。新的PIR协议的检索率达到了MDS/MSR编码服务器的PIR容量。通过选择不同的MDS阵列码，新的PIR协议与现有的协议相比可以具有一些优点，例如，1)小的子分组化，2）（接近）最佳修复带宽，3）可在二进制字段$\mathbf{F}_2$上实现。

2020-03-12cs.ITmath.IT

基于图的复制中实现信息论隐私信息检索的最小分包方案

Private Information Retrieval for Graph-based Replication with Minimal Subpacketization

International Institute of Information Technology, Hyderabad（印度理工学院海德拉巴分校）

本文提出两种新的图基复制数据库隐私信息检索方案，分别适用于星图和一般图，通过最小化分包率并提高检索率，提升隐私保护效率。

2026-01-15cs.CRcs.ITmath.IT

图复制系统中的私有信息检索

Private Information Retrieval in Graph Based Replication Systems

在专用信息检索（PIR）协议中，用户可以从数据库下载文件，而不向每个单独的服务器泄露文件的身份。如果即使服务器中的$t$相互勾结，文件的身份仍保持隐藏，则PIR协议称为$t$ -私有。基于图的复制是一种简单的技术，在理论和实践中都很流行，用于实现存储系统中的擦除鲁棒性。在这种技术中，每个文件都被复制到两个或多个存储服务器上，从而产生一个（超）图结构。本文研究了基于图的复制系统中的私有信息检索协议。这项工作的主要兴趣是最大限度地提高参数$t$，特别是，了解的勾结集出现在一个给定的图的结构。我们的主要贡献是一个$2$ -复制计划，保证完美的隐私，从非循环集的图，并保证部分隐私的存在下，循环。此外，通过提供一个上界，它表明，该计划的PIR率是最多的一个因素，从它的最佳值为一个重要的家庭的图。最后，我们将我们的结果扩展到更大的复制因子和基于图的编码，这是一种类似的技术，具有更小的存储开销和更大的PIR率。

2019-03-04cs.CRcs.ITmath.IT