Erasure codes with simplex locality
我们专注于分布式存储的纠删码。分布式存储设置由于对解码器的容易修复要求而强加局部性要求。我们首先建立的代码的生成矩阵方面的各种局部性的特性。这些导致了局部性的界限和最优性的概念。然后,我们研究了一个家庭的非二进制码的单形结构的局部性。我们研究了它们的最优性,并设计了几种易于修复的解码方法。特别是,我们表明,任何可纠正的擦除模式可以解决容易修复。
2014-03-12 cs.IT math.IT
Locally Encodable and Decodable Codes for Distributed Storage Systems
我们认为在分布式存储系统(DSS)的编码和解码操作的本地性,并提出了一类新的代码,称为本地可编码和可解码的代码(LEDC),提供了更高程度的操作本地性相比,目前已知的代码。对于一个给定的局部结构,我们推导出一个上界的全球距离,并证明存在一个最佳的LEDC足够大的字段大小。此外,我们还构造了两个家庭的最佳LEDC字段的大小线性码长。
2015-04-20 cs.IT math.CO math.IT
Codes with Combined Locality and Regeneration Having Optimal Rate, $d_{\text{min}}$ and Linear Field Size
本文研究了具有全符号局部性的矢量码,其中局部码是最小带宽再生码(MBR)或最小存储再生码(MSR)。在第一部分中,我们提出了矢量码与全符号MBR局部性,对于所有参数,具有最佳的最小距离和最佳速率。这些代码结合了分布式存储文献中两种流行代码的思想,即乘积矩阵代码和Tamo-Barg代码。在第二部分中,处理具有全符号MSR局部性的代码,我们遵循基于成对耦合变换的方法来获得最佳的最小距离和最佳速率,对于一系列参数。本文提出的所有码构造都具有随码长$n$线性增长的低字段大小。
2018-04-02 cs.IT math.IT
Codes with Locality in the Rank and Subspace Metrics
我们将局部性的概念从汉明度量扩展到秩度量和子空间度量。我们的主要贡献是构造了一类在秩度量上具有局部性约束的数组码。我们构造这种代码的动机源于设计用于从相关和/或混合(即,完全和部分)故障。具体地,所提出的本地秩度量码可以从影响存储系统的有限数量的行和/或列的“交叉错误和擦除”中本地恢复。我们还得到了一个类似Singleton的最小秩距离上界的(线性)代码与“秩局部性”的限制。我们提出的结构实现了这一界限的参数范围很广。该结构建立在Tamo和Barg的方法上,用于构造具有最优最小汉明距离的局部可修码。最后,我们构造了一类在子空间度量上具有局部性约束的常维子空间码(也称为格拉斯曼码)。的关键思想是表明,格拉斯曼代码的局部性可以很容易地构造从一个秩度量代码的局部性,通过使用提升方法提出的席尔瓦等人。我们提出了一个应用程序,这样的代码的分布式存储系统,其中节点连接在一个网络,可以引入错误和擦除。
2019-05-05 cs.IT math.IT
Hierarchical Coding to Enable Scalability and Flexibility in Heterogeneous Cloud Storage
为了容纳来自各种可能独立的源的不断增长的数据以及实际应用中数据使用率的动态性质,现代云数据存储系统需要是可扩展的、灵活的和异构的。具有层次局部性的代码由于其在减少云存储中的平均读取时间方面的有效性而被深入研究。在本文中,我们提出了第一个代码与层次局部性,实现异构云存储的可扩展性和灵活性,使用小字段大小。我们提出了一个双层建设利用所谓的柯西Reed-Solomon码。然后,我们开发了一个三层结构的基础上,这个双层代码,这种结构可以很容易地推广到任何层次结构与更多的层数,因为它自然实现了云存储系统的可扩展性。
2019-05-06 cs.IT math.IT
On the Average Locality of Locally Repairable Codes
具有维数$k$、长度$n$和最小距离$d$的线性分组码被称为具有局部性$r$的局部可修复码(LRC),如果它可以通过至多$r$其他编码符号来检索任何编码符号。LRC最近被提出并在实践中用于分布式存储系统(DSS),如Windows Azure存储和Facebook HDFS-RAID。建立了LRC($r$)最大局域性的理论界。LRC($\overline{r}$)的\textit{average}局部性直接影响昂贵的修复带宽、磁盘I/O和缺失数据块修复过程中涉及的节点数量。研究$\overline{r}$的文献中存在空白。本文建立了任意$(n,k,d)$ LRC的$\overline{r}$的下界。此外,我们得到了一个严格的下界$\overline{r}$的实际情况下,其中的编码率$(R=\frac{k}{n})$大于$(1-\frac{1}{\sqrt{n}})^2$。最后,我们设计了三个类的LRC,实现了$\overline{r}$上得到的界限。与现有的LRC相比,我们提出的编码提高了平均局部性,而不牺牲码率或最小距离等关键参数。
2017-01-23 cs.IT math.IT
Distributed Storage Systems based on Equidistant Subspace Codes
提出了基于等距等维码的分布式存储系统。这些等距码基于Plücker嵌入,这在修复和重建算法中至关重要。这些系统具有一些有用的特性,如高故障恢复能力,最小带宽,低存储,简单的代数修复和重建算法,良好的局部性,以及与小字段的兼容性。
2014-06-24 cs.IT math.IT
A family of self-orthogonal divisible codes with locality 2
本文利用有限域上的迹和范数函数构造了一族具有局部性2的自正交可分码,通过Gaussian和确定了三种情形下的重量分布,并推导出若干最优线性码及局部可恢复码,可应用于格构造与分布式存储。
2024-04-29 cs.IT math.IT
Easy repair via codes with simplex locality
针对分布式存储系统中多擦除模式解码的低计算量需求,本文提出简易修复特性,构建了与单纯形码相关的不同码率分组码和单位记忆卷积码,并阐述其并行修复条件以提升系统访问速度。
2025-04-15 cs.IT math.IT
Locality in Crisscross Error Correction
覆盖度量适合于描述对阵列中的相关错误,特别是交叉错误的恢复能力,这使得它对诸如分布式数据存储(DDS)的应用很感兴趣。在这项工作中,我们考虑的代码设计的覆盖度量具有局部性,这意味着丢失的符号可以通过使用只有几个其他(本地)符号恢复。我们推导并证明了具有局部性的覆盖度量码的最小覆盖距离的一个类Singleton界,并提出了一个实现界的构造。此外,我们探讨我们的建设相比,一个已知的建设基于秩度量码的性能。
2018-09-04 cs.IT math.IT
Locally Repairable Codes with Unequal Local Erasure Correction
当分布式存储系统中的节点发生故障时,需要及时修复以保持系统的完整性。虽然典型的纠删码可以提供优于复制的显著存储优势,但是它们遭受较差的修复效率。局部可修复码(LRC)通过减少参与修复过程(局部性)的节点数量来解决这个问题,代价是减少最小距离。在本文中,我们研究了局部码具有任意距离要求的LRC的局部性和最小距离之间的权衡。与现有的方法,其中每个节点上施加的本地和本地距离的要求是相同的,我们允许的要求从节点到节点任意变化。这样的属性对于具有非均匀特性的分布式存储系统可以是有利的。我们提出了Singleton型距离上界,并提供了一个最佳的代码建设这些界限。此外,可行速率区域的特征在于不依赖于距离的维数上界。
2018-07-07 cs.IT math.IT
Download Time Analysis for Distributed Storage Codes with Locality and Availability
本文介绍了技术分析预期的下载时间在分布式存储系统,采用系统的可用性代码。通过这些代码,可以通过包含对象和多个恢复组的系统服务器访问热数据。当收到对象请求时,可以将其复制(分叉)到系统服务器和所有恢复组。我们首先考虑低流量的制度,并提出了封闭形式的表达式的下载时间。通过比较系统的可用性,最大距离可分离(MDS),和复制代码,我们证明了可用性代码可以减少下载时间在某些设置中,但并不总是最佳的。在高流量状态下,系统由多个相互依赖的Fork-Join队列组成,使得精确分析变得困难。因此,我们提出了上界和下界的下载时间,和M/G/1队列近似几种情况下的利益。通过大量的数值模拟,我们评估我们的界限,并证明了M/G/1队列近似具有很高的精度。
2021-03-10 cs.DC cs.IT cs.PF
Repair Locality From a Combinatorial Perspective
修复局部性是分布式存储系统中纠删码的一个理想特性。最近,在修复局部性的定义中,提出了不同结构的局部修复群。本文引入再生集的概念来刻画局部修复群。位置$r^{(δ-1)}$的定义(即,在最一般的再生集结构下,给出了具有修复容限$δ-1$的局部性$r$.所有以前研究过的局部性都是这个定义的特例。在再生集的框架下,重新研究了以往提出的三个有代表性的局部性概念,并以统一简洁的形式重新证明了它们各自的最小距离上界.此外,对于一类具有局部性$r^{(2)}$和高信息率的线性码&平方码,给出了更精确的距离界,并得到了达到最佳距离界的显式码构造.
2014-01-12 cs.IT math.IT
Achieving Arbitrary Locality and Availability in Binary Codes
如果存在$t$不相交组,则$(n,k)$码的第$i$个坐标被称为具有局部性$r$和可用性$t$,每个不相交组最多包含可以一起恢复第$i$个坐标的值的其它坐标。这个属性对于分布式存储系统的代码特别有用,因为它允许热数据的本地修复和并行访问。本文对任意正整数$r$和$t$构造了一个长度为$\binom{r+t}{t}$的二元线性码,它对所有坐标都具有局部性$r$和可用性$t$.该码的信息率达到$\frac{r}{r+t}$,它总是高于直积码,唯一已知的结构,可以实现任意的位置和可用性。
2015-01-18 cs.IT math.IT
Explicit MBR All-Symbol Locality Codes
在分布式存储系统中,节点失效是不可避免的.为了在面对这种故障时能够进行有效的修复,已知两种主要技术:最小化总修复带宽的代码;以及具有局部性的代码,其最小化参与修复过程的节点的数量。本文着重于再生码的局部性,使用预编码的基础上Gabidulin码,并提出了建设,利用最小带宽再生(MBR)的本地码。该结构实现了最大的弹性(即,最佳最小距离)并具有最大容量(即,最大速率)。最后,相同的预编码机制可以与部分重复码的子类相结合,以同时实现最大的弹性和传输修复。
2013-05-27 cs.IT math.IT
The minimum linear locality of linear codes
大约九年前,本地可恢复代码(LRC)被提出用于恢复分布式和云存储系统中的数据。迄今为止,对LRC的研究已经取得了很大的进展。然而,关于线性码的最小线性局部性问题,目前还缺乏一般性的理论。此外,许多已知的线性码族的最小线性局部性在文献中没有研究。基于这两个事实,本文发展了关于线性码的最小线性局部性的一般理论,并研究了一类线性码的最小线性局部性,如$q$ -ary Hamming码,$q$ -ary Simplex码,广义Reed-Muller码,卵形码,最大弧码,扩展超卵形码和近MDS码.本文提出了许多类距离最优和维数最优的LRC。本文所发展的一般理论解决了许多线性码族的最小线性局部性问题。
2021-02-01 cs.IT math.IT
Some results on locally repairable codes with minimum distance $7$ and locality $2$
局部可修码在分布式存储系统中起着重要的作用。具有小局部性的LRC具有其自身的优势,因为在恢复被擦除符号时需要较少的可用符号。本文证明了具有最小距离$d\geq 7$的LRC维数的一个上界。证明了$d=7$,$r=2$在$q^2+q+3$的几乎最优LRC长度的一个上界.然后,基于$t$-spread结构,给出了一种构造几乎最优LRC的算法,当$q\geq 4$的维数达到上述上界时,该LRC具有$d=7$,$r=2$和长度$n\geq 3\lceil\frac{\sqrt{2}q}{3}\rceil$.
2022-07-06 cs.IT math.IT
On minimum distance of locally repairable codes
分布式和云存储系统用于可靠地存储大规模数据。擦除码最近被提出并用于现实世界的分布式和云存储系统,如Google文件系统、Microsoft Azure存储和Facebook HDFS-RAID,以提高可靠性。为了减少修复带宽和磁盘I/O,一类称为局部可修复码(LRC)的纠删码被提出,与其他纠删码相比,它具有较小的局部性。虽然LRC具有小的局部性,但与Singleton界相比,它们具有更低的最小距离。因此,寻求最大可能的最小距离LRC一直是许多最近的研究课题。在本文中,我们研究了一类LRC的最大可能的最小距离,并评估他们的可扩展性。此外,我们比较了我们的结果与文献中的存在界。
2017-02-17 cs.IT math.IT
Repair Locality with Multiple Erasure Tolerance
在分布式存储系统中,具有局部性$r$的擦除码是优选的,因为可以通过访问至多$r$其它坐标来恢复坐标,这又大大降低了小$r$的盘I/O复杂性。然而,当为了恢复而访问的某些$r$坐标也被擦除时,局部修复可能是无效的。为了克服这个问题,我们提出了$(r,δ)_c$ -局部提供$δ-1$本地修复选项的坐标。因此,修复位置$r$可以容忍$δ-1$擦除。我们推导出一个上界的最小距离$d$的任何线性$[n,k]$码的信息$(r,δ)_c$ -局部性。对于一般的参数,我们证明了存在的代码,达到这个界限时,$n\geq k(r(δ-1)+1)$,这意味着紧这个界限。虽然Prakash等人定义的局部性$(r,δ)$提供了与我们定义的相同的局部性和局部修复容限,但具有$(r,δ)_c$ -局部性的代码被证明在最小距离方面具有更大的优势。特别地,我们构造了一类具有全符号$(r,δ)_c$ -局部性的码,其中最小距离增益为$Ω(\sqrt{r})$,信息率接近1。
2013-06-20 cs.IT math.IT
Locally Repairable Codes
用于大规模应用的分布式存储系统通常使用复制来提高可靠性。近年来,纠删码被用来减少大量的存储开销,同时提高数据的可靠性。现成的纠删码的主要限制是它们在单节点故障事件期间的高修复成本。在这个领域中的一个主要的公开问题是设计代码,使得{ \it i)}是修复有效的,并且{ \it ii)}实现任意高的数据率。在本文中,我们探讨修复度量{ \it局部性},它对应于在一个{ \color{black}单}节点修复所需的磁盘访问的数量。根据这个指标,我们描述了一个信息理论的权衡,绑定在一起的地方,代码的距离,和每个节点的存储容量。我们证明了最优{ \it局部可修码}(LRC)的存在,实现了这种权衡。可扩展性证明使用了一个局部感知的流图小工具,这导致了一个随机的代码构造。最后,我们提出了一个最佳的和明确的LRC,实现任意高的数据速率。我们的局部最优构造是基于里德-所罗门块的简单组合。
2014-05-03 cs.DC cs.IT cs.NI
Spatially Coupled LDPC Codes with Sub-Block Locality
提出了一种基于实际存储应用的空间耦合低密度奇偶校验(SC-LDPC)码。SC-LDPCL码(后缀“L”代表局部性)可以在比全码块小得多的子块级别上进行局部解码,从而提供对编码信息的灵活访问以及全局全块解码的强可靠性。为此,我们提出了SC-LDPCL代码的结构,允许控制本地和全局校正性能之间的权衡。除了局部和全局解码,本文开发了一个密度演化分析的解码模式,我们称之为半全局解码,其中解码器可以访问所请求的子块加上周围的子块的规定数量。SC-LDPCL码也研究了信道模型下的变化,跨子块,推导出解码性能下限。
2020-09-26 cs.IT math.IT
Irregular Recovery and Unequal Locality for Locally Recoverable Codes with Availability
如果一个代码的每个坐标都可以从多个不相交的坐标集合(称为恢复集合)中恢复出来,则该代码被称为具有可用性的局部可恢复代码(LRC)。坐标的恢复集的大小的向量被称为其恢复轮廓。在这项工作中,我们考虑了两种不同设置下的可用性LRC:(1)不规则恢复:对于所有坐标保持固定的非恒定恢复曲线,(2)不平等的位置:可以随坐标变化的规则恢复曲线。对于每一个设置,我们推导出的最小距离,概括以前已知的边界的情况下,不规则或不同的恢复配置文件的界限。对于定期和固定的恢复配置文件的情况下,我们表明,一个特定的塔莫-巴格多项式的评估建设是最佳的所有符号的地方,我们提供的奇偶校验矩阵结构的信息局部性与可用性。
2017-05-14 cs.IT math.IT
Optimal Locally Repairable Codes and Connections to Matroid Theory
PB级分布式存储系统目前正在向擦除码过渡,以实现更高的存储效率。像Reed-Solomon这样的经典代码对于分布式环境来说是非常次优的,因为它们在单一故障事件中的开销很高。局部可修码是一类新的具有修复效率的码族。特别是,LRC最小化参与单个节点修复的节点的数量,在此期间,它们生成小的网络流量。两个大规模分布式存储系统已经实现了不同类型的LRC:Windows Azure存储和Facebook使用的Hadoop分布式文件系统RAID。LRC的基本界限,即给定代码局部性的最佳可能距离,是最近发现的,但很少有明确的结构存在。在这项工作中,我们提出了一个明确的和最佳的LRC,是简单的构造。我们的建设是基于分组里德所罗门(RS)编码符号,以获得RS编码符号在一个更大的有限域。然后,我们将这些RS符号分成小组,并使用简单的本地代码重新编码它们,提供低修复局部性。为了分析码的最优性,我们得到了关于由代码生成器矩阵表示的拟阵的一个新结果。
2013-11-06 cs.IT math.IT
Node Repair for Distributed Storage Systems over Fading Channels
分布式存储系统和相关的存储代码可以有效地存储大量数据,同时确保在节点故障的情况下可检索数据。这种系统的研究,特别是有限域上存储码的设计,假设节点通信的物理信道是无差错的。例如,在无线存储系统中,情况并非总是如此。我们研究了分布式存储系统中节点修复期间子数据包被错误修复的概率,其中节点通过AWGN或Rayleigh衰落信道进行通信。渐近概率(SNR的增加),一个节点被错误地修复示出完全由DSS的修复局部性和无线信道的符号出错率确定。最后,我们提出了一些设计标准的物理层编码在这种情况下,并使用它来计算最佳旋转QAM星座用于无线分布式存储系统。
2014-09-25 cs.IT math.IT
Matroid Theory and Storage Codes: Bounds and Constructions
最近对分布式存储系统(DSS)的研究揭示了拟阵理论和局部可修码(LRC)之间有趣的联系。本章的目标是向读者介绍拟阵和多拟阵,并说明它们与分布式存储系统的关系。虽然许多结果在本质上是相当技术性的,但通过简单的例子来提高可访问性。本章嵌入了LRC的所有基本特征,即局部性,可用性和层次结构以及相关的广义单例边界。
2017-09-05 cs.IT math.CO math.IT
The augmented codes of a family of linear codes with locality 2
本文推广了Ding和Ding的线性码类并研究其增广码,利用Gauss和确定参数与重量分布,证明其自正交、局部性为2且为射影码,在分布式存储中实用并得到多个最优码。
2024-04-29 cs.IT math.IT
Simplex Queues for Hot-Data Download
在云存储系统中,热数据通常在多个节点上复制,以便适应多个用户的同时访问以及增加系统的容错。最近的云存储研究已经提出使用可用性代码,这是一类特殊的擦除代码,作为存储热数据的更有效的存储方式。这些代码可以从多个小型不相交的服务器组中恢复数据。恢复组的数量称为可用性,每个组的大小称为代码的位置。到目前为止,我们对代码局部性和可用性如何影响数据访问时间的了解非常有限。从这些系统下载数据涉及多个并行操作的fork-join队列,这使得访问时间的分析成为一个非常具有挑战性的问题。在本文中,我们提出了一个近似分析的存储系统中,采用单工码,这是一个重要的,在一定意义上的最佳类的可用性代码的数据访问时间。我们考虑和比较三种策略,在分配下载请求的服务器,第一个积极利用存储的可用性更快的下载,第二个只实现负载均衡,最后一个采用存储的可用性只为热数据下载,而不会产生任何负面影响的冷数据下载。
2018-04-17 cs.IT cs.PF math.IT
Repairing Schemes for Tamo-Barg Codes
本文研究了带局部性的机架感知存储系统中局部修复码的擦除修复问题,提出了两种降低Tamo-Barg码修复带宽的方案,引入割集界证明其中一种方案最优,并探讨了部分修复问题的方案与界限。
2024-07-26 cs.IT math.IT
Codes with Local Regeneration
再生码和局部码是最近提出的两种方案,以确保分布式存储网络中的数据汇集和可靠性。在试图修复故障节点的情况下,重新生成代码试图最小化为节点修复下载的数据量,而具有局部性的代码试图最小化访问的帮助节点的数量。本文给出了一类局部码是再生码的具有局部性的向量码的几种构造方法,它们具有这两种优点。我们推导出这类代码的最小距离上界,并表明,建议的建设实现这一界限。该构造包括本地再生码对应于MSR的情况以及再生码的存储-修复-带宽折衷曲线上的MBR点。还包括固定块长度和最小距离的各种代码结构的性能比较。
2013-02-04 cs.IT math.IT
Two-layer Locally Repairable Codes for Distributed Storage Systems
本文提出了一种适用于分布式存储系统的具有最优最小距离的局部可修码。采用两层编码结构保证数据重构和指定的修复局部性。数据首先在第一层中通过任何现有的最大距离可分离(MDS)码进行编码,然后在第二层中将编码的符号分成不重叠的组并通过MDS阵列码进行编码。第二层中的编码为局部修复提供了足够的冗余,而整个代码基于来自两层的冗余执行数据恢复。我们的代码可以构建在一个有限的字段中的DSS中的节点总数的大小线性增长,并促进有效的降级读取。
2014-08-14 cs.IT math.IT
Local Codes with Cooperative Repair in Distributed Storage System
目前,对局部修复码的研究主要局限于对每个修复组内失效节点的修复。但如果出现整个修复组都失败的极端情况,则需要将存储在失败组中的本地代码作为一个整体进行恢复。本文提出了一种基于最小存储再生(MSR)码构造局部码的协作修复局部码,以实现故障群的修复。具体地说,提出的具有协同修复的局部码在奇偶校验符号之间构造了一种相互交织的结构,即每个局部码的奇偶校验符号(称为分布式局部奇偶校验)可以由其相邻两个局部码中的MSR码的奇偶校验符号生成。利用该结构,失效的局部群可以由其相邻的局部群中修复局部性较低的局部群进行协作修复,同时推导出了具有协作修复的局部码的最小距离.理论分析和仿真实验表明,与局部再生码(如MSR-局部码和MBR-局部码)相比,所提出的协作修复局部码在带宽开销和局部组失效情况下的修复局部性方面具有优势.
2016-02-09 cs.DC cs.IT math.IT
Repairing Generalized Reed-Muller Codes
在分布式存储系统中,修复带宽和局部性都是评价存储代码性能的重要修复代价指标。最近,Guruswami和Wooters提出了一种基于Reed-Solomon码的单次故障最优线性修复方案,改进了经典修复方案的带宽。本文研究了具有良好局部性的广义Reed-Muller(GRM)码的修复带宽。我们将Guruswami和Wooters的修复方案推广到单次失效的GRM码,当子域很小时,它具有接近下界的非平凡带宽。我们进一步扩展了分布式和集中式修复模型中的多故障修复方案,并通过考虑不同的擦除模式来计算带宽期望。
2019-06-25 cs.IT math.CO math.IT
Repeated-root Constacyclic Codes with Optimal Locality
如果一个代码符号是其他代码符号的一小部分的函数,则称为局部可修复代码(LRC)。当在分布式存储系统中采用本地可修复码时,可以通过仅访问少量的其他符号来恢复被擦除的符号,从而减轻修复过程期间所需的网络资源。在本文中,我们考虑重复根常循环码,这是一个推广的循环码,这是最佳的最小距离上的一个类似Singleton的界。具有常循环码结构的LRC通常可以使用常循环码的任何编码算法来有效地编码。在本文中,我们得到这些重复根常循环码的最佳LRC。在固定字母表上找到了几类无限多的最优LRC,并进一步假设重根常循环码的周围空间是一个链环,证明了不存在其他最优LRC.
2021-11-24 cs.IT math.IT
Characterizations and construction methods for linear functional-repair storage codes
我们提出了一个精确的线性函数修复存储代码的特征{ \em容许状态/},每个状态由一个集合的向量空间在一些固定的有限域。为了说明我们的特性的有用性,我们提供了几个应用程序。我们首先描述了一个简单的建设功能修复存储代码的一个家庭的代码参数满足割集界以外的MBR和MSR点,这些代码被证明有最佳的速度相对于他们的修复局部性。然后,我们利用我们的表征开发一种构造方法,以获得功能的修复代码为给定的参数,使用对称群,它可以用来找到新的代码,并改善已知的。作为后者使用的一个例子,我们描述了一个美丽的功能修复存储代码,发现了这种方法,与属于家庭的参数之前调查,这可以指定在只有八个不同的向量空间。
2013-07-22 cs.IT math.IT
Constructions of Binary Optimal Locally Repairable Codes via Intersection Subspaces
本文利用交子空间构造维数最优的二元局部可修复码,实现局部性2^b且最小距离≥6,并扩大参数范围同时保持最大码率。
2023-10-15 cs.IT math.IT
On Locally Decodable Index Codes
索引编码通过联合编码广播信道中所有客户端所需的消息来实现带宽节省。编码以这样的方式执行,即每个客户端可以从其边信息和广播码字中检索其所需的消息。通常,为了解码其所需的消息符号,接收机可能必须观察整个发送的码字。查询或下载码字符号可能涉及客户端的成本-例如网络利用成本和用于执行解码的查询符号的存储要求。在传统的索引编码解决方案中,在代码设计期间不考虑这种“客户端感知”的视角。因此,对于这些代码,客户端针对每个解码消息符号查询的码字符号的数量(我们称之为“局部性”)可能很大。在本文中,考虑局部性作为成本参数,我们认为索引编码之间的权衡可实现的广播速率(码字长度规范化的消息长度)和局部性,其目标是最小化的广播速率为一个给定的值的局部性,反之亦然。我们证明了任何索引编码问题的最小可能局部性是1,并且局部性为1的最佳索引编码解决方案是基于干扰图的分数着色的编码方案。我们提出的索引编码方案与小的局部性覆盖的边信息图使用无环子图和子图与小minrank。我们还展示了如何局部性可以占在传统的分区多播和循环覆盖解决方案的索引编码。最后,应用这些新的技术,我们描述了本地广播速率权衡的索引编码问题的边信息图是有向3圈。
2018-01-11 cs.IT math.IT
Maximally recoverable codes with locality and availability
IMUVa-Mathematics Research Institute, University of Valladolid(瓦拉多利德大学数学研究所);Signal Processing and Communications Research Center (SPCRC), International Institute of Information Technology, Hyderabad(海得拉巴国际信息学院信号处理与通信研究中心)
本文提出具有局部性和可用性的最大可恢复码,通过局部可修复码的构造方法,减少存储开销并提升全局纠错能力,针对t=1时提供三种构造方法并扩展有限域大小下界。
2026-05-15 cs.IT math.IT
On the Locality of Codeword Symbols
考虑线性[n,k,d]_q码C.我们说C的第i个坐标具有局部性r,如果这个坐标处的值可以从访问C的其他r个坐标中恢复。数据存储应用需要具有小冗余、信息坐标的低局部性、大距离和奇偶坐标的低局部性的代码。在本文中,我们进行了深入的研究,这些参数之间的关系。我们建立了一个紧界的冗余n-k的消息长度,距离和信息坐标的局部性。我们把达到这个界限的码称为最优码。我们证明了一些结构定理的最佳码,这是特别强的小距离。这给出了码字长度、最坏情况距离和信息符号的局部性之间的权衡的相当完整的画面。然后,我们考虑的地方奇偶检验符号和擦除校正超过最坏情况的距离为最佳的代码。使用我们的结构定理,我们得到了一个紧界的奇偶校验符号可能在这样的代码的一个广泛的类的参数设置的地方。我们证明,有一个良好的局部性之间的权衡奇偶检验和纠正擦除超过最小距离的能力。
2011-06-18 cs.CC cs.DM cs.IT
Binary Cyclic Codes that are Locally Repairable
存储系统的代码旨在最小化修复局部性,即参与修复单个故障磁盘的磁盘(或节点)数量。同时,该代码必须保持高速率,在小的有限域上操作以具有实际意义,并且能够容忍大量的擦除。为此,我们构造新的家庭的二进制线性码,有一个最佳的尺寸(率)为一个给定的最小距离和地方。具体来说,我们构造循环码,局部可修复的地方2和距离2,6和10。在这样做,我们发现新的上限的代码尺寸,并证明了最优的本地修复提供不相交的磁盘组。最后,我们扩展我们的构造,以构建每个磁盘具有多个修复集的代码。
2016-09-28 cs.IT math.IT
XORing Elephants: Novel Erasure Codes for Big Data
大型集群的分布式存储系统通常使用复制来提供可靠性。最近,纠删码被用来减少三复制系统的巨大存储开销。Reed-Solomon码是标准的设计选择,其高维修成本通常被认为是为高存储效率和高可靠性付出的不可避免的代价。本文介绍了如何克服这一局限性。我们提出了一种新的家庭擦除码,有效地修复,并提供更高的可靠性相比,里德-所罗门码。我们分析表明,我们的代码是最佳的最近确定的局部性和最小距离之间的权衡。我们在Hadoop HDFS中实现了我们的新代码,并与当前部署的使用Reed-Solomon代码的HDFS模块进行了比较。我们修改后的HDFS实现在修复磁盘I/O和修复网络流量上减少了大约2倍。新的编码方案的缺点是,它需要14%以上的存储相比,里德-所罗门码,一个开销被证明是信息理论上最优的获得局部性。由于新代码修复故障更快,因此提供了更高的可靠性,与复制相比,可靠性高出几个数量级。
2013-01-16 cs.DC cs.IT cs.NI
Balanced Locally Repairable Codes
本文对$n$,$k$和$d$的任意值引入了一族平衡局部可修码$[n, k, d]$.与其他局部可修码(LRC)类似,所提出的代码适用于要求低修复局部性的应用。我们在我们的建设中引入的新颖之处在于,我们放宽了严格的要求,修复局部是一个固定的小数字$l$,我们允许修复局部是$l$或$l+1$。这给了我们构造任意值的$n$和$k$的BLRC的灵活性,这部分地解决了寻找LRC的一般构造的公开问题。此外,放松的局部性标准,使我们有机会寻找BLRC具有低修复局部性,即使发生双重故障。我们使用的指标,如存储开销,平均修复带宽,平均数据丢失时间(MTTDL)和更新的复杂性比较BLRC与现有的LRC的性能。
2017-07-03 cs.DC cs.IT math.IT
Applications of Polymatroid Theory to Distributed Storage Systems
建立了多拟阵理论与局部可修码之间的联系。这里考虑的码是完全一般的,因为它们是$A^n$的子集,其中$A$是任意有限集。三类LRC被认为是,无论有和没有可用性,并为信息符号和所有符号的地方。将LRC的参数和类推广到多拟阵,并给出了这三类多拟阵和LRC的参数的广义Singelton界。这一结果推广了早期的Singleton型界限给出的LRC。达到这些界限的代码被称为完美的,而不是之前使用的更常见的术语“最优”,因为它们可能并不总是存在。最后,利用一类特殊的拟阵--伽玛拟阵,构造了新的完备线性LRC。拟阵,对于他们的一部分,形成一个子类的polymatroids和已被证明是有用的分析和构造线性LRC。
2015-10-08 cs.IT math.IT
Construction of Fixed Rate Non-Binary WOM Codes based on Integer Programming
在本文中,我们提出了一个非二进制WOM(一次写入存储器)的存储,如闪存代码的建设。本文中讨论的WOM码是固定速率WOM码,其中大小为$M$的固定字母表中的消息可以至少$t^*$次顺序地写入WOM存储器中。在本文中,一个WOM存储建模的状态转移图。拟议的建设有以下两个特点。首先,它包括一个系统的方法来确定状态转移图中的编码区域。第二,建议的建设包括一个标签的方法,通过使用整数规划的状态。利用所提出的结构构造了几种新的适用于2单元$q$级闪存的WOM码。在许多情况下,它们实现了满足已知上限的最差写入次数$t^*$。此外,我们还构造了固定速率的非二进制WOM码,具有降低闪存单元ICI(单元间干扰)的能力。所提出的结构的优点之一是其灵活性。它可以应用于各种存储设备,各种尺寸(即单元数)和各种附加约束。
2017-01-29 cs.IT math.IT
Some Improvements on Locally Repairable Codes
在分布式存储系统中引入局部可修复码(LRC)来有效地纠正擦除. LRC是近年来研究的热点。本文首先讨论了\cite{q}中的开集情形,并给出了LRC最小距离的一个改进的上界。我们也给出了一个明确的建设LRC达到这个界限。其次,我们考虑了任意位置和可用性的LRC的构造,这些LRC具有尽可能大的最小距离和尽可能高的码率。我们给出了一个图形模型的LRC。利用图论的深入结果,构造了一族具有任意局部性$r$和可用性$2$的LRC,其码率为$\frac{r-1}{r+1}$,最优最小距离为$O(\log n)$,其中$n$为码长.
2015-06-16 cs.IT math.IT
New Constructions of Optimal Locally Repairable Codes with Super-Linear Length
局部可修码(LRC)作为现代分布式存储系统中的一种重要编码方案,无论是在实际应用还是理论研究方面都受到了广泛关注。最优码的界和构造是LRC研究的一个重要课题。在这项工作中,代码与$(r,δ)$ -局部性,具有最佳的最小距离w.r.t.考虑了Prakash等人在\cite{Prakash2012Optimal}中给出的边界。利用奇偶检验矩阵方法,构造了具有全符号局部性的最优$(r,δ)$($(r,δ)_a$ -LRC)和具有信息局部性的最优$(r,δ)$($(r,δ)_i$ -LRC).作为Xing和Yuan \cite{XY19}工作的推广,这些构造建立在稀疏超图和最优$(r,δ)$ -LRC之间的连接上。借助于大型稀疏超图的构造,所构造的码的长度在字母表大小上可以是超线性的。当代码的最小距离至少为$3δ+1$时,这改进了先前的构造。作为两个应用,我们还构造了超线性长度的最优H-LRC码和无限长度的GSD码。
2020-12-30 cs.IT math.IT
Optimal Quaternary (r,delta)-Locally Repairable Codes Achieving the Singleton-type Bound
局部可修复代码可以实现分布式存储系统中节点故障的快速修复。码字中的代码符号存储在不同的存储节点中,使得可以通过访问存储节点的一小部分来恢复盘故障。在修复故障节点期间联系的存储节点的数量是一个称为局部性的参数。我们认为本地可修复的代码,可以在本地恢复存在多个节点故障。通过去除修复组的补码中的码符号而获得的删余码被称为本地码。我们的目标是设计一个代码,使所有的本地代码有一个规定的最小距离,使任何节点故障可以在本地修复,只要节点故障的总数小于公差参数。我们考虑定义在有限域上的线性局部可修码。该字母表具有特征2,因此易于实际实现。我们分类所有的四元局部可修码,达到最小距离的Singleton型上界。对于可实现的代码参数的每个组合,给出了显式代码构造。
2021-12-10 cs.IT math.IT
On Binary Matroid Minors and Applications to Data Storage over Small Fields
分布式存储系统的局部可修码近年来引起了人们的广泛兴趣,在文献中可以找到各种各样的构造方法。然而,大多数构造要么导致大的字段大小,因此对于实际实现来说计算复杂性太高,要么导致低速率转化为可用存储空间的浪费。在本文中,我们解决这个问题的发展理论对代码的存在和设计在一个给定的领域。这是通过利用最近建立的线性局部可修复码和拟阵之间的联系,并使用拟阵理论的线性小字段的characterisations。特别是,不存在性可以通过在循环平坦格中找到某些禁止的一致子式来证明。结果表明,二元拟阵的循环平坦格具有额外的结构,显着限制可能的局部性的$\mathbb{F}_{2}$ -线性存储码。此外,收集的标准,检测一致子从一个给定的拟阵的循环平坦的格,这是有趣的,在其本身的权利。
2018-02-19 cs.IT math.CO math.IT
An Upper Bound On the Size of Locally Recoverable Codes
在{ \em局部可恢复}或{ \em可修复}码中,码字的任何符号都可以通过仅读取少量(恒定)的其它符号来恢复。本地可恢复性的概念在分布式存储领域非常重要,其中最常见的错误事件是单个存储节点故障(擦除)。一个共同的目标是通过从尽可能少的其他存储节点下载数据来修复节点。本文从码的长度、大小和局部性三个方面给出了码的最小距离的界。与以前的界限不同,我们的界限来自一个非常简单的分析,并取决于所使用的字母表的大小。事实证明,二进制单纯形码满足我们的界限与平等,因此单纯形码是第一个例子,一个最佳的二进制局部可修复的代码家庭。我们还提供了基于随机编码和级联码的可扩展性结果,这些结果在数值上被验证为接近我们的界限。
2015-03-26 cs.IT math.IT
Explicit Constructions for Rack-Aware Minimum Storage Partially Cooperative Regenerating Codes
School of Computer Science and Engineering, Guangxi Normal University(广西师范大学计算机科学与工程学院);School of Mathematics and Statistics, Nanning Normal University(南宁师范大学数学与统计学院);Key Lab of Education Blockchain and Intelligent Technology, Ministry of Education(教育部教育区块链与智能技术重点实验室);Guangxi Key Lab of Multi-source Information Mining & Security, Guangxi Normal University(广西师范大学多源信息挖掘与安全广西壮族自治区重点实验室);School of Mathematics and Statistics, Guangxi Normal University(广西师范大学数学与统计学院)
针对多节点故障修复,本文推导机架感知 MSPCR 码带宽下界,并显式构造两类渐近最优方案,显著降低子分组化级别。
2025-09-28 cs.IT math.IT
A construction of optimal locally recoverable codes
本地可恢复代码广泛应用于分布式和云存储系统中。本文的目的是构造一个椭圆多项式的近MDS码,并确定码的局部性。结果表明,近MDS码和近MDS码都是距离最优和维数最优的局部可恢复码。局部可恢复码的长度与文献中已知的不同。
2022-04-26 cs.IT math.IT
A Complete Classification of Partial-MDS (Maximally Recoverable) Codes with One Global Parity
部分MDS(Partial-MDS,PMDS)码是一类局部可修码,主要用于分布式存储。它们被定义为能够在每个位置组发生给定数量的擦除之后纠正任何$s$附加擦除模式。这使得它们也是最大可恢复(MR)码,另一类局部可修复码。已知的是,如果字段大小足够大,则对于任何参数集,通常存在MR码,特别是PMDS码。此外,已知PMDS码的一些显式构造,大多数(但不总是)对每个局部组可以校正的擦除的数量具有强限制。在本文中,我们推广的概念PMDS码,允许不同大小的局部组。我们给出了这种具有$s=1$全局奇偶校验的PMDS码的一般构造,即,可校正一个额外擦除。此外,我们证明了所有给定参数的PMDS码都是这种形式,即,我们给出了这些码的分类。这意味着这些码存在的基本域大小的一个充分必要条件(假设MDS猜想成立)。对于某些参数集,我们的广义建设产生的PMDS码具有较小的字段大小比任何其他已知的建设。
2017-07-04 cs.IT math.IT
Optimal Locally Repairable Codes via Rank-Metric Codes
提出了一种新的分布式存储系统局部可修码的显式构造方法,该方法具有全符号局部性和最大可能最小距离,或者等价地,可以容忍最大数量的节点故障.这种构造基于最大秩距离(MRD)Gabidulin码,提供了新的最优矢量和标量LRC。此外,本文还讨论了机制,通过这种结构获得的代码可以用来构造LRC与再生码相结合的失效节点的有效修复的LRC。
2013-01-27 cs.IT math.IT
LDPC Codes with Local and Global Decoding
本文提出了一种新型的LDPC码的理论研究的实际存储应用的动机。LDPCL码(后缀L表示局部性)是LDPC码,可以在整个码块上照常解码,或者在访问较小的子块时局部解码(以减少延迟)。LDPCL码被设计为在通常(全局)模式下最大化纠错性能与速率,同时在局部模式下提供一定的性能。我们开发了一个理论框架的LDPCL代码的设计。我们的研究结果包括一个设计工具来构建一个LDPC码的两个数据保护级别:本地和全球。我们推导出支持这个工具的理论结果,我们展示了如何实现容量与it.A之间的权衡的间隙容量和全块访问的数量进行了研究,ML解码的有限长度的分析是执行的局部性能力和全块纠错能力之间的权衡。
2019-05-09 cs.IT math.IT
Binary Linear Locally Repairable Codes
局部可修复码(LRC)是一类设计用于局部纠正擦除的码。近年来,由于其在分布式存储中的应用,它们受到了相当大的关注。关于LRC的大多数现有结果没有明确考虑字段大小$q$,即,代码字母表的大小。特别是,对于二进制的情况下,只有少数结果是已知的。在这项工作中,我们提出了一个上界的最小距离$d$的线性LRC的可用性,Cadambe和Mazumdar的工作的基础上。该界限考虑了代码长度$n$、维度$k$、位置$r$、可用性$t$和字段大小$q$。然后,我们从三个方面对二元线性LRC进行了研究。首先,我们重点分析了一些经典码的局部性,即,循环码和Reed-Muller码,以及它们的修改版本,它们通过应用扩展、缩短、删减、增加和延长操作而获得。接下来,我们分别使用幻影奇偶校验符号和多层张量积结构来构造LRC。与其他以前的建设二进制LRC与固定的局部性或最小距离相比,我们的建设是更加灵活的代码参数,并给出了各种家庭的高速率LRC,其中一些被证明是最佳的最小距离。最后,研究了LRC的可用性。研究了几类一步择多逻辑可译码码的局部性和可用性,包括循环单纯码、循环差集码和无$4$循环的规则低密度奇偶校验(LDPC)码.我们还展示了一个长LRC的建设,从一个短的一步多数逻辑解码代码的可用性。
2015-11-22 cs.IT math.IT