arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 1808.06115cs.NIcs.DC
收藏

数据中心网络中链路故障对MapReduce性能的影响

Impact of Link Failures on the Performance of MapReduce in Data Center Networks

Sanaa Hamid Mohamed, Taisir E. H. El-Gorashi, Jaafar M. H. Elmirghani

摘要:

在本文中,我们利用混合线性规划(MILP)模型来确定当使用不同的数据中心网络(DCN)拓扑结构时,链路故障对MapReduce中洗牌操作性能的影响。对于一组非致命的单链路和多链路故障,结果表明,不同的DCN经历不同的完成时间退化,范围在5%和40%之间。链路故障下的最佳性能是通过以服务器为中心的基于PON的DCN实现的。

英文摘要:

In this paper, we utilize Mixed Integer Linear Programming (MILP) models to determine the impact of link failures on the performance of shuffling operations in MapReduce when different data center network (DCN) topologies are used. For a set of non-fatal single and multi-links failures, the results indicate that different DCNs experience different completion time degradations ranging between 5% and 40%. The best performance under links failures is achieved by a server-centric PON-based DCN.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑