arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2210.01073cs.DC
收藏

Distributed-Something:利用 AWS 存储和计算实现大规模分布式工作流的脚本

Distributed-Something: scripts to leverage AWS storage and computing for distributed workflows at scale

Erin Weisbart, Beth A. Cimini

AI总结:

Distributed-Something 是一套开源脚本,利用 AWS 按需计算与存储协调任意 Docker 化工作流,突破本地资源限制实现大规模运行,并提供多个生物成像工具实现。

摘要:

Distributed-Something 协调任何 Docker 化工作流的分发,使用 Amazon Web Services 的按需计算基础设施,实现计算能力和数据存储不受本地可用性限制的大规模工作流,同时最小化架构协调中耗时且令人困惑的方面。我们还提供了几个生物成像工具的 Distributed-Something 实现:Distributed-CellProfiler、-Fiji 和 -OmeZarrCreator。所有均为开源,可在 http://GitHub.com/DistributedScience 获取。

英文摘要:

Distributed-Something coordinates the distribution of any Dockerized workflow using on-demand computational infrastructure from Amazon Web Services to enable at-scale workflows where neither computing power nor data storage are limited by local availability while minimizing the time-consuming and confusing aspects of architecture coordination. We also provide Distributed-Something implementations of several bioimaging tools: Distributed-CellProfiler, -Fiji, and -OmeZarrCreator. All are open-source and available at http://GitHub.com/DistributedScience.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑