调整LIGO工作流以在开放科学网格中运行

Adapting LIGO workflows to run in the Open Science Grid

Edgar Fajardo, Frank Wuerthwein, Brian Bockelman, Miron Livny, Greg Thain, James Alexander Clark, Peter Couvares, Josh Willis

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

摘要英文摘要相关论文

摘要：

在第一次观测运行期间，LIGO合作需要将一些最密集的CPU工作流从其专用计算站点卸载到机会资源。开放科学网格使LIGO能够在自有资源和机会主义资源的组合中无缝运行PyCbC、RIFT和Bayeswave工作流程。挑战之一是使工作流能够以协调和有效的方式使用多个异构资源。

英文摘要：

During the first observation run the LIGO collaboration needed to offload some of its most, intense CPU workflows from its dedicated computing sites to opportunistic resources. Open Science Grid enabled LIGO to run PyCbC, RIFT and Bayeswave workflows to seamlessly run in a combination of owned and opportunistic resources. One of the challenges is enabling the workflows to use several heterogeneous resources in a coordinated and effective way.

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

阅读原文

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

本文内容

摘要英文摘要相关论文

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

继续探索

相关论文

PRIMAD模型对LIGO引力波搜索工作流程的适用性研究

Applicability study of the PRIMAD model to LIGO gravitational wave search workflows

PRIMAD模型及其六个组成部分（即，平台、研究目标、实现、方法、参与者和数据），提供了一个抽象的分类来表示计算实验，并通过设计来加强可重复性。在本文中，我们评估了模型对一组来自文献来源的激光干涉引力波天文台（LIGO）工作流程的适用性（即，发表论文）。我们的工作概述了潜力和限制的模型在其抽象层次和应用程序的过程。

2019-04-10astro-ph.IMcs.DC

使工作流管理系统适应BFT区块链--以YAWL为例

Adapting Workflow Management Systems to BFT Blockchains -- The YAWL Example

区块链技术为信息记录提供了一个可审计和防篡改的分布式存储基础设施。这可以用来支持分布式工作流管理。与比特币和以太坊推广的工作量证明共识相比，基于BFT（拜占庭容错）的区块链订购共识交易可扩展性，以实现共识的即时性和最终性。这使得它们更容易用作分发基础设施，因为应用程序不需要进行调整以处理工作量证明区块链的最终一致性和延迟共识。因此，工作流引擎等应用程序可以很容易地移植到这样的区块链基础设施，以利用其分散的完整性保证和信息分发模型。在本文中，我们描述了如何在基于BFT的区块链基础设施上使用YAWL工作流引擎，以实现跨不同组织的协作工作流。

2020-06-10cs.DC

BOSS-LDG：一个新的计算框架，将Blue Waters，Open Science Grid，Shifter和LIGO Data Grid结合在一起，以加速引力波的发现

BOSS-LDG: A Novel Computational Framework that Brings Together Blue Waters, Open Science Grid, Shifter and the LIGO Data Grid to Accelerate Gravitational Wave Discovery

我们提出了一个新的计算框架，连接蓝水，NSF支持的，领导级的超级计算机NCSA，激光干涉引力波天文台（LIGO）数据网格通过开放科学网格技术。为了实现这种计算基础设施，我们首次配置了LIGO数据网格Tier-1中心，该中心可以使用开放科学网格设施提交异构LIGO工作流。为了通过开放科学网格实现LIGO数据网格和Blue Waters之间的无缝连接，我们利用Shifter将LIGO的工作流程软件容器化。这项工作代表了开放科学网格，Shifter和Blue Waters第一次统一起来解决科学问题，特别是，这是第一次将这种性质的框架用于大规模引力波数据分析。在LIGO第二次发现活动的最后几周，这个新框架被用于在Blue Waters上运行计算要求最高的引力波搜索工作流程，并加速引力波天体物理学新兴领域的发现。我们讨论了这个新的框架的影响，更广泛的生态系统的更高性能计算用户。

2017-09-26cs.DC

再现GW150914：首次观测到来自双黑洞合并的引力波

Reproducing GW150914: the first observation of gravitational waves from a binary black hole merger

2016年，LIGO和Virgo宣布首次观测到来自双黑洞合并的引力波，称为GW 150914。为了建立这种检测的信心，使用大规模的科学工作流程来衡量事件的统计学意义。他们使用LIGO/Virgo编写的代码，并在LIGO数据网格上执行。这些代码是公开的，但尚未尝试直接复制结果，尽管几项分析重复了分析，证实了检测结果。我们试图重现的结果，在GW 150914发现文件使用公开的代码在开放科学网格。我们表明，我们可以重现主要结果，但我们不能完全重现LIGO分析，因为使用的原始数据集是不公开的。我们讨论了我们遇到的挑战，并为希望使他们的工作可重复的科学家提出建议。

2021-03-02astro-ph.IMcs.DCgr-qc

SciTokens：使用HTCondor演示基于能力的远程科学数据访问

SciTokens: Demonstrating Capability-Based Access to Remote Scientific Data using HTCondor

安全凭证的管理（例如，密码、密钥）是科学家和信息安全官员的负担。凭证问题（例如，过期、特权不匹配）导致工作流无法获取所需的输入数据或存储有价值的科学结果，从而通过要求科学家诊断问题、重新运行他们的计算以及等待更长时间以获得他们的结果而使他们从他们的研究中分心。SciTokens为分布式科学计算引入了基于能力的授权基础设施，以帮助科学家更可靠和安全地管理他们的安全凭证。SciTokens使用IETF标准的OAuth JSON Web令牌，用于基于功能的远程科学数据安全访问。这些访问令牌传递工作流所需的特定授权，而不是通用身份验证模拟凭证，以解决在包括NSF资源的分布式基础设施上运行的科学工作流的风险（例如，LIGO数据网格，开放科学网格，XSEDE）和公共云（例如，Amazon Web Services、Google Cloud、Microsoft Azure）。通过提高科学工作流程的互操作性和安全性，SciTokens 1）使分布式计算能够用于需要更大数据保护的科学领域，2）通过降低远程系统上的凭证滥用风险，使更广泛的分布式计算资源能够使用。在这个扩展摘要中，我们介绍了过去一年SciTokens模型的开源实现及其在开放科学网格中的部署，包括在HTCondor 8.8发布系列中添加的新OAuth支持。

2019-05-22cs.DC

BanditWare：一种基于上下文老虎机的硬件预测框架

BanditWare: A Contextual Bandit-based Framework for Hardware Prediction

University of California San Diego（加州大学圣迭戈分校）

针对分布式系统资源错配问题，提出基于上下文多臂老虎机的在线硬件推荐框架BanditWare，可实时学习适配新负载，在三类应用上验证有效，支持与NDP无缝集成以优化资源分配。

2025-06-16cs.AIcs.DC