The ShareGrid Portal: an easy way to submit jobs on computational Grids
网格计算是一种分布式计算模式,其目标是以一种动态、透明和协调的方式聚合多个异构的、分布的、属于不同的、独立的组织的资源。自引入以来,网格计算已经成功地应用于解决一些具有挑战性的科学应用。尽管它的许多方面得到了巩固,但仍有一些问题尚未解决。其中之一是透明性:在许多真正的网格系统中,用户仍然需要了解网格计算,或者使他们的应用程序适应这种范式,或者将它们包装在合适的软件框架中。在本文中,我们提出了ShareGrid门户,一个Web门户和门户框架,建立在ShareGrid项目基础设施之上。它的目的是简化网格系统中用户应用程序的执行,并允许开发人员灵活地添加新的门户功能。在这项工作中,我们比较它与其他知名的网格门户网站,我们展示了它的用户界面和它的体系结构。最后,我们讨论了用户体验和未来的扩展。
2018-12-23 cs.DC
Computational Grids in Action: The Natinal Fusion Collaboratory
国家聚变合作实验室(NFC)项目旨在通过更有效地整合实验、理论和建模,更有效地利用现有实验设施,促进磁聚变研究的科学理解和创新。为了实现这一目标,NFC引入了“网络服务”的概念,它建立在计算网格之上,并提供融合代码,以及它们的维护和硬件资源,作为对社区的服务。这种运作方式需要发展新的授权和执行能力。此外,Fusion实验的性质对实验周期中运行的代码提出了苛刻的服务质量要求。在本文中,我们描述的融合社区的网格计算的要求,并提出我们的第一个实验,以满足这些要求。
2003-01-28 cs.DC
SLA-Based Coordinated Superscheduling Scheme and Performance for Computational Grids
基于服务水平协议(SLA)的网格超级部署方法促进了资源的协调共享.网格服务器(如资源代理)促进了管理上和拓扑上分布的网格站点之间的超级部署。在这项工作中,我们提出了一个基于市场的SLA协调机制。我们基于我们的SLA模型在一个众所周知的\emph{contract net protocol}。我们的方法的主要优点是,它允许:~(i)资源所有者有更精细的控制程度的资源分配,这是以前不可能通过传统的机制;和(ii)超级供应商投标SLA合同的合同网,重点是在用户指定的最后期限内完成工作。在这项工作中,我们使用模拟来显示我们所提出的方法的有效性。
2006-05-15 cs.DC
Nimrod/G: An Architecture of a Resource Management and Scheduling System in a Global Computational Grid
强大的微处理器和高速网络作为商品组件的可用性使得分布式系统上的高性能计算(广域集群计算)成为可能。在这种环境中,由于资源通常分布在地理上的各个层次(部门,企业,或世界各地)有一个很大的挑战,在整合,协调和呈现给用户作为一个单一的资源,从而形成一个计算网格。另一个挑战来自资源的分布式所有权,每个资源都有自己的访问策略、成本和机制。建议Nimrod/G网格启用的资源管理和调度系统建立在我们早期的工作Nimrod,并遵循模块化和基于组件的架构,使可扩展性,可移植性,易于开发,独立开发的组件和互操作性。它使用Globus工具包服务,并且可以很容易地进行扩展,以便与任何其他新兴的网格中间件服务一起运行。它侧重于管理和调度的计算在地理上分散在互联网上的部门,企业,或全球一级,特别强调开发调度计划的基础上的概念,计算经济的一个真正的测试床,即Globus测试床(GUSTO)。
2000-09-22 cs.DC
GridBank: A Grid Accounting Services Architecture (GASA) for Distributed Systems Sharing and Integration
计算网格作为一种新的基于Internet的并行和分布式计算的基础设施正在兴起。它们支持跨多个管理域、组织和企业的资源共享、交换、发现和聚合。为了实现这一点,网格需要支持各种服务的基础设施:安全性,统一访问,资源管理,调度,应用程序组合,计算经济性和问责制。许多网格项目已经开发出了一些技术,这些技术提供了许多这些服务,但责任除外。为了克服这个限制,我们提出了一个新的基础设施,称为网格银行,提供服务的会计。本文提出了网格问责制的要求和不同的模型,它可以运行,并提出网格银行服务体系结构,以满足他们。本文重点介绍了实施问题,并详细讨论了GridBank需要维护的各种记录/数据库的格式。它还提出了网格计算环境中GridBank和各种组件之间的交互协议。
2002-10-01 cs.DC
Simulating Data Access Profiles of Computational Jobs in Data Grids
由于近年来高速局域网和广域网的迅速发展,在计算网格中运行的应用程序的数据访问模式正在发生变化。不再严格要求数据密集型作业在相应输入数据所在的计算站点处运行。相反,作业可以使用数据放置、分段和远程数据访问的任意组合来访问数据。这些数据访问配置文件表现出部分不重叠的吞吐量瓶颈。可以利用这一事实来最小化作业等待输入数据的时间。在这项工作中,我们提出了一种新的网格计算模拟器,它把重点放在各种数据访问配置文件。基于我们的模拟器的基本假设是合理的,在欧洲核子研究中心的全球大型强子对撞机计算网格(WLCG)进行的经验实验。我们演示了如何校准模拟器的参数,根据真实的系统使用后验推理与似然无马尔可夫链蒙特卡罗。此后,我们验证了模拟器的输出相对于一个真实的生产工作量从WLCG,证明其显着的准确性。
2019-03-12 cs.DC
Managing Uncertainty: A Case for Probabilistic Grid Scheduling
网格技术正在发展成为一个全球性的、面向服务的体系结构,一个提供未来高需求计算服务的通用平台。网格和效用计算概念的广泛采用导致越来越多的网格安装运行各种不同大小和复杂性的应用程序。在本文中,我们解决的问题交付期限/经济调度在异构应用环境中使用的统计特性的作业历史执行和相关的元数据。这种方法的动机是由一个多用途的网格集群服务于一个社区的20个电子科学项目的网格应用程序所产生的六个月的计算负载的研究。所观察到的作业统计,资源利用率和用户行为的背景下,最适合支持概率和自主调度架构的管理方法和模型进行了讨论。
2007-11-02 cs.DC
Ganga: a tool for computational-task management and easy access to Grid resources
在本文中,我们提出了计算任务管理工具Ganga,它允许的规格,提交,簿记和后处理的计算任务上广泛的分布式资源。Ganga的开发是为了解决科学项目中越来越常见的一个问题,即研究人员必须定期在不同的处理系统之间切换,每个系统都有自己的命令集,以完成他们的计算任务。Ganga为处理异构资源上的数据提供了一个同构环境。我们给出了高能物理的例子,演示了如何在本地系统上开发分析,然后透明地移动到网格系统来处理所有可用的数据。Ganga有一个API,可以通过交互式界面、脚本或GUI使用。通过插件系统在运行时提供有关任务或计算资源类型的特定知识,使新的开发易于集成。我们给出了一个概述的恒河架构,给出当前使用的例子,并演示了如何恒河可以在许多不同的科学领域。
2009-06-09 cs.DC
Economic and On Demand Brain Activity Analysis on Global Grids
组织内部缺乏分析科学数据的计算能力,以及知识(科学家)和技术(先进科学设备)的分布是科学学科中常见的两个主要问题。脑科学就是这样一门学科。从MEG(脑磁图)仪器收集的大脑活动数据的分析是医学科学中的一个重要研究课题,因为它有助于医生识别疾病的症状。需要对数据进行详尽的分析,以有效地诊断和分析大脑功能,并需要访问大规模的计算资源。解决这种资源密集型应用的潜在平台是网格。本文介绍了我们开发的脑磁图数据分析系统,利用网格技术,主要是Nimrod-G,Gridbus和Globus。本文介绍了应用经济为基础的网格调度算法的问题域按需处理的分析工作。
2003-02-13 cs.DC
A Multilevel Approach to Topology-Aware Collective Operations in Computational Grids
如何有效地实施集体通信业务受到了广泛的关注。最初的努力产生了基于网络通信模型的“最优”树,该模型假设任何两个进程之间的点对点延迟相等。然而,这种假设在大多数实际环境中是违反的,特别是在异构系统中,如SMP集群和广域“计算网格”,结果是集体操作执行次优。作为响应,最近的工作集中在为集体操作创建拓扑感知树,该集体操作最小化跨较慢通道的通信(例如,广域网)。虽然这些努力具有显著的通信优势,但它们都将网络的视图限制在两层。我们提出了一种基于网络的多层视图的策略。通过创建多级拓扑感知树,我们利用了网络中每一级的通信成本差异。我们使用此策略在MPICH-G2中实现了几个MPI集体操作的拓扑感知版本,MPICH-G2是MPI标准的流行MPICH实现的Globus Toolkit[tm]启用版本。利用MPICH-G2提供的拓扑信息,我们在执行过程中自动构建这些多级拓扑感知树。我们目前的结果表明,我们的多级方法的优势,通过比较它的默认(拓扑不知道)的MPICH和拓扑感知的两层实现提供的实现。
2002-06-24 cs.DC
Economic-based Distributed Resource Management and Scheduling for Grid Computing
计算网格作为下一代计算的基础设施,能够共享、选择和聚合地理上分布的资源,以解决科学、工程和商业中的大规模问题。由于网格中的资源是异构的,并且在地理上分布,具有不同的可用性以及针对不同用户在不同时间的各种使用和成本策略,并且优先级以及目标随时间而变化。在这样一个大型的分布式环境中,资源管理和应用程序调度是一项复杂的任务。本论文提出了一个分布式计算经济作为一个有效的隐喻资源管理和应用程序调度。提出了一种支持资源交易和基于服务质量的调度的体系结构框架。它使资源的供应和需求的监管,并提供了一个激励资源所有者参与网格和动机的用户之间的最后期限,预算和所需的服务质量水平进行权衡。论文通过开发用户服务质量需求驱动的调度策略和算法,展示了基于经济的系统用于对等分布式计算的能力。它证明了他们的有效性,通过执行调度实验在全球范围内的网格解决参数扫描应用程序。
2002-04-22 cs.DC
gcodeml: A Grid-enabled Tool for Detecting Positive Selection in Biological Evolution
生物进化中的一个重要问题是了解蛋白质编码基因的某些变化是否有助于物种的适应。这个问题在生物学上是复杂的,计算成本非常高。因此,它需要高效的网格或集群解决方案来克服计算挑战。我们开发了一个支持网格的工具(gcodeml),它依赖于PAML(codeml)包来帮助分析网格和计算集群上的大型系统发育数据集。虽然我们报告的结果gcodeml,我们的方法是适用的,并定制在生物学或其他科学领域的相关问题。
2012-03-14 cs.CE cs.DC q-bio.PE
Large-scale lattice Boltzmann simulations of complex fluids: advances through the advent of computational grids
在过去的两年里,RealityGrid项目使我们成为参与计算网格开发的少数科学团体之一。由于目前还没有能够顺利工作的生产网格,我们已经能够在项目中对软件开发和网格部署的方向产生实质性的影响。在本文中,我们回顾了我们的结果,从大规模的三维格子玻尔兹曼模拟在过去的两年中进行。我们描述了如何积极主动地使用计算转向和先进的工作迁移和可视化技术,使我们能够更有效地做我们的科学工作。在本文中报告的项目是复杂的流体流动剪切或多孔介质中的研究,以及大规模的参数搜索,和研究的自组织液体立方中间相。电影可在http://www.ica1.uni-stuttgart.de/~jens/pub/05/05-PhilTransReview.html上获得
2005-01-11 cond-mat.other cond-mat.soft cs.DC
An asynchronous incomplete block LU preconditioner for computational fluid dynamics on unstructured grids
我们提出了一个研究的有效性异步不完全LU分解预条件的时间隐式解决方案的可压缩流问题,同时利用线程并行计算节点内。提出了一种适用于非结构网格上可压缩Navier-斯托克斯方程有限体积离散的异步细粒度并行预处理子的块变体,并将收敛性理论推广到新变体.实验(数值)结果的无粘和粘性层流二维稳态测试情况下,这些预处理器的性能报告。它被发现,对于这些可压缩流问题,块变体执行更好的收敛性,并行可扩展性和可靠性方面比原来的标量异步ILU预条件。对于粘性流动,发现未知量的排序可能决定异步块ILU预处理的成功或失败,并提出了一种适合于求解粘性问题的网格单元排序。
2020-10-04 cs.DC cs.NA math.NA
Strategies for Development of a Distributed Framework for Computational Sciences
本文讨论了一些通用的方法来开发基于网格的框架,使工作流程的建立,包括现有的软件在计算科学领域。我们强调的主要要求,解决了发展这样的框架。在网格环境中,方便的计算软件之间的互操作性的一些策略已经显示。提出了基于UML的工作流图形化描述工具。
2011-06-18 cs.DC physics.comp-ph
Utilizing Reconfigurable Hardware Processors via Grid Services
计算网格通常由使用普通处理器(如Intel Pentium)的节点组成。现场可编程门阵列(FPGA)由于其固有的并行架构而能够非常好地执行某些计算密集型任务,通常导致数量级的加速。本文探讨了如何FPGA可以透明地暴露通过网格服务的远程使用,通过集成Proteus软件平台与Globus Toolkit 3.0。
2004-11-16 cs.AR cs.DC
FogGrid: Leveraging Fog Computing for Enhanced Smart Grid Network
本手稿集中在雾计算的智能电网网络,包括一个分布式发电系统称为微电网的应用。它解决了智能电网的特点和优势。讨论了基于共享信息资源的按需处理的两种计算方法。雾计算作为计算和/或通信节点的附加层,在处理大量数据的同时将云后端从多任务中卸载。比较了雾计算和云计算分层体系结构在资源利用效率方面的差异。为了缓解雾计算的优势,提出了一种基于Intel Edison的雾计算框架。所提出的架构已硬件实现的微电网系统。所获得的结果显示了雾计算在低功耗、降低存储需求和覆盖分析能力方面对智能电网网络的功效。
2017-12-27 cs.DC cs.NI