An Elastic Middleware Platform for Concurrent and Distributed Cloud and MapReduce Simulations
云计算研究涉及大量的实体,如用户、应用程序和虚拟机。由于这些资源的访问受限且可用性经常变化,研究人员将其原型在模拟环境中进行测试,而不是在真实的云环境中。CloudSim和EmuSim等现有云模拟环境按顺序执行,可以创建更先进的云模拟工具来扩展它们,利用最新技术以及研究实验室中多核计算机和集群的可用性。虽然计算已经随着多核编程、MapReduce范式和中间件平台而发展,但云和MapReduce模拟仍然无法利用这些发展本身。这项研究开发了Cloud2Sim,它试图填补模拟和他们试图模拟的实际技术之间的差距。首先,Cloud2Sim通过扩展CloudSim云模拟器,使用Hazelcast内存中的键值存储,提供了一个并发的分布式云模拟器。然后,它还提供了一个快速评估Hazelcast和Infinispan的MapReduce实现,自适应地将执行分布到一个集群,提供模拟MapReduce执行的方法。动态缩放器解决方案根据负载将云和MapReduce模拟扩展到运行Hazelcast和Infinispan的多个节点。分布式执行模型和自适应缩放解决方案可以作为多租户部署的通用自动缩放中间件。
2016-01-15 cs.DC
A Conceptual Architecture for a Quantum-HPC Middleware
本文针对量子计算与HPC高效集成问题,提出一种概念性中间件架构,通过借鉴成熟HPC抽象管理工作负载、任务和资源,为未来量子-HPC中间件系统奠定基础。
2023-08-12 cs.DC quant-ph
RAFDA: Middleware Supporting the Separation of Application Logic from Distribution Policy
由于中间件系统强加的固定分布策略,中间件技术通常限制对象类在分布式应用中的使用方式。这些策略渗透到使用它们开发的应用程序中,并强制对应用程序级语义进行不自然的编码。例如,应用程序员不能直接控制地址空间间参数传递语义,因为它是由中间件在设计周期早期规定的应用程序的分布拓扑固定的。这就创建了相对于应用程序分布方式的变化而言脆弱的应用程序。本文探讨了允许应用程序中的任意对象动态公开以供远程访问的技术。使用这种方法,可以编写应用程序,而不必考虑其分布,对象放置和分布边界在设计周期后期甚至动态地决定。地址空间间参数传递语义也可以独立于对象实现并且在设计周期中的不同时间决定,同样,可能迟至运行时。此外,传输策略可以在每类、每方法或每参数的基础上定义,以最大化可塑性。这种灵活性在开发新的分布式应用程序以及为现有应用程序创建管理和监视基础设施方面具有实用性。
2010-06-18 cs.DC
RAFDA: A Policy-Aware Middleware Supporting the Flexible Separation of Application Logic from Distribution
由于中间件技术强加的固定分布策略,它们通常限制对象类在分布式应用程序中的使用方式。这些策略渗透到使用现有中间件系统开发的应用程序中,并强制对应用程序级语义进行不自然的编码。例如,应用程序员不能直接控制地址空间间参数传递语义。语义由应用程序的分布拓扑固定,这在设计周期的早期就决定了。这会导致应用程序在发布更改时变得脆弱。本文探讨的技术,提供控制的范围内的地址空间通信暴露给程序员,以帮助分布式应用程序的创建,维护和发展。所描述的系统允许应用程序中的任意对象被动态地暴露以供远程访问,从而允许编写应用程序而不考虑分发。程序员可以根据需要隐藏或暴露应用程序的分布式特性,允许在设计周期后期甚至动态地决定对象放置和分布边界。地址空间间参数传递语义也可以独立于对象实现并在设计周期中的不同时间决定,同样可能迟至运行时。此外,传输策略可以在每类、每方法或每参数的基础上定义,从而最大化可塑性。这种灵活性在开发新的分布式应用程序以及为现有应用程序创建管理和监视基础设施方面具有实用性。
2010-06-18 cs.DC
Integrating Abstractions to Enhance the Execution of Distributed Applications
限制分布式应用程序的规模、性能和复杂性的因素之一是难以在多个分布式计算资源上并发执行它们。在某种程度上,这是由于对应用程序和动态资源之间耦合的一般属性和性能的理解不足。本文通过将分布式应用程序、资源和执行过程的抽象集成到一个基于试点的中间件中来解决这个问题。该中间件提供了一个平台,可以指定分布式应用程序,在多个资源和不同的配置上执行它们,并被仪表化以支持调查分析。我们通过实验分析了分布式应用程序的执行,这些实验测量了使用多个资源的好处,调度决策的后期绑定以及回填调度的使用。
2016-02-18 cs.DC
A Java Based Architecture of P2P-Grid Middleware
在过去的十年中,人们对网格技术产生了极大的兴趣,并且已经启动了许多具有各种网格愿景的网格项目。虽然所有这些愿景都有相同的目标,资源共享,他们不同的功能,网格支持,表征,编程环境等,我们提出了一个新的网格系统,致力于处理数据问题,称为DGET(数据网格环境和工具)。DGET的特点是它的对等通信系统和基于实体的体系结构,因此,利用这两个系统的主要功能; P2P和网格。DGET目前正在开发中,实施主要组成部分的原型正处于第一阶段的测试中。在本文中,我们将我们的描述限制在系统的体系结构特征和与其他系统的主要区别。关键词:网格计算,对等网,对等网网格
2006-08-29 cs.DC
Modern Middlewares for Automated Vehicles: A Tutorial
Chair of Embedded Software, RWTH Aachen University(嵌入式软件研究所,亚琛RWTH大学);Department of Aerospace Engineering, University of the Bundeswehr Munich(航空航天工程系,联邦国防军 Munich大学)
本文介绍了自动驾驶车辆中五种先进的中间件,探讨了它们的应用和挑战。
2026-01-12 cs.DC cs.RO cs.SE
Data Model, Collection and Evaluation Framework for Local Energy Systems
分布式账本是一种新型的数据库技术,允许对存储在分布式、去中心化、公共维护的基础设施中的数据进行开放获取。这种分类账的当前实现预计参与者之间的竞争,通常是能源消耗,在维护数据的自然结构方面很差,并且受到可扩展性限制。我的研究工作的目的是开发一个基于分布式账本的中间件,用于家庭能源生产和使用的数据建模和收集,同时解决这个特定应用领域账本的可扩展性和能源效率低下问题。通过该中间件收集和提供的能源数据将用于数字能源服务交付(例如,自动对等能量交易、拓扑估计等)。该中间件还为以消费者为中心的数字能源服务交付以及服务模型评估提供了平台。模型评估可让准服务使用者在决定是否使用服务前,评估所提供的服务是否切合他们的需要。
2020-04-18 cs.DC
A Middleware road towards Web (Grid) Services
中间件技术是一个很大的领域,包含了一个强大的已经做过的研究以及目前正在进行的研究,以确认已经做过的研究成果,并有一些新的解决方案,从理论以及实验(实践)的方式。本文档由Zeeshan Ahmed(学生:Connectivity Software Technologies Blekinge Institute of Technologies)制作。本文介绍了中间件技术的研究现状,包括Web服务、网格计算、网格服务和开放网格服务基础设施与体系结构。本文最后概述了Web(网格)服务,Web(网格)服务链和必要的安全问题。
2010-09-21 cs.DC
Global Grids and Software Toolkits: A Study of Four Grid Middleware Technologies
网格是一种基础设施,它涉及多个组织拥有和管理的计算机、网络、数据库和科学仪器的集成和协作使用。网格应用程序通常涉及大量的数据和/或计算资源,需要跨组织边界的安全资源共享。这使得网格应用程序的管理和部署成为一项复杂的任务。网格中间件为用户提供了在异构网格环境中无缝计算和统一访问资源的能力。已经开发了几个软件工具包和系统,其中大多数是世界各地学术研究项目的成果。本章将重点介绍其中的四个中间件--UNICORE、Globus、Legion和Gridbus。它还介绍了我们的实现资源代理的UNICORE,因为这一功能是不支持它。比较这些系统的基础上的体系结构,实现模型和其他几个功能。
2004-07-01 cs.DC
A Peer-to-Peer Middleware Framework for Resilient Persistent Programming
20世纪80年代的持久编程系统提供了一种集成计算和长期存储的编程模型。在这些系统中,可以设计可靠的应用程序,而不需要程序员编写转换代码来管理往返于非易失性存储器的数据传输。更重要的是,它简化了程序员对应用程序的概念模型,并避免了由于同一信息的多个缓存副本而导致的许多一致性问题。尽管在技术上具有创新性,但持久性语言并没有被广泛采用,部分原因可能是由于其封闭的世界模型。每个持久性存储都位于单个主机上,并且没有灵活的机制来在单独的存储之间进行通信或数据传输。在这里,我们重新打开持久性的工作,并将其与现代对等技术相结合,以便在弹性和潜在的长期运行的分布式应用程序中提供对正交持久性的支持。我们的愿景是一个基础设施,其中的应用程序可以开发和分发最小的修改,因此,应用程序变得有弹性的某些故障模式。如果一个节点或与它的连接在应用程序执行期间失败,则对象将从分布式副本重新实例化,而其引用持有者不会意识到失败。此外,我们相信,这可以实现范围内的应用程序员干预,从最小的完全规范,如所需的。相同的机制包含正交持久编程模型。我们概述了我们实现这一愿景的方法,并描述了目前的进展。
2010-06-18 cs.DC
DIRAC - Distributed Infrastructure with Remote Agent Control
本文介绍了DIRAC,LHCb蒙特卡罗生产系统。DIRAC有一个客户/服务器结构,其基础是:分布在合作机构之间的计算单元;用于生产管理、簿记(元数据目录)和软件配置的数据库;用于更新和访问数据库的监测和编目服务。在Python中实现的本地安装的软件代理监视本地批处理队列,使用XML-RPC协议询问生产数据库中任何未完成的生产请求,并启动作业提交。代理将自动检查并在必要时安装任何所需的软件。作业处理完事件后,代理将传输输出数据并更新元数据目录。DIRAC已成功安装在18个合作研究所,包括DataGRID,并已用于最近的物理数据挑战。在不久的将来到中期,我们必须使用一个混合的环境,有不同类型的网格中间件或没有中间件。我们描述了这种灵活性是如何实现的,以及无处不在的网格中间件将如何提高DIRAC。
2003-06-12 cs.DC
Decoupling conflicts for configurable resolution in an open replication system
<$kativ是一个复制中间件,支持一种新的融合复制数据类型,类似于分布式版本控制系统。它保留了写操作的顺序,但在降低可用性和事后冲突解决之间进行了权衡。该系统允许以与具有独占本地状态的本机应用程序类似的方式开发具有分布式状态的应用程序,同时透明地暴露CAP定理方面的必要妥协。本文给出了复制数据类型的一种规范,并讨论了它在复制中间件中的应用。实验结果表明,该概念作为复制即服务(RaaS)的基础是可行的。
2016-01-14 cs.DC
From Grid Middleware to a Grid Operating System
网格计算在过去十年中取得了长足的进步。网格中间件(如Globus)在实现这一点方面做出了巨大贡献。然而,在其他领域采用网格计算还存在很大的障碍,尤其是在日常用户计算环境中。我们将在本文中证明,这主要是由于现有的网格中间件的局限性,不考虑日常的科学和商业用户的需求。在本文中,我们将正式倡导网格操作系统,并提出了一个架构迁移网格计算到网格操作系统,我们相信这将有助于消除大部分的技术障碍,采用网格计算,使其相关的日常用户。我们相信,这种向网格操作系统的过渡将在未来推动更广泛的网格计算研究和应用程序开发与部署。
2006-08-08 cs.DC
Streamline Intelligent Crowd Monitoring with IoT Cloud Computing Middleware
本文提出一种基于Raspberry Pi等低功耗设备的物联网云计算中间件,采用MapReduce和领导者选举算法实现室内人群监控与容错,在希腊历史建筑中验证了其性能媲美资源密集型方法。
2024-06-04 cs.DC
A Generic Deployment Framework for Grid Computing and Distributed Applications
在大型系统上部署分布式应用程序,特别是在网格基础设施上,变得越来越复杂。网格用户花费大量的时间在节点上准备、安装和配置中间件和应用程序二进制文件,并最终启动他们的应用程序。问题在于部署过程由许多异构任务组成,这些任务必须以特定的正确顺序编排。因此,部署过程的自动化目前很难实现。为了解决这个问题,我们在本文中提出了一个通用的部署框架,允许自动执行异构任务组成的整个部署过程。我们的方法是基于一个具体的软件组件的所有必要的部署机制或现有的工具。网格用户只需要用简单的自然语言描述要部署的配置,而不需要编写部署过程的执行程序或脚本。作为一个玩具的例子,这个框架是用来部署基于CORBA组件的应用程序和OpenCCM中间件上的法国Grid5000基础设施的一千个节点。
2007-06-20 cs.DC
Serverless End Game: Disaggregation enabling Transparency
多年来,分布式系统社区一直在努力实现从本地到远程计算的平稳过渡。透明性意味着隐藏分布式编程的复杂性,如远程位置,故障或扩展。对我们来说,完全透明意味着我们可以在有效的无限计算、存储和内存资源上编译、调试和运行未经修改的单个机器码。我们在本文中详细阐述了为什么无服务器计算中的资源分解是实现云中完全透明的决定性催化剂。我们通过两个实验证明,我们今天可以在分散的无服务器资源上实现透明性,并获得与本地执行相当的性能。我们还表明,局部性不能被忽视的许多问题,我们提出了五个开放的研究挑战:粒度中间件和局部性,内存解聚,虚拟化,弹性编程模型,优化部署。如果完全透明是可能的,如果可以将远程实体视为本地实体,谁还需要显式使用中间件呢?我们能为大多数用户关闭分布式系统复杂性的窗帘吗?
2020-06-01 cs.DC
MARS: Middleware for Adaptive Reflective Computer Systems
众核计算平台的运行时资源管理的自适应方法通常需要一个表示目标平台的软件组织或体系结构的系统的运行时模型。平台的资源类型和资源之间的交互的日益增加的异构性对面对动态工作负载的协调的基于模型的决策提出了挑战。自我意识属性通过反射资源管理器解决了新兴异构众核处理(HMP)平台的这些挑战。然而,随着HMP计算平台架构的快速发展,跨不同硬件平台移植自感知决策逻辑是具有挑战性的,需要资源管理器更新其模型和特定于平台的接口。我们提出了MARS(自适应和反射系统的中间件),一个跨层和多平台的框架,允许用户轻松地创建资源管理器组成的系统模型和资源管理策略,在一个灵活和协调的方式。MARS包括一个通用的用户级传感/驱动接口,允许便携式策略设计,以及一个用于协调多个策略的反射系统模型。我们通过一个动态电压和频率缩放(DVFS)策略的例子,它可以运行在任何基于Linux的HMP计算平台上,展示了MARS的跨系统堆栈的多个层的交互。
2021-07-23 cs.AR cs.DC cs.SY
Integrated Green Cloud Computing Architecture
任意使用云计算,无论是私人的还是公共的,都可能导致数据处理、存储和通信中的不经济能耗。因此,绿色云计算解决方案不仅旨在节约能源,还旨在减少运营成本和对环境的碳足迹。在本文中,提出了一个集成的绿色云架构(IGCA),它包括一个面向客户端的绿色云中间件,以帮助管理人员更好地监督和配置他们的整体访问云服务的最绿色或最节能的方式。无论是使用本地机器处理、私有云还是公共云,中间件都可以使用预定义的系统规范(如服务水平协议(SLA)、服务质量(QoS)、设备规范和IT部门提供的工作描述)来智能处理决策。分析模型用于显示在本地、私有和公共云服务提供商(CSP)之间进行选择时实现高效能耗的可行性。
2012-12-06 cs.DC
Integrating Power-to-Heat Services in Geographically Distributed Multi-Energy Systems: A Case Study from the ERIGrid 2.0 Project
本文基于ERIGrid 2.0项目,利用JaNDER中间件和uAPI实现跨欧洲多国实验室的多能源系统集成,通过电转热服务案例验证了地理分布式仿真与硬件在环技术在提升系统灵活性和电网动态管理方面的有效性。
2024-06-26 cs.DC
A Reflective Approach to Providing Flexibility in Application Distribution
当前的中间件系统具有缺点。在设计过程的早期,人们常常被迫决定哪些类可以参与机器间的通信。此外,应用程序级和中间件特定的语义不能分离,从而导致不自然的设计。RAFDA项目建议通过创建一个自适应的、反射的框架来解决这些缺陷,该框架能够将非分布式应用程序转换为分布式架构灵活的同构应用程序。本文介绍了代码转换技术,已开发的项目的一部分。该系统使得能够根据灵活的配置来分发节目而无需用户干预。然后可以替换代理对象,允许跨地址空间通信。分布式程序可以通过动态地改变其分布边界来适应其环境。
2010-06-29 cs.DC
S-ToPSS: Semantic Toronto Publish/Subscribe System
互联网上数据量的增加导致了基于选择性信息传播的新一代应用程序的开发,其中数据仅分发给感兴趣的客户。这样的应用程序需要一个新的中间件架构,可以有效地匹配用户的兴趣与可用的信息。能够满足这一要求的中间件包括基于事件的体系结构,如订阅系统。在这篇演示论文中,我们解决了语义匹配的问题。我们研究如何当前的发布/订阅系统可以扩展语义功能。我们的主要贡献是开发和验证(通过演示)的语义发布/订阅系统原型S-ToPSS(语义多伦多发布/订阅系统)。
2003-11-26 cs.DB cs.DC
Multi-GPU-Enabled Hybrid Quantum-Classical Workflow in Quantum-HPC Middleware: Applications in Quantum Simulations
Imperial College London(帝国理工学院);University of Waterloo(滑铁卢大学);NVIDIA Corp.(英伟达公司);National Taiwan University(台湾大学)
本研究提出分布感知的QCQ架构,融合量子算法与多GPU经典计算,实现量子模拟中相变分类任务高达十倍加速及99.5%准确率,解决量子-高性能计算瓶颈。
2024-03-18 cs.AI cs.AR cs.DC
PhantomOS: A Next Generation Grid Operating System
网格计算在过去的十年中取得了长足的进步,这主要归功于标准化网格中间件的采用。然而,网格计算还没有普及,因为我们认为,一些障碍,已造成采用中间件为中心的方法。这些障碍包括:缺乏对主要类型应用程序(如交互式应用程序)的支持;缺乏灵活、自主和可伸缩的网格体系结构;缺乏即插即用的网格计算,最重要的是,没有直接的方法来设置和管理网格。AtomtomOS是一个旨在解决这些障碍的项目。它的目标是创建一个用户友好的普及网格计算平台,促进快速部署和易于维护的网格,同时提供支持的主要类型的应用程序在网格上的几乎任何拓扑结构。在本文中,我们提出了详细的系统架构及其实施的概述。
2007-07-05 cs.DC
On the Practicality of `Practical' Byzantine Fault Tolerance
拜占庭容错(Byzantine Fault Tolerant,BFT)系统被系统研究界认为是在分布式系统中提供可靠性方面的最新技术。BFT系统在一组节点中提供安全性和活性保证,其中最多f个节点显示任意不正确的行为,称为拜占庭故障。尽管如此,BFT系统在实践中仍然很少使用。在本文中,我们描述了我们的经验,从应用程序开发人员的角度来看,试图利用公开的和高度调整的PBFT中间件(卡斯特罗和Liskov),提供可证明的可靠性保证的电子投票应用程序的高安全性和鲁棒性的需求。我们描述了我们遇到的几个障碍和我们在PBFT方法中发现的缺点。其中包括我们解决的一些问题,例如缺乏对动态客户端管理的支持,以及将状态管理完全留给应用程序。其他仍然存在的问题包括缺乏对非确定性的鲁棒处理,缺乏对基于Web的应用程序的支持,缺乏对更强大的加密原语的支持等等。我们发现,虽然许多障碍可以克服与修订的BFT中间件的实施,是专门针对特定应用程序的需求进行调整,他们需要大量的工程工作和时间,其性能的影响,最终应用程序是不清楚的。因此,应用程序开发人员不太可能愿意投入时间和精力来利用BFT方法。我们的结论是,研究界需要专注于BFT算法的可用性为现实世界的应用程序,从最终开发人员的角度来看,除了继续提高BFT中间件的性能,鲁棒性和部署布局。
2011-10-21 cs.DC
GRAPLEr: A Distributed Collaborative Environment for Lake Ecosystem Modeling that Integrates Overlay Networks, High-throughput Computing, and Web Services
GLEON研究和PRAGMA湖探险- GRAPLE -是计算机科学和湖泊生态学研究人员之间的合作努力。它旨在提高我们对淡水资源水质威胁的理解和预测能力,包括气候变化。本文介绍了GRAPLEr,一个分布式计算系统,用于解决GRAPLE研究人员的建模需求。GRAPLEr以一种新颖的方式集成和应用了覆盖虚拟网络、高吞吐量计算和Web服务技术。首先,其用户级IP-over-P2P(IPOP)覆盖网络允许将分布在独立管理的机构(包括私有云和公共云)中的计算和存储资源聚合到一个公共虚拟网络中,尽管存在防火墙和网络地址转换器。第二,由IPOP虚拟网络聚合的资源运行未经修改的高吞吐量计算中间件(HTCondor),以使大量模型仿真能够跨分布式计算资源并发执行。第三,Web服务接口允许最终用户使用与R统计计算环境集成的客户端库向系统提交作业请求。本文介绍了GRAPLEr架构,描述了它的实现,并报告了它在三个云基础设施(佛罗里达大学,CloudLab和Microsoft Azure)上批量进行通用湖模型(GLM)模拟的性能。
2015-09-29 cs.DC
Demystifying the Communication Characteristics for Distributed Transformer Models
The Ohio State University(俄亥俄州立大学)
本文针对分布式Transformer训练的通信瓶颈,以GPT类语言模型为案例,研究不同并行方案的通信行为,用解析模型验证实证结果,揭示多因素相关性并指明优化方向。
2024-08-19 cs.AI cs.DC
Reference Architecture of a Quantum-Centric Supercomputer
IBM T.J. Watson Research Center(IBM T.J. 沃森研究中心)
本文提出量子导向超级计算机的参考架构,旨在通过整合量子、GPU和CPU资源,提升量子计算在化学和材料领域应用的效率和性能。
2026-03-12 cs.AR cs.DC cs.ET
Distributed and Managed: Research Challenges and Opportunities of the Next Generation Cyber-Physical Systems
网络物理系统越来越依赖于分布式计算平台,其中感测、计算、致动和通信资源由众多应用共享。这种“网络物理云计算平台”提出了新的挑战,因为该系统是由移动嵌入式设备构建的,本质上是分布式的,并且通常受到模块之间高度波动的连接的影响。为这些系统构建软件提出了许多传统云计算中不存在的挑战。必须在不影响性能的情况下有效管理受限资源和应用程序隔离。必须以可验证的方式满足自主故障管理和实时性能要求。支持多个最终用户也是至关重要和具有挑战性的,这些最终用户的各种软件应用程序对计算和通信资源的需求不断变化,同时在不同的安全级别和不同的安全域中运行。本文提出的解决方案是基于一个分层的体系结构,包括一个新的操作系统,中间件层,和组件结构的应用程序。组件模型促进了从模块化和可重用组件构建软件应用程序,这些组件部署在分布式系统中,并且仅通过定义良好的机制进行交互。创建应用程序和执行系统集成的复杂性通过使用特定领域的模型驱动的开发过程来减轻,该过程依赖于特定领域的建模语言及其附带的图形建模工具,用于合成基础设施代码的软件生成器,以及广泛使用基于模型的分析进行验证和确认。
2017-09-30 cs.DC
Fault Tolerant Adaptive Parallel and Distributed Simulation through Functional Replication
介绍了一种基于软件的容错并行分布仿真中间件FT-GAIA。FT-GAIA旨在可靠地处理并行和分布式仿真(PADS)模型,这些模型需要正确模拟和分析任何科学或工程领域中出现的复杂系统。PADS利用多核处理器、工作站集群或HPC系统中运行的多个执行单元。然而,大型计算系统(诸如包括数十万个计算节点的HPC系统)必须处理某些组件的频繁故障。为了解决这个问题,FT-GAIA透明地复制仿真实体,并将它们分布在多个执行节点上。这允许模拟容忍计算节点的崩溃故障。此外,FT-GAIA提供了一些针对拜占庭故障的保护,因为模拟实体之间的交互消息也被复制,因此接收实体可以识别并丢弃损坏的消息。从分析模型和实验评估的结果表明,FT-GAIA提供了高度的容错,在执行单元的计算负荷适度增加的成本。
2019-03-26 cs.DC cs.MA cs.PF
Nimrod/G: An Architecture of a Resource Management and Scheduling System in a Global Computational Grid
强大的微处理器和高速网络作为商品组件的可用性使得分布式系统上的高性能计算(广域集群计算)成为可能。在这种环境中,由于资源通常分布在地理上的各个层次(部门,企业,或世界各地)有一个很大的挑战,在整合,协调和呈现给用户作为一个单一的资源,从而形成一个计算网格。另一个挑战来自资源的分布式所有权,每个资源都有自己的访问策略、成本和机制。建议Nimrod/G网格启用的资源管理和调度系统建立在我们早期的工作Nimrod,并遵循模块化和基于组件的架构,使可扩展性,可移植性,易于开发,独立开发的组件和互操作性。它使用Globus工具包服务,并且可以很容易地进行扩展,以便与任何其他新兴的网格中间件服务一起运行。它侧重于管理和调度的计算在地理上分散在互联网上的部门,企业,或全球一级,特别强调开发调度计划的基础上的概念,计算经济的一个真正的测试床,即Globus测试床(GUSTO)。
2000-09-22 cs.DC
A Scalable Clustered Architecture for Cyber-Physical Systems
本文提出 Edge4CPS,一个基于 Kubernetes 的开源分布式多架构集群系统,旨在解决信息物理系统在可扩展性、成本及部署方面的挑战,支持多节点应用部署、数据管道与协议转换。
2024-07-08 cs.DC cs.SE
Solving the Bethe-Salpeter equation on massively parallel architectures
在过去的十年里,大规模并行计算集群迅速发展,从领先的超级计算设施到普通的大学计算中心。私营部门的许多公司也经历了类似的演变。在这种情况下,软件和中间件库的无缝集成是确保科学代码的可移植性并保证它们延长生命周期的关键因素。在这项工作中,我们描述了集成的ChASE库,一个现代的并行本征解算器,到现有的遗留代码的第一性原理计算材料的光学性质通过解决的Bethe-Salpeter方程的光学偏振功能。我们的数值测试表明,作为集成ChASE和并行化的读取例程的结果,代码经历了显着的加速,并大大提高了多核和众核架构上的扩展行为。我们证明,这样一个现代化的BSE代码,充分利用并行计算架构和文件系统,使域科学家能够准确地研究复杂的材料系统,以前无法访问。
2020-06-15 cs.CE cs.DC physics.comp-ph