A Grid Based Architecture for High-Performance NLP
我们描述了一个可扩展的,基于组件的自然语言工程应用程序的软件体系结构的设计和早期实现的接口与高性能的分布式计算服务。该架构利用现有的语言资源描述和发现机制的基础上元数据描述,结合这些在一个兼容的方式与其他软件定义抽象。在这种体系结构中,应用程序设计非常灵活,允许组合不同的组件以适应整个应用程序功能,并独立于处理问题进行正式描述。应用程序规约语言提供编程环境的抽象,并允许通过代理与高性能计算网格轻松接口。
2003-08-05 cs.CL cs.DC
Scalable Grid Resource Discovery through Distributed Search
本文提出了一个简单的和可扩展的基于Web的网格资源发现模型的互联网。资源发现模型包含元数据和资源查找器Web服务。资源查找器Web服务的信息保存在分布在Internet应用层的资源库中。资源查找器Web服务将通过以与DNS协议类似的方式向存储库发送查询来发现。介绍了实现该模型的两种体系结构的底层技术。这些架构是:直接和集中式的基于Web的网格资源发现。资源发现时间是在GridSim中模拟这些模型后计算的。通过进行可扩展性测试,我们发现,当增加更多的用户和资源的网格上的负载,我们的模型相比,网格资源发现时间的成本是边际的。
2011-10-08 cs.DC cs.NI
Utility Computing and Global Grids
本章重点介绍如何使用网格技术来实现效用计算。网格如何支持效用计算的概述首先通过效用网格的体系结构。然后,基于效用的资源分配详细描述了在每个层次的架构。最后讨论了效用计算的一些工业解决方案。
2006-05-12 cs.DC
A Fault Tolerant, Dynamic and Low Latency BDII Architecture for Grids
当前的BDII模型依赖于从运行在网格的每个核心节点上的代理收集信息。然后,这些信息被发布到称为Top BDII的网格范围的信息资源中。顶级BDII通常以几分钟为一个周期进行更新。提出了一种新的BDDI体系结构,并在本文中描述的假设,只有少数属性值的变化,在每个BDDI信息周期,因此它可能没有必要更新每个参数在一个周期。已经证明,通过仅交换关于在周期期间改变的记录的信息,可以实现显著的性能增益。我们的调查使我们实现了一个低延迟和容错BDII系统,只涉及最小的数据传输,并促进安全的交易在网格环境中。
2012-02-24 cs.DC
Edge Offloading in Smart Grid
本文综述智能电网中的边缘卸载,分析边缘-雾-云等架构及优化算法,并通过SWOT分析支持决策,以应对低延迟和高可靠性挑战。
2024-01-15 cs.DC cs.NI
The Gridbus Toolkit for Service Oriented Grid and Utility Computing: An Overview and Status Report
网格旨在利用自治分布式实体合作产生的协同效应。网格合作产生的协同效应包括共享、交换、选择和聚合地理上分布的资源,如计算机、数据库、软件和科学仪器,以解决科学、工程和商业中的大规模问题。为了使这种合作可持续,参与者需要有经济激励。因此,“激励”机制应被视为网格体系结构的关键设计参数之一。在这篇文章中,我们提出了一个开源的网格工具包,称为Gridbus,其体系结构是从根本上驱动的网格经济的需求的概述和状态。网格总线技术为计算网格和数据网格提供服务,为新兴的电子科学和电子商务应用提供动力。
2004-04-13 cs.DC
Nimrod/G: An Architecture of a Resource Management and Scheduling System in a Global Computational Grid
强大的微处理器和高速网络作为商品组件的可用性使得分布式系统上的高性能计算(广域集群计算)成为可能。在这种环境中,由于资源通常分布在地理上的各个层次(部门,企业,或世界各地)有一个很大的挑战,在整合,协调和呈现给用户作为一个单一的资源,从而形成一个计算网格。另一个挑战来自资源的分布式所有权,每个资源都有自己的访问策略、成本和机制。建议Nimrod/G网格启用的资源管理和调度系统建立在我们早期的工作Nimrod,并遵循模块化和基于组件的架构,使可扩展性,可移植性,易于开发,独立开发的组件和互操作性。它使用Globus工具包服务,并且可以很容易地进行扩展,以便与任何其他新兴的网格中间件服务一起运行。它侧重于管理和调度的计算在地理上分散在互联网上的部门,企业,或全球一级,特别强调开发调度计划的基础上的概念,计算经济的一个真正的测试床,即Globus测试床(GUSTO)。
2000-09-22 cs.DC
MammoGrid: A Service Oriented Architecture based Medical Grid Application
MammoGrid项目最近交付了它的第一个概念验证原型,它使用了一个基于面向服务的体系结构(SOA)的网格应用程序来支持跨越国界的分布式计算。选择底层的Alien Grid基础设施是因为它的实用性,也是因为它作为一种潜在的基于开源标准的解决方案,用于管理和协调分布式资源。由此产生的原型预计将利用大量的医学图像数据进行流行病学研究,先进的图像处理,放射学教育,并最终,远程诊断的医疗虚拟组织的社区。MammoGrid原型包括一个用于数据采集和检查的高质量临床医生可视化工作站、一个与一组医疗服务(注释、安全、图像分析、数据存储和查询服务)兼容的DICOM接口,该接口位于所谓的网格盒上,并可安全访问通过网格中间件连接的其他网格盒网络。本文概述了MammoGrid方法在管理网格连接的乳腺X射线摄影数据库的联邦在最近交付的原型的上下文中,还将描述原型的下一阶段。
2004-05-21 cs.DB cs.DC
A Scalable and Modular Software Architecture for Finite Elements on Hierarchical Hybrid Grids
在这篇文章中,一个新的通用高阶有限元大规模并行模拟框架。模块化软件体系结构经过精心设计,可充分利用现代和未来超级计算机的资源。将非结构化拓扑与结构化网格细化相结合,有助于实现高几何适应性和无矩阵的多重网格,并具有优异的性能。不同的抽象级别和完全分布式的数据结构还确保了高灵活性、可扩展性和可伸缩性。软件概念支持复杂的负载均衡和灵活组合有限元空间。与耦合系统的偏微分方程的示例方案显示的概念,以执行地球物理模拟的适用性。
2018-05-25 cs.DC cs.MS
Relational Grid Monitoring Architecture (R-GMA)
我们描述的R-GMA(关系网格监测体系结构),它已被开发的欧洲数据网格项目作为一个网格信息和监测系统。它基于GGF的GMA,这是一个简单的消费者-生产者模型。这种实现的特殊优势来自于关系模型的强大功能。我们提供了一个信息的全局视图,就好像每个虚拟组织都有一个大型关系数据库一样。我们提供了许多具有不同特征的不同Producer类型;例如,一些支持信息流。我们还提供组合的消费者/生产者,能够组合信息并重新发布。系统的核心是中介,对于任何查询,都能够找到并连接到最好的生产者。我们已经开发了组件,以允许MDS和R-GMA之间的相互作用的措施。我们使用它来获取有关网格的信息(主要是了解在任何时候有哪些服务可用)和应用程序监视。R-GMA已部署在各种测试平台,我们描述了一些初步的结果和经验,这种部署。
2003-08-15 cs.DC
Managing Uncertainty: A Case for Probabilistic Grid Scheduling
网格技术正在发展成为一个全球性的、面向服务的体系结构,一个提供未来高需求计算服务的通用平台。网格和效用计算概念的广泛采用导致越来越多的网格安装运行各种不同大小和复杂性的应用程序。在本文中,我们解决的问题交付期限/经济调度在异构应用环境中使用的统计特性的作业历史执行和相关的元数据。这种方法的动机是由一个多用途的网格集群服务于一个社区的20个电子科学项目的网格应用程序所产生的六个月的计算负载的研究。所观察到的作业统计,资源利用率和用户行为的背景下,最适合支持概率和自主调度架构的管理方法和模型进行了讨论。
2007-11-02 cs.DC
The MammoGrid Project Grids Architecture
最近欧盟资助的MammoGrid项目的目的是,根据新兴的网格技术,开发一个欧洲范围的乳房X线照片数据库,用于开发一套重要的医疗保健应用程序,并调查该网格支持整个欧盟医疗保健专业人员之间有效合作的潜力。MammoGrid联盟打算使用网格模型来实现跨越国界的分布式计算。这个网格基础设施将用于部署新的算法作为软件直接开发或增强的项目。使用MammoGrid,临床医生将能够利用大量的医学图像数据进行流行病学研究,先进的图像处理,放射学教育,并最终在医疗“虚拟组织”社区进行远程诊断。这是通过使用网格兼容服务[1]来实现的,用于管理大规模分布的乳房X线照片文件(版本),用于处理乳房X线照片分析软件的分布式执行,用于开发网格感知算法以及用于在多个协作医疗中心之间共享资源。所有这一切都是通过一个新的软件和硬件信息基础设施提供的,此外还保证了医疗数据的完整性和安全性。MammoGrid实现基于AliEn,AliEn是由ALICE协作开发的网格框架。AliEn提供了一个虚拟文件目录,允许透明地访问分布式数据集,并提供了一个轻量级网格的自上而下的实现,适用于需要处理大量文件的情况。本文详细介绍了将由MammoGrid项目实施的体系结构。
2003-06-16 cs.DB cs.DC
A Comparative Study of Data Storage and Processing Architectures for the Smart Grid
世界各地的许多政府和组织都认为,解决能源独立、全球变暖或应急能力等国家和国际问题的第一步是重新设计电网,即智能电网。通常,电网以次优方式将电力从发电厂广播到大量消费者。然而,能源输送网络和数字信息网络的融合,以及智能监测系统(智能电表)和可再生能源的引入,将使电力供应商和电力消费者之间的双向电力交易关系成为可能。电力需求和定价的实时信息的可用性将使供应商能够优化其输送系统,而消费者将有办法通过在非高峰时间打开电器来最大限度地减少账单。智能电网的建设需要设计和部署对存储、实时事件处理和可用性提出前所未有要求的信息网络和系统。本文探讨和比较了一系列存储和处理智能抄表数据的系统架构,旨在为未来智能系统的支持奠定坚实的基础。
2020-06-03 cs.DC cs.SE
Open-architecture Implementation of Fragment Molecular Orbital Method for Peta-scale Computing
我们提出了我们的观点和目标,高性能计算的纳米科学根据全球趋势,向“千万亿次计算。“在回顾了我们通过日本网格项目,国家研究网格计划(NAREGI)的网格测试平台上的碎片分子轨道方法(FMO)的网格启用版本获得的结果后,我们通过预测FMO在Peta规模计算机中的有效性能,表明FMO是Peta规模应用的最佳候选者之一。最后,我们介绍了我们的新项目构建一个peta规模的应用程序在开放式架构的FMO实现,以实现两个目标的高性能peta规模的计算机和可扩展性的多物理场仿真。
2007-01-11 cs.DC physics.comp-ph
G-Monitor: Gridbus web portal for monitoring and steering application execution on global grids
网格在其应用中正在经历快速增长,随之而来的是对易于使用和可扩展的门户的需求。我们通过开发一个易于使用、可扩展、基于Web的门户网站G-Monitor来满足这一要求。本文提出了一个通用的体系结构的门户网站到网格环境中,并讨论了我们的实现和它的应用。
2003-02-06 cs.DC
Evaluating Trust in Grid Certificates
数字证书用于保护用于电子科学项目的国际计算和数据存储网格,如全球大型强子对撞机计算网格。国际网格信任联盟定义了网格证书概要:一组用于网格认证的数字证书指南。我们已经设计并实现了一个程序和相关的测试套件,用于检查X.509证书对证书配置文件和相关的网格上使用的政策。其结果是一个实用的工具,帮助实现者和用户的公钥基础设施,以达到适当的信任决定。
2009-10-30 cs.CR cs.DC
A Model-driven Approach for Grid Services Engineering
由于网格计算的大肆宣传,这样的系统很少使用形式化技术设计。围绕网格技术的复杂性和快速增长的需求使得人们倾向于使用经典的开发技术,这导致了没有指导方针或规则以及非结构化的工程过程。本文提倡一种形式化的网格应用程序开发方法,以促进严格的网格软件体系结构的发展。这种方法解决了跨平台的互操作性和服务质量;模型驱动的范例被应用到一个正式的以架构为中心的工程方法,以受益于正式的语义描述能力,除了基于模型的转换。这样一个新的组合概念的结果,促进了重用的设计模型,并简化了网格计算的发展,提供了一个适应的开发过程,并确保正确的每个设计步骤。
2005-09-27 cs.DC cs.SE
Admire framework: Distributed data mining on data grid platforms
在本文中,我们提出了ADMIRE架构,一个新的框架,开发新的和创新的数据采掘技术,以处理非常大的和分布式的异构数据集在商业和学术应用。主要的ADMIRE组件的详细说明,以及它的接口,使用户能够有效地开发和实现他们的数据采掘应用程序的网格平台上的技术,如Globus ToolKit,DGET等。
2017-03-28 cs.DC
Unstructured Hydrodynamics on Spatial Dataflow Architectures: A Joint Code and Data Decomposition Approach
Lawrence Livermore National Laboratory(劳伦斯利弗莫尔国家实验室);Cerebras Systems
针对空间数据流架构难以处理非结构化网格计算的问题,提出联合代码与数据分解方法,通过通信和内存建模,自动化分析代码,定义高维分解并应用内存优化技术,将LULESH应用映射到相关引擎,证明该方法能让非结构化网格代码超越GPU。
2026-07-22 cs.DC
JClarens: A Java Framework for Developing and Deploying Web Services for Grid Computing
高能物理(High Energy Physics,HEP)和其他科学团体已经采用面向服务的体系结构(Service Oriented Architectures,SOA)作为更大的网格计算工作的一部分。这项工作涉及到将许多遗留应用程序和编程库集成到SOA框架中。网格分析环境(GAE)是一个基于Clarens网格服务框架的面向服务的体系结构,正在开发中,作为欧洲粒子物理实验室(CERN)大型强子对撞机(LHC)紧凑型μ子螺线管(CMS)实验的一部分。Clarens提供了一组授权、访问控制和发现服务,以及对所有已部署服务的XMLRPC和SOAP访问。Clarens Web Services Framework的两个实现(Python和Java)为广泛的程序设计语言提供了集成的可能性。本文描述了名为JClarens的Clarens Web服务框架的Java实现。以及科学界和网格社区感兴趣的几个Web服务,它们都是使用JClarens部署的。
2005-04-11 cs.DC
Scalable Cloud-Native Architectures for Intelligent PMU Data Processing
本文提出了一种可扩展的云原生架构,结合人工智能与边缘云计算,用于高效处理大规模智能PMU数据,提升电网监控的实时性和可靠性。
2025-12-23 cs.AI cs.DC
Towards an IO intensive Grid application instrumentation in MedioGRID
要在IO密集型应用程序中获得高性能,需要系统支持可靠的快速传输、数据复制和缓存。在本文中,我们提出了一个架构,旨在支持IO密集型应用程序的MedioGRID,卫星图像的实时处理系统,在网格环境中运行。该解决方案确保处理地理数据的应用程序对数据的访问一致,并基于使用MonALISA及其扩展对数据传输的持续监控。MedioGRID架构也建立在Globus,Condor和PBS上,基于这个中间件,我们的目标是提取有关运行系统的信息。在对MedioGRID系统进行大数据传输测试中获得的结果表明,监测系统提供了一个非常好的系统演变视角。
2011-06-27 cs.DC
Utilizing Reconfigurable Hardware Processors via Grid Services
计算网格通常由使用普通处理器(如Intel Pentium)的节点组成。现场可编程门阵列(FPGA)由于其固有的并行架构而能够非常好地执行某些计算密集型任务,通常导致数量级的加速。本文探讨了如何FPGA可以透明地暴露通过网格服务的远程使用,通过集成Proteus软件平台与Globus Toolkit 3.0。
2004-11-16 cs.AR cs.DC
HEP Analysis Facility An Approach to Grid Computing
HEP分析设施是在Scientific Linux Cern 5.5中设计和实现的一个集群,为高能物理研究人员提供一个可以承担特定任务的地方,或者提供一个并行处理架构,其中CPU资源在网络上共享,所有机器都作为一个大型超级计算机运行。
2012-10-29 cs.DC
A Middleware road towards Web (Grid) Services
中间件技术是一个很大的领域,包含了一个强大的已经做过的研究以及目前正在进行的研究,以确认已经做过的研究成果,并有一些新的解决方案,从理论以及实验(实践)的方式。本文档由Zeeshan Ahmed(学生:Connectivity Software Technologies Blekinge Institute of Technologies)制作。本文介绍了中间件技术的研究现状,包括Web服务、网格计算、网格服务和开放网格服务基础设施与体系结构。本文最后概述了Web(网格)服务,Web(网格)服务链和必要的安全问题。
2010-09-21 cs.DC
GridCertLib: a Single Sign-on Solution for Grid Web Applications and Portals
本文介绍了GridCertLib的设计和实现,一个Java库利用基于Shibboleth的身份验证基础设施和SLCS在线证书签名服务,提供短期的X.509证书和网格代理。GridCertLib的主要用例是在Web应用程序和门户中提供对Grid/X.509证书和代理的无缝和安全访问:当用户使用Shibboleth认证登录到门户时,GridCertLib可以自动获取Grid/X.509证书并从SLCS服务生成VOMS代理。我们给出了GridCertLib的体系结构的概述,并简要描述了其编程模型它的应用程序的一些部署方案进行了概述,以及一份报告的实践经验,将GridCertLib集成到门户网站的生物信息学和计算化学应用程序,流行的P-GRADE和Django软件的基础上。
2011-09-06 cs.DC
Grid-Enabling Natural Language Engineering By Stealth
我们描述了一个可扩展的,基于组件的软件体系结构的自然语言工程应用的建议。我们的模型利用现有的语言资源描述和发现机制的基础上扩展都柏林核心元数据。此外,应用程序设计非常灵活,允许组合不同的组件以适应整个应用程序功能。应用程序规约语言提供了编程环境的抽象,并允许通过代理与计算网格轻松接口。
2003-04-22 cs.CL cs.DC
A Simulation Study for T0/T1 Data Replication and Production Activities
本文讨论了最新一代的MONARC(MOdels的网络分析在区域中心)的仿真框架,作为一个设计和建模工具,大规模分布式系统应用于HEP实验。网格体系结构的仿真对于未来网格系统的部署具有重要的意义,可以为用户提供合适的反馈。我们在这里提出了一个例子,模拟复杂的数据处理系统和框架的方式来优化整体网格体系结构和/或管理网格的使用的政策。
2011-06-25 cs.DC hep-ex
GridMonitor: Integration of Large Scale Facility Fabric Monitoring with Meta Data Service in Grid Environment
网格计算由协调使用大量不同的、地理上分布的资源来实现高性能计算组成。对这些计算资源的有效监控对于在网格上高效使用是极其重要的。网格中存在大量的异构计算实体,这使得网格计算具有很大的挑战性.在这项工作中,我们描述了一个网格监控系统,称为GridMonitor,捕获并提供最重要的信息,从一个大型计算设施。网格监控系统由本地监控、归档、发布和治理四个层次组成。该架构已应用于大规模的Linux农场和网络基础设施。它可以被许多更高级别的网格服务使用,包括调度服务和资源代理。
2003-06-13 cs.DC cs.PF
The NorduGrid architecture and tools
NorduGrid项目设计了一个网格架构,其主要目标是满足LHC实验生产任务的要求。虽然它是一个相当通用的网格系统,但它强调适合高能物理中遇到的问题的批处理。NorduGrid架构实施使用\globus{}作为项目开发的各种组件的基础。在引入新服务的同时,NorduGrid不会修改Globus工具,因此两者最终可以共存。NorduGrid拓扑结构是分散的,避免了单点故障。因此,NorduGrid架构是一种重量轻,非侵入性和动态的架构,同时具有强大的可扩展性,能够满足高能物理最具挑战性的任务。
2003-05-31 cs.DC physics.comp-ph