Enabling Adaptive Grid Scheduling and Resource Management
网格概念的广泛采用使得科学家和研究人员可以使用越来越多的联合计算、存储和可视化资源。这些资源的分布式和异构性使得大多数传统的集群监控和管理方法不合适,并对此类系统的工作流调度提出了新的挑战。有效的资源利用率监控和高粒度但自适应的测量是一个更有效的网格调度的先决条件。我们提出了一套测量应用程序,能够监控每个进程的资源利用率,和一个可定制的工具,用于模拟观察到的利用率模型。我们还概述了我们未来的工作预测和概率网格调度。该研究是英国电子科学EPSRC与BT合作赞助的SO-GRM(自组织网格资源管理)项目的一部分。
2007-11-02 cs.DC
Cloud Infrastructure Service Management - A Review
新的计算时代称为云计算,允许用户随时随地通过Internet动态访问云服务。云由数据和资源组成;云服务包括基于用户需求通过互联网在互联网上交付软件、基础设施、应用程序和存储。简而言之,云计算是一种商业和经济模式,允许用户利用高端计算和存储,而在他们的终端上使用最少的基础设施。云有三种服务模式,即云软件即服务(SaaS)、云平台即服务(PaaS)和云计算结构即服务(IaaS)。本文深入讨论了云基础设施服务管理。
2012-05-30 cs.DC
Smart Grid Management using Blockchain: Future Scenarios and Challenges
能源系统的分散管理和协调是新兴趋势,物联网和区块链的采用为更安全,更有弹性和更有效的能源分配提供了新的机会。尽管分布式账本技术在能源领域的应用前景广阔,但分散式智能电网管理解决方案的开发仍处于早期阶段。在本文中,我们定义了一个基于区块链的智能电网管理平台的分层架构,该平台具有能源数据计量和防篡改注册,通过智能合约执行业务,以及基于Oracle的高计算服务集成,支持未来电网管理方案的实施。从使用拟议的区块链平台及其相关挑战的实施角度讨论了三种这样的场景:点对点能源交易,分散管理,以及能源灵活性的聚合和面向社区的虚拟电厂的运营。
2020-12-11 cs.DC
GridSim: A Toolkit for the Modeling and Simulation of Distributed Resource Management and Scheduling for Grid Computing
集群、网格和对等(P2P)网络已成为下一代并行和分布式计算的流行范例。在这种大规模的分布式系统中,资源的管理和应用程序的调度是一项复杂的任务。为了证明资源代理和相关调度算法的有效性,需要在不同的场景下评估它们的性能,例如不同数量的资源和具有不同需求的用户。在网格环境中,由于资源和用户分布在多个组织中,并且具有各自的策略,因此很难甚至不可能以可重复和可控的方式执行调度器性能评估。为了克服这个限制,我们已经开发了一个基于Java的离散事件网格仿真工具包GridSim。该工具包支持异构网格资源(时间和空间共享)、用户和应用程序模型的建模和仿真。它为应用程序任务的创建、任务到资源的映射及其管理提供了原语。为了证明GridSim工具包的适用性,我们模拟了Nimrod-G网格资源代理和评估的最后期限和预算约束的成本和时间最小化调度算法的性能。
2002-03-14 cs.DC
A Taxonomy of Workflow Management Systems for Grid Computing
随着网格技术和应用技术的出现,科学家和工程师们正在构建越来越复杂的应用程序来管理和处理大型数据集,并在分布式资源上执行科学实验。这样的应用场景需要用于组成和执行复杂工作流的手段。因此,许多努力已经朝着网格计算的工作流管理系统的发展。在本文中,我们提出了一个分类的特点和分类网格上的工作流的建设和执行的各种方法。我们还调查了几个有代表性的网格工作流系统开发的各种项目在世界范围内展示分类的全面性。该分类法不仅突出了设计和工程的相似性和差异,国家的最先进的网格工作流系统,但也确定了需要进一步研究的领域。
2005-04-13 cs.DC
Sharing a conceptual model of grid resources and services
网格技术的目标是在局域网和广域网上实现协调的资源共享和问题解决能力,并跨越位置、组织、机器体系结构和软件边界。网格资源的异构性和不同网格中间件之间的互操作性要求共享一个公共的信息模型。不同风格的资源和服务的抽象和领域特定实体的概念模式需要协作努力,以使一致的信息服务合作。在本文中,我们提出了我们的经验,网格资源和服务建模的网格实验室统一环境(GLUE)的努力,美国和欧盟的高能物理项目合作,对网格的互操作性。第一个实现中立的协议,如批处理计算和存储管理器的服务,资源,如层次结构集群,子集群,主机和存储库。设计准则和操作结果与开放的问题和未来的演变一起描述。
2003-06-18 cs.DC
JClarens: A Java Framework for Developing and Deploying Web Services for Grid Computing
高能物理(High Energy Physics,HEP)和其他科学团体已经采用面向服务的体系结构(Service Oriented Architectures,SOA)作为更大的网格计算工作的一部分。这项工作涉及到将许多遗留应用程序和编程库集成到SOA框架中。网格分析环境(GAE)是一个基于Clarens网格服务框架的面向服务的体系结构,正在开发中,作为欧洲粒子物理实验室(CERN)大型强子对撞机(LHC)紧凑型μ子螺线管(CMS)实验的一部分。Clarens提供了一组授权、访问控制和发现服务,以及对所有已部署服务的XMLRPC和SOAP访问。Clarens Web Services Framework的两个实现(Python和Java)为广泛的程序设计语言提供了集成的可能性。本文描述了名为JClarens的Clarens Web服务框架的Java实现。以及科学界和网格社区感兴趣的几个Web服务,它们都是使用JClarens部署的。
2005-04-11 cs.DC
SCAREY: Location-Aware Service Lifecycle Management
SCAREY通过基于状态机的生命周期管理框架,利用用户位置信息优化服务部署,显著提升服务发现效率并降低能耗与成本。
2025-05-16 cs.DC
Grid Data Management in Action: Experience in Running and Supporting Data Management Services in the EU DataGrid Project
在欧盟数据网格项目的第一阶段,已经实施了一个数据管理系统,并提供部署。目前EDG测试床的组件包括:围绕Globus提供的基本服务构建的网格管理器服务原型,用于存储文件物理位置信息的集中式网格目录,以及广泛用于欧洲和美国各种HEP合作的网格数据镜像包(GridDataMirringPackage,GSDs)。在这一年中,这些服务得到了改进,变得更加强大,以便适合在生产前环境中使用。应用程序用户已经使用数据管理服务的第一个版本一年多了。在本文中,我们提出的组件和它们的相互作用,我们的实施和经验,以及从我们的用户社区收到的反馈。我们不仅解决了与其他EDG服务组件集成的问题,还解决了与我们在欧洲和美国的合作伙伴项目组件的互操作性问题。这些结论为将于2003年在EDG部署的下一代数据管理服务的体系结构提供了动力。
2003-06-02 cs.DC
Management of Grid Jobs and Information within SAMGrid
我们描述了一些SAMGrid系统的关键方面,所使用的D0和CDF实验在费米实验室。在SAMGrid的数据处理部分取得持续成功之后,我们开发了新的就业和信息服务。我们的作业管理植根于\CondorG,并使用了对HEP网格普遍适用的增强功能。我们的信息系统是基于一个统一的框架,配置管理的基础上XML数据表示和处理。
2003-07-08 cs.DC
A Qualitative Evaluation of Service Mesh-based Traffic Management for Mobile Edge Cloud
Service mesh正被广泛采用为基于微服务的应用程序中的流量管理的云原生机制,特别是对于托管在更集中的云环境中的通用IT工作负载。性能要求高的应用程序继续推动现代应用程序执行环境的去中心化,例如移动边缘云。本文对最先进的服务网格进行了系统的定性分析,以评估其设计是否适合解决移动边缘云环境中托管的性能要求苛刻的应用程序工作负载的流量管理需求。通过这种分析,我们认为,当今以可靠性为中心的服务网格设计无法满足不同类型的新兴移动边缘云工作负载的需求,并激励进一步研究高效的架构,更强的QoS保证和更高复杂性的云原生流量管理框架的抽象。
2022-05-12 cs.DC
A Taxonomy and Survey of Grid Resource Planning and Reservation Systems for Grid Enabled Analysis Environment
耦合地理上分布的资源来解决大规模问题的概念正变得越来越流行,形成了通常所说的网格计算。网格环境中的资源管理变得复杂,因为资源在地理上是分布的,本质上是异构的,并且由不同的个人和组织拥有,每个人都有自己的资源管理策略和不同的访问和成本模型。已经有许多项目设计和实现了具有各种架构和服务的资源管理系统。在本文中,我们提出了资源管理系统应满足的一般要求。分类也已定义的基础上,在不同的现有网格项目的资源管理系统的调查已进行,以确定这些系统缺乏所需的功能的关键领域。
2018-01-14 cs.DC
A Model for Grid User Management
在大规模网格计算环境中,用户的注册和管理提出了新的挑战,现有的协议没有很好地解决。在单个虚拟组织(VO)中,数千名用户可能需要访问数百个计算站点,而用户在每个站点注册本地帐户的传统模式将带来重大的扩展问题。然而,计算站点必须保持对站点访问的控制,并且站点策略通常要求每个用户具有单独的本地帐户。我们在这里提出了一个模型,允许用户注册一次VO,但仍然提供所有的计算站点的信息,他们需要与所需的信任级别。我们已经开发了工具,使网站自动管理本地帐户和网格身份和本地帐户之间的映射。
2003-06-13 cs.DC
Economic-based Distributed Resource Management and Scheduling for Grid Computing
计算网格作为下一代计算的基础设施,能够共享、选择和聚合地理上分布的资源,以解决科学、工程和商业中的大规模问题。由于网格中的资源是异构的,并且在地理上分布,具有不同的可用性以及针对不同用户在不同时间的各种使用和成本策略,并且优先级以及目标随时间而变化。在这样一个大型的分布式环境中,资源管理和应用程序调度是一项复杂的任务。本论文提出了一个分布式计算经济作为一个有效的隐喻资源管理和应用程序调度。提出了一种支持资源交易和基于服务质量的调度的体系结构框架。它使资源的供应和需求的监管,并提供了一个激励资源所有者参与网格和动机的用户之间的最后期限,预算和所需的服务质量水平进行权衡。论文通过开发用户服务质量需求驱动的调度策略和算法,展示了基于经济的系统用于对等分布式计算的能力。它证明了他们的有效性,通过执行调度实验在全球范围内的网格解决参数扫描应用程序。
2002-04-22 cs.DC
An Economic-based Resource Management and Scheduling for Grid Computing Applications
在网格计算环境中,资源管理和调度是实现资源高效利用的关键。在网格系统中,由于资源的异构性,应用程序的调度是一项非常复杂和具有挑战性的任务。在这方面的研究大多集中在提高网格系统的性能。基于可分负载理论,针对不同类型的工作负载和单个源处理器,已经提出了一些分配模型。本文介绍了一种新的资源分配模型,该模型以多个负荷源处理机作为经济模型。通过线性规划方法,得到了以电网用户成本最小为目标的最优负荷分配方案。结果表明,该资源分配模型能够有效地将工作负载分配到合适的资源上。实验结果表明,该模型在成本和时间上都得到了较好的解决方案。
2010-04-20 cs.DC
Nimrod/G: An Architecture of a Resource Management and Scheduling System in a Global Computational Grid
强大的微处理器和高速网络作为商品组件的可用性使得分布式系统上的高性能计算(广域集群计算)成为可能。在这种环境中,由于资源通常分布在地理上的各个层次(部门,企业,或世界各地)有一个很大的挑战,在整合,协调和呈现给用户作为一个单一的资源,从而形成一个计算网格。另一个挑战来自资源的分布式所有权,每个资源都有自己的访问策略、成本和机制。建议Nimrod/G网格启用的资源管理和调度系统建立在我们早期的工作Nimrod,并遵循模块化和基于组件的架构,使可扩展性,可移植性,易于开发,独立开发的组件和互操作性。它使用Globus工具包服务,并且可以很容易地进行扩展,以便与任何其他新兴的网格中间件服务一起运行。它侧重于管理和调度的计算在地理上分散在互联网上的部门,企业,或全球一级,特别强调开发调度计划的基础上的概念,计算经济的一个真正的测试床,即Globus测试床(GUSTO)。
2000-09-22 cs.DC
DDRM: Distributed Drone Reputation Management for Trust and Reliability in Crowdsourced Drone Services
本文提出基于以太坊区块链的分布式无人机声誉管理框架DDRM,通过SRAT和DRET双代币机制保障众包无人机服务评价的真实性与可靠性,有效抵御声誉欺诈并提升服务效率。
2024-06-30 cs.DC
Replica Selection in the Globus Data Grid
Globus数据网格体系结构为管理分布在网格环境中的存储资源和数据提供了一个可伸缩的基础设施。这些服务旨在支持各种科学应用,从高能物理到计算基因组学,这些应用需要访问大量数据(TB甚至PB),并具有不同的服务质量要求。通过对一组核心服务(如数据传输、安全性和副本编目)进行分层,可以构建各种更高级别的服务。在本文中,我们讨论了一个高层次的副本选择服务,使用信息的副本位置和用户的喜好,以指导选择存储副本的替代品的设计和实现。我们首先提出了一个基本的副本选择服务的设计,然后展示如何使用Globus的信息服务功能收集有关存储系统属性的动态信息,可以帮助改善和优化选择过程。我们演示了使用Condor的ClassAds资源描述和匹配机制作为一种有效的工具,用于表示和匹配存储资源的能力和政策对应用程序的要求。
2001-04-02 cs.DC
Mapping Cloud Computing onto Useful e-Governance
在网格和云计算的上下文中看到的大多数服务大多局限于可用于智力目的的服务。网格或云计算是大规模的分布式系统。大规模分销的本质只有在服务于普通人的情况下才能实现,唯一与几乎每一个居民都有联系的组织是各国政府。随着人口规模的增加,因此需要更大的权限。大规模的在线服务网格可以解决大权限的问题。政府服务可以通过完全定制的面向服务的云来提供。在本文中,我们提出了紧密的相似性之间的通用政府职能和面向服务的网格/云的方法。同时,我们也将讨论建立面向服务的政府组织网格的主要问题。
2010-09-13 cs.DC
Coordinating GPU Data Centers and Power Grid Regulation Service for Exogenous Carbon Benefits
University of California, Riverside(加州大学河滨分校)
本文提出Exogenous Carbon指标和EcoCenter框架,通过协调GPU数据中心与电网调频服务,减少对化石燃料调频储备的需求,实现外源碳减排。
2026-06-26 cs.DC
Towards Grid Monitoring and deployment in Jade, using ProActive
本文描述了我们目前对Jade网格化的努力,Jade是一个基于Java的环境,用于集群J2EE应用服务器的自主管理,由INRIA SARDES研究团队开发。为了实现这一目标,我们使用了java主动网格技术。我们首先提出了一些挑战,把这样一个自治管理系统最初专门用于分布式应用程序运行在集群的机器,到一个可以提供自我管理能力的大型系统,即部署在网格基础设施。这使我们对网格监控系统的技术状态进行了简要介绍。然后,我们回顾了Jade的架构,并因此提出以一种潜在的更具可扩展性的方式对其进行重组。实际实验涉及使用ProActive提供的网格部署功能,可以轻松地在任何类型的网格上部署Jade系统或其修订版。
2007-10-29 cs.DC
A Taxonomy of Live Migration Management in Cloud Computing
云数据中心已成为提供服务的骨干基础设施。随着新兴的边缘计算模式,计算和网络功能已从云推向边缘,以提供具有低端到端延迟的计算,智能和网络管理。边缘和云计算中跨不同计算节点的服务迁移对于保证动态环境中的服务质量至关重要。动态资源管理涉及到迁移虚拟机以实现各种目标,如负载均衡、整合、性能、节能和灾难恢复等。一些人已经研究了如何提高和预测VM和容器的单个实时迁移的性能。最近,一些研究服务迁移的边缘为中心的计算范式。然而,缺乏关注边缘和云计算环境中的实时迁移管理的调查。我们检查每个字段的特征,并进行以迁移管理为中心的分类和调查。我们还确定了差距和研究机会,以保证实时迁移的资源管理性能。
2021-12-05 cs.DC
An Architectural Model for a Grid based Workflow Management Platform in Scientific Applications
随着科学应用对计算和数据需求的日益增长,使用大型集群系统以及分布式资源是不可避免的。虽然在这些环境中执行大型应用程序可以提高性能,但过程的自动化变得越来越具有挑战性。虽然在面向业务的环境中使用复杂的工作流管理系统是这种自动化过程的可行解决方案,但可用于科学应用的开源引擎缺乏某些功能,或者对于非专业人员来说太难使用。在这项工作中,我们提出了一个基于网格的工作流管理平台提供的功能,如一个直观的方式来描述工作流,高效的数据处理机制和灵活的容错支持的架构模型。我们的集成解决方案引入了一个工作流引擎组件的基础上扩展了额外的功能和调度组件提供有效的任务和可用资源之间的映射。
2011-06-29 cs.DC
Fine-Grain Authorization for Resource Management in the Grid Environment
在本文档中,我们描述了我们正在进行的工作,以实现资源管理的细粒度授权。特别是,我们解决了虚拟组织(VO)的需求,以执行自己的政策,除了那些资源所有者。
2003-01-28 cs.CR cs.DC
Designing an Adaptive Application-Level Checkpoint Management System for Malleable MPI Applications
动态资源管理为高性能计算带来了许多机会。它提高了系统级服务和应用程序性能。检查点也可以被视为一种系统级的服务,并且可以获得动态提供的好处。检查点系统可以通过与可延展的资源管理系统集成来获得更好的资源可用性。除了容错之外,检查点系统还可以满足可延展应用在资源变化期间的数据重新分配需求。因此,我们提出了iCheck,一个自适应的应用程序级检查点管理系统,可以有效地利用系统和应用程序级的动态性,提供更好的检查点和数据再分配服务的应用程序。
2022-11-08 cs.DC
AliEnFS - a Linux File System for the AliEn Grid Services
在AliEn(ALICE环境http://alien.cern.ch)网格框架提供的服务中,有一个虚拟文件目录,允许使用各种文件传输协议透明地访问分布式数据集。$alienfs$(AliEn文件系统)使用LUFS(一种混合用户空间文件系统框架(开放源代码http://lufs.sourceforge.net))将AliEn文件目录作为新的文件系统类型集成到Linux内核中。LUFS使用称为VFS(虚拟文件系统交换机)的特殊内核接口级别,通过通用文件系统接口与Alien文件系统守护程序进行通信。AliEn框架用于身份验证、目录浏览、文件注册和读/写传输操作。C++ API实现了一般的文件系统操作。AliEnFS的目标是允许用户使用熟悉的shell命令(例如,cp,ls,rm.)本文讨论了网格文件系统的一般方面,Alien实现和Alien网格文件系统的现在和未来的发展。
2003-06-13 cs.DC
Inter-organizational fault management: Functional and organizational core aspects of management architectures
在过去的十年里,外包--成功的,有时也是痛苦的--已经成为IT服务管理讨论中最热门的话题之一。IT服务外包给外部服务提供商,以减少在本组织内提供这些服务所需的工作量和开销。最近,IT服务提供商本身也开始外包服务部件,或与其他提供商进行非等级合作提供这些服务。将一个服务拆分为多个服务部分是一项重要的任务,因为它们必须由不同的提供者实现、操作和维护。这种组织间合作的一个关键方面是故障管理,因为快速可靠地定位和解决降低服务质量的问题至关重要。在这篇文章中,我们提出了一个全面的基于用例的需求分析的结果,为跨组织故障管理(ioFMA)的架构。此外,给出了ioFMA的组织各自的功能模型的概念。
2011-01-20 cs.DC cs.NI
The first deployment of workload management services on the EU DataGrid Testbed: feedback on design and implementation
应用程序用户现在已经体验了大约一年的标准化资源代理服务,该服务由欧盟数据网格项目(WP 1)的“工作负载管理”包提供。了解、塑造和推动该系统的极限,为其设计和实施提供了宝贵的反馈。摘要的经验教训,和“更好的做法”,吸取了教训,并适用于第二次主要版本的软件,给出。
2003-05-31 cs.DC
Certification Authority Monitored Multilevel and Stateful Policy Based Authorization in Services Oriented Grids
在当前的分布式环境中,面向服务的网格将在其他类型的网格中占据更加突出的地位。随着在线政府服务的出现,政府网格将大量涌现。除了其他网格中常见的安全问题外,面向服务的网格中的授权还面临着某些缺陷,需要以不同的方式看待。这里提出的CMMS模型克服了所有这些缺点,并增加了实施的简单性,因为它与某些政府服务及其功能的紧密相似性。该模型是用来原型的国家警察信息网格(SPIG)。在PKIX和X.509证书中需要进行小型技术重组。
2010-07-02 cs.CR cs.DC
Dynamic Service Scheduling and Resource Management in Energy-Harvesting Multi-access Edge Computing
University of Leeds(利兹大学);Southern University of Science and Technology (SUSTech)(南方科技大学);University of Thessaly(色萨利大学);Research Institute of Trustworthy Autonomous Systems (RITAS), SUSTech(南方科技大学可信自主系统研究院)
本文提出了一种基于能量收集的MEC系统在线策略,通过动态任务调度和实时能耗管理,实现高效能量利用与低延迟服务的平衡。
2025-10-31 cs.DC
Utilizing Reconfigurable Hardware Processors via Grid Services
计算网格通常由使用普通处理器(如Intel Pentium)的节点组成。现场可编程门阵列(FPGA)由于其固有的并行架构而能够非常好地执行某些计算密集型任务,通常导致数量级的加速。本文探讨了如何FPGA可以透明地暴露通过网格服务的远程使用,通过集成Proteus软件平台与Globus Toolkit 3.0。
2004-11-16 cs.AR cs.DC
GridMonitor: Integration of Large Scale Facility Fabric Monitoring with Meta Data Service in Grid Environment
网格计算由协调使用大量不同的、地理上分布的资源来实现高性能计算组成。对这些计算资源的有效监控对于在网格上高效使用是极其重要的。网格中存在大量的异构计算实体,这使得网格计算具有很大的挑战性.在这项工作中,我们描述了一个网格监控系统,称为GridMonitor,捕获并提供最重要的信息,从一个大型计算设施。网格监控系统由本地监控、归档、发布和治理四个层次组成。该架构已应用于大规模的Linux农场和网络基础设施。它可以被许多更高级别的网格服务使用,包括调度服务和资源代理。
2003-06-13 cs.DC cs.PF
Autonomous tools for Grid management, monitoring and optimization
我们概述了设计和开发的自主工具的计算网格的管理,监控和优化。提出了基于效用概念的管理。网格优化被认为是面向应用的。提出了一种通用的网格模拟器,作为网格结构和功能的优化工具。
2007-07-22 cs.CE cs.DC hep-ex
Distributed and Big Data Storage Management in Grid Computing
大数据存储管理是网格计算环境中最具挑战性的问题之一,因为大量数据密集型应用经常涉及高度的数据访问局部性。网格应用程序通常处理大量数据。在传统的方法中,高性能计算包括用于数据存储和数据复制的专用服务器。在本文中,我们提出了一种新的机制,分布式和大数据存储和资源发现服务。提出了一种网格环境下的动态可扩展存储管理(DSSM)体系结构。这允许在网格计算中不仅共享计算周期,而且共享存储空间。可以从任何网格机器透明地访问存储,从而允许在网格用户和应用程序之间轻松地进行数据共享。允许创建虚拟空间的虚拟ID的概念已经被引入和使用。DSSM将所有面向网格的存储设备(节点)划分为多个地理上分布的域,以促进本地化并简化域内存储管理。采用基于网格服务的存储资源,随着需求的增长,将简单的模块化服务逐块堆叠起来。为此,我们提出了四个定义轴:DSSM架构和算法描述,存储资源和资源发现到网格服务,评估目的原型系统,动态,可扩展性和带宽,并讨论结果。在底层和上层的算法标准化的动态和可扩展的存储管理,以及更高的带宽已经设计。
2012-07-12 cs.DC cs.NI
Security for Grid Services
网格计算关注的是分布式“虚拟组织”中各种资源的共享和协调使用。“这些环境的动态和多机构性质带来了具有挑战性的安全问题,需要新的技术方法。特别是,必须处理不同的本地机制,支持服务的动态创建,并支持信任域的动态创建。我们描述了这些问题是如何解决的两代Globus工具包。首先,我们回顾Globus工具包版本2(GT2)的方法,然后,我们描述了新的方法开发,以支持Globus工具包版本3(GT3)实现的开放网格服务体系结构,一项倡议,是重铸网格概念在面向服务的框架内基于Web服务。GT3的安全性实现使用Web服务安全机制进行凭证交换和其他目的,并引入了一个严格的最小特权模型,避免了对任何特权网络服务的需要。
2003-06-24 cs.CR cs.DC
FRTRUST: a fuzzy reputation based model for trust management in semantic P2P grids
网格和对等网络是实现文件共享的两种理想技术。P2P网格是网格网络的一种特殊情况,其中P2P通信用于节点之间的通信和信任管理。使用此技术可以创建具有更大分布性和可扩展性的网络。语义网格作为网格网络的扩展出现,在网格网络中,丰富的资源元数据被揭示和清楚地处理。在语义P2P网格中,节点根据其服务之间的语义相似性聚集到不同的组中。本文提出了一种语义P2P网格中的信任管理信誉模型。我们使用模糊理论,在一个名为FR TRUST的信任覆盖网络模型的网络结构和存储的声誉信息。实际上,我们提出了一个语义P2P网格信誉收集和计算系统。该系统使用模糊理论来计算对等信任级别,该级别可以是:低、中或高。我们的实验结果表明,FR TRUST结合低(因此可取的)一个良好的计算复杂性与高排名精度。
2014-04-29 cs.DC cs.NI
Investigation on Demand Side Management Techniques in the Smart Grid using Game Theory and ICT Concepts
本文探讨了如何从博弈论和ICT的概念可以有助于解决需求侧管理,在即将到来的智能电网的一个重要概念的挑战。需求侧管理是关于修改需求侧的能量负载分布,例如为了减少能量使用的峰值。这可以通过在可能的情况下改变能源需求来实现。我们首先描述了一些智能电网的概念和假设(智能电表,定价,家电调度),并解释需求侧管理的优势。引入博弈论概念后,可以用数学方法描述需求侧管理问题。下一步是解决数学公式,并显示如果能源用户数量增加,需求侧管理将变得多么复杂。然而,通过分布式ICT算法,仍然可以找到解决方案。在现有文献的基础上,研究了不同的算法。虽然在文献中的结果看起来很有希望,一般的算法的收敛性,特别是收敛到最优的结果的几个结论受到挑战。
2014-09-01 cs.DC cs.GT
An SMDP-based Resource Management Scheme for Distributed Cloud Systems
本文研究了地理分布云系统中的资源管理问题。采用Follow Me Cloud概念,实现跨联合数据中心(DC)的服务迁移。因此,有两种类型的服务请求到DC,即,在本地服务区域中发起的新请求(NR)和当移动用户跨服务区域移动时生成的迁移请求(MR)。提出了一种新的资源管理方案,帮助资源管理器决定是否接受服务请求(NR或MR),并确定多少资源应分配给每个服务(如果接受)。优化目标是最大化系统平均回报,并保持服务请求的拒绝概率在一定的阈值之内。数值结果表明,与其他资源管理方案相比,该方案能显著提高系统的整体效用和用户体验.
2015-03-18 cs.DC cs.NI
ADS as Information Management Service in an M-Learning Environment
即使是能够进行无线通信的小型手持设备,也需要专门的支持。特别是,协作应用程序需要复杂的援助方面的查询和交换不同种类的数据。使用一个具体的例子,从移动学习领域,信息传播的一般需要的动机。随后,在基础设施条件的驱动下,适当的中间件服务的实现策略进行了讨论。
2007-08-04 cs.DC cs.NI
Mass Storage Management and the Grid
爱丁堡大学对海量存储器系统非常感兴趣,因为它是负责为英国粒子物理网格GridPP转出存储软件的核心小组之一。我们提出了一个开发项目的结果,提供SDSC存储资源代理,欧盟数据网格和存储资源管理器之间的软件接口。该项目是与国家电子科学中心的eDikt小组、布里斯托尔大学和格拉斯哥大学、卢瑟福·阿普尔顿实验室和圣地亚哥超级计算中心联合开展的。
2004-12-20 cs.DC cs.SE
MammoGrid: A Service Oriented Architecture based Medical Grid Application
MammoGrid项目最近交付了它的第一个概念验证原型,它使用了一个基于面向服务的体系结构(SOA)的网格应用程序来支持跨越国界的分布式计算。选择底层的Alien Grid基础设施是因为它的实用性,也是因为它作为一种潜在的基于开源标准的解决方案,用于管理和协调分布式资源。由此产生的原型预计将利用大量的医学图像数据进行流行病学研究,先进的图像处理,放射学教育,并最终,远程诊断的医疗虚拟组织的社区。MammoGrid原型包括一个用于数据采集和检查的高质量临床医生可视化工作站、一个与一组医疗服务(注释、安全、图像分析、数据存储和查询服务)兼容的DICOM接口,该接口位于所谓的网格盒上,并可安全访问通过网格中间件连接的其他网格盒网络。本文概述了MammoGrid方法在管理网格连接的乳腺X射线摄影数据库的联邦在最近交付的原型的上下文中,还将描述原型的下一阶段。
2004-05-21 cs.DB cs.DC
A Model-driven Approach for Grid Services Engineering
由于网格计算的大肆宣传,这样的系统很少使用形式化技术设计。围绕网格技术的复杂性和快速增长的需求使得人们倾向于使用经典的开发技术,这导致了没有指导方针或规则以及非结构化的工程过程。本文提倡一种形式化的网格应用程序开发方法,以促进严格的网格软件体系结构的发展。这种方法解决了跨平台的互操作性和服务质量;模型驱动的范例被应用到一个正式的以架构为中心的工程方法,以受益于正式的语义描述能力,除了基于模型的转换。这样一个新的组合概念的结果,促进了重用的设计模型,并简化了网格计算的发展,提供了一个适应的开发过程,并确保正确的每个设计步骤。
2005-09-27 cs.DC cs.SE
Secure, Efficient Data Transport and Replica Management for High-Performance Data-Intensive Computing
一种新兴的数据密集型应用涉及从大量测量或计算数据中提取地理上分散的复杂科学信息。例如,在实验物理学中,所讨论的数据是由加速器生成的,而在模拟科学中,数据是由超级计算机生成的。所谓的数据网格为这些应用程序提供了必要的基础设施,就像互联网为电子邮件和Web等应用程序提供了必要的服务一样。我们在这里描述两种服务,我们认为这是任何数据网格的基础:可靠,高速transporet和副本管理。我们的高速传输服务GridFTP扩展了流行的FTP协议,增加了数据网格应用程序所需的新功能,如条带化和部分文件访问。我们的副本管理服务将副本目录与GridFTP传输集成,以提供数据集副本的创建,注册,定位和管理。我们目前的设计,这两个服务,也初步的性能结果。我们的实现利用Globus Toolkit提供的安全和其他服务。
2001-03-28 cs.DB cs.DC
Towards a Grid Platform for Scientific Workflows Management
工作流管理系统允许用户在更高的层次上开发复杂的应用程序,通过编排功能组件而无需处理实现细节。虽然在企业环境中开发了各种各样的工作流引擎,但可用于科学应用程序的开源引擎缺乏某些功能,或者对于非专业人员来说太难使用。我们的目的是开发一个分布式系统的工作流管理平台,它将提供像一个直观的方式来描述工作流,高效的数据处理机制和灵活的容错支持的功能。我们在这里介绍一个架构模型的工作流平台,基于ActiveStream工作流引擎,我们建议增加一组额外的组件。
2009-10-04 cs.DC cs.NI
A Taxonomy of Data Grids for Distributed Data Sharing, Management and Processing
数据网格已被用作科学界的平台,科学界需要共享、访问、传输、处理和管理分布在世界各地的大型数据汇集。它们将高端计算技术与高性能网络和广域存储管理技术相结合。在本文中,我们讨论了数据网格背后的关键概念,并将其与其他数据共享和分发范例,如内容分发网络,对等网络和分布式数据库进行比较。然后,我们提供了全面的分类法,涵盖了体系结构,数据传输,数据复制和资源分配和调度的各个方面。最后,我们将建议的分类映射到各种数据网格系统,不仅验证分类,而且确定未来探索的领域。通过这种分类法,我们的目标是对现有系统进行分类,以更好地了解它们的目标和方法。这将有助于评估它们对解决类似问题的适用性。这种分类法还提供了这一领域的“差距分析”,通过这种分析,研究人员可以潜在地确定新的问题进行调查。最后,我们希望提出的分类和映射也有助于为新的从业者提供一个简单的方法来理解这个复杂的研究领域。
2005-06-10 cs.CE cs.DC
Machine Learning (ML)-Centric Resource Management in Cloud Computing: A Review and Future Directions
University of Electronic Science and Technology of China(电子科技大学);University of Melbourne(墨尔本大学)
云计算已经迅速成为用于提供基于互联网的效用计算服务的模型。在云计算中,基础设施即服务(IaaS)是最重要和发展最快的领域之一。云提供商在此服务模型中提供用户/机器资源,例如虚拟机、原始(块)存储、防火墙、负载均衡器和网络设备。IaaS的云计算最重要的方面之一是资源管理。可扩展性、服务质量、最佳效用、降低开销、增加吞吐量、减少延迟、专业化环境、成本效益和简化界面是云计算中IaaS资源管理的一些优势。传统上,资源管理是通过静态策略来完成的,这在各种动态场景中施加了一定的限制,促使云服务提供商采用数据驱动的、基于机器学习的方法。机器学习正被用于处理各种资源管理任务,包括工作负载估计、任务调度、VM整合、资源优化和能量优化等。本文详细介绍了基于ML的资源管理在当前研究中面临的挑战,以及当前解决这些挑战的方法,以及它们的优点和局限性。最后,我们提出了潜在的未来研究方向的基础上确定的挑战和局限性,在目前的研究。
2021-05-09 cs.DC cs.LG
Distribution and Management of Datacenter Load Decoupling
针对AI和云数据中心高功耗与电网可再生能源波动性的冲突,提出通过负载解耦创造灵活性,研究其分布与管理方法,优化分布可低代价实现高碳减排,协作管理提升减排效果且具经济可行性。
2025-11-12 cs.DC cs.SY eess.SY
Blockchain for Transactive Energy Management of Distributed Energy Resources in Smart Grid
这项工作提出了一个区块链系统的设计和实现,该系统能够为分布式能源(DER)提供可信的交易能源管理。我们模型的DERs之间的相互作用,包括能源交易和灵活的家电调度,作为一个成本最小化问题。考虑到分散的性质和不同的所有权的DER,我们开发了一个分布式算法来解决优化问题,使用交替方向法的乘数(ADMM)方法。此外,我们开发了一个区块链系统,在该系统上,我们使用智能合约实现了所提出的算法,以保证能源管理的透明性和正确性。我们在一个小规模的测试网络中对区块链进行原型设计,并通过使用真实数据的实验对其进行评估。实验结果验证了设计的可行性和有效性。
2021-06-04 cs.DC cs.SY eess.SY