首页/论文/cs/0502018

arXiv cs/05020182005-02-03cs.DC

当数据库系统遇到网格

When Database Systems Meet the Grid

Maria A. Nieto-Santisteban, Alexander S. Szalay, Aniruddha R. Thakar, William J. O'Mullane, Jim Gray, James Annis

备注：: better version of the paper (better graphics exceed ArXiv 1MB limit) at http://www-db.cs.wisc.edu/cidr/papers/P13.pdf
发表信息：: Proceedings of CIDR 2005 Conference, Asilomar, CA. Jan. 2005, pp 154-161

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

摘要英文摘要相关论文

摘要：

我们说明了数据库系统和网格技术相结合的数据密集型应用程序的好处。使用SQL服务器集群，我们重新实现了现有的网格应用程序，发现星系团在一个大型天文数据库。SQL实现的运行速度比早期的基于Tcl-C文件的实现快一个数量级。我们将讨论为什么以及如何网格应用程序可以利用数据库系统。

英文摘要：

We illustrate the benefits of combining database systems and Grid technologies for data-intensive applications. Using a cluster of SQL servers, we reimplemented an existing Grid application that finds galaxy clusters in a large astronomical database. The SQL implementation runs an order of magnitude faster than the earlier Tcl-C-file-based implementation. We discuss why and how Grid applications can take advantage of database systems.

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

阅读原文

阅读 PDF ↗

arXiv 页面 ↗HTML 原文 ↗

本文内容

摘要英文摘要相关论文

机构、总结、中文摘要均由AI分析而来，可能存在错误，请以论文正文为准。

继续探索

相关论文

区块链遇见数据库：区块链关系数据库的设计与实现

Blockchain Meets Database: Design and Implementation of a Blockchain Relational Database

在本文中，我们设计并实现了第一个具有区块链特性的分散复制关系数据库，我们称之为区块链关系数据库。我们强调了区块链平台和复制的关系数据库提供的功能之间的一些相似之处，尽管它们在概念上不同，主要是在它们的信任模型上。受此启发，我们利用关系数据库中的丰富功能、数十年的研究和优化以及可用工具来构建区块链关系数据库。我们考虑一个已知但相互不信任的组织的许可区块链模型，每个组织都运行自己的数据库实例，这些实例是彼此的副本。副本独立执行事务，并参与分散的共识，以确定事务的提交顺序。我们设计了两种方法，第一种方法是在执行事务之前商定事务的提交顺序，第二种方法是在没有提交顺序的先验知识的情况下执行事务，而排序是并行发生的。我们利用可序列化的快照隔离（SSI），以保证跨节点的副本保持一致，并尊重由共识确定的顺序，并设计了一个新的变体的SSI块高度的基础上，后者的方法。我们实现了我们的系统在PostgreSQL上，并提出了详细的性能实验分析这两种方法。

2019-05-31cs.DC

支持网格分析环境的异构关系数据库

Heterogeneous Relational Databases for a Grid-enabled Analysis Environment

基于网格的系统需要一种数据库访问机制，该数据库访问机制可以通过虚拟数据访问系统（即，可以负责跟踪存储在地理上分布的异构数据库中的数据的系统）来提供对所请求的数据的无缝同构访问。该系统应通过使用虚拟数据访问机制（即，可以向客户端应用程序隐藏后端数据库的异构性的机制）来提供存储在不同存储库中的数据的集成视图。本文主要研究通过Web服务接口访问存储在不同关系数据库中的数据，并利用数据仓库和数据集市的特点。我们提出了一个中间件，使应用程序访问存储在地理上分布的关系数据库中的数据，而不知道他们的物理位置和底层模式。提供了一个Web服务接口，使应用程序能够以独立于语言和平台的方式访问该中间件。基于Clarens [4]、Unity [7]和POOL [8]创建了一个原型实现。这种透明地访问存储在分布式关系数据库中的数据的能力对于网格用户，特别是希望整理和分析分布在网格上的数据的科学界来说可能是非常强大的。

2005-04-10cs.DC

网格上的LHC数据库：成就与问题

LHC Databases on the Grid: Achievements and Open Issues

为了从记录的数据中提取物理结果，LHC实验正在使用网格计算基础设施。网格上的事件数据处理需要可扩展地访问非事件数据（探测器条件、校准等）。存储在关系数据库中。数据库驻留数据对于事件数据重建处理步骤是关键的，并且经常需要物理分析。本文回顾了LHC在网格计算数据库技术方面的经验。主题列表包括：数据库集成与网格计算模型的LHC实验;数据库技术的选择;数据库接口的例子;分布式数据库应用程序（数据的复杂性，更新频率，数据量和访问模式）;数据库访问的可扩展性在网格计算环境中的LHC实验。审查报告介绍了取得重大进展的领域和尚未解决的问题。

2010-07-12cs.DBcs.DChep-ex

MammoGrid项目中用于共享图像分析的网格数据库

Grid Databases for Shared Image Analysis in the MammoGrid Project

MammoGrid项目旨在证明网格基础设施可用于数据库驻留但地理上分布的医学图像的协作临床分析。这需要：a）提供面向临床医生的前端工作站，以及b）跨分布式和联合数据库服务于真实世界临床医生查询的能力。MammoGrid项目将证明该网格的可行性，利用其力量使地理上分散的医院的放射科医生能够分享标准化的乳房X线照片，比较诊断（有和没有计算机辅助肿瘤检测），并进行跨国界的复杂流行病学研究。本文概述了在MammoGrid中采用的方法，该方法使用“信息基础设施”和驻留在意大利和英国的多个分布式数据存储中的DICOM兼容对象模型，在网格中无缝连接放射科医生工作站

2004-05-21cs.DBcs.DC

数据库遇上深度学习：挑战与机遇

Database Meets Deep Learning: Challenges and Opportunities

National University of Singapore（新加坡国立大学）；Beijing Institute of Technology（北京理工大学）；Zhejiang University（浙江大学）；University of Michigan（密歇根大学）

深度学习最近变得非常流行，因为它在许多复杂的数据驱动应用中取得了令人难以置信的成功，例如图像分类和语音识别。数据库社区已经在数据驱动应用程序上工作了很多年，因此应该在支持这一新浪潮中发挥主导作用。然而，数据库和深度学习在技术和应用方面都是不同的。在本文中，我们讨论的研究问题，在这两个领域的交叉点。特别是，我们从数据库的角度讨论了深度学习系统的可能改进，并分析了可能受益于深度学习技术的数据库应用程序。

2020-01-19cs.DBcs.DCcs.LG

嗅探有助于相遇：网格中匿名智能体的确定性 rendezvous

Sniffing Helps to Meet: Deterministic Rendezvous of Anonymous Agents in the Grid

本文研究网格中匿名智能体的确定性 rendezvous，证明在已知距离或同时启动时可 O(D) 完成，在无先验知识且任意延迟时最优复杂度为 O(D^2)，并给出下界。

2024-07-20cs.DC

更多相关论文收起更多论文

当区块链遇到智能电网：全面调查

When Blockchain Meets Smart Grids: A Comprehensive Survey

近年来，人们对区块链技术越来越感兴趣，许多基于区块链的应用程序已经开发出来，以利用其分散性，透明度，容错和强安全性。在智能电网领域，已经出现了大量的建议，利用区块链来增强智能能源管理，能源交易，安全和隐私保护，微电网管理和能源汽车。与传统的集中式方法相比，基于区块链的解决方案能够利用区块链的优势，在智能电网中实现更好的功能。但区块链技术本身也有其处理吞吐量低、隐私保护弱的缺点。因此，研究如何以更有效的方式将区块链与智能电网相结合，从而最大限度地发挥区块链的优势，避免其缺点至关重要。本文调查了旨在将新兴区块链技术与智能电网集成的最先进的解决方案。本次调查的目的是讨论在智能电网的不同组成部分中应用区块链的必要性，确定当前解决方案遇到的挑战，并强调用于将区块链与智能电网集成的框架和技术。我们还从不同的角度对基于区块链的智能电网解决方案进行了全面的比较研究，旨在为不同的智能电网管理任务提供将区块链与智能电网集成的见解。最后，我们列出了当前的项目和计划，从实践方面展示了当前的努力。此外，我们提请注意尚未解决的现有解决方案的开放问题，并指出未来可能的研究方向。

2021-09-29cs.CRcs.DC

网格环境下的分布式异构关系数据仓库

Distributed Heterogeneous Relational Data Warehouse In A Grid Environment

本文探讨了如何“分布式异构关系数据仓库“可以集成在一个网格环境中，将提供物理学家有效地访问大型和小型的对象集合从数据库在多个站点。本文探讨了网格使这样一个仓库的要求，并探讨了如何满足这些要求扩展现有的网格中间件。我们提出了初步的结果，这种工作原型仓库使用SQLServer和Oracle9i，网格启用的Web服务接口，使它更容易为Web应用程序安全地访问分布式数据库的内容。在原型成功的基础上，我们提出了一个通过Web服务接口使用异构关系型数据仓库的框架，为用户创建一个单一的“虚拟数据库系统”。以这种方式透明地访问数据的能力，如原型所示，对于希望整理和分析分布在网格上的信息的HENP和其他网格用户来说，可能是一个非常强大的工具。

2003-06-18cs.DBcs.DC

存储受限数据库中的私有信息检索--编码缓存满足PIR

Private Information Retrieval from Storage Constrained Databases -- Coded Caching meets PIR

专用信息检索（PIR）允许用户从来自$N$数据库的$K$可能消息中检索所需消息，而不泄露所需消息的身份。大多数现有的作品PIR假设存在复制的数据库，每个存储所有的$K$消息。在这项工作中，我们考虑的问题，PIR从存储受限的数据库。每个数据库具有$μKL$位的存储容量，其中$K$是消息的数量，$L$是每个消息的位大小，$μ\in [1/N, 1]$是标准化存储。在存储受限的PIR问题中，有两个关键的设计问题：a）如何在存储受限的情况下跨每个数据库存储内容;以及b）构造允许通过存储受限的数据库进行高效PIR的方案。这项工作的主要贡献是一个通用的可实现的计划PIR从存储约束数据库的任何存储值。特别是，对于任何$(N,K)$，与规范化存储$μ= t/N$，其中参数$t$可以采取整数值$t \in \{1, 2, \ldots, N\}$，我们表明，我们提出的PIR方案实现了$\left(1+ \frac{1}{t}+ \frac{1}{t^{2}}+ \cdots + \frac{1}{t^{K-1}}\right)$的下载成本。当$μ=1$（即，$t=N$）对应于具有完整存储的复制数据库的设置。对于这个极端的设置，我们的计划恢复的信息理论上的最优下载成本，其特征在于太阳和贾法尔为$\left(1+ \frac{1}{N}+ \cdots + \frac{1}{N^{K-1}}\right…

2017-11-14cs.CRcs.DCcs.IT

基于调度器的网格负载均衡算法

Cluster-Based Load Balancing Algorithms for Grids

电子科学应用可能需要大量的数据和高处理能力，而网格基础设施非常适合满足这些要求。网格中的负载分布可能会发生变化，从而导致瓶颈和过载站点。我们描述了一个层次的动态负载均衡协议的网格。网格由集群组成，每个集群由一个协调器表示。每个协调器首先尝试平衡其集群中的负载，如果失败，则与其他协调器通信以执行负载的传输或接收。这一过程定期重复。我们分析了该协议的正确性，性能和可扩展性，并从模拟结果表明，我们的算法通过减少网格环境中的高负载节点的数量来平衡负载。

2011-10-10cs.DC

全球网格与软件工具包：四种网格中间件技术的研究

Global Grids and Software Toolkits: A Study of Four Grid Middleware Technologies

网格是一种基础设施，它涉及多个组织拥有和管理的计算机、网络、数据库和科学仪器的集成和协作使用。网格应用程序通常涉及大量的数据和/或计算资源，需要跨组织边界的安全资源共享。这使得网格应用程序的管理和部署成为一项复杂的任务。网格中间件为用户提供了在异构网格环境中无缝计算和统一访问资源的能力。已经开发了几个软件工具包和系统，其中大多数是世界各地学术研究项目的成果。本章将重点介绍其中的四个中间件--UNICORE、Globus、Legion和Gridbus。它还介绍了我们的实现资源代理的UNICORE，因为这一功能是不支持它。比较这些系统的基础上的体系结构，实现模型和其他几个功能。

2004-07-01cs.DC