[论文解读] AliEn - EDG Interoperability in ALICE

S. Bagnasco, R. Barberá+4 more|ArXiv.org|Jun 13, 2003

Distributed and Parallel Computing Systems被引用 6

一句话总结

本文提出了一种在阿里恩（AliEn）——ALICE实验的类似GRID的计算环境——与欧洲数据网格（EDG）之间实现无缝互操作性的框架，实现了统一的工作负载提交和分布式数据管理。通过在EDG用户接口计算机上部署AliEn组件，并在EDG副本目录和AliEn数据目录之间同步数据注册，该系统确保了跨平台的数据可访问性和完整性，已在原型测试环境中成功部署。

ABSTRACT

AliEn (ALICE Environment) is a GRID-like system for large scale job submission and distributed data management developed and used in the context of ALICE, the CERN LHC heavy-ion experiment. With the aim of exploiting upcoming Grid resources to run AliEn-managed jobs and store the produced data, the problem of AliEn-EDG interoperability was addressed and an in-terface was designed. One or more EDG (European Data Grid) User Interface machines run the AliEn software suite (Cluster Monitor, Storage Element and Computing Element), and act as interface nodes between the systems. An EDG Resource Broker is seen by the AliEn server as a single Computing Element, while the EDG storage is seen by AliEn as a single, large Storage Element; files produced in EDG sites are registered in both the EDG Replica Catalogue and in the AliEn Data Catalogue, thus ensuring accessibility from both worlds. In fact, both registrations are required: the AliEn one is used for the data management, the EDG one to guarantee the integrity and access to EDG produced data. A prototype interface has been successfully deployed using the ALICE AliEn Server and the EDG and DataTAG Testbeds.

研究动机与目标

• 使由AliEn管理的工作负载能够在未来的EDG网格资源上运行。
• 确保EDG站点产生的数据在AliEn系统内仍可访问和可管理。
• 解决AliEn与EDG之间异构数据目录和资源管理的挑战。
• 设计并部署一个原型接口，连接AliEn与EDG系统，实现互操作运行。
• 通过在EDG副本目录和AliEn数据目录中注册文件，维持数据完整性和可用性。

提出的方法

• 在一台或多台EDG用户接口计算机上部署AliEn软件组件——集群监控器、存储单元和计算单元——作为接口节点。
• 将EDG资源代理呈现给AliEn服务器，作为一个单一的计算单元，以简化工作负载提交。
• 将EDG存储基础设施呈现给AliEn，作为一个单一的大型存储单元，以简化数据管理。
• 实施双重文件注册：文件同时记录在EDG副本目录和AliEn数据目录中。
• 使用AliEn数据目录进行内部数据管理，使用EDG副本目录确保数据完整性和访问控制。
• 通过使用ALICE AliEn服务器、EDG和DataTAG测试平台的原型部署来验证接口。

实验结果

研究问题

• RQ1 如何使AliEn与EDG系统实现互操作，以实现在异构网格基础设施上的统一工作负载提交？
• RQ2 何种架构设计能够实现在AliEn与EDG数据目录之间的无缝数据管理与访问？
• RQ3 当文件在EDG站点生成但由AliEn管理时，如何保持数据完整性和可访问性？
• RQ4 接口节点在AliEn与EDG系统之间起到何种中介作用？
• RQ5 在同步两个不同网格中间件系统之间的数据注册时，面临哪些实际挑战及解决方案？

主要发现

• 原型接口成功实现了通过EDG资源代理将AliEn管理的工作负载提交并执行在EDG资源上。
• 在EDG站点生成的文件被正确注册到EDG副本目录和AliEn数据目录中，确保了双重可访问性。
• 系统通过利用EDG副本目录维持了数据完整性，同时保留了AliEn原生的数据管理能力。
• 部署表明，AliEn可将EDG基础设施视为一个统一的计算与存储单元。
• 互操作性框架在使用ALICE AliEn服务器、EDG和DataTAG测试平台的真实测试环境中被证明是可行的。
• 双重注册机制确保了数据从AliEn和EDG两个视角均保持可访问和可管理。