[论文解读] MonALISA : A Distributed Monitoring Service Architecture

H. B. Newman, I. Legrand+3 more|arXiv (Cornell University)|Jun 16, 2003

Distributed systems and fault tolerance参考文献 3被引用 165

一句话总结

MonALISA 提出了一种可扩展的、动态的分布式监控架构，适用于大规模网格计算系统，利用 JINI/Java 和 WSDL/SOAP 技术，实现自描述、松耦合的服务，支持自动注册、发现及状态变更通知。该系统整合了 SNMP 和网络性能监控，用于跟踪计算节点、应用程序及端到端网络行为，在美国 CMS 测试网格和 VRVS 反射器网络中实现了实时监控。

ABSTRACT

The MonALISA (Monitoring Agents in A Large Integrated Services Architecture) system provides a distributed monitoring service. MonALISA is based on a scalable Dynamic Distributed Services Architecture which is designed to meet the needs of physics collaborations for monitoring global Grid systems, and is implemented using JINI/JAVA and WSDL/SOAP technologies. The scalability of the system derives from the use of multithreaded Station Servers to host a variety of loosely coupled self-describing dynamic services, the ability of each service to register itself and then to be discovered and used by any other services, or clients that require such information, and the ability of all services and clients subscribing to a set of events (state changes) in the system to be notified automatically. The framework integrates several existing monitoring tools and procedures to collect parameters describing computational nodes, applications and network performance. It has built-in SNMP support and network-performance monitoring algorithms that enable it to monitor end-to-end network performance as well as the performance and state of site facilities in a Grid. MonALISA is currently running around the clock on the US CMS test Grid as well as an increasing number of other sites. It is also being used to monitor the performance and optimize the interconnections among the reflectors in the VRVS system.

研究动机与目标

• 为解决高能物理合作项目中大规模、动态、地理分布广泛的网格计算系统的监控挑战。
• 设计一种可扩展的、松耦合的监控架构，支持服务的自动注册与发现。
• 实现在分布式服务与客户端之间对状态变更的实时通知。
• 集成异构的监控工具与协议，包括 SNMP 和网络性能算法。
• 为全球网格基础设施中的计算与网络性能提供端到端的可视化能力。

提出的方法

• 该系统采用基于 JINI 和 Java 的动态分布式服务架构，支持多线程的站点服务器托管自描述服务。
• 每个服务可自主注册到网络，并可通过动态查找机制被客户端或其他服务发现。
• 通过发布-订阅模型实现事件驱动的通知机制，客户端订阅状态变更事件后可自动接收更新。
• 该框架集成现有监控工具，并通过 SNMP 支持对计算节点和设施的系统级监控。
• 利用内置算法监控网络性能，跟踪跨分布式站点的端到端延迟与吞吐量。
• 该架构使用 WSDL/SOAP 进行服务描述与 Web 服务通信，实现异构平台间的互操作性。

实验结果

研究问题

• RQ1 如何在具有异构组件的大规模、动态网格基础设施中实现分布式监控系统的有效扩展？
• RQ2 哪些架构模式能够支持在分布式监控环境中实现自发现与动态服务注册？
• RQ3 如何在松耦合、面向服务的监控框架中高效支持实时事件通知？
• RQ4 哪些集成机制可使多种监控工具与协议在统一监控服务中实现互操作？
• RQ5 此类系统在多大程度上可为全球网格部署中的计算与网络性能提供端到端的可视化？

主要发现

• MonALISA 在美国 CMS 测试网格中成功实现了持续、全天候的监控，证明了其在生产规模环境下的运行稳定性。
• 该系统支持服务的自动发现与动态注册，减少了手动配置，提升了系统的适应能力。
• 事件驱动的通知机制使客户端能够在无需轮询的情况下接收状态变更的实时更新，提高了响应速度并降低了开销。
• 内置的 SNMP 支持与网络性能监控算法可准确提供网络延迟与吞吐量的端到端可视化。
• 该框架成功集成多种监控工具与流程，实现了对计算节点、应用程序及基础设施的统一监控。
• MonALISA 正被用于监控和优化 VRVS 系统中反射器之间的互连，验证了其在复杂网络拓扑中的有效性。