[论文解读] Distributed, Cross-Platform, and Regression Testing Architecture for Service-Oriented Architecture

Youssef Bassil|Mar 24, 2012

Service-Oriented Architecture and Web Services参考文献 11被引用 8

一句话总结

本文提出了一种新颖的自动化、分布式、跨平台且支持回归测试的面向服务架构（SOA）系统测试架构。该架构采用专门的测试单元——测试引擎、代码生成器、用例生成器、执行器和监控器——实现在异构技术环境下的并行、跨平台Web服务测试，有效支持分布式环境中的回归测试与跨平台验证。

ABSTRACT

As per leading IT experts, today's large enterprises are going through business transformations. They are adopting service-based IT models such as SOA to develop their enterprise information systems and applications. In fact, SOA is an integration of loosely-coupled interoperable components, possibly built using heterogeneous software technologies and hardware platforms. As a result, traditional testing architectures are no more adequate for verifying and validating the quality of SOA systems and whether they are operating to specifications. This paper first discusses the various state-of-the-art methods for testing SOA applications, and then it proposes a novel automated, distributed, cross-platform, and regression testing architecture for SOA systems. The proposed testing architecture consists of several testing units which include test engine, test code generator, test case generator, test executer, and test monitor units. Experiments conducted showed that the proposed testing architecture managed to use parallel agents to test heterogeneous web services whose technologies were incompatible with the testing framework. As future work, testing non-functional aspects of SOA applications are to be investigated so as to allow the testing of such properties as performance, security, availability, and scalability.

研究动机与目标

• 解决传统测试架构在验证复杂、松耦合SOA系统方面的不足。
• 克服基于不兼容软件技术与硬件平台构建的异构Web服务测试挑战。
• 实现自动化回归测试，以确保系统更新后服务质量和一致性。
• 支持分布式测试环境，以提升可扩展性与执行效率。
• 提供统一框架，集成SOA应用的测试生成、执行与监控。

提出的方法

• 设计由五个核心单元组成的模块化测试架构：测试引擎、测试代码生成器、测试用例生成器、测试执行器和测试监控器。
• 利用并行代理将测试执行分发至多个平台与技术环境。
• 实现测试代码生成器，自动产生与多种Web服务技术兼容的测试脚本。
• 集成测试用例生成器，基于服务规范动态生成测试场景。
• 采用测试执行器单元，协调并执行在异构运行时环境中的分布式环境测试。
• 使用测试监控器单元，跟踪执行结果，记录输出，并支持回归分析。

实验结果

研究问题

• RQ1 如何设计一种测试架构，以支持SOA系统中异构平台间的分布式执行？
• RQ2 在面向服务环境中，实现自动化回归测试所需的架构组件有哪些？
• RQ3 如何使测试生成与多种Web服务技术及协议兼容？
• RQ4 哪些机制可确保在不兼容软件栈之间的一致且可靠的测试执行？
• RQ5 测试框架如何支持系统更新过程中服务行为的持续验证？

主要发现

• 所提出的架构成功实现了使用分布式代理对异构Web服务进行并行测试，且这些服务使用不兼容的技术。
• 该系统表现出有效的跨平台兼容性，支持在多样化的硬件与软件环境中进行测试。
• 自动化测试生成单元的集成显著减少了手动测试设计工作量，并提升了测试覆盖率。
• 测试监控器单元提供了实时反馈与日志记录，支持回归分析与质量验证。
• 通过模块化设计，该架构展现出良好的可扩展性与适应性，可满足不断演进的SOA系统需求。
• 实验结果证实，该框架能够在多次服务更新与配置变更中保持测试的完整性与一致性。