[논문 리뷰] Distributed, Cross-Platform, and Regression Testing Architecture for Service-Oriented Architecture

Youssef Bassil|2012. 03. 24.

Service-Oriented Architecture and Web Services참고 문헌 11인용 수 8

한 줄 요약

이 논문은 서비스 기반 아키텍처(SOA) 시스템을 위한 새로운 자동화된, 분산형의, 다중 플랫폼이며, 복귀 테스트 기능을 갖춘 아키텍처를 제안한다. 이 아키텍처는 전용 테스트 유닛—테스트 엔진, 코드 생성기, 케이스 생성기, 실행기, 모니터—를 활용하여 상호 호환되지 않는 기술 간에 병렬로, 이질적인 웹 서비스 테스트를 가능하게 하여 분산 환경에서 효과적인 복귀 테스트 및 다중 플랫폼 검증을 달성한다.

ABSTRACT

As per leading IT experts, today's large enterprises are going through business transformations. They are adopting service-based IT models such as SOA to develop their enterprise information systems and applications. In fact, SOA is an integration of loosely-coupled interoperable components, possibly built using heterogeneous software technologies and hardware platforms. As a result, traditional testing architectures are no more adequate for verifying and validating the quality of SOA systems and whether they are operating to specifications. This paper first discusses the various state-of-the-art methods for testing SOA applications, and then it proposes a novel automated, distributed, cross-platform, and regression testing architecture for SOA systems. The proposed testing architecture consists of several testing units which include test engine, test code generator, test case generator, test executer, and test monitor units. Experiments conducted showed that the proposed testing architecture managed to use parallel agents to test heterogeneous web services whose technologies were incompatible with the testing framework. As future work, testing non-functional aspects of SOA applications are to be investigated so as to allow the testing of such properties as performance, security, availability, and scalability.

연구 동기 및 목표

• 복잡하고 느슨하게 결합된 SOA 시스템을 검증하는 데에 기존의 테스트 아키텍처의 부적합성을 해결하기 위해.
• 서로 다른 소프트웨어 기술과 하드웨어 플랫폼에 기반한 이질적인 웹 서비스를 테스트하는 데에 직면한 과제를 극복하기 위해.
• 시스템 업데이트 시 서비스 품질과 일관성을 보장하기 위해 자동화된 복귀 테스트를 가능하게 하기 위해.
• 확장성과 실행 효율성을 향상시키기 위해 분산 테스트 환경을 지원하기 위해.
• SOA 응용 프로그램의 테스트 생성, 실행, 모니터링를 통합하는 통합 프레임워크를 제공하기 위해.

제안 방법

• 테스트 엔진, 테스트 코드 생성기, 테스트 케이스 생성기, 테스트 실행기, 테스트 모니터라는 다섯 가지 핵심 유닛으로 구성된 모듈식 테스트 아키텍처를 설계하기 위해.
• 다양한 플랫폼과 기술 간에 테스트 실행을 분산시키기 위해 병렬 에이전트를 활용하기 위해.
• 다양한 웹 서비스 기술과 호환되는 테스트 스크립트를 자동으로 생성하기 위해 테스트 코드 생성기를 구현하기 위해.
• 서비스 사양에 기반하여 동적으로 테스트 시나리오를 생성하기 위해 테스트 케이스 생성기를 통합하기 위해.
• 서로 다른 런타임 환경을 갖춘 분산 환경에서 테스트를 조율하고 실행하기 위해 테스트 실행기 유닛을 활용하기 위해.
• 실행 결과를 추적하고, 결과를 로그 기록하며, 복귀 분석을 지원하기 위해 테스트 모니터 유닛을 사용하기 위해.

실험 결과

연구 질문

• RQ1 어떻게 SOA 시스템에서 이질적인 플랫폼 간에 분산 실행을 지원할 수 있는 테스트 아키텍처를 설계할 수 있는가?
• RQ2 서비스 기반 환경에서 자동화된 복귀 테스트를 가능하게 하기 위해 필요한 아키텍처 구성 요소는 무엇인가?
• RQ3 다양한 웹 서비스 기술과 프로토콜과 호환 가능한 테스트 생성은 어떻게 실현할 수 있는가?
• RQ4 서로 다른 소프트웨어 스택 간에 일관되고 신뢰할 수 있는 테스트 실행을 보장하기 위한 메커니즘은 무엇인가?
• RQ5 테스트 프레임워크는 어떻게 시스템 업데이트 동안 서비스 행동의 지속적 검증을 지원할 수 있는가?

주요 결과

• 제안된 아키텍처는 상호 호환되지 않는 기술을 가진 이질적인 웹 서비스를 분산 에이전트를 통해 병렬 테스트하는 데 성공하였다.
• 시스템은 다양한 하드웨어 및 소프트웨어 환경에서 테스트가 가능하도록 효과적인 다중 플랫폼 호환성을 보였다.
• 자동화된 테스트 생성 유닛의 통합으로 수동 테스트 설계 작업이 감소하고 테스트 커버리지가 향상되었다.
• 테스트 모니터 유닛은 실시간 피드백과 로깅을 제공하여 복귀 분석 및 품질 검증을 지원하였다.
• 모듈식 설계 덕분에 아키텍처는 변화하는 SOA 시스템 요구사항에 대해 확장 가능하고 적응 가능함을 입증하였다.
• 실험 결과, 프레임워크가 여러 서비스 업데이트 및 구성 변경 동안 테스트의 무결성과 일관성을 유지할 수 있음을 확인하였다.