[논문 리뷰] When, why and how to test spreadsheets

Louise Pryor|ArXiv.org|2008. 07. 20.

Spreadsheets and End-User Computing참고 문헌 3인용 수 15

한 줄 요약

이 논문은 실무자 중심의 스프레드시트 테스팅 프레임워크를 제시하며, 스프레드시트 개발에 소프트웨어 테스팅 원칙을 언제, 왜, 어떻게 적용할 것인지 강조한다. 테스팅과 리뷰의 차이를 명확히 하고, 실용적인 테스팅 기법을 제안하며, 일반적인 문제점을 규명함으로써 실제 사용에서의 스프레드시트 신뢰성 향상과 오류 감소를 위한 체계적인 접근법을 기여한다.

ABSTRACT

Testing is a vital part of software development, and spreadsheets are like any other software in this respect. This paper discusses the testing of spreadsheets in the light of one practitioner's experience. It considers the concept of software testing and how it differs from reviewing, and describes when it might take place. Different types of testing are described, and some techniques for performing them presented. Some of the commonly encountered problems are discussed.

연구 동기 및 목표

• 스프레드시트가 중요한 의사결정에 널리 사용되고 있음에도 불구하고 공식적인 테스팅 관행의 부재를 해결하기 위해.
• 스프레드시트 작업에서 테스팅과 리뷰의 차이를 명확히 하여, 테스팅을 사전적 검증 과정으로 강조하기 위해.
• 테스팅을 스프레드시트 개발 라이프사이클에 통합하기 위한 실용적 프레임워크를 제공하기 위해.
• 테스팅이 완화할 수 있는 일반적인 스프레드시트 오류와 과제를 규명하기 위해.
• 실제 적용 사례를 통해 스프레드시트 개발에 소프트웨어 공학 최고 관행을 확산시키기 위해.

제안 방법

• 스프레드시트 환경에 표준 소프트웨어 테스팅 개념(예: 단위 테스팅, 통합 테스팅, 회귀 테스팅)을 적용하기 위해.
• 스프레드시트 논리에 맞게 조정된 테스트 케이스 설계 기법을 적용하기 위해, 예를 들어 경계값 분석과 동등구간 분할 기법을 사용하기 위해.
• 수식 입력, 데이터 변경, 모델 업데이트 등의 핵심 단계에서 개발 라이프사이클에 테스팅을 통합하기 위해.
• 비정상성과 논리적 결함을 탐지하기 위해 시각적 및 구조적 분석을 활용하기 위해.
• 감사 가능성과 재현 가능성을 보장하기 위해 테스트 케이스의 문서화와 추적성을 강조하기 위해.
• 단계별 테스팅 접근법을 제안하기 위해: 개별 셀의 단위 테스팅, 수식 그룹의 통합 테스팅, 수정 후 회귀 테스팅.

실험 결과

연구 질문

• RQ1 스프레드시트 개발 라이프사이클에서 테스팅은 언제 수행되어야 하는가?
• RQ2 스프레드시트가 비공식적으로 사용되더라도 테스팅이 필요한 이유는 무엇인가?
• RQ3 스프레드시트의 고유한 구조와 사용자 기대를 감안할 때, 테스팅은 어떻게 실용적으로 적용될 수 있는가?
• RQ4 스프레드시트 작업에서 리뷰와 테스팅의 핵심 차이점은 무엇인가?
• RQ5 체계적인 테스팅을 통해 방지할 수 있는 일반적인 스프레드시트 문제들은 무엇인가?

주요 결과

• 스프레드시트의 신뢰성 향상을 위해 테스팅이 필수적임을 확인하였으며, 전통적 소프트웨어와 마찬가지로 논리적 및 기능적 오류에 취약하기 때문이다.
• 리뷰만으로는 논리적 오류를 포착하기에 부족하며, 정확성 검증을 위해 체계적인 테스팅이 필요하다.
• 테스팅은 개별 셀 논리, 수식 그룹 행동, 전체 모델 무결성의 다수 수준에서 적용되어야 한다.
• 잘못된 수식 참조, 데이터 유형 불일치, 논리 오류와 같은 일반적인 스프레드시트 문제들은 체계적인 테스팅을 통해 방지 가능하다.
• 개발 과정에 테스팅을 통합하면 의사결정에 중요한 응용 프로그램에서 오류 위험이 크게 감소한다.
• 경계 테스팅 및 테스트 케이스의 추적성과 같은 실용적인 테스팅 기법은 유지보수성과 감사 가능성을 향상시킨다.