[논문 리뷰] Towards Bounded Infeasible Code Detection

Jürgen Christ, Jochen Hoenicke외 1명|arXiv (Cornell University)|2012. 05. 30.

Software Testing and Debugging Techniques참고 문헌 23인용 수 3

한 줄 요약

이 논문은 가용성 검증 조건을 사용하여 실행 가능한 프로그램 실행을 논리 공식으로 인코딩하여, 반복 횟수 제한 내에서 실행이 불가능한 코드를 탐지하기 위한 유계 접근법을 제시한다. 실행 가능한 경로/문장의 모든 테스트 케이스를 생성하는 두 가지 완전한 알고리즘—경로 커버 및 문장 커버—를 도입하여, 제한된 수의 루프 언윈딩 내에서 모든 가능한 경로와 문장을 커버함으로써, 커버되지 않은 코드가 해당 제한 범위 내에서 실제로 실행이 불가능함을 증명 가능하게 한다.

ABSTRACT

A first step towards more reliable software is to execute each statement and each control-flow path in a method once. In this paper, we present a formal method to automatically compute test cases for this purpose based on the idea of a bounded infeasible code detection. The method first unwinds all loops in a program finitely often and then encodes all feasible executions of the loop-free programs in a logical formula. Helper variables are introduced such that a theorem prover can reconstruct the control-flow path of a feasible execution from a satisfying valuation of this formula. Based on this formula, we present one algorithm that computes a feasible path cover and one algorithm that computes a feasible statement cover. We show that the algorithms are complete for loop-free programs and that they can be implemented efficiently. We further provide a sound algorithm to compute procedure summaries which makes the method scalable to larger programs.

연구 동기 및 목표

• 기존 정적 분석이 도달 불가능한 코드와 실행이 불가능한 코드를 구분하지 못할 때 발생하는 실행 불가 코드 탐지 문제를 해결하기 위해.
• 제한된 루프 언윈딩 내에서 실제로 종료되는 프로그램 실행에 대응하는 모든 테스트 케이스를 생성함으로써 테스트 케이스 생성을 향상시키기 위해.
• 지정된 제한까지 실행 불가 코드의 부재를 신뢰할 수 있고 완전한 방법으로 검증함으로써, 신뢰할 수 있는 코드 커버리지 분석을 가능하게 하기 위해.
• 실행 가능한 실행으로부터 도출된 절차 개별 요약을 활용하여 더 큰 프로그램에 대해 이 접근법을 확장하기 위해.
• 소스 코드 외에 전문가 입력이 필요 없는 사용자 友好的이고 완전 자동화된 방법을 제공하며, 출력으로 실제 실행 가능한 프로그램 경로를 제공하기 위해.

제안 방법

• 루프가 없는 프로그램의 모든 실행 가능 실행을 인코딩하는 논리 공식인 실행 가능성 검증 조건을 사용하여 프로그램 실행을 형식화하며, 제어 흐름 경로를 추적하기 위해 보조 변수를 사용한다.
• 루프를 제한된 횟수만큼 언윈딩하여 프로그램을 루프가 없는 형태로 변환함으로써, 모든 실행 가능 실행의 유한한 인코딩을 가능하게 한다.
• 정리 증명을 활용하여 실행 가능성 검증 조건의 만족 가능한 할당을 찾으며, 이는 직접적으로 구체적인 프로그램 실행에 대응한다.
• 블로킹 클라우즈를 사용하여 동일한 경로를 다시 방문하지 않도록 하고, 활성화 클라우즈를 사용하여 방문하지 않은 프로그램 블록을 우선순위로 지정하는 두 가지 알고리즘을 도입한다.
• 생성된 테스트 케이스에서 입력-출력 쌍을 추출하여 실행 가능한 실행의 하한 근사치로 절차 요약을 계산한다.
• 기존 요약이 호출 컨텍스트에서 실행 가능한 실행을 포괄하지 못할 경우, 요약 재계산을 즉시 수행함으로써 확장성을 향상시킨다.

실험 결과

연구 질문

• RQ1 제한된 루프 언윈딩 범위 내에서, 생성된 모든 테스트 케이스가 실제로 종료되는 실행에 대응하는 실행 불가 코드 탐지 방법을 설계할 수 있는가?
• RQ2 만족 가능한 할당이 실제 프로그램 경로에 직접 대응하는 방식으로, 프로그램의 모든 실행 가능 실행을 나타내는 논리 공식을 어떻게 구성할 수 있는가?
• RQ3 실행 가능한 경로 및 문장 커버리지를 계산하는 데 있어, 루프가 없는 제한된 프로그램에 대해 신뢰성과 완전성이 보장되는 두 가지 서로 다른 알고리즘을 개발할 수 있는가?
• RQ4 실행 가능한 실행으로부터 도출된 절차 요약이 더 큰 프로그램에 대한 확장성에 얼마나 기여할 수 있는가?
• RQ5 기존 방법과 비교할 때, 제안된 방법의 커버리지 완전성 및 실행 효율성 측면에서 성능는 어떠한가?

주요 결과

• 제안된 실행 가능한 경로 커버 및 문장 커버 알고리즘은 루프가 없는 프로그램에 대해 완전하며, 표준 정리 증명기로 효율적으로 구현할 수 있다.
• 생성된 테스트 케이스에 커버되지 않은 프로그램 문장은 주어진 루프 언윈딩 제한 내에서 실제로 실행이 불가능함을 보장한다.
• 초기 평가 결과, 제한된 실행 조건 하에서 기존 도구보다 실행 불가 코드 탐지에서 더 우수한 성능을 보였다.
• 300줄 이내의 프로시저에 대해서도 실행 가능한 경로 커버를 계산하는 데 소요되는 시간은 실행 가능한 문장 커버를 계산하는 것과 거의 유사하다.
• 절차 요약을 활용함으로써 실행 가능한 실행의 신뢰할 수 있는 하한 근사치를 제공하여 확장성을 향상시켰지만, 현재 번역 및 오라클 지원의 한계로 인해 완전한 실용적 구현은 어려운 상황이다.
• 정리 증명기가 만족 가능한 할당을 찾지 못할 경우(특히 비선형 산술이 존재할 경우), 이 접근법은 신뢰성은 보장하지만 완전성은 확보하지 못한다. 실무에서는 동적 분석과의 통합이 필요함을 시사한다.