[논문 리뷰] Symbolic Execution for Verification

Joxan Jaffar, Jorge A. Navas외 1명|arXiv (Cornell University)|2011. 03. 10.

Software Testing and Debugging Techniques참고 문헌 9인용 수 3

한 줄 요약

이 논문은 최소최대 알고리즘을 도입하여 보간 기반 기호 실행을 무한 반복문을 다룰 수 있도록 확장한다. 이 알고리즘은 지능적인 백트래킹을 통해 점진적으로 가장 강력한 불변식을 학습하는 지연된 루프 편개 기법이다. 이 방법은 실제 오류를 신속하게 탐지하고 비가능한 경로를 조기에 차단함으로써 BLAST과 같은 최신 CEGAR 도구보다 성능이 뛰어나며, 실제 벤치마크에서 경쟁력 있거나 슈퍼리어한 성능을 보이며, 특히 오류가 있는 경우에 더 빠르게 반례를 발견함으로써 공격적인 가지치기를 통해 성능을 높인다.

ABSTRACT

In previous work, we presented a symbolic execution method which starts with a concrete model of the program but progressively abstracts away details only when these are known to be irrelevant using interpolation. In this paper, we extend the technique to handle unbounded loops. The central idea is to progressively discover the strongest invariants through a process of loop unrolling. The key feature of this technique, called the minimax algorithm, is intelligent backtracking which directs the search for the next invariant. We then present an analysis of the main differences between our symbolic execution method and mainstream techniques mainly based on abstract refinement (CEGAR). Finally, we evaluate our technique against available state-of-the-art systems.

연구 동기 및 목표

• 이전 연구가 사용자 제공 불변식 없이 무한 반복문을 다룰 수 없었기 때문에, 보간 기반 기호 실행을 무한 반복문을 다룰 수 있도록 확장하는 것.
• 지연된 편개와 지능적인 백트래킹을 통해 가장 강력한 루프 불변식을 자동으로 발견하는 경량의 방법 개발.
• 주류의 CEGAR 기반 검증 방법과 비교하기 위해 학술적 예제와 실제 프로그램을 사용하여 제안된 추상화 학습 기법을 평가하는 것.
• 실제 벤치마크에서 프로토타입 도구 tracer를 BLAST과 비교하여 성능 및 확장성 평가

제안 방법

• 최소최대 알고리즘은 정수 증명기 조작을 통해 명시적 제약 조건을 활용하여 루프 병합 지점에서 경로 기반 불변식을 계산함으로써 지연된 루프 편개를 수행한다.
• 제약 조건을 'min'(서브섬제어 및 루프 불변식을 위해 추상화될 것)과 'max'(비가능한 경로 탐지 및 안전성 보장을 위해 유지되어야 할 것)로 분류한다.
• 해당 알고리즘은 보간을 사용해 반드시 필요한 곳에서만 루프를 편개함으로써 불변식 강화 시 정밀도를 손상시키지 않는다.
• 지능적인 백트래킹을 활용해 다음 불변식을 탐색함으로써 정보 손실을 최소화하면서도 루프가 유한할 경우 종료 보장한다.
• 이 접근법은 술어 추상화를 피하고 기호 실행을 기반으로 하며 제약 조건 단순화 및 보간을 통한 추상화를 활용한다.
• 프로토타입 tracer 시스템은 앨리어스 분석과 인lines를 활용하여 C 힙을 배열로 모델링하며, 인스트루멘티드 실제 프로그램에서 평가된다.

실험 결과

연구 질문

• RQ1 사용자 제공 주석 없이도 무한 반복문에서 기호 실행을 어떻게 자동으로 루프 불변식을 발견할 수 있는가?
• RQ2 보간 기반 기호 실행과 CEGAR 기반 추상화 정밀화 간의 주요 차이점은 무엇인가? 루프 불변식과 경로 타당성 처리 측면에서.
• RQ3 비가능한 경로를 공격적으로 가지치는 기법을 사용하는 기호 실행 방법이 실질적으로 BLAST과 같은 CEGAR 기반 도구를 능가할 수 있는가?
• RQ4 최소최대 알고리즘의 min 및 max 제약 조건 사용이 루프 검증의 정밀도와 성능을 어떻게 향상시키는가?

주요 결과

• 트레이서는 비가능한 경로를 조기에 가지치함으로써 실제 오류가 있는 프로그램들(예: tcas-2b-unsafe)에서 BLAST보다 최대 1000배 빠르게 반례를 발견했다.
• tcas-2b-unsafe 벤치마크에서 트레이서는 탐색 노드 91개와 0.01초가 소요되었고, BLAST는 40개의 술어와 17.46초가 필요했다.
• 일부 벤치마크(cdaudio, floppy, serial)에서는 BLAST가 예외를 발생시키고 중단되었지만, 트레이서는 성공적으로 검증을 완료했다.
• 평균적으로 트레이서는 BLAST와 경쟁력 있는 성능을 보였으며, 특히 오류 탐지에서 뚜렷한 속도 향상이 있었고, 일부 예제에서 빠른 성능 향상을 보였다.
• 최소최대 알고리즘이 초기에 가장 강력한 불변식을 계산함으로써 탐색 공간을 줄였고, 복잡한 비가능한 경로가 있는 경우 BLAST보다 더 효율적이었다.
• 이 방법의 성능는 다양한 프로그램에서 뛰어난 안정성을 보였으며, 15개의 벤치마크 중 12개에서 트레이서가 BLAST를 능가했고, 특히 오류가 있는 경우에서 두각을 나타냈다.