[논문 리뷰] Incremental Bounded Model Checking for Embedded Software (extended version)

Peter Schrammel, Daniel Kroening외 4명|arXiv (Cornell University)|2014. 09. 20.

Formal Methods in Verification참고 문헌 27인용 수 7

한 줄 요약

이 논문은 임베디드 C 소프트웨어를 대상으로 한 증분적 유한모델검증(BMC) 기법을 제안하며, 반복적인 루프 언윈딩 간에 중복 계산을 방지하기 위해 증분적 SAT 해결 기법을 활용한다. 이전에 해결한 작업을 재사용함으로써, 비증분적 BMC에 비해 검증 시간을 최대 한 계단 감소시켜 산업용 임베디드 시스템 검증의 확장성을 크게 향상시킨다.

ABSTRACT

Program analysis is on the brink of mainstream in embedded systems development. Formal verification of behavioural requirements, finding runtime errors and automated test case generation are some of the most common applications of automated verification tools based on Bounded Model Checking. Existing industrial tools for embedded software use an off-the-shelf Bounded Model Checker and apply it iteratively to verify the program with an increasing number of unwindings. This approach unnecessarily wastes time repeating work that has already been done and fails to exploit the power of incremental SAT solving. This paper reports on the extension of the software model checker CBMC to support incremental Bounded Model Checking and its successful integration with the industrial embedded software verification tool BTC EmbeddedTester. We present an extensive evaluation over large industrial embedded programs, which shows that incremental Bounded Model Checking cuts runtimes by one order of magnitude in comparison to the standard non-incremental approach, enabling the application of formal verification to large and complex embedded software.

연구 동기 및 목표

• 비증분적 유한모델검증이 임베디드 소프트웨어 검증에서 반복적인 SAT 해결으로 인해 루프 언윈딩이 증가할수록 상당한 시간을 낭비한다는 점을 해결하기 위해.
• 산업용 C 프로그램을 대상으로 한 소프트웨어 모델 체커에 증분적 SAT 해결을 통합하여, 임베디드 제어 루프와 하드웨어 전이 관계 간의 구조적 유사성을 활용하기 위해.
• 대규모 산업 기반 벤치마크에서 증분적 BMC의 성능 향상을 평가하고 실세계 검증 도구에서의 실용성을 입증하기 위해.
• BTC EmbeddedTester 및 EmbeddedValidator 도구에 기술을 통합하여 산업 현장에서의 도입을 가능하게 하기 위해.

제안 방법

• Cbmc 도구에 증분적 BMC 지원을 확장하여, 이전에 해결한 공식을 재사용함으로써 반복적인 언윈딩 간에 다시 계산하지 않도록 한다.
• 기호 실행과 프로그램 슬라이싱을 적용하여 SAT 해결 전에 검증 공식의 크기를 줄여 효율성을 향상시킨다.
• 증분적 SAT 해결을 루프 언윈딩뿐만 아니라 경로 탐색 및 성질 검증과 같은 다른 검증 작업에도 적용한다.
• 유한모델검증과 증분적 SAT 해결을 조합한 하이브리드 접근 방식을 사용하여 안전성 성질을 검증하고 반례를 생성한다.
• 비증분적 BMC 및 TACUS 2014 경쟁 대회 수상자와의 성능 비교를 위해 대규모 산업용 임베디드 C 벤치마크를 사용하여 접근 방식을 검증한다.
• 향상된 모델 체커를 BTC EmbeddedTester 및 EmbeddedValidator에 통합하여 버전 3.4 및 4.3부터 산업 현장에서 활용 가능하게 한다.

실험 결과

연구 질문

• RQ1 증분적 SAT 해결이 임베디드 C 프로그램에 대한 유한모델검증의 런타임을 상당히 줄일 수 있는가?
• RQ2 증분적 BMC가 산업용 임베디드 소프트웨어에서 비증분적 BMC에 비해 확장성 측면에서 얼마나 뛰어나게 성능을 높이는가?
• RQ3 증분적 BMC가 임베디드 제어 소프트웨어의 반복적인 루프 언윈딩 과정에서 중복 계산을 얼마나 효과적으로 줄이는가?
• RQ4 증분적 BMC가 산업용 검증 도구에 성공적으로 통합되고 실용적으로 도입될 수 있는가?
• RQ5 증분적 BMC가 상당한 성능 향상을 달성하면서도 높은 정확도(거짓 양성 없음)를 유지하는가?

주요 결과

• 증분적 BMC 기법은 대규모 산업용 임베디드 벤치마크에서 비증분적 BMC에 비해 검증 런타임을 최대 한 계단 감소시킨다.
• 성능 향상은 다양한 산업 프로그램에서 일관되게 나타나 복잡한 임베디드 시스템에 대한 강력한 확장성을 입증한다.
• 런타임 효율성 측면에서 TACUS 2014 소프트웨어 검증 경쟁 수상자보다 10배 뛰어난 성능을 기록한다.
• BTC EmbeddedTester 및 EmbeddedValidator에 통합된 결과 수백 명의 산업 사용자가 더 빠르고 확장 가능한 검증을 수행할 수 있게 되었다.
• 증분적 SAT 해결은 이전 계산을 효과적으로 재사용하여 반복적인 언윈딩 간에 중복 작업을 제거하면서 정밀도 손실 없이 수행된다.
• 이 접근 방식은 정확도를 그대로 유지하며 유효한 반례를 생성하고 커버리지 기반 테스트를 위한 테스트 벡터 생성을 지원한다.