[논문 리뷰] Weakest Precondition Reasoning for Expected Run-Times of Probabilistic Programs

Benjamin Lucien Kaminski, Joost-Pieter Katoen외 2명|arXiv (Cornell University)|2016. 01. 05.

Formal Methods in Verification참고 문헌 2인용 수 16

한 줄 요약

이 논문은 프로그램의 구조를 인도적으로 분석함으로써 기대 실행 시간을 계산하는 새로운 변환자 ert를 사용하여 확률적 프로그램의 기대 실행 시간을 추론하기 위한 최소전조건(wp)-스타일의 미니멀한 계산 체계를 제안한다. 이는 루프의 실행 시간을 유한하게 유 bounds하기 위한 증명 규칙을 제공하며, 마코프 결정 과정(MDP) 모델에 대해 타당성을 입증함으로써 유한한 기대 종료 시간의 검증과 쿠폰 수집기 및 랜덤 워크와 같은 고전 문제의 분석을 가능하게 한다.

ABSTRACT

This paper presents a wp-style calculus for obtaining bounds on the expected run-time of probabilistic programs. Its application includes determining the (possibly infinite) expected termination time of a probabilistic program and proving positive almost-sure termination - does a program terminate with probability one in finite expected time? We provide several proof rules for bounding the run-time of loops, and prove the soundness of the approach with respect to a simple operational model. We show that our approach is a conservative extension of Nielson's approach for reasoning about the run-time of deterministic programs. We analyze the expected run-time of some example programs including a one-dimensional random walk and the coupon collector problem.

연구 동기 및 목표

• 확률적 프로그램의 기대 실행 시간을 추론하기 위한 형식적 검증 프레임워크를 개발하는 것.
• 확률적 프로그램은 개별 실행 시간이 무한할 수 있지만 기대 실행 시간은 유한할 수 있다는 미묘한 점을 다루는 것.
• 확률적 프로그램 내 루프의 기대 실행 시간을 유한하게 유 bounds하기 위한 증명 규칙을 제공하는 것.
• 닐슨의 결정론적 실행 시간 추론 방식을 확률적 환경으로 보존적으로 확장하는 것.
• 유한한 기대 시간 내에 확률 1로 종료되는 양의 거의 확실한 종료를 검증할 수 있도록 하는 것.

제안 방법

• 후행 조건 함수 f에 기반해 기대 실행 시간을 계산하는 ert 변환자를 도입하여 디크스트라의 wp의 정량적 변종으로서 제시.
• 프로그램의 문법에 대해 인도적으로 ert를 정의하며, 할당, 순차적 조합, 조건문, 루프에 대해 각각의 규칙을 설정.
• 확률적 프로그램의 운영 의미를 공식적으로 기반으로 삼기 위해 마코프 결정 과정(MDP) 모델을 사용.
• 루프 본문과 확률적 선택을 재귀적으로 분석함으로써 기대 실행 시간의 bound를 도출하기 위해 ert 변환자를 적용.
• MDP 모델에 대해 ert 계산 체계의 타당성을 증명하여 유도된 bound의 정확성을 보장.
• 확률적 분기와 기대 기반 추론을 보존적으로 통합함으로써 닐슨의 결정론적 실행 시간 계산 체계를 확장.

실험 결과

연구 질문

• RQ1 wp-스타일의 계산 체계를 확률적 프로그램의 기대 실행 시간을 추론하는 데에 적응시킬 수 있는가?
• RQ2 확률적 프로그램 내 루프 구조는 어떻게 분석하여 기대 실행 시간을 유한하게 유 bounds할 수 있는가?
• RQ3 유한한 기대 실행 시간 내에 거의 확실하게 종료되는 조건은 무엇인가?
• RQ4 제안된 ert 계산 체계는 닐슨의 결정론적 실행 시간 추론 프레임워크와 어떻게 관련되며 확장되는가?
• RQ5 이 계산 체계는 쿠폰 수집기 및 랜덤 워크와 같은 고전적 확률적 문제에 적용될 수 있는가?

주요 결과

• ert 변환자는 초기 상태에서 시작하는 확률적 프로그램의 기대 실행 시간을 정확히 계산한다. 특히 ert[C](0)(σ)는 상태 σ에서 시작하는 기대 실행 시간을 제공한다.
• MDP 모델에 대해 계산 체계는 타당성이 있으며, 도출된 bound의 이론적 정확성을 보장한다.
• 이 방법은 닐슨의 결정론적 실행 시간 추론을 보존적으로 확장하여, 확률적 환경에서도 동일한 보장을 유지한다.
• 기하 분포 프로그램 C_geo의 기대 실행 시간은 유한하다(구체적으로 2이다), 비록 무한히 긴 실행이 허용되더라도 말이다.
• N개의 쿠폰을 가진 쿠폰 수집기 문제의 경우 기대 실행 시간은 O(N log N)으로 bound되며, 이 계산 체계는 성공적으로 이 bound를 도출한다.
• 기대 실행 시간이 유한한 프로그램의 순차적 조합이 기대 실행 시간이 무한해지는 경우를 식별함으로써, 비합성적 행동(non-compositional behavior)을 드러낸다.