[논문 리뷰] Nash Equilibrium and Bisimulation Invariance

Julián Gutiérrez, Paul Harrenstein외 2명|Oxford University Research Archive (ORA) (University of Oxford)|2018. 08. 28.

Logic, Reasoning, and Knowledge인용 수 6

한 줄 요약

이 논문은 동시 게임에서 전통적인 전략 모델—상태 역사에서 행동으로의 함수—이 이분화에 대해 나시 균형을 유지하지 못함을 보여준다. 특히 두 명 이상의 플레이어가 있는 게임에서 그렇다. 이를 해결하기 위해 저자는 계산 기반 및 트레이스 기반이라는 두 가지 새로운 전략 모델을 제안하며, 이들이 이분화에 대해 불변임을 증명함으로써 검증된 추상화된 시스템 모델에서 신뢰할 수 있는 균형 분석이 가능해진다.

ABSTRACT

Game theory provides a well-established framework for the analysis of concurrent and multi-agent systems. The basic idea is that concurrent processes (agents) can be understood as corresponding to players in a game; plays represent the possible computation runs of the system; and strategies define the behaviour of agents. Typically, strategies are modelled as functions from sequences of system states to player actions. Analysing a system in such a setting involves computing the set of (Nash) equilibria in the concurrent game. However, we show that, with respect to the above model of strategies (arguably, the "standard" model in the computer science literature), bisimilarity does not preserve the existence of Nash equilibria. Thus, two concurrent games which are behaviourally equivalent from a semantic perspective, and which from a logical perspective satisfy the same temporal logic formulae, may nevertheless have fundamentally different properties (solutions) from a game theoretic perspective. Our aim in this paper is to explore the issues raised by this discovery. After illustrating the issue by way of a motivating example, we present three models of strategies with respect to which the existence of Nash equilibria is preserved under bisimilarity. We use some of these models of strategies to provide new semantic foundations for logics for strategic reasoning, and investigate restricted scenarios where bisimilarity can be shown to preserve the existence of Nash equilibria with respect to the conventional model of strategies in the computer science literature.

연구 동기 및 목표

• 기존 전략 모델을 사용하여 동시 게임에서 이분화에 대해 나시 균형이 유지되는지 조사한다.
• 이분형 시스템에 적용할 때 기존 게임이론적 검증 방법의 한계를 규명한다.
• 다중 에이전트 시스템에서 나시 균형의 이분화 불변성을 보장하는 새로운 전략 모델을 개발한다.
• ATL과 같은 전략 논리의 의미 기반을 이분화 불변 전략 모델에 기반하여 제공한다.
• 형식적 검증 도구에서 이분화 기반 최적화를 균형 분석에 활용할 수 있도록 한다.

제안 방법

• 계산 기반 및 트레이스 기반 전략이라는 두 가지 새로운 전략 모델을 도입하고 공식화한다. 여기서 전략은 전체 상태 역사가 아니라 행동 시퀀스 또는 트레이스에 따라 결정된다.
• 두 모델이 다수 플레이어 게임에서도 이분형 시스템 간에 나시 균형을 유지함을 증명한다.
• 이들 모델이 트레이스 동치성(CSP 스타일)과 같은 더 약한 동치성에도 불변임을 확립하여 적용 범위를 넓힌다.
• 균형 존재 여부를 확인하기 위해 파리티 게임을 계산적 기반으로 사용한다.
• 계산 기반 전략 모델과 트레이스 기반 선호도를 기반으로 한 새로운 검증 도구 EVE를 구현하여 균형 검사를 자동화한다.
• 기존 모델 체킹 인fra를 활용하여 시간 논리 검증과 균형 분석을 통합하고, 시스템 추상화를 통한 최적화를 가능하게 한다.

실험 결과

연구 질문

• RQ1 기존 전략 모델은 동시 게임에서 이분화에 대해 나시 균형을 유지하는가?
• RQ2 유지되지 않는다면, 나시 균형의 이분화 불변성을 보장할 수 있는 대체 전략 모델은 무엇인가?
• RQ3 새로운 전략 모델 하에서 비결정적 시스템에 대해서도 이분화 불변성이 확장될 수 있는가?
• RQ4 기존 전략 모델이 여전히 균형을 유지하는 조건는 무엇인가—예를 들어, 두 플레이어 게임에서?
• RQ5 새로운 모델은 동시 및 다중 에이전트 시스템에서 전략적 추론을 위한 실용적 검증 도구를 지원할 수 있는가?

주요 결과

• 상태 역사에서 행동으로의 매핑을 기반으로 하는 기존 전략 모델은 두 명 이상의 플레이어가 있는 게임에서 이분화에 대해 나시 균형을 유지하지 못한다.
• 두 플레이어 게임에서는 기존 모델이 이분화에 대해 나시 균형을 유지하므로, 0-합 게임과 합성과 같은 검증 작업에 적합하다.
• 계산 기반 및 트레이스 기반 전략 모델은 모두 이분화 불변이며, 행동적으로 동치인 시스템 간에 균형이 유지됨을 보장한다.
• 이들 새로운 모델은 트레이스 동치성에도 불변이므로, CSP와 같은 프로세스 계산기에서 사용되는 더 약한 행동 동치성에도 적용 가능성이 넓어진다.
• 결과적으로 이분화 기반 최적화, 예를 들어 모델 최소화 및 상태공간 축소를 균형 분석에 활용할 수 있게 되었다.
• 계산 기반 모델을 기반으로 한 새로운 검증 도구 EVE를 구현하여, 전략적 시스템에서 비어있음, E-Nash, A-Nash 문제의 자동 분석을 지원하였다.