[論文レビュー] Nash Equilibrium and Bisimulation Invariance

Julián Gutiérrez, Paul Harrenstein+2 more|Oxford University Research Archive (ORA) (University of Oxford)|Aug 28, 2018

Logic, Reasoning, and Knowledge被引用数 6

ひとこと要約

本稿では、並行ゲームにおける戦略の従来のモデル—状態履歴から行動への関数として定義される戦略—が、2人以上のプレイヤーが関与するゲームでは、双対性の下でもナッシュ均衡を保存しないことを示している。これを解決するために、著者らは計算ベースとトレースベースの2つの代替戦略モデルを導入し、これらが双対性不変性を満たすことを証明した。これにより、検証済みで抽象化されたシステムモデルにおいて信頼性の高い均衡分析が可能になる。

ABSTRACT

Game theory provides a well-established framework for the analysis of concurrent and multi-agent systems. The basic idea is that concurrent processes (agents) can be understood as corresponding to players in a game; plays represent the possible computation runs of the system; and strategies define the behaviour of agents. Typically, strategies are modelled as functions from sequences of system states to player actions. Analysing a system in such a setting involves computing the set of (Nash) equilibria in the concurrent game. However, we show that, with respect to the above model of strategies (arguably, the "standard" model in the computer science literature), bisimilarity does not preserve the existence of Nash equilibria. Thus, two concurrent games which are behaviourally equivalent from a semantic perspective, and which from a logical perspective satisfy the same temporal logic formulae, may nevertheless have fundamentally different properties (solutions) from a game theoretic perspective. Our aim in this paper is to explore the issues raised by this discovery. After illustrating the issue by way of a motivating example, we present three models of strategies with respect to which the existence of Nash equilibria is preserved under bisimilarity. We use some of these models of strategies to provide new semantic foundations for logics for strategic reasoning, and investigate restricted scenarios where bisimilarity can be shown to preserve the existence of Nash equilibria with respect to the conventional model of strategies in the computer science literature.

研究の動機と目的

• 並行ゲームにおいて、従来の戦略モデルを用いた場合にナッシュ均衡が双対性のもとで保存されるかどうかを調査すること。
• 双対性を持つシステムに適用した際の、既存のゲーム理論的検証手法の限界を特定すること。
• 複数エージェントシステムにおけるナッシュ均衡の双対性不変性を保証する新しい戦略モデルの開発。
• ATLのような戦略論理の意味的基盤を、双対性不変な戦略モデルに根ざさせること。
• 形式的検証ツールにおける均衡分析に、双対性に基づく最適化を可能にすること。

提案手法

• 計算ベースとトレースベースの戦略という2つの新しい戦略モデルを導入・形式化し、戦略が完全な状態履歴ではなく、行動の系列やトレースに依存するように定義する。
• 両モデルが、2人以上のプレイヤーが関与するゲームにおいて、双対性を持つシステム間でナッシュ均衡を保存することを証明する。
• これらのモデルが、CSP風のトレース同等性のようなより弱い同等関係に対しても不変であることを確立し、適用範囲を拡張する。
• パリティゲームを計算的基盤として用い、新しいモデルにおけるナッシュ均衡の存在を確認する。
• 計算ベースの戦略モデルとトレースベースの好みに基づき、均衡の自動検査を可能にする新規検証ツールEVEを実装する。
• 既存のモデル検査インfraを活用し、均衡分析を時相論理検証と統合し、システムの抽象化による最適化を可能にする。

実験結果

リサーチクエスチョン

• RQ1 従来の戦略モデルは、並行ゲームにおいて双対性のもとでナッシュ均衡を保存するか？
• RQ2 もしそうでない場合、ナッシュ均衡の双対性不変性を保証する代替戦略モデルは何か？
• RQ3 新しい戦略モデルのもとで、非決定的システムに対しても双対性不変性を拡張できるか？
• RQ4 従来の戦略モデルが依然として均衡を保存する条件は何か（例：2人ゲームの場合）？
• RQ5 新しいモデルは、並行的かつ複数エージェントシステムにおける戦略的推論のための実用的検証ツールを支援できるか？

主な発見

• 状態履歴から行動への写像として定義される従来の戦略モデルは、2人以上のプレイヤーが関与するゲームでは、双対性のもとでナッシュ均衡を保存しない。
• 2人ゲームでは、従来の戦略モデルが双対性のもとでナッシュ均衡を保存するため、ゼロサムゲームや合成の検証タスクに適している。
• 計算ベースとトレースベースの両戦略モデルは、双対性不変性を満たしており、行動的に同等なシステム間で均衡が保存されることを保証する。
• これらの新規モデルはトレース同等性に対しても不変であるため、CSPなどのプロセス計算記法で用いられるより弱い行動同等関係に対しても有用性が拡張される。
• 双対性に基づく最適化、例えばモデルの最小化や状態空間の圧縮を、均衡分析に活用できるようになった。
• 計算ベースのモデルを基盤にした新規検証ツールEVEを実装し、戦略的システムにおける非空性、E-Nash、A-Nash問題の自動解析を支援した。