[論文レビュー] Rational Competitive Analysis

Moshe Tennenholtz|ArXiv.org|Dec 13, 2001

Optimization and Search Problems参考文献 12被引用数 11

ひとこと要約

本稿では、他者を合理的に行動すると仮定する（すなわち、支配される戦略を避ける）マルチエージェントシステムにおける競争的分析の新しい拡張である合理的競争的分析を導入する。このフレームワークを入札ゲームとワンウェイ取引問題に適用し、合理的行動の制約に依存する合理的競争的戦略が、繰り返し実行される場合やマルチエージェント環境において、標準的な競争的分析に比べてより優れたレジット最小化を達成することを示している。

ABSTRACT

Much work in computer science has adopted competitive analysis as a tool for decision making under uncertainty. In this work we extend competitive analysis to the context of multi-agent systems. Unlike classical competitive analysis where the behavior of an agent's environment is taken to be arbitrary, we consider the case where an agent's environment consists of other agents. These agents will usually obey some (minimal) rationality constraints. This leads to the definition of rational competitive analysis. We introduce the concept of rational competitive analysis, and initiate the study of competitive analysis for multi-agent systems. We also discuss the application of rational competitive analysis to the context of bidding games, as well as to the classical one-way trading problem.

研究の動機と目的

• 非戦略的環境を想定して設計された古典的競争的分析を、合理的に行動するエージェントを含むマルチエージェントシステムに拡張すること。
• 支配される戦略の回避という最小限の合理性制約を組み込んだ、規範的決定理論フレームワークを構築すること。
• 繰り返し実行およびマルチエージェント環境における合理性の影響が、特に入札ゲームとワンウェイ取引において競争的戦略に与える影響を分析すること。
• 他のエージェントの非合理的行動を除外することで、合理的競争的分析が標準的な競争的分析よりも優れたレジット最小化を達成することを示すこと。
• しきい値に基づく意思決定ルールを用いて、合理的競争的戦略を用いてマルチエージェントワンウェイ取引問題を形式的に定式化し、解法を提示すること。

提案手法

• 他のエージェントの支配される戦略を除外する規範的意思決定ルールとして合理的競争的分析を定義し、合理的な行動のみを考慮するように保証する。
• 整数値の入札（$K-T$ から $K$ の間）を持つ戦略的形ゲームとして入札ゲームをモデル化し、中央機関が最低入札を選択する。
• 加法的競争比（ミニマックスレジット）を用いて戦略を評価し、実際の報酬と最適報酬の差の最悪ケースを最小化する。
• レジット最小化を用いてマルチエージェントワンウェイ取引問題の競争的戦略を導出する：エージェントは自身の価値が $m_i$ と $M_i$ の境界に基づくしきい値を超えた場合に取引を実行する。
• 二段階の意思決定ルールを導入する：他方のエージェントが最大入札 $M_k$ を発表した場合は優先的に取引を実行し、そうでない場合は標準的なしきい値ルールを適用する。
• レジット方程式を用いて最適なしきい値を導出する：反復 $t-1$ において、しきい値は $(M_i + m_i)/4$ である；それ以前の反復では $(2M_i + m_i)/4$ である。

実験結果

リサーチクエスチョン

• RQ1 他のエージェントが敵対的ではなく合理的であると仮定するマルチエージェントシステムにおいて、競争的分析をどのように一般化できるか？
• RQ2 支配される戦略を除外することで、繰り返し実行およびマルチエージェントゲームにおける競争比とレジットにどのような影響を与えるか？
• RQ3 同じ仮定のもとで、入札ゲームにおける合理的競争的戦略と標準的な競争的戦略はどのように異なるか？
• RQ4 合理的競争的分析のもとで、マルチエージェントワンウェイ取引問題における最適戦略の構造はどのようなものか？
• RQ5 繰り返しゲームにおいて、合理的競争的分析は古典的競争的分析に比べてどのようにレジット最小化を改善するか？

主な発見

• 他のエージェントの支配される戦略を除外することで、合理的競争的分析はより頑健な意思決定ルールを実現し、レジット最小化を改善する。
• マルチエージェントワンウェイ取引問題において、他方のエージェントが最大入札 $M_k$ を発表するかどうかに依存して最適戦略が変化し、この場合、直ちに取引を実行する必要がある。
• 反復 $1$ から $t-2$ において、最適な取引しきい値は $(2M_i + m_i)/4$ であり、他方のエージェントの合理的行動を仮定したもとでレジットを最小化する。
• 反復 $t-1$ において、他方のエージェントが $M_k$ を発表しない場合、しきい値は $(M_i + m_i)/4$ に低下し、行動の緊急性が高まる。
• 反復 $t$ においては、常に取引が最適である。なぜなら、パスは厳密に支配されるからである。
• このフレームワークは、戦略空間に合理性制約を組み込むことで、標準的な競争的分析よりもタイトなレジットバウンドを達成できることを示している。