[논문 리뷰] Multi-games and a double game extension of the Prisoner's Dilemma

Abbas Edalat, Ali Ghoroghi외 1명|arXiv (Cornell University)|2012. 05. 22.

Evolutionary Game Theory and Cooperation참고 문헌 8인용 수 3

한 줄 요약

이 논문은 다수의 기본 게임에 동시에 참여하는 플레이어들이 가중 투자 비율을 통해 자원을 배분할 수 있도록 하는 Multi-Games(MG) 프레임워크를 소개한다. 이는 다양한 시장에서의 전략적 자원 배분 모델링을 가능하게 한다. 또한 사회적 게임을 통합한 양자택일 게임(Double Game, DG)을 제안하여 이타적 행동을 모델링하며, 완전히 순수한 정규 DG의 경우, 유형 수에 비례하는 선형 시간 내에 베이지안 내쉬 균형을 계산할 수 있음을 보여준다.

ABSTRACT

We propose a new class of games, called Multi-Games (MG), in which a given number of players play a fixed number of basic games simultaneously. In each round of the MG, each player will have a specific set of weights, one for each basic game, which add up to one and represent the fraction of the player's investment in each basic game. The total payoff for each player is then the convex combination, with the corresponding weights, of the payoffs it obtains in the basic games. The basic games in a MG can be regarded as different environments for the players. When the players' weights for the different games in MG are private information or types with given conditional probability distributions, we obtain a particular class of Bayesian games. We show that for the class of so-called completely pure regular Double Game (DG) with finite sets of types, the Nash equilibria (NE) of the basic games can be used to compute a Bayesian Nash equilibrium of the DG in linear time with respect to the number of types of the players. We study a DG for the Prisoner's Dilemma (PD) by extending the PD with a second so-called Social Game (SG), generalising the notion of altruistic extension of a game in which players have different altruistic levels (or social coefficients). We study two different examples of Bayesian games in this context in which the social coefficients have a finite set of values and each player only knows the probability distribution of the opponent's social coefficient. In the first case we have a completely pure regular DG for which we deduce a Bayesian NE. Finally, we use the second example to compare various strategies in a round-robin tournament of the DG for PD, in which the players can change their social coefficients incrementally from one round to the next.

연구 동기 및 목표

• 다양한 경제 환경에서 자원을 전략적으로 할당하는 데 사용할 수 있는 새로운 유형의 게임인 Multi-Games(MG)를 통해 다중 환경에서의 자원 배분을 모델링하기 위해.
• 사회적 계수를 변화시킴으로써 이타적 행동을 포착하기 위해, 사회적 게임을 통합한 양자택일 게임을 통해 양자택일 게임을 확장하기 위해.
• 특히 완전히 순수한 정규 이중 게임에 속하는 MG의 하위 클래스에서, 베이지안 내쉬 균형을 계산하는 데 있어 계산적으로 효율적인 방법을 개발하기 위해.
• 반복적인 이중 게임에서 적응 전략의 성능을 라운드 로빈 토너먼트 프레임워크를 통해 평가하기 위해.

제안 방법

• 플레이어의 투자 비율에 따라 가중된 여러 기본 게임의 지급액을 선형 조합으로 정의함으로써 Multi-Games(MG)를 정의한다.
• 각 플레이어가 두 기본 게임 모두에서 동일한 전략 집합을 가지며, 비공개 가중치(유형)를 통해 투자 또는 사회적 선호도를 표현하는 양자택일 게임(DG)을 도입한다.
• 가중치가 비공개 정보이며 알려진 조건부 확률 분포를 가진 경우, DG를 베이지안 게임으로 설정한다.
• 각 플레이어의 최적 전략이 자신의 유형에만 의존하는 '완전히 순수한 정규' DG의 개념을 수립함으로써, 균형 조건의 선형 시간 검증이 가능하게 한다.
• 유형 수에 비례하는 선형 시간 내에 완전한 순수성과 정규성의 테스트를 유도하는 수식을 유도하며, 직접적으로 베이지안 내쉬 균형을 도출한다.
• $(\lambda,\gamma)$ 다이어그램의 내쉬 균형 예측을 기반으로 사회 계수를 동적으로 조정하는 새로운 전략(SEG)을 설계하고, 이를 활용해 라운드 로빈 토너먼트를 시뮬레이션한다.

실험 결과

연구 질문

• RQ1 전략 집합과 지급 구조가 상이한 다수의 게임을 동시에 진행하는 플레이어들이 자원을 할당할 수 있는 게임 유형을 구성할 수 있는가?
• RQ2 이러한 게임에서 베이지안 내쉬 균형을 효율적으로 계산할 수 있는 조건은 무엇인가? 특히 선형 시간 내에 계산 가능한가?
• RQ3 반복적 상호작용에서의 이타적 행동은 두 번째 게임 계층(사회적 게임)을 통해 어떻게 모델링할 수 있는가? 이는 자비심이나 사회적 선호도를 포착할 수 있는가?
• RQ4 플레이어가 상대방의 행동에 따라 사회 계수를 적응적으로 조정할 때, 반복적인 이중 게임에서 효과적인 전략은 무엇인가?
• RQ5 유형 공간의 내쉬 균형을 동적으로 활용하여 강력한 협력과 복수를 달성할 수 있는 전략을 설계할 수 있는가?

주요 결과

• 유한한 유형을 가진 완전히 순수한 정규 이중 게임의 경우, 유형 수에 비례하는 선형 시간 내에 베이지안 내쉬 균형을 계산할 수 있다.
• 제안된 완전한 순수성과 정규성 테스트는 필요조건이자 충분조건이며, 선형 시간 내에 실행 가능하므로 균형 계산을 효율적으로 수행할 수 있다.
• 반복적인 이중 게임 토너먼트에서, 내쉬 균형 예측을 기반으로 사회 계수를 동적으로 조정하는 SEG 전략은 매우 효과적이었으며, 협력, 복수, 착취를 균형 있게 조율했다.
• SEG는 처음에는 배신함으로써 ALLC와 같은 복수를 하지 않는 전략을 착취하며, 복수 없음을 확인한 후에 협력으로 전환함으로써 장기적 손실 없이 수익을 극대화했다.
• SEG는 TFT와 같은 상호적 전략을 만날 경우, 신속히 배신에서 협력으로 전환하여 초기 배신 이후 상호 협력을 달성함으로써 강건성을 입증했다.
• 이 프레임워크는 게임 시퀀스의 끝에서 물질적 지급과 사회적 지급의 볼록 조합을 가능하게 하여, 사회 수준에서 결과에 대한 가중치를 설정할 수 있게 하여 인간 행동 모델링의 현실성 향상을 도모한다.