[논문 리뷰] Repeated Games With Intervention: Theory and Applications in Communications

Yuanzhang Xiao, Jaeok Park외 1명|arXiv (Cornell University)|2011. 11. 10.

Game Theory and Applications참고 문헌 21인용 수 6

한 줄 요약

이 논문은 통신 시스템에서 비볼록인 단일 단계 게임 결과로 인해 발생하는 타당한 지급 집합을 선형화하기 위해 간섭을 통합한 일반화된 반복 게임 모델을 제안한다. 이는 더 넓은 균형 지급 집합과 더 낮은 내성 요구 조건을 가능하게 하며, 개인적 합리성 제약 조건 하에서 최적의 복지 최적화 균형을 유지하기 위해 필요한 최소 간섭 능력을 도출한다.

ABSTRACT

In communication systems where users share common resources, users' selfish behavior usually results in suboptimal resource utilization. There have been extensive works that model communication systems with selfish users as one-shot games and propose incentive schemes to achieve Pareto optimal action profiles as non-cooperative equilibria. However, in many communication systems, due to strong negative externalities among users, the sets of feasible payoffs in one-shot games are nonconvex. Thus, it is possible to expand the set of feasible payoffs by having users choose convex combinations of different payoffs. In this paper, we propose a repeated game model generalized by intervention. First, we use repeated games to convexify the set of feasible payoffs in one-shot games. Second, we combine conventional repeated games with intervention, originally proposed for one-shot games, to achieve a larger set of equilibrium payoffs and loosen requirements for users' patience to achieve it. We study the problem of maximizing a welfare function defined on users' equilibrium payoffs, subject to minimum payoff guarantees. Given the optimal equilibrium payoff, we derive the minimum intervention capability required and design corresponding equilibrium strategies. The proposed generalized repeated game model applies to various communication systems, such as power control and flow control.

연구 동기 및 목표

• 통신 네트워크에서 이기적인 사용자 행동으로 인한 자원 활용의 비효율성을 해결하기 위해.
• 전력 제어, 흐름 제어, 중계 접근 제어 분야에서 비볼록인 타당 지급 집합을 가진 단일 단계 게임의 한계를 극복하기 위해.
• 달성 가능한 하위게임 완전 균형 지급 집합을 확장하는 간섭을 통합한 반복 게임 프레임워크를 설계하기 위해.
• 모든 사용자의 최소 지급 보장을 만족시키는 조건 하에서 균형 지급에 대한 복지 함수를 최대화하기 위해.
• 최적의 균형 결과를 유지하기 위해 필요한 최소 간섭 능력을 규명하기 위해.

제안 방법

• 사용자 행동을 모니터링하고 관찰된 신호에 기반해 제재를 시행하는 간섭 장치를 통합한 일반화된 반복 게임 모델을 수립한다.
• 반복 게임을 통해 타당 지급 집합을 선형화하여 단계 게임 결과의 선형 조합을 균형 지급으로 가능하게 한다.
• 반복 게임에 간섭을 통합하여 내성 요구 조건을 완화하고, 기존 반복 게임의 한계를 초월한 더 넓은 균형 지급 집합을 확보한다.
• 최소 지급 제약 조건 하에서 복지 최적화 문제를 해결하기 위해, 상대 지급 이탈을 나타내는 핵심 변수 C를 포함한 매개변수 최적화 접근법을 사용한다.
• 목표 균형 지급 벡터를 유지하기 위해 필요한 최소 할인 요인의 닫힌 형식 표현식을 유도한다.
• 자기 생성 집합과 분해 기법을 활용하여 순수 행동 프로파일과 계속 지급에서 순차적으로 균형 전략을 구성한다.

실험 결과

연구 질문

• RQ1 비볼록인 단일 단계 지급 집합을 가진 통신 시스템에서 반복 게임의 간섭을 어떻게 활용하여 달성 가능한 균형 지급 집합을 확장할 수 있는가?
• RQ2 개인적 합리성 제약 조건 하에서 원하는 균형 지급 벡터를 유지하기 위해 필요한 최소 수준의 간섭 능력은 무엇인가?
• RQ3 간섭은 반복 게임에서 효율적 균형을 유지하기 위해 필요한 내성 요구 조건(즉, 할인 요인)을 어떻게 감소시키는가?
• RQ4 제안된 프레임워크는 전력 제어 및 흐름 제어와 같은 비볼록 타당 지급 집합을 가진 시스템에서 파레토 최적 또는 복지 최적 결과를 달성할 수 있는가?
• RQ5 간섭 존재 조건 하에서 목표 균형 지급을 유지하기 위해 필요한 최소 할인 요인의 분석적 특성은 무엇인가?

주요 결과

• 제안된 모델은 반복에 의한 선형화와 전략적 간섭을 조합함으로써 표준 반복 게임보다 더 넓은 균형 지급 집합을 달성한다.
• 목표 균형 지급 벡터를 유지하기 위해 필요한 최소 할인 요인은 사용자 가중치, 기준 지급, 채널 이득 등의 시스템 파라미터를 포함한 닫힌 형식의 표현식으로 상한선이 존재한다.
• 최적 해는 모든 사용자의 최소 보장 지급에서의 상대 지급 이탈이 동일하게 조정되는 균형 조건을 만족하며, 이를 공통 승수 C를 통해 수식화한다.
• 핵심 할인 요인은 계속 지급 분해가 자기 생성 집합 내에 유지되어야 하는 조건에서 유도된 이차 방정식을 풀어 결정된다.
• 최소 할인 요인에 대한 유도된 상한선은 두 항의 최댓값으로 주어지며, 하나는 최소 지급에서의 상대 이탈이고, 다른 하나는 시스템 전체의 채널 및 가중치 파라미터에 대한 함수이다.
• 알고리즘은 목표 지급을 순수 행동과 계속 지급으로 순차적으로 분해하여 균형 전략을 구성함으로써 하위게임 완전성을 보장한다.