[논문 리뷰] An Optimization and Control Theoretic Approach to Noncooperative Game Design

Tansu Alpcan, Lacra Pavel외 1명|arXiv (Cornell University)|2010. 07. 01.

Game Theory and Applications참고 문헌 29인용 수 4

한 줄 요약

이 논문은 복잡한 정보 부족 조건 하에서도 복수의 전략적 참여자가 존재하는 비협력 게임을 설계하여 복수의 전역 목표, 예를 들어 복지 최대화 또는 서비스 품질(QoS) 목표를 달성하기 위한 최적화 및 제어 이론적 프레임워크를 제시한다. 가격 메커니즘을 설계 도구로 활용함으로써, 단순한 선형 가격 책정 방식이 정보 부족 조건 하에서도 나시 균형을 유일하게 원하는 해로 유도할 수 있음을 보이며, 시간 스케일 분리 동역학에 대해 르아프노프 이론과 특이 섭동 기법을 활용하여 안정성 조건을 수립한다.

ABSTRACT

This paper investigates design of noncooperative games from an optimization and control theoretic perspective. Pricing mechanisms are used as a design tool to ensure that the Nash equilibrium of a fairly general class of noncooperative games satisfies certain global objectives such as welfare maximization or achieving a certain level of quality-of-service (QoS). The class of games considered provide a theoretical basis for decentralized resource allocation and control problems including network congestion control, wireless uplink power control, and optical power control. The game design problem is analyzed under different knowledge assumptions (full versus limited information) and design objectives (QoS versus utility maximization) for separable and non-separable utility functions. The ``price of anarchy'' is shown not to be an inherent feature of full-information games that incorporate pricing mechanisms. Moreover, a simple linear pricing is shown to be sufficient for design of Nash equilibrium according to a chosen global objective for a fairly general class of games. Stability properties of the game and pricing dynamics are studied under the assumption of time-scale separation and in two separate time-scales. Thus, sufficient conditions are derived, which allow the designer to place the Nash equilibrium solution or to guide the system trajectory to a desired region or point. The obtained results are illustrated with a number of examples.

연구 동기 및 목표

• 비협력 게임을 체계적으로 설계하여 그 나시 균형이 복지 최대화 또는 QoS 제약과 같은 전역 목표를 충족하도록 하는 프레임워크를 개발하는 것.
• 참가자들의 유틸리티나 선호도에 대한 완전한 지식이 없는 제한된 정보 조건에서의 게임 설계 과제를 다루는 것.
• 시간 스케일 분리 조건 하에서 르아프노프 이론과 특이 섭동 기법을 활용하여 게임 및 가격 동역학의 안정성을 분석하는 것.
• 가격의 비효율성(Price of Anarchy)이 정보가 완전한 가격 기반 게임에서 본질적인 특성은 아니며, 적절한 메커니즘 설계로 제거될 수 있음을 보여주는 것.
• 가격 및 제어 설계를 통해 시스템의 궤적을 원하는 균형점 또는 영역으로 유도할 수 있는 충분한 조건을 제공하는 것.

제안 방법

• 분리 가능 및 비분리 가능한 유틸리티 함수를 갖는 비협력 게임의 일반적 클래스를 수립하여 분산 자원 할당 문제를 모델링하는 것.
• 나시 균형에 영향을 주고 전역 목표와 일치시키기 위해 가격 메커니즘을 제어 입력으로 도입하는 것.
• 카룩-쿤-터커(Karush-Kuhn-Tucker, KKT) 조건과 라그랑주 이중성 이론을 활용하여 나시 균형을 특성화하고 최적성에 필요한 조건을 유도하는 것.
• 시간 스케일 분리를 가정하여 느린 가격 동역학과 빠른 플레이어 반응 동역학을 모델링하고, 특이 섭동 이론을 활용한 안정성 분석을 가능하게 하는 것.
• 르아프노프 안정성 이론을 활용하여 원하는 균형점으로의 수렴을 보장하는 충분한 조건을 유도하는 것.
• 결합된(비분리 가능한) 유틸리티가 존재하더라도 선형 가격 책정을 통해 나시 균형이 유일하고 명시적으로 위치 지정될 수 있는 조건을 도출하는 것.

실험 결과

연구 질문

• RQ1 가격 메커니즘을 활용하여 비협력 게임의 나시 균형이 사회적 복지 최대화와 같은 특정 전역 목표를 달성하도록 설계할 수 있는가?
• RQ2 결합된(비분리 가능한) 유틸리티 함수를 갖는 비협력 게임의 클래스에서 나시 균형이 유일해지는 조건은 무엇인가?
• RQ3 시스템이 두 가지 별개의 시간 스케일에서 작동할 경우, 게임 및 가격 동역학의 안정성을 어떻게 확보할 수 있는가?
• RQ4 비협력 게임 설계의 결과로 나타나는 '가격의 비효율성'은 피할 수 없는 결과인가, 아니면 적절한 가격 메커니즘 설계로 제거될 수 있는가?
• RQ5 선형 가격 책정 방식이 시스템의 궤적을 원하는 균형점 또는 영역으로 유도할 수 있는 충분한 조건은 무엇인가?

주요 결과

• 일반적인 비협력 게임의 클래스에 대해 단순한 선형 가격 책정 메커니즘이 복지 최대화 또는 QoS 준수와 같은 원하는 전역 목표를 달성하기 위해 나시 균형을 설계하는 데 충분하다.
• 엄격한 볼록성과 헤시안 행렬의 정정규성 조건이 만족될 경우, 비분리 가능한 유틸리티 함수가 존재하더라도 연구된 게임 클래스에서 나시 균형은 유일하다.
• 가격의 비효율성은 정보가 완전한 가격 기반 게임에서 본질적인 특성이 아니며, 적절한 메커니즘 설계로 제거되거나 완화될 수 있다.
• 시간 스케일 분리 조건 하에서 르아프노프 이론과 특이 섭동 기법을 활용하여 게임 및 가격 동역학의 안정성에 대한 충분한 조건을 도출하였다.
• 제한된 정보 조건 하에서도 적절히 가격 동역학을 설계함으로써 시스템의 궤적을 원하는 균형점 또는 영역으로 유도할 수 있다.
• 제안된 프레임워크는 네트워크 혼잡도 제어, 무선 업링크 전력 제어, 광섬유 전력 제어 등의 실제 문제에 적용 가능하며, 구체적인 예시가 제공되었다.