[논문 리뷰] Generalized Nash Equilibrium Seeking Algorithm Design for Distributed Constrained Multi-Cluster Games

Zhenhua Deng, Yan Zhao|arXiv (Cornell University)|2021. 06. 24.

Distributed Control Multi-Agent Systems참고 문헌 39인용 수 4

한 줄 요약

이 논문은 결합된, 국지적인, 집합 제약 조건 하에서 클러스터 내 협력과 클러스터 간 경쟁을 동시에 고려하는 분산 제약 다중클러스터 게임에서 변분 일반화 나이시 균형(Variational Generalized Nash Equilibrium, GNE)을 구하기 위한 분산 그래디언트 기반 알고리즘을 제안한다. 이 알고리즘은 사영 방법과 르아프노프 안정성 분석을 통해 점점 수렴하는 수렴성을 보장하며, 시뮬레이션을 통해 검증된다.

ABSTRACT

The multi-cluster games are addressed in this paper, where all players team up with the players in the cluster that they belong to, and compete against the players in other clusters to minimize the cost function of their own cluster. The decision of every player is constrained by coupling inequality constraints, local inequality constraints and local convex set constraints. Our problem extends well-known noncooperative game problems and resource allocation problems by considering the competition between clusters and the cooperation within clusters at the same time. Besides, without involving the resource allocation within clusters, the noncooperative game between clusters, and the aforementioned constraints, existing game algorithms as well as resource allocation algorithms cannot solve the problem. In order to seek the variational generalized Nash equilibrium (GNE) of the multi-cluster games, we design a distributed algorithm via gradient descent and projections. Moreover, we analyze the convergence of the algorithm with the help of variational analysis and Lyapunov stability theory. Under the algorithm, all players asymptotically converge to the variational GNE of the multi-cluster game. Simulation examples are presented to verify the effectiveness of the algorithm.

연구 동기 및 목표

• 복잡한 제약 조건 하에서 클러스터 간 경쟁과 클러스터 내 협력을 동시에 처리하지 못하는 기존 게임 및 자원 할당 알고리즘의 격차를 해소하기 위해.
• 각 플레이어가 자신의 클러스터의 비용 함수를 최소화하도록 모델링한 분산 다중클러스터 게임을 수립하며, 이는 결합된 제약, 국지적 부등식 제약, 볼록 집합 제약을 수반한다.
• 중앙 집중적 조율 없이 플레이어들이 자율적으로 변분 GNE로 수렴할 수 있도록 분산 알고리즘을 설계하기 위해.
• 변분 분석과 르아프노프 안정성 이론을 사용하여 제안된 알고리즘의 이론적 수렴 보장을 확립하기 위해.

제안 방법

• 클러스터 간 결합 제약과 플레이어별 국지적 제약을 수반하는 일반화 나이시 균형 문제로 다중클러스터 게임을 수립한다.
• 비용 함수 최소화를 위한 그래디언트 하강 업데이트와 제약 조건 이행을 위한 사영 연산을 사용하는 분산 알고리즘을 설계한다.
• 각 플레이어의 결정 변수에 대해 국지적 부등식 제약과 볼록 집합 제약을 처리하기 위해 사영 연산자를 통합한다.
• 변분 분석을 적용하여 변분 GNE를 변분부등식 문제의 해로 특성화한다.
• 르아프노프 안정성 이론을 사용하여 제안된 알고리즘 하에서 모든 플레이어가 점점 변분 GNE로 수렴함을 증명한다.
• 각 플레이어가 로컬 정보와 클러스터 내 구성원과의 국지적 통신만을 기반으로 업데이트할 수 있도록 분산 구현을 보장한다.

실험 결과

연구 질문

• RQ1 결합된, 국지적인, 집합 제약 조건이 존재하는 다중클러스터 게임에서 변분 GNE를 계산하기 위한 분산 알고리즘은 어떻게 설계할 수 있는가?
• RQ2 이러한 제약 조건이 존재하는 다중클러스터 환경에서 플레이어가 변분 GNE로 점점 수렴하기 위한 조건는 무엇인가?
• RQ3 기존의 비협력 게임 및 자원 할당 알고리즘에 비해 제안된 알고리즘이 클러스터 간 경쟁과 클러스터 내 협력을 다루는 데 어떻게 뛰어나게 작용하는가?
• RQ4 어떻게 변분 분석과 르아프노프 안정성 이론을 사용하여 알고리즘의 수렴을 엄밀하게 증명할 수 있는가?
• RQ5 사영과 그래디언트 업데이트는 제약 조건의 타당성을 유지하고 수렴을 이끄는 데 어떤 역할을 하는가?

주요 결과

• 제안된 분산 알고리즘은 다중클러스터 게임의 모든 플레이어가 변분 일반화 나이시 균형으로 점점 수렴함을 보장한다.
• 변분부등식 이론과 르아프노프 안정성 분석을 통해 엄밀한 분석을 통해 수렴성을 확립하였으며, 알고리즘 하에서 전역 수렴이 보장됨을 확인하였다.
• 기존 방법이 다루지 못하는 클러스터 간 경쟁과 클러스터 내 협력의 공존을 효과적으로 처리한다.
• 사영 기반 업데이트를 통해 모든 제약 조건—결합된 제약, 국지적 부등식 제약, 볼록 집합 제약—의 타당성을 유지한다.
• 시뮬레이션 결과는 다양한 제약 구성 조건 하에서도 균형에 도달하는 데서 알고리즘의 효과성을 입증한다.
• 중앙 집중적 조율 없이도 작동하므로 분산 시스템에서 확장 가능하고 견고한 구현이 가능하다.