[논문 리뷰] An asynchronous, forward-backward, distributed generalized Nash equilibrium seeking algorithm

Carlo Cenedese, Giuseppe Belgioioso외 2명|arXiv (Cornell University)|2019. 01. 14.

Game Theory and Applications참고 문헌 17인용 수 7

한 줄 요약

이 논문은 비협력 게임에 대해 비동기적이고 분산된 일반화된 내쉬 균형(GNE) 탐색 알고리즘을 제안한다. 비방향 네트워크에서 간선 기반 보조 변수 대신 노드 기반 보조 변수를 사용하여 확장성을 향상시킨다. 이 방법은 조절된 전진-뒤집힘 분할 프레임워크를 활용하여, 통신 지연이 있는 비동기 업데이트에서도 수렴성을 보장하며, 네트워크 시장에서의 쿠르노 경쟁 시뮬레이션을 통해 검증된다.

ABSTRACT

In this paper, we propose an asynchronous distributed algorithm for the computation of generalized Nash equilibria in noncooperative games, where the players interact via an undirected communication graph. Specifically, we extend the paper "Asynchronous distributed algorithm for seeking generalized Nash equilibria" by Yi and Pavel: we redesign the asynchronous update rule using auxiliary variables over the nodes rather than over the edges. This key modification renders the algorithm scalable for highly interconnected games. The derived asynchronous algorithm is robust against delays in the communication and it eliminates the idle times between computations, hence modeling a more realistic interaction between players with different update frequencies. We address the problem from an operator-theoretic perspective and design the algorithm via a preconditioned forward-backward splitting. Finally, we numerically simulate the algorithm for the Cournot competition in networked markets.

연구 동기 및 목표

• 대규모이자 이질적인 다중 에이전트 시스템에서 동기 알고리즘이 효율적이지 못한 문제를 해결하기 위해 비동기 업데이트를 가능하게 한다.
• 높은 상호연결성을 가진 게임에서 확장성을 향상시키기 위해 보조 변수의 설계를 간선에서 노드로 재설계한다.
• 분산 환경에서 통신 지연과 다양한 업데이트 빈도가 존재하더라도 수렴성을 보장한다.
• 무단 시간을 줄이고 고장에 더 강건한 방식으로 실제 플레이어 상호작용을 모델링한다.
• 부등식 결합 제약 조건과 비동기 작동을 통합하여 기존의 변동형 GNE 탐색 연구를 확장한다.

제안 방법

• 알고리즘은 주로 단조 연산자 방정식에 대한 조절된 전진-뒤집힘 분할을 사용하여 유도된다.
• 노드 기반 보조 변수를 도입하여 간선 기반 변수를 대체함으로써 확장성 향상과 구현의 단순화를 달성한다.
• 비동기 업데이트는 업데이트 규칙에 지연된 정보를 모델링하여 표현되며, 유한한 지연 범위 내에서 수렴성이 증명된다.
• 지역 제약 조건과 이웃 정보 기반 지역 업데이트를 사용하는 이중 분해 접근법을 사용한다.
• 비압축 연산자를 사용한 고정점 반복으로 알고리즘을 재구성함으로써, 단조 연산자 이론을 통한 수렴성 분석이 가능해진다.
• 핵심 기술 기여는 비동기 조건 하에서 새로운 노드 기반 업데이트와 원래 간선 기반 업데이트 간의 동치성을 엄밀히 증명한 점으로, 동일한 수렴 보장을 보장한다.

실험 결과

연구 질문

• RQ1 통신 지연이 존재하는 상황에서도 비동기적으로 작동하면서도 수렴성을 유지할 수 있는 분산 GNE 탐색 알고리즘을 설계할 수 있는가?
• RQ2 높이 연결된 게임에서 간선 기반 수식에 비해 노드 기반 보조 변수 사용이 확장성에 어떻게 기여하는가?
• RQ3 비동기 업데이트가 분산 비협력 게임에서 수렴 속도와 강건성에 미치는 영향은 무엇인가?
• RQ4 부등식 결합 제약 조건을 처리하면서도 분산 구조와 수렴성을 유지할 수 있는가?
• RQ5 지연된 정보가 존재하더라도 제안된 비동기 알고리즘이 동기 버전과 행동상 동치인가?

주요 결과

• 제안된 비동기 알고리즘은 유한한 통신 지연과 임의의 업데이트 순서 하에서도 변동형 일반화된 내쉬 균형(v-GNE)으로 수렴한다.
• 간선 기반 대신 노드 기반 보조 변수를 사용함으로써 노드 수에 대한 확장성이 보장되며, 간선 기반 방법에서 관찰되는 변수 수의 이차적 증가를 피한다.
• 업데이트 간의 무단 시간을 제거하여 계산 속도가 다른 이질적 시스템에서 더 빠른 수렴이 가능해진다.
• 유도를 통해 인도적으로 엄밀히 증명된 바, 새로운 노드 기반 업데이트와 원래 간선 기반 업데이트 간의 동치성이 보장되어 동일한 수렴 보장을 확보한다.
• 네트워크 시장에서의 쿠르노 경쟁에 대한 수치 시뮬레이션을 통해 알고리즘의 효과성과 비동기 및 지연 조건 하에서의 강건성을 확인한다.
• 알고리즘은 통신 장애에 강건하며, 비동기 성격 덕분에 새로운 에이전트의 동적 삽입도 지원한다.