[논문 리뷰] Multi-Agent Decentralized Network Interdiction Games

Harikrishnan Sreekumaran, Ashish R. Hota외 3명|arXiv (Cornell University)|2015. 03. 03.

Mathematical and Theoretical Epidemiology and Ecology Models참고 문헌 56인용 수 9

한 줄 요약

이 논문은 다중 에이전트 최단경로 방해를 고려한 분산형 네트워크 방해 게임을 소개한다. 여기서 에이전트들은 공유 네트워크를 독립적으로 방해하여 적대자를 저지하려 한다. 균형 존재성을 확립하고, 공유되지 않은 제약 조건을 가진 일반화된 내쉬 균형 문제로 문제를 재구성하며, 연속 전략에 대해서는 렘케의 알고리즘을, 이산 전략에 대해서는 히우리스틱 최적 반응 동역학을 제안하여, 협력 부족으로 인한 효율성 손실의 이론적 및 실증적 경계를 제시한다.

ABSTRACT

In this work, we introduce decentralized network interdiction games, which model the interactions among multiple interdictors with differing objectives operating on a common network. As a starting point, we focus on decentralized shortest path interdiction (DSPI) games, where multiple interdictors try to increase the shortest path lengths of their own adversaries, who all attempt to traverse a common network. We first establish results regarding the existence of equilibria for DSPI games under both discrete and continuous interdiction strategies. To compute such an equilibrium, we present a reformulation of the DSPI games, which leads to a generalized Nash equilibrium problem (GNEP) with non-shared constraints. While such a problem is computationally challenging in general, we show that under continuous interdiction actions, a DSPI game can be formulated as a linear complementarity problem and solved by Lemke's algorithm. In addition, we present decentralized heuristic algorithms based on best response dynamics for games under both continuous and discrete interdiction strategies. Finally, we establish theoretical bounds on the worst-case efficiency loss of equilibria in DSPI games, with such loss caused by the lack of coordination among noncooperative interdictors, and use the decentralized algorithms to empirically study the average-case efficiency loss.

연구 동기 및 목표

• 다양한 목표를 가진 다수의 에이전트가 공통 네트워크를 방해하여 적대자를 저지시키는 분산형 네트워크 방해 게임을 모델링하고 분석한다.
• 이산 및 연속 전략 전제 하에서 분산형 최단경로 방해(DSPI) 게임의 균형 존재성과 성질을 조사한다.
• 중앙집중식 최적 해와 비교할 때 비협력적 방해자들 간의 협력 부족으로 인한 균형에서의 효율성 손실을 정량화한다.
• 레미케의 알고리즘을 통한 연속 전략 및 이산 전략에 대한 분산형 히우리스틱 최적 반응 동역학을 포함한 계산적으로 실현 가능한 균형 계산 알고리즘을 개발한다.
• 평균적 효율성 손실을 실증적으로 평가하고, DSPI 게임에서 최악의 비효율성에 대한 이론적 경계를 설정한다.

제안 방법

• DSPI 게임을 공유되지 않은 제약 조건을 가진 일반화된 내쉬 균형 문제(GNEP)로 재구성하여, 분산 의사결정 하에서 균형의 분석을 가능하게 한다.
• 연속 전략 전제 하에서 문제를 선형 보완성 문제(LCP)로 재구성하고, 이를 렘케의 알고리즘을 통해 해결한다.
• 연속 및 이산 전략 전부에 대해 최적 반응 동역학 기반의 분산형 히우리스틱 알고리즘을 제안하여, 반복적 수렴을 통한 균형 도달를 가능하게 한다.
• 이중성과 전체 단순성의 성질을 활용하여 최단경로 방해 문제의 최대-최소 목표 함수를 매끄럽게 재구성한다.
• 연속성 및 내부 반연속성의 논증을 적용하여 반복 수열이 내쉬 균형으로 수렴함을 증명한다.
• 최적 반응 동역학의 최적화 하위문제를 안정화하기 위해 제곱형 벌점 항을 포함한 정규화된 목표 함수를 사용한다.

실험 결과

연구 질문

• RQ1 이산 및 연속 전략 전제 하에서 분산형 최단경로 방해(DSPI) 게임에 균형이 존재하는가?
• RQ2 연속 전략 전제 하에서 DSPI 게임을 선형 보완성 문제처럼 계산적으로 실현 가능한 문제로 재구성할 수 있는가?
• RQ3 비협력적 방해자들 간의 협력 부족으로 인한 DSPI 균형에서의 이론적 최악의 효율성 손실은 얼마인가?
• RQ4 실제로 평균적 효율성 손실은 중심집중식 최적 해와 비교해 어떻게 되며, 분산 알고리즘을 통해 이를 줄일 수 있는가?
• RQ5 이산 및 연속 전략 전제 하에서 분산형 최적 반응 동역학에서 균형 수렴을 보장할 수 있는가?

주요 결과

• 수렴성 및 타당성 논증을 통해 이산 및 연속 전략 전제 하에서 DSPI 게임에 균형이 존재함을 입증하였다.
• 연속 전략 전제 하에서 DSPI 게임은 선형 보완성 문제로 재구성 가능하며, 이를 렘케의 알고리즘으로 해결함으로써 계산적 실현 가능성을 확보하였다.
• DSPI 균형에서의 최악의 효율성 손실은 경계되어 있으며, 일반화된 내쉬 균형 문제의 구조로부터 이론적 보장을 받는다.
• 이산 및 연속 전략 전제 하에서 분산형 최적 반응 동역학이 수렴함을 입증하였으며, 연속성 및 미분 가능성 논증을 통해 이를 증명하였다.
• 실증 연구 결과, 평균적 효율성 손실은 최악의 경계보다 크게 낮아져 분산 전략의 실용적 타당성을 시사한다.
• 제곱형 벌점 항을 포함한 정규화된 목표 함수의 사용은 반복적 최적 반응 과정을 안정화시키고, 히우리스틱 알고리즘 내에서 균형 수렴을 가능하게 하였다.