[論文レビュー] A distributed ADMM-like method for resource sharing under conic constraints over time-varying networks

Necdet Serhat Aybat, Erfan Yazdandoost Hamedani|arXiv (Cornell University)|Nov 22, 2016

Distributed Control Multi-Agent Systems被引用数 6

ひとこと要約

本稿では、時間変動するネットワーク上で凸被約付きの協調的マルチエージェントリソース共有のための分散型原双対アルゴリズムであるDPDA-Dを提案する。本手法は、保証された部分最適性、不可行性、および一致違反率を伴い、動的通信環境における効率的な分散最適化を実現する。

ABSTRACT

We consider cooperative multi-agent resource sharing problems over time-varying communication networks, where only local communications are allowed. The objective is to minimize the sum of agent-specific composite convex functions subject to a conic constraint that couples agents' decisions. We propose a distributed primal-dual algorithm DPDA-D to solve the saddle point formulation of the sharing problem on time-varying (un)directed communication networks; and we show that primal-dual iterate sequence converges to a point defined by a primal optimal solution and a consensual dual price for the coupling constraint. Furthermore, we provide convergence rates for suboptimality, infeasibility and consensus violation of agents' dual price assessments; examine the effect of underlying network topology on the convergence rates of the proposed decentralized algorithm; and compare DPDA-D with a centralized method on the basis pursuit denoising and multi-channel power allocation problems.

研究の動機と目的

• 局所的通信が限定的で、時間変動するネットワークトポロジーを有するマルチエージェントシステムにおける分散型リソース共有の課題に対処する。
• エージェント間の共通の凸被約を含むサドルポイント問題としてリソース共有問題を定式化する。
• 各エージェントが局所的変数と双対価格の一致を維持しながら、合成凸目的関数を共同で最小化できる分散アルゴリズムを設計する。
• 一般の（非）有向時間変動ネットワーク下での部分最適性、不可行性、および双対一致違反の収束レートを分析する。
• 実世界の問題、例えば基底追跡ノイズ除去とマルチチャネル電力割り当てにおいて、分散型DPDA-Dアルゴリズムと集中型手法の性能を比較する。

提案手法

• 時間変動する（非）有向通信ネットワーク上で動作する分散型原双対アルゴリズム（DPDA-D）を構築し、局所的情報交換のみを用いる。
• エージェント固有の凸関数と共有される凸被約を含むサドルポイント問題としてリソース共有問題を定式化する。
• 双対分解を用いてグローバル制約を分離し、各エージェントが隣接エージェントの情報に基づき局所的変数と双対価格を更新できるようにする。
• 時間変動するネットワークトポロジーに対応するための動的重み付けスキームを統合し、変化する通信パターンにもかかわらず収束を保証する。
• 原変数更新にはプロキシマル勾配ステップを、双対変数更新には一貫性に基づく更新則を適用する。
• リャプノフ解析と行列重み付き平均化技術を活用し、収束を証明するとともに収束レートを導出する。

実験結果

リサーチクエスチョン

• RQ1 通信ネットワークが時間変動的で、場合によっては単方向である状況下でも、分散型アルゴリズムが最適解への収束を達成できるか。
• RQ2 提案された分散型手法における部分最適性、不可行性、および双対一致違反の収束レートは何か。
• RQ3 ネットワークトポロジーの構造がDPDA-Dアルゴリズムの収束速度にどのように影響を与えるか。
• RQ4 実用的なリソース割り当て問題において、分散型DPDA-Dアルゴリズムは集中型ソルバーよりも優れた性能を示すか。
• RQ5 グローバルな調整なしに、動的ネットワーク状態下でも双対一致と原変数の妥当性を維持できるか。

主な発見

• DPDA-Dアルゴリズムは、原変数の反復列が原最適解と一貫性のある双対価格によって定義される点に収束する原双対最適解に収束する。
• 部分最適性、不可行性、および双対価格推定の一致違反は、反復回数kに対してO(1/k)のレートで収束する。
• 収束レートはネットワークの動的ラプラシアンの固有値特性に依存し、より結合されており、条件数が良好なトポロジーではより速い収束が観察される。
• 数値実験の結果、DPDA-Dは基底追跡ノイズ除去およびマルチチャネル電力割り当て問題において、集中型ソルバーよりも同等の性能を達成する。
• 単方向かつ時間変動する通信リンク下でも、アルゴリズムは頑健性と収束性を維持し、動的環境下で標準ADMMの変種を上回る性能を示す。
• 理論的収束レートは実験的にも裏付けられ、ネットワークトポロジーの影響がアルゴリズム性能に実用的関連性を持つことが示された。