[論文レビュー] Demand-Aware Network Designs of Bounded Degree

Chen Avin, Kaushik Mondal+1 more|arXiv (Cornell University)|May 17, 2017

Interconnection Networks and Systems参考文献 13被引用数 24

ひとこと要約

本稿は、通信リクエスト分布に基づいて期待経路長を最小化する、上限付き次数のネットワーク向けの需要対応ネットワーク設計フレームワークを提案する。階層的クラスタリングとメトリックスパナーを用いた新規アルゴリズムを提案し、エントロピーとダブリング次元の性質に基づく理論的保証により、漸近的に最適な性能を達成する。これにより、頻度の高い通信ペアを保つ短い経路を維持する、スパarsな低次数トポロジーを実現する。

ABSTRACT

Traditionally, networks such as datacenter interconnects are designed to optimize worst-case performance under arbitrary traffic patterns. Such network designs can however be far from optimal when considering the actual workloads and traffic patterns which they serve. This insight led to the development of demand-aware datacenter interconnects which can be reconfigured depending on the workload. Motivated by these trends, this paper initiates the algorithmic study of demand-aware networks (DANs) designs, and in particular the design of bounded-degree networks. The inputs to the network design problem are a discrete communication request distribution, D, defined over communicating pairs from the node set V , and a bound, d, on the maximum degree. In turn, our objective is to design an (undirected) demand-aware network N = (V,E) of bounded-degree d, which provides short routing paths between frequently communicating nodes distributed across N. In particular, the designed network should minimize the expected path length on N (with respect to D), which is a basic measure of the efficiency of the network. We show that this fundamental network design problem exhibits interesting connections to several classic combinatorial problems and to information theory. We derive a general lower bound based on the entropy of the communication pattern D, and present asymptotically optimal network-aware design algorithms for important distribution families, such as sparse distributions and distributions of locally bounded doubling dimensions.

研究の動機と目的

• 従来の最悪ケース最適化設計の非効率性を是正するため、実際の通信パターンを統合すること。
• 与えられた通信分布 D に対して、期待ルーティング経路長を最小化するスパarsで次数制限付き（次数 ≤ Δ）のネットワークを設計すること。
• ネットワーク設計の効率性と情報理論的指標（エントロピー、ダブリング次元など）との理論的基盤を確立すること。
• スパースかつ局所的にダブリングの性質を示すような分布に対して、漸近的に最適なアルゴリズムを設計すること。
• ワークロードに応じたトポロジー構築により、需要対応設計が最悪ケース設計を著しく上回ることを実証すること。

提案手法

• 需要グラフの2-ネットを構築してクラスターヘッドを形成し、通信頻度に基づくノードの階層的クラスタリングを可能にする。
• 通信ノードペアを含むクラスタ間でのみエッジを接続することで、スパースなスパナー S を構築し、歪み（≤9）を低く抑えつつエッジ数を線形に保つ。
• 需要グラフのダブリング次元の性質を用いて、1クラスタあたりの外部エッジ数の上限を設定し、次数を有界に保つ。
• クラスターヘッド同士のみを接続することでスパナーを最適化し、歪みを5に低下させつつ、スパarsity と有界次数を維持する。
• メトリックスパナー理論を活用し、高頻度通信ペアの短い経路を保つネットワークを構築する。
• エントロピーに基づく下界を適用し、一般の通信分布下での提案設計の理論的最適性を確立する。

実験結果

リサーチクエスチョン

• RQ1 実世界の通信パターン下で、需要対応ネットワーク設計は最悪ケース最適化設計よりも顕著に低い期待経路長を達成できるか？
• RQ2 上限付き次数ネットワークにおける期待経路長の根本的な情報理論的限界は何か？ また、通信分布のエントロピーとどのように関係するか？
• RQ3 スパースで次数制限付きのネットワークを、低ダブリング次元またはスパースな分布に対して漸近的に最適に設計するにはどうすればよいか？
• RQ4 メトリックスパナーと階層的クラスタリングを組み合わせることで、効率的で低次数のトポロジーを構築し、通信効率を保てるか？
• RQ5 通信パターンのエントロピーは、需要対応ネットワーク設計の最適性を評価するのに十分で自然な指標であるか？

主な発見

• 本稿は、通信分布 D のエントロピーに基づく期待経路長の一般下界を確立し、最適性の理論的ベンチマークを提供する。
• ダブリング次元が有界な分布に対して、提案アルゴリズムはエントロピーに基づく下界の定数倍の期待経路長を達成し、漸近的最適性を証明する。
• アルゴリズムは O(n) エッジと最大次数 O(λ⁴) のスパarsで次数制限付きネットワークを構築し、スケーラビリティとハードウェア実装可能性を確保する。
• クラスターヘッド同士のみを接続することで、最適化されたスパナーは歪みを9から5に低下させ、エッジ数や次数を定数倍以内に抑えつつ経路長効率を向上させる。
• 1クラスタあたりの外部エッジ数が λ⁴ で抑えられ、これは局所的にダブリングの性質を示す分布に対して定数であるため、効率的でスケーラブルな展開が可能になる。
• フレームワークは、厳密な次数制約下でも需要対応設計が近似的に最適な性能を達成できることを示し、実際の応用において従来の最悪ケース設計を大きく上回ることを実証する。