[論文レビュー] Concurrent self-adjusting distributed tree networks

Bruna Soares Peres|arXiv (Cornell University)|May 24, 2017

Peer-to-Peer Network Technologies参考文献 1被引用数 4

ひとこと要約

本論文は、リクエストパターンに基づいてトポロジーを再構成することで通信を最適化する自己調整型分散木ネットワークであるSplayNetsの、初めての分散的かつ並列実装を提示する。アルゴリズムがループおよびデッドロックフリーであることを証明しており、並列処理に起因するコスト増加は、順序処理の場合と比較して、m（同時に実行されるスプレイ操作の数）の対数オーダーのO(log m)にとどまる。

ABSTRACT

SplayNets are a distributed generalization of the classic splay tree data structures. Given a set of communication requests and a network comprised of n nodes, such that any pair of nodes is capable of establishing a direct connection, the goal is to dynamically find a (locally routable) binary tree topology, which connects all nodes and optimizes the routing cost for that communication pattern, making local topology transformations (rotations) before each request is served. In this work we present a distributed and concurrent implementation of SplayNets. Analytical results show that our proposed algorithm prevents loops and deadlocks from occurring between concurrent rotations. We compute the total amortized average cost of a splay request in number of rounds and number of time-slots and as a function of the empirical entropies of source and destination nodes of the splay requests.

研究の動機と目的

• 通信パターンに基づいてトポロジーを再構成する分散的かつ並列処理可能なSplayNets用アルゴリズムの設計および実装。
• 並列処理がSplayNetのパフォーマンスに与える影響、特に安全性、活性、コストオーヘッドの観点での分析。
• データセンタの実際のトラフィックトレースを用いて、SplayNetの動作を実際のワークロード下で評価。
• 相互排他制御を用いたアプローチと比較し、並列SplayNetのパフォーマンスを分析し、トレードオフを検討。
• 動的最適性予想の拡張を試み、分散型SplayNetsの文脈での適応と検証を理論的分析に組み込む。

提案手法

• メッセージパッシングを用いた並列的で分散型のSplayNetアルゴリズムの設計。ローカルな調整により一貫性を維持。
• 初期の検証のためSinalgoに実装し、データセンターシナリオの現実的なシミュレーションのためOmnet++に実装。
• Facebookのデータセンター（クラスタA、B、C）およびCTU-13ボットネットデータセットからの実際のトラフィックトレースを用いて、多様な通信パターンをシミュレート。
• 安全性と活性を保証するためのロックメカニズムを適用し、そのパフォーマンスコストを分析。
• 通信遅延、スプレイ操作回数、メッセージ交換数といった主要なメトリクスを測定し、パフォーマンスを評価。
• 異なるスプレイトリガー戦略の影響を考慮するために、理論的分析を拡張。

実験結果

リサーチクエスチョン

• RQ1 並列処理がSplayNetの安全性および活性に与える影響は何か？また、デッドロックおよびループフリーにできるか？
• RQ2 順序処理と比較して、並列処理に起因する平均コストオーヘッドはどの程度か？
• RQ3 異なるスプレイトリガー戦略は、実世界の通信ワークロード下でのSplayNetパフォーマンスにどのように影響を与えるか？
• RQ4 動的最適性予想は、分散型SplayNetsの文脈で適応可能であり、検証可能か？
• RQ5 通信遅延およびメッセージオーバーヘッドの観点から、並列SplayNetと相互排他制御型SplayNetのパフォーマンスはどのように比較できるか？

主な発見

• 提案された並列SplayNetアルゴリズムは、ループおよびデッドロックフリーであることが証明されており、並列アクセス下でも正しくネットワークが動作することが保証される。
• 並列処理の平均コストは、順序処理の場合と比較して、m（同時に実行されるスプレイ操作の数）の対数オーダーのO(log m)にしか増加しない。
• Sinalgoにおける実装はアルゴリズムの正しさを成功裏に検証した。Omnet++を用いたシミュレーションにより、実際のデータセンタワークロード下でのパフォーマンス評価が可能になった。
• Facebookのデータセンターからの高精細な通信パターンを再現するための実際のトラフィックトレース（60％のレール間通信）が使用され、本アプローチの妥当性が検証された。
• 研究では、並列処理に起因する対数オーダーのコスト要因が特定されたが、スケーラビリティと動的再構成の利点を考慮すると、これは許容可能であると結論づけられた。
• 今後の課題として、ロックの影響を分析し、相互排他制御と比較することで、パフォーマンスのトレードオフに関するさらなる知見が得られる可能性がある。