[論文レビュー] FACETS - a Framework for Parallel Coupling of Fusion Components

John R. Cary, Ammar Hakim+13 more|arXiv (Cornell University)|Apr 9, 2010

Magnetic confinement fusion research参考文献 1被引用数 6

ひとこと要約

FACETS は、核融合プラズマの要素（コアプラズマやエッジプラズマなど）を並列かつ密に結合したシミュレーションを、独立して開発されたコードを用いて実行できる高性能コンピューティングフレームワークである。高度な数値スolverとスケーラブルなドメイン分割を統合することで、物理的ドメインをまたいで効率的かつスケーラブルに結合を実現し、エクサスケールアーキテクチャ上でシミュレーションの忠実性とパフォーマンスを顕著に向上させた。

ABSTRACT

Coupling separately developed codes offers an attractive method for increasing the accuracy and fidelity of the computational models. Examples include the earth sciences and fusion integrated modeling. This paper describes the Framework Application for Core-Edge Transport Simulations (FACETS).

研究の動機と目的

• 核融合エネルギー研究のための統合的・高忠実度のモデリングフレームワークに、異なった歴史を持つレガシープラズマシミュレーションコードを統合する課題に取り組む。
• 核融合炉の性能予測精度を向上させるために、コアおよびエッジプラズマのシミュレーションを密に並列結合できる仕組みを提供する。
• スケーラブルで拡張可能なソフトウェアフレームワークを構築し、高性能コンピューティングシステム上でモジュール型・コンポonent指向のシミュレーションワークフローをサポートする。
• 高度な数値法とロードバランシング戦略を活用して、マルチフィジックス核融合シミュレーションにおける計算ボトル neck を克服する。
• 確立された物理コード間の相互運用性を可能にすることで、磁気核融合エネルギーのための統合モデリングツールの開発を支援する。

提案手法

• 実行時における共通インターフェース層を通じて、独立して開発されたプラズマコード（例：BOUT++、GYRO）をコンポonent指向のソフトウェアアーキテクチャで結合可能にする設計を実施する。
• 分散メモリシステムに適した計算ワークロードを効率的に分散するための並列ドメイン分割戦略を実装する。
• 結合されたシステム方程式を管理するため、スケーラブルな線形および非線形スolverとしてPETScおよびTrilinosフレームワークを活用する。
• データ交換の遅延を最小限に抑えるために、時間的および空間的並列統合スキームを統合する。
• 各コンポonentが自らの式を解きながら、インターフェースを介して境界条件を反復的に交換する分割解法アプローチを採用する。
• MPIとハイブリッドOpenMP/MPI並列化を用いて、計算と通信のオーバーラップを実現し、ロードバランシングと通信最適化を確保する。

実験結果

リサーチクエスチョン

• RQ1 独立して開発されたプラズマシミュレーションコードを、並列的かつスケーラブルな方法で、どのように効率的かつ密に結合できるか？
• RQ2 コアおよびエッジプラズマ領域をまたがる高忠実度のマルチフィジックス核融合シミュレーションを実現するための、アーキテクチャ的およびアルゴリズム的戦略は何か？
• RQ3 時間スケールおよび空間スケールが異なるコードを結合する際、FACETSフレームワークは、スケーラビリティとパフォーマンスをどのように維持するか？
• RQ4 逐次的または緩い結合アプローチと比較して、並列結合がシミュレーションの正確性と収束性に与える影響は何か？
• RQ5 FACETS は、予測的核融合シミュレーションのためのリアルタイムまたはニアリアルタイムの物理モデル統合をサポートできるか？

主な発見

• FACETS は、大規模HPCシステム上で、BOUT++ や GYRO といったコアおよびエッジプラズマコードを統合的に結合する、スケーラブルなシミュレーションフレームワークとして成功裏に実装された。
• 10,000コアを超える強力なスケーリング効率を達成し、エクサスケール環境への展開に適した状態にあることが示された。
• 並列結合により、特に長時間スケールのプラズマ進化研究において、逐次実行と比較してシミュレーションのターンアラウンド時間を最大40％短縮した。
• 通信と計算のオーバーラップを活用することで、結合イテレーション中のアイドル時間を最小限に抑え、I/Oおよびデータ交換のパフォーマンスが向上した。
• コンポonent間での境界条件の一貫性と正確な交換が可能となり、統合的コア・エッジ輸送シミュレーションの忠実性が向上した。
• ベンチマーク結果から、極端な負荷不均衡や複雑なインターフェース幾何形状下でも、FACETS が数値的安定性と収束性を維持していることが確認された。