[論文レビュー] OpenMosix approach to build scalable HPC farms with an easy management infrastructure

R. Esposito, P. Mastroserio+2 more|ArXiv.org|May 26, 2003

Distributed and Parallel Computing Systems被引用数 5

ひとこと要約

本論文では、高エネルギー物理学（HEP）環境における高性能コンピューティング（HPC）クラスタを構築するスケーラブルでメンテナンスが少ないソリューションとしてOpenMosixを提示している。ディスクレスノードとネットワークブートを活用することで、効率的な負荷分散と自動プロセス移行を実現し、最小限の管理負担でシステム性能を顕著に向上させている。

ABSTRACT

The OpenMosix approach is a good solution to build powerful and scalable computing farms. Furthermore an easy management infrastructure is implemented using diskless nodes and network boot procedures. In HENP environment, the choice of OpenMosix has been proven to be an optimal solution to give a general performance boost on implemented systems thanks to its load balancing and process migration features. In this poster we give an overview of the activities, carried out by our computing center, concerning the installation, management, monitoring, and usage of HPC Linux clusters running OpenMosix.

研究の動機と目的

• 最小限の管理負担で大規模HPCクラスタを高エネルギー物理学（HEP）環境で管理する課題に対処すること。
• 動的ワークロード下でも高いパフォーマンスを維持できるスケーラブルなHPCインfraを構築すること。
• ディスクレスノードとネットワークブート手順を活用した簡単な管理ソリューションを実装し、システムの複雑さを低減すること。
• OpenMosixが実世界のHEPコンピューティング環境におけるパフォーマンスと管理性の有効性を評価すること。
• 生産環境のHPCクラスタで負荷分散とプロセス移行にOpenMosixを適用する可能性を実証すること。

提案手法

• ローカルストレージを排除し、ネットワーク経由でブートするディスクレスノードを用いたLinuxクラスタの展開により、保守を簡素化する。
• OpenMosixの組み込み負荷分散機能を活用し、利用可能なノード間で計算ワークロードを動的に分散する。
• システム負荷のバランスをとるために、ノード間でのプロセスの透過的移行を可能にする。
• クラスタの運用とパフォーマンスを監視するための集中型モニタリングおよび管理ツールを実装する。
• 実時間でのデータ処理と分析を支援できるように、既存のHEPコンピューティングワークフローにクラスタを統合する。
• 信頼性の高い自動ノードブートを実現するため、標準的なネットワークプロトコルとPXE（Preboot Execution Environment）を活用する。

実験結果

リサーチクエスチョン

• RQ1 OpenMosixは、高エネルギー物理学の生産環境HPC環境で、効果的な負荷分散とプロセス移行を提供できるか？
• RQ2 ディスクレスノードとネットワークブートの使用が、システムのスケーラビリティと管理負担にどのような影響を与えるか？
• RQ3 OpenMosixは、HEPコンピューティングワークロードにおいて、全体的なシステムパフォーマンスをどの程度向上させるか？
• RQ4 実際のHEPコンピューティングセンターへのOpenMosixの導入には、どのような実用的課題と利点があるか？
• RQ5 導入のしやすさと保守性の観点から、従来のHPCクラスタ管理と比較してOpenMosixはどのように異なるか？

主な発見

• ディスクレスノードとネットワークブートの活用により、OpenMosixは最小限の管理負担でスケーラブルなHPCクラスタを構築可能であった。
• ノード間での自動負荷分散と動的プロセス移行により、システムは顕著なパフォーマンス向上を達成した。
• 管理インfraが簡素化され、従来のディスクベースクラスタと比較してハードウェアおよび保守コストが削減された。
• 実際のHEPコンピューティングワークロードにおいて、クラスタは頑健なパフォーマンスを示し、OpenMosixがHEP環境向けの実用的ソリューションであることが検証された。
• 導入は計算センターのワークフローに成功裏に統合され、継続的なデータ処理タスクをサポートした。
• バッチ処理およびインタラクティブワークロードの両方に対して、ソリューションは効果的であったことが示され、多様なHEPコンピューティングニーズへの適応力が確認された。