[論文レビュー] Sustainability and Reproducibility via Containerized Computing

Robert Nagler, David Bruhwiler+2 more|arXiv (Cornell University)|Sep 28, 2015

Scientific Computing and Data Management参考文献 7被引用数 4

ひとこと要約

本論文は、Docker、Vagrant、および仮想マシンを用いたコンテナ化コンピューティングを提案し、素粒子および放射線ビームシミュレーションにおける科学的ソフトウェアの持続可能性、再現性、生産性を向上させることを目的としている。コード、依存関係、設定、結果をポータブルなコンテナにパッケージ化することで、デスクトップ環境とクラウド環境の間でのシームレスな切り替えが可能となり、多様なコンピューティングプラットフォームにわたる再現性が著しく向上する。

ABSTRACT

Recent developments in the commercial open source community have catalysed the use of Linux containers for scalable deployment of web-based applications to the cloud. Scientific software can be containerized with dependencies, configuration files, post-processing tools and even simulation results, referred to as containerized computing. This new approach promises to significantly improve sustainability, productivity and reproducibility. We present our experiences, technology, and future plans for open source containerization of software used to model particle and radiation beams. Vagrant is central to our approach, using Docker for cloud deployment and VirtualBox virtual machines for deployment to Mac OS and Windows computers. Our technology enables seamless switching between the desktop and the cloud to simplify simulation development and execution.

研究の動機と目的

• 粒子および放射線ビームシミュレーションにおける科学的コンピューティングのソフトウェア再現性と持続可能性の課題に対処すること。
• Mac OS、Windows、およびクラウドプラットフォームを含む、異種のコンピューティング環境間で、複雑なシミュレーションワークフローの一貫した実行を可能にすること。
• コンテナ化により、デスクトップとクラウド実行を統一することで、開発およびデプロイの簡素化を図ること。
• すべての依存関係と設定をポータブルなコンテナに封入することで、科学的ソフトウェアの長期的保守性を向上させること。

提案手法

• Dockerを用いて、依存関係、設定ファイル、後処理ツール、シミュレーション結果を含む科学的ソフトウェアをコンテナ化すること。
• Vagrantを活用して、異なるオペレーティングシステム間でコンテナ化された環境を管理およびオ케ストレーションすること。
• Dockerを用いてクラウドインフラにコンテナをデプロイし、スケーラブルでオンデマンドの計算を実現すること。
• macOSおよびWindowsシステムの互換性を確保するため、VirtualBox仮想マシンをフォールバックとして使用すること。
• ローカル開発とクラウド実行の間をシームレスに切り替えられるワークフローを設計すること。
• 既存のシミュレーションパイプラインとコンテナ化環境を統合することで、レガシーワークフローとの互換性を維持すること。

実験結果

リサーチクエスチョン

• RQ1 コンテナ化コンピューティングは、素粒子および放射線ビームモデリングにおける科学的シミュレーションの再現性をどのように向上させるか？
• RQ2 多様なコンピューティングプラットフォームにわたる科学的ソフトウェアの持続可能なデプロイを可能にするインfraストラクチャパターンは何か？
• RQ3 コンテナ化は、科学的ワークフローにおける環境構築および依存関係管理のオーバーヘッドを削減できるか？
• RQ4 コンテナ化は、ローカル開発環境とクラウドベースの実行環境との間でのシームレスな移行をどのように支援するか？
• RQ5 コンテナ化コンピューティングは、科学的研究における長期的ソフトウェア持続可能性をどの程度向上させるか？

主な発見

• DockerおよびVagrantを用いたコンテナ化により、macOS、Windows、およびクラウド環境間でビームシミュレーションソフトウェアの実行が一貫して可能になる。
• すべての必要なソフトウェア依存関係と設定を隔離されたコンテナに封入することで、このアプローチは再現性を著しく向上させる。
• デスクトップとクラウドデプロイ環境の間をシームレスに切り替えられることで、シミュレーション開発および実行が簡素化される。
• コンテナの使用により、時間の経過とともに技術的負債や依存関係の衝突を低減できるため、ソフトウェアの持続可能性が向上する。
• 後処理ツールおよびシミュレーション結果をコンテナ内に統合することで、エンドツーエンドの再現性が保証される。
• 既存のVagrantおよびDockerワークフローとの統合を通じて、本ソリューションは科学的ソフトウェアデプロイの実用的妥当性を示している。