[論文レビュー] Use of Docker for deployment and testing of astronomy software

D. Morris, S. Voutsinas+2 more|Edinburgh Research Explorer|Jul 11, 2017

Distributed and Parallel Computing Systems参考文献 1被引用数 4

ひとこと要約

本論文は、天文学ソフトウェアのデプロイとテストのためのコンテナ化ソリューションとしてDockerの有効性を評価し、2つのプロジェクトを通じて再現性、ポータビリティ、依存関係管理の簡素化の利点を示している。主な貢献は、一貫性があり隔離された環境を構築することで、天文学分野における共同作業の促進と科学的ソフトウェアデプロイの合理化を可能にするDockerの有効性を示したことにある。

ABSTRACT

We describe preliminary investigations of using Docker for the deployment and testing of astronomy software. Docker is a relatively new containerisation technology that is developing rapidly and being adopted across a range of domains. It is based upon virtualization at operating system level, which presents many advantages in comparison to the more traditional hardware virtualization that underpins most cloud computing infrastructure today. A particular strength of Docker is its simple format for describing and managing software containers, which has benefits for software developers, system administrators and end users. We report on our experiences from two projects -- a simple activity to demonstrate how Docker works, and a more elaborate set of services that demonstrates more of its capabilities and what they can achieve within an astronomical context -- and include an account of how we solved problems through interaction with Docker's very active open source development community, which is currently the key to the most effective use of this rapidly-changing technology.

研究の動機と目的

• 複雑なマルチコンponentシステムにおける天文学ソフトウェアのデプロイおよびテストに、Dockerが実用的であるかを評価すること。
• 天文学データセンターにおける異なるコンピューティング環境間でのソフトウェアポータビリティおよび環境の一貫性の課題を解決すること。
• Dockerが再現可能な科学と開発者およびシステム管理者間のスムーズな共同作業をどのように支援するかを評価すること。
• 天文学プロジェクトにおける実際のデプロイから得た実務的経験と解決策を文書化すること。
• コミュニティ主導の開発が科学計算分野におけるコンテナ技術の進化に果たす重要性を強調すること。

提案手法

• 異なる環境間で一貫したデプロイを実現するため、Webサービスやアプリケーションスタックを含むソフトウェアコンponentをDockerコンテナにカプセル化すること。
• 公式およびカスタムのDockerイメージを活用し、特に標準OSディストリビューションやTomcatのようなアプリケーション固有のイメージを基盤とすること。
• Docker Composeを用いて、データベース、Webサーバー、APIなどの複数のサービスを1つの環境に統合・連携させること。
• Dockerfileを用いてカスタムコンテナのビルドプロセスを定義・自動化し、再現性を確保すること。
• 継続的インテグレーションおよびテストワークフローにDockerを統合し、開発環境と本番環境の一貫性を標準化すること。
• Dockerのオープンソースコミュニティと連携し、新たな課題を解決するとともに、コンテナ技術の進化に貢献すること。

実験結果

リサーチクエスチョン

• RQ1 Dockerは、天文学ソフトウェアのデプロイにおける再現性とポータビリティをどのように向上させることができるか？
• RQ2 天文学分野の科学的ソフトウェアにDockerを適用する際の実際の課題は何か。それらはどのように軽減できるか？
• RQ3 Dockerは、開発者とシステム管理者間での共同作業および環境の一貫性をどの程度向上させるか？
• RQ4 天文学ワークロードにおいて、従来の仮想マシンベースのソリューションと比較して、Dockerのパフォーマンスおよび保守性はどのように異なるか？
• RQ5 コミュニティ参加は、科学計算分野におけるDockerのようなコンテナ技術の効果的な採用と進化に、どのような役割を果たすか？

主な発見

• Dockerは環境の一貫性を顕著に向上させ、セットアップの複雑さを軽減し、開発、テスト、本番環境でソフトウェアが同一に動作することを保証した。
• Dockerfileおよびコンテナイメージの使用により、天文学ソフトウェアスタックの信頼性の高い繰り返し可能なビルドが可能になり、依存関係管理が簡素化された。
• Dockerによるコンテナ化により、開発者がDockerイメージまたはDockerfileを共有するだけで、同じランタイム環境を保証できるようになり、共同作業が促進された。
• ネットワーク設定やボリュームマウントなどの問題は、Dockerコミュニティとの積極的な連携を通じて解決された。これは、急速に進化する技術分野においてコミュニティ支援の重要性を示している。
• これらのプロジェクトは、VO準拠のデータアクセスサービスを含む、複雑なマルチサービス天文学アプリケーションのデプロイにDockerが適していることを実証した。保守性およびスケーラビリティが向上した。
• 著者らは、再現可能な科学と効率的なシステムデプロイを強力に支援する点から、Dockerおよび類似するコンテナ技術が天文学分野で広範な採用が進むと予想している。