[論文レビュー] Snowmass Computing Frontier: Computing for the Cosmic Frontier, Astrophysics, and Cosmology

Andrew J. Connolly, Salman Habib+15 more|arXiv (Cornell University)|Nov 12, 2013

Relativity and Gravitational Theory参考文献 1被引用数 4

ひとこと要約

この論文は、次世代の調査とシミュレーションから生じるエクサバイト規模のデータに伴い、ダークエネルギー、ダークマター、および素性物理学を含むコズミックフロンティア科学における計算要求の増大を概説している。研究者による持続可能なソフトウェア開発、コミュニティ全体でのコード検証、およびデータ集約型科学を支える新たなキャリアパスの推進を提唱し、将来的な発見のためのソフトウェアを「必須の装置」と位置づけている。

ABSTRACT

This document presents (off-line) computing requrements and challenges for Cosmic Frontier science, covering the areas of data management, analysis, and simulations. We invite contributions to extend the range of covered topics and to enhance the current descriptions.

研究の動機と目的

• 次世代コズミックフロンティア実験が直面する急増する計算およびデータ管理の課題に対処すること。
• 複数の共同研究グループにまたがる大規模データ分析およびシミュレーションを支援するための持続可能で再利用可能なソフトウェアフレームワークの必要性を特定すること。
• 信頼性を確保しエラーを低減するために、コミュニティ全体でのソフトウェア検証、テスト、および相互比較戦略を提言すること。
• 現在の学術的トレーニングと、将来の物理学研究に求められる計算スキルの間の乖離を浮き彫りにすること。
• 大学および国立研究所における計算物理学研究者を支援するための長期的キャリアパスと制度的支援を提唱すること。

提案手法

• 2035年までのコズミックフロンティア実験およびシミュレーションの将来のデータおよび計算要件を予測し、ストレージとして最大100～1500PB、CPUコアとして1億以上を想定する。
• DES、BOSS、LSST、ニュートリノ検出器を含む主な実験における現在のデータパイプラインおよびシミュレーションワークフローを分析する。
• バージョン管理、自動テスト、継続的統合を含むソフトウェア工学のベストプラクティスを科学的ソフトウェアに採用するよう促進する。
• 重要な分析コードの相互検証を支援する公開で長期的なソフトウェアテスト施設およびレジストリの構築を提言する。
• 異なる実験や共同研究にまたがって再利用可能な、共有型でモジュラーなソフトウェアツールの開発を奨励する。
• 系統的誤差を低減するために、コミュニティ主導の「盲検査」およびベンチマーク作業を実施するよう呼びかける。

実験結果

リサーチクエスチョン

• RQ1 今後20年間で、コズミックフロンティア実験におけるデータ量と計算ワークロードはどのように拡大するか？
• RQ2 大規模天体物理学データの信頼性、再現性、スケーラビリティのある分析を確保するうえで、主なソフトウェアおよびデータ管理の課題は何か？
• RQ3 多様な実験において、シミュレーションおよび分析ソフトウェアの強度と再利用可能性をどのように向上できるか？
• RQ4 物理学とデータサイエンスの交差点で次世代の計算物理学研究者を支援するために、どのような制度的およびキャリア構造が必要か？
• RQ5 コミュニティ全体でのテストおよび検証フレームワークは、高影響力の天体物理学的結果における誤差低減と信頼性向上にどのような役割を果たせるか？

主な発見

• 2035年までに、コズミックフロンティア実験は最大1エクサバイトのデータを生成すると予想され、2013年と比べてデータレートが100～1000倍に増加する。
• 2030年までに、シミュレーションは1エクサバイト以上のストレージと年間10億以上のCPU時間が必要とされ、ピーク時の計算ニーズは10億コアを超える見込みである。
• 実験間で独立して開発が進められる分析およびシミュレーションソフトウェアは、重複、非効率性、エラーのリスク増加を引き起こしている。
• 標準的で持続可能なソフトウェアインfraが不足しているため、技術的負債が蓄積され、高影響力の分析における再現性が低下している。
• 将来の研究に求められる計算スキルと、伝統的な物理学教育におけるトレーニングおよびキャリアパスの間に、顕著なギャップが生じている。
• 本論文は、ソフトウェア工学の実践、共有コードベース、コミュニティテスト施設への長期的投資の必要性を明確にしている。