[论文解读] DEUS Full Observable ΛCDM Universe Simulation: the numerical challenge

Jean‐Michel Alimi, Vincent Bouillot+7 more|arXiv (Cornell University)|Jun 13, 2012

Galaxies: Formation, Evolution, Phenomena参考文献 5被引用 28

一句话总结

本文在ΛCDM模型下首次实现了全可观测宇宙的N体模拟，利用CURIE超算机在950亿光年的区域内模拟了5500亿个粒子。该模拟实现了前所未有的分辨率和动态范围，揭示了重子声波振荡的印记，并检测到1.44亿个质量超过10¹⁴ M⊙的晕，其中最重的晕质量达到1500万亿M⊙，为暗能量与大尺度结构研究提供了关键洞见。

ABSTRACT

We have performed the first-ever numerical N- body simulation of the full observable universe (DEUS "Dark Energy Universe Simulation" FUR "Full Universe Run"). This has evolved 550 billion particles on an Adaptive Mesh Refinement grid with more than two trillion computing points along the entire evolutionary history of the universe and across 6 order of magnitudes length scales, from the size of the Milky Way to that of the whole observable universe. To date, this is the largest and most advanced cosmological simulation ever run. It provides unique information on the formation and evolution of the largest structure in the universe and an exceptional support to future observational programs dedicated to mapping the distribution of matter and galaxies in the universe. The simulation has run on 4752 (of 5040) thin nodes of BULL supercomputer CURIE, using more than 300 TB of memory for 10 million hours of computing time. About 50 PBytes of data were generated throughout the run. Using an advanced and innovative reduction workflow the amount of useful stored data has been reduced to 500 TBytes.

研究动机与目标

• 在ΛCDM模型下模拟整个可观测宇宙，覆盖从银河系到宇宙视界的六数量级尺度范围。
• 应对在极端动态范围和粒子数量下模拟大尺度结构形成的数值挑战。
• 提供具有足够体积和分辨率的宇宙学模拟，以最小化宇宙方差，并支持未来的观测计划。
• 通过追踪从早期宇宙到现今的暗物质演化，检验暗能量对结构形成的影响。

提出的方法

• 采用RAMSES自适应网格加密（AMR）代码，使用950亿光年的计算盒子和5500亿个粒子。
• 在CURIE超算机（4752个节点）上运行模拟，配备300 TB内存和1000万CPU小时计算资源。
• 应用自定义数据压缩处理流水线，使用PFOF-Multi将小文件合并为大文件（>10 GB），以提升I/O效率和备份能力。
• 实施多阶段数据处理工作流，包括通过“朋友-朋友”（FoF）算法进行晕检测和功率谱计算。
• 采用Peano-Hilbert曲线实现空间分解与MPI任务间的负载均衡。
• 通过POWERGRID-DEUS应用验证结果，并将功率谱与理论预期进行交叉比对。

实验结果

研究问题

• RQ1 在ΛCDM模型下，从大爆炸至今，暗物质在全宇宙范围内的分布如何演化？
• RQ2 在暗能量存在下，大尺度上的暗物质晕质量函数是否偏离普遍性？
• RQ3 重子声波振荡（BAO）在宇宙时间跨度上对物质功率谱的印记能被多精确地呈现？
• RQ4 可观测宇宙中最重的暗物质晕的形成历史是怎样的？
• RQ5 能否通过大规模模拟在红移空间中准确重构全天空三维暗物质分布？

主要发现

• 模拟检测到1.44亿个质量超过10¹⁴ M⊙的暗物质晕，为宇宙学推断提供了宇宙方差受限的样本。
• 当今可观测宇宙中最重的晕质量达到1500万亿M⊙，是通过分层并合形成的。
• 首个质量≥10¹⁴ M⊙的晕在宇宙年龄仅为20亿年时即已形成。
• 物质功率谱清晰揭示了重子声波振荡的印记，精度前所未有，且在小尺度上显示出非线性形变。
• 该模拟首次生成了从CMB到现今宇宙的全天空三维暗物质分布图，存在于红移空间中。
• 数据压缩处理流水线将50 PBytes原始输出压缩至500 TB可用数据，实现了高效存储与分析。