[论文解读] Comment on: "Low significance of evidence for black hole echoes in gravitational wave data"

Jahed Abedi, Hannah Dykaar+1 more|arXiv (Cornell University)|Mar 22, 2018

Pulsars and Gravitational Waves Research被引用 12

一句话总结

本文回应了对作者先前在LIGO引力波数据中发现黑洞回声的初步证据的批评，主张Westerweck等人重新分析的结果实际上证实了作者原始的p值约1-2%，该值具有统计显著性且与噪声不一致。作者断言，重新分析的结论称该证据‘完全与噪声一致’，这与其自身发现相矛盾，因为p值为0.02被广泛视为对原假设的中等至强证据。

ABSTRACT

In a recent publication (1612.00266), we demonstrated that the events in the first observing run of the Advanced LIGO gravitational wave observatory (aLIGO O1) showed tentative evidence for repeating "echoes from the abyss" caused by Planck-scale structure near black hole horizons. By considering a phenomenological echo model, we showed that the pure noise hypothesis is disfavored with a p-value of 1%, i.e. higher amplitude for echoes than those in aLIGO O1 events are only recovered in 1% of random noise realizations. A recent preprint by Westerweck, et al. (1712.09966) provides a careful re-evaluation of our analysis which claims "a reduced statistical significance ... entirely consistent with noise". It is a mystery to us why the authors make such a statement, while they also find a p-value of 2 $\\pm$ 1% (given the Poisson error in their estimate) for the same model and dataset. This is p-erfectly consistent with our results, which would be commonly considered as disfavoring the null hypothesis, or "moderate to significant" evidence for "echoes". Westerweck, et al. also point to diversity of the observed echo properties as evidence for statistical fluke, but such a diversity is neither unique nor surprising for complex physical phenomena in nature.

研究动机与目标

• 挑战Westerweck等人得出的结论，即黑洞回声证据‘完全与噪声一致’，尽管他们自身得到的p值为2%。
• 阐明即使考虑泊松误差，p值0.02仍具有统计显著性，不支持原假设。
• 主张观测到的回声信号多样性及最佳拟合参数并不削弱统计显著性，因为这在复杂物理系统中是可预期的。
• 强调Westerweck等人报告的p值估计值0.020 ± 0.009与作者原始的0.011一致，表明显著性未降低。
• 指出Westerweck等人使用简单先验导致对回声信号的不正当否定，尽管已有统计证据支持。

提出的方法

• 使用Abedi等人（2017a）提出的现象学回声模型，对同一组引力波数据（aLIGO O1）进行重新分析，重点关注回声周期Δt_echo ∝ M_BH ln(M_BH / M_planck)。
• 通过信噪比（SNR）最大化方法，在多个黑洞并合事件中检测回声候选信号，包括GW150914和LVT151012。
• 通过蒙特卡洛背景模拟估算原假设（纯噪声）的p值，将观测到的回声振幅与噪声实现进行比较。
• 对Westerweck等人报告的0.020 p值引入泊松误差估计（±0.009），表明其与原始p值0.011一致。
• 使用统计显著性作为主要指标，评估回声信号特性（如回声振幅、衰减因子γ、事件间时间一致性）。
• 批评认为噪声中具有γ ≈ 1的类似回声特征会削弱回声假说的假设，指出此类衰减在理论上是回声模型所预期的。

实验结果

研究问题

• RQ1 Westerweck等人报告的噪声原假设p值为0.02，是否真的与噪声一致，依据标准统计阈值？
• RQ2 为何Westerweck等人在自身p值为0.02的情况下，仍得出证据‘完全与噪声一致’的结论，而该p值被广泛视为对原假设的中等至强证据？
• RQ3 观测到的回声信号特性（如振幅、时间、γ）在不同事件中的多样性是否否定了回声信号的统计显著性？
• RQ4 LVT151012的回声振幅高于GW150914是否可由方法学偏差（如更宽的参数空间搜索）解释，而非真实物理信号？
• RQ5 Westerweck等人使用简单先验处理回声信号是否合理，尽管这导致其否定了一个具有统计显著性的信号？

主要发现

• Westerweck等人报告的p值0.020 ± 0.009与Abedi等人原始的p值0.011在统计上一致，表明显著性未降低。
• p值0.02被广泛视为对纯噪声原假设的中等至强证据，与‘完全与噪声一致’的结论相矛盾。
• LVT151012对回声信号有显著贡献并非本质问题，因为回声振幅可因初始条件和系统参数而剧烈变化。
• 观测到的回声衰减因子γ ≈ 0.9并非反对回声的证据，因为γ ≈ 1的幂律衰减在理论上是预期的，且在噪声中亦可观察到。
• 更嘈杂事件的背景SNR水平更高，即使信号较弱，也可能导致更大的恢复振幅，从而解释振幅估计值的差异。
• 认为回声信号可能污染背景样本的说法在逻辑上不一致，因为p值检验正是为评估噪声能否模拟出回声而设计的。