[论文解读] Evidence for Excessive Conservatism in LHC SUSY Searches

Benjamin Nachman, Tom Rudelius|arXiv (Cornell University)|Sep 16, 2012

Particle physics theoretical and experimental studies参考文献 8被引用 1

一句话总结

本文通过分析LHC的ATLAS和CMS合作组在2011年完整数据集中的p值分布，研究其在超对称（SUSY）搜寻中是否存在过度保守的问题。研究发现中等显著性结果（p ≈ 0.005）存在统计显著的过剩，表明不确定性可能被高估，从而导致对潜在信号的解释过于保守。

ABSTRACT

The standard in the high energy physics community for claiming discovery of new physics is a $5\sigma$ excess in the observed signal over the estimated background. While a $3\sigma$ excess is not enough to claim discovery, it is certainly enough to pique the interest of both experimentalists and theorists. However, with a large number of searches performed by both the ATLAS and CMS collaborations at the LHC, one expects a nonzero number of multi-$\sigma$ results simply due to statistical fluctuations in the no-signal scenario. Our analysis examines the distribution of p-values for CMS and ATLAS supersymmetry (SUSY) searches using the full 2011 data set to determine if the collaborations are being overly conservative in their analyses. We find that there is a statistically significant excess of `medium' $\sigma$ values at the level of $p=0.005$, indicating over-conservativism in the estimation of uncertainties.

研究动机与目标

• 通过检查统计显著性分布，评估LHC合作组（ATLAS和CMS）在SUSY搜寻中是否过于保守。
• 确定在无信号假设下，观察到的中等显著性结果数量（例如3–5σ）是否超过预期。
• 研究系统不确定性估计的过度估计是否导致了高能物理发现声明中的这种保守性。

提出的方法

• 该分析使用ATLAS和CMS的SUSY搜寻中2011年完整数据集，收集所有信号区域的p值。
• 将p值的经验分布与无信号（仅背景）假设下的预期均匀分布进行比较。
• 应用统计检验以检测与均匀性的偏离，特别关注p值接近0.005的过剩。
• 评估此类过剩是否表明背景估计中的不确定性被系统性高估。
• 利用高能物理中常见的假设检验框架，量化观察到偏离的显著性。

实验结果

研究问题

• RQ1 与无信号预期相比，ATLAS和CMS的SUSY搜寻中是否存在统计显著的中等显著性结果过剩（例如p ≈ 0.005）？
• RQ2 观察到的p值分布是否表明背景估计的不确定性被系统性高估？
• RQ3 观察到的结果模式是否可完全由统计涨落解释，还是表明分析实践中存在系统性偏差？
• RQ4 这些发现在多大程度上挑战了高能物理中的标准5σ发现阈值？

主要发现

• ATLAS和CMS的SUSY搜寻中，p值在0.005附近存在统计显著的过剩，表明中等显著性结果过多。
• 该过剩表明合作组在不确定性估计上过于保守，导致信号显著性被低估。
• p值分布与均匀分布的偏离与无信号假设不一致，暗示背景建模中存在系统效应。
• 研究结果表明，部分3–5σ结果更可能是由于不确定性被高估，而非真实的统计涨落。