[论文解读] arXiv : The Dark Machines Anomaly Score Challenge: Benchmark Data and Model Independent Event Classification for the Large Hadron Collider

T. K. Aarrestad, M. Bóna+37 more|arXiv (Cornell University)|May 28, 2021

Particle physics theoretical and experimental studies参考文献 61被引用 12

一句话总结

本文引入了一个包含超过10亿个在13 TeV质心能量下模拟的LHC事例的基准数据集，以实现对新物理搜索的模型无关、无监督异常检测。该研究评估了多种异常检测与密度估计算法，建立了性能基线，并为未来LHC Run 3分析提供了标准化、公开可用框架下的实用见解。

ABSTRACT

We describe the outcome of a data challenge conducted as part of the Dark Machines Initiative and the Les Houches 2019 workshop on Physics at TeV colliders. The challenged aims at detecting signals of new physics at the LHC using unsupervised machine learning algorithms. First, we propose how an anomaly score could be implemented to define model-independent signal regions in LHC searches. We define and describe a large benchmark dataset, consisting of >1 Billion simulated LHC events corresponding to $10~ m{fb}^{-1}$ of proton-proton collisions at a center-of-mass energy of 13 TeV. We then review a wide range of anomaly detection and density estimation algorithms, developed in the context of the data challenge, and we measure their performance in a set of realistic analysis environments. We draw a number of useful conclusions that will aid the development of unsupervised new physics searches during the third run of the LHC, and provide our benchmark dataset for future studies at this https URL. Code to reproduce the analysis is provided at this https URL.

研究动机与目标

• 开发一种模型无关的方法，利用异常评分来定义LHC搜索中的信号区域。
• 创建一个大规模、真实的基准数据集，模拟10 fb⁻¹的13 TeV质子-质子碰撞。
• 评估多种无监督机器学习算法在无先验信号模型的情况下检测新物理信号的性能。
• 为未来LHC的无监督新物理搜索提供一个标准化、可复现的框架。
• 通过提供关于算法选择与实现的关键见解，支持LHC进入Run 3阶段的过渡。

提出的方法

• 使用多种无监督机器学习算法计算异常评分，以识别高维LHC事例数据中的稀有或异常事件模式。
• 生成了一个大规模基准数据集，包含超过10亿个模拟的LHC事例，代表10 fb⁻¹的13 TeV质子-质子碰撞。
• 该数据集包含标准模型背景以及多种新物理信号模型，用于测试检测性能。
• 在真实的分析环境中评估了广泛的异常检测与密度估计算法，以比较其信号敏感度与鲁棒性。
• 使用标准指标（如固定背景拒绝率下的信号效率）衡量性能，实现跨算法比较。
• 整个分析流程（包括数据生成与评估）均以可复现的代码实现，并公开发布。

实验结果

研究问题

• RQ1 在缺乏对信号模型先验知识的情况下，无监督异常检测算法在识别新物理信号方面的有效性如何？
• RQ2 在真实的LHC分析环境中，不同异常检测与密度估计方法的相对优势与劣势是什么？
• RQ3 随着数据集规模与复杂度的增加，异常检测算法的性能如何变化？
• RQ4 在LHC级别事例分类中，哪些关键设计选择与超参数对算法性能影响最大？
• RQ5 如何通过标准化、模型无关的基准数据集提升无监督新物理搜索的可复现性与进展？

主要发现

• 超过10亿个模拟LHC事例的基准数据集为测试无监督异常检测算法提供了可扩展且真实的基底。
• 多种无监督算法实现了具有竞争力的信号检测性能，部分甚至接近或达到传统模型特定搜索策略的水平。
• 异常检测性能在不同算法间存在显著差异，部分算法在高维事例特征与复杂背景下表现出更强的鲁棒性。
• 本研究识别出对算法敏感度与可复现性具有关键影响的关键超参数与实现选择。
• 标准化、公开发布的数据集与代码使得新无监督搜索方法的直接比较与加速开发成为可能。
• 研究结果为在LHC的Run 3及以后阶段实施无监督新物理搜索提供了切实可行的指导。