[論文レビュー] arXiv : The Dark Machines Anomaly Score Challenge: Benchmark Data and Model Independent Event Classification for the Large Hadron Collider

T. K. Aarrestad, M. Bóna+37 more|arXiv (Cornell University)|May 28, 2021

Particle physics theoretical and experimental studies参考文献 61被引用数 12

ひとこと要約

本論文は、13 TeVの中心系エネルギー下でのLHCイベントを10億件以上シミュレートしたベンチマークデータセットを紹介し、新物理探索におけるモデルに依存しない教師なし異常検出を可能にする。さまざまな異常検出および密度推定アルゴリズムの評価を通じて、将来のLHC Run 3分析に向けたパフォーマンスのベースラインと実用的知見を確立する。標準化され、公開可能なフレームワークを用いる。

ABSTRACT

We describe the outcome of a data challenge conducted as part of the Dark Machines Initiative and the Les Houches 2019 workshop on Physics at TeV colliders. The challenged aims at detecting signals of new physics at the LHC using unsupervised machine learning algorithms. First, we propose how an anomaly score could be implemented to define model-independent signal regions in LHC searches. We define and describe a large benchmark dataset, consisting of >1 Billion simulated LHC events corresponding to $10~ m{fb}^{-1}$ of proton-proton collisions at a center-of-mass energy of 13 TeV. We then review a wide range of anomaly detection and density estimation algorithms, developed in the context of the data challenge, and we measure their performance in a set of realistic analysis environments. We draw a number of useful conclusions that will aid the development of unsupervised new physics searches during the third run of the LHC, and provide our benchmark dataset for future studies at this https URL. Code to reproduce the analysis is provided at this https URL.

研究の動機と目的

• 異常スコアを用いた信号領域の定義におけるモデルに依存しないアプローチの開発。
• 13 TeVの陽子-陽子衝突における10 fb⁻¹分に相当する大規模かつ現実的なベンチマークデータセットの構築。
• 事前信号モデルが存在しない状況でも、さまざまな教師なし機械学習アルゴリズムが新物理信号を検出する性能の評価。
• 将来のLHCにおける教師なし新物理探索のための標準化され、再現可能なフレームワークの提供。
• LHCのRun 3への移行を支援するため、アルゴリズム選定および実装に関する実用的知見の提供。

提案手法

• 高次元のLHCイベントデータにおけるレアまたは予期しないイベントパターンを特定するために、多様な教師なし機械学習アルゴリズムを用いて異常スコアを計算する。
• 10 fb⁻¹分に相当する10億件を超えるシミュレートLHCイベントからなる大規模なベンチマークデータセットを生成する。
• 検出性能のテストのために、標準模型背景および多様な新物理信号モデルを含む。
• 実際の分析環境で、広範な異常検出および密度推定アルゴリズムを評価し、その信号感度とロバストネスを比較する。
• 信号の固定バックグラウンド拒否率における効率といった標準的な指標を用いて性能を測定し、アルゴリズム間の比較を可能にする。
• データ生成および評価を含む分析パイプライン全体を再現可能コードとして実装し、公開する。

実験結果

リサーチクエスチョン

• RQ1 事前信号モデルの知識が欠如する状況でも、教師なし異常検出アルゴリズムは新物理信号をどれほど効果的に特定できるか？
• RQ2 実際のLHC分析環境において、異なる異常検出および密度推定手法の相対的な長所と短所は何か？
• RQ3 データセットのサイズと複雑さの増大に伴い、異常検出アルゴリズムの性能はどのように変化するか？
• RQ4 LHCレベルのイベント分類において、アルゴリズムの性能に最も顕著に影響を与える主な設計選択とハイパーパrameterは何か？
• RQ5 標準化され、モデルに依存しないベンチマークデータセットの提供は、教師なし新物理探索における再現可能性と進展をどのように改善できるか？

主な発見

• 10億件を超えるシミュレートLHCイベントからなるベンチマークデータセットは、教師なし異常検出アルゴリズムのテストにスケーラブルで現実的な基盤を提供する。
• いくつかの教師なしアルゴリズムが競争力のある信号検出性能を達成しており、一部の手法は従来の信号モデルに特化した探索戦略と同等またはそれ以上の性能を示している。
• 異常検出性能はアルゴリズムによって顕著に異なるが、一部の手法は高次元のイベント特徴や背景の複雑さに対してロバストであることが判明した。
• 本研究では、アルゴリズムの感度と再現可能性に顕著に影響を与える重要なハイパーパrameterおよび実装選択が同定された。
• 標準化され、公開済みのデータセットおよびコードの可用性により、新しい教師なし探索手法の直接比較と迅速な開発が可能になった。
• 本研究の結果は、LHCのRun 3以降における教師なし新物理探索の実装に向けた実用的ガイダンスを提供する。