[論文レビュー] Binomial and ratio-of-Poisson-means frequentist confidence intervals applied to the error evaluation of cut efficiencies

G. Ranucci|ArXiv.org|Jan 30, 2009

Probabilistic and Robust Engineering Design参考文献 14被引用数 3

ひとこと要約

本論文は、二項確率の信頼区間およびポアソン平均の比の信頼区間について、尤度比に基づく頻度的信頼区間を提案し、Clopper-Pearson法などの標準的手法と比較して、より良好なカバレッジと短い区間長を実現する。素粒子物理学におけるバックグラウンドフリーな信号ウィンドウでのカット効率誤差評価に応用され、より正確な不確実性推定を提供する。尤度比順序付けに注力することで、統計的性能が向上する。

ABSTRACT

The evaluation of the error to be attributed to cut efficiencies is a common question in the practice of experimental particle physics. Specifically, the need to evaluate the efficiency of the cuts for background removal, when they are tested in a signal-free-background-only energy window, originates a statistical problem which finds its natural framework in the ample family of solutions for two classical, and closely related, questions, i.e. the determination of confidence intervals for the parameter of a binomial proportion and for the ratio of Poisson means. In this paper the problem is first addressed from the traditional perspective, and afterwards naturally evolved towards the introduction of non standard confidence intervals both for the binomial and Poisson cases; in particular, special emphasis is given to the intervals obtained through the application of the likelihood ratio ordering to the traditional Neyman prescription for the confidence limits determination. Due to their attractiveness in term of reduced length and of coverage properties, the new intervals are well suited as interesting alternative to the standard Clopper-Pearson PDG intervals.

研究の動機と目的

• 背景抑制に用いられるカット効率の誤差を推定する統計的課題に対処すること。
• 信号なしのバックグラウンドオンリーなエネルギー領域において、二項確率およびポアソン平均の比に対する従来の信頼区間手法の性能を評価すること。
• 標準的手法とは異なり、尤度比順序付けに基づく非標準的信頼区間を導入・分析すること。
• 尤度比に基づく区間が、Clopper-Pearson法などの従来手法と比較して優れたカバレッジ特性と短い区間長を示すことを示すこと。
• バックグラウンドオンリーなキャリブレーションが用いられる実験的素粒子物理学における誤差評価のための実用的で統計的に堅牢なフレームワークを提供すること。

提案手法

• 尤度比順序付けを用いて、最も関連性の高い標本分布を選択するように変更したネイマンの信頼区間構築法を適用する。
• 尤度比検定統計量を用いて二項確率の信頼区間を導出し、標準的手法のClopper-Pearson法に代わるものとする。
• 独立な二つのポアソン平均の比に、尤度比順序付け法を拡張し、バックグラウンドフリー領域における効率計算に適応する。
• 数値的および図的分析を用いて、提案された区間のカバレッジ確率と平均長を標準手法と比較する。
• シミュレーションと理論的分析を用いて、新しい区間の改善された統計的性質を検証する。
• 特に、信号が存在せずバックグラウンドのみが観測される状況における実用的応用に焦点を当てる。

実験結果

リサーチクエスチョン

• RQ1 尤度比に基づく二項確率の信頼区間は、標準的手法のClopper-Pearson区間と比較して、カバレッジと区間長の点でどのように異なるか？
• RQ2 バックグラウンドオンリーなキャリブレーション領域における二つのポアソン平均の比に対して、尤度比順序付けされた区間の性能はいかがなものか？
• RQ3 尤度比順序付けは、素粒子物理学実験におけるカット効率の誤差推定の正確性と精度を向上させることができるか？
• RQ4 実際のカバレッジ確率は、名目上の信頼水準と比較して、新しい区間ではどのように推移するか？
• RQ5 これらの改善された区間が、従来手法に比して意味的な利点を示す、素粒子物理学データ解析のどのような実用的状況に適しているか？

主な発見

• 尤度比に基づく二項確率の信頼区間は、標準的手法のClopper-Pearson区間と比較して、より良好なカバレッジ特性と短い平均区間長を示す。
• ポアソン平均の比に関しては、尤度比順序付けされた区間が、従来手法と比較して精度が向上し、幅が短くなった。
• シミュレーションにおいて、提案された区間は名目上の信頼水準を維持または上回るカバレッジを示しており、信頼性のあるカバレッジを示している。
• 特に、バックグラウンドオンリーなキャリブレーションウィンドウで一般的な低統計的状態において、本手法は顕著に有効である。
• 信号が存在せず、バックグラウンドカウントのみが利用可能なカット効率測定の誤差評価に、本手法は適している。
• 広く用いられているPDG推奨のClopper-Pearson区間に対する統計的に根拠のある代替手法を提供する。