[論文レビュー] Research Report CALCULATION OF FORENSIC LIKELIHOOD RATIOS: USE OF MONTE CARLO SIMULATIONS TO COMPARE THE OUTPUT OF SCORE- BASED APPROACHES WITH TRUE LIKELIHOOD-RATIO VALUES

Geoffrey Stewart Morrison|arXiv (Cornell University)|Jan 1, 2015

Anomaly Detection Techniques and Applications参考文献 42被引用数 4

ひとこと要約

この論文は、モンテカルロシミュレーションを用いて、スコアベースの法医学的尤度比手法の正確性を評価し、真の尤度比をどの程度うまく近似できるかを検証する。本研究では、類似度のみに依存するアプローチがサンプルの代表性を考慮しないため、誤った結果をもたらすのに対し、類似度と代表性の両方を統合する手法は、はるかに正確な結果をもたらすことを示している。

ABSTRACT

A group of approaches for calculating forensic likelihood ratios first calculates scores which quantify the degree of difference or the degree of similarity between pairs of samples, then converts those scores to likelihood ratios. In order for a score-based approach to produce a forensically interpretable likelihood ratio, however, in addition to accounting for the similarity of the questioned sample with respect to the known sample, it must also account for the typicality of the questioned sample with respect to the relevant population. The present paper explores a number of score-based approaches using different types of scores and different procedures for converting scores to likelihood ratios. Monte Carlo simulations are used to compare the output of these approaches to true likelihood-ratio values calculated on the basis of the distribution specified for a simulated population. The inadequacy of approaches based on similarity-only or difference-only scores is illustrated, and the relative performance of different approaches which take account of both similarity and typicality is assessed.

研究の動機と目的

• スコアベースのアプローチが法医学的尤度比をどの程度正確に推定できるかを評価すること。
• 類似度スコアや差分スコアにのみ依存する手法の欠陥を特定すること。
• 検証対象サンプルの類似度と代表性の両方を組み込んだ手法の性能を評価すること。
• シミュレートされた集団分布から導かれた真の尤度比と比較して、スコアベースの尤度比出力を評価すること。

提案手法

• 指定された集団分布に基づいて、合成された法医学的データをモンテカルロシミュレーションで生成する。
• 検証対象サンプルと既知サンプルの間の類似度または差分を測定するスコアを計算する。
• さまざまな変換手法を用いてスコアを尤度比に変換する。
• 得られた尤度比を、元の集団分布から計算された真の尤度比と比較する。
• スコアベースの出力が真の尤度比値に対してどの程度忠実であるかを評価することで、性能を検証する。
• 検証対象サンプルが集団に対してどの程度代表的であるか（代表性）を含めることの、推定精度に与える影響を分析する。

実験結果

リサーチクエスチョン

• RQ1 類似度スコアのみを用いたスコアベースの尤度比手法は、真の尤度比をどの程度正確に近似できるか？
• RQ2 スコアベースの尤度比計算から代表性を除外した場合、どのような影響が生じるか？
• RQ3 異なるスコアから尤度比への変換手法は、正確性の観点でどのように比較できるか？
• RQ4 類似度と代表性の両方を組み込むことで、尤度比推定の精度はどの程度向上するか？
• RQ5 シミュレートされた集団条件下で、どのスコアベースの手法が真の尤度比に最も近いか？

主な発見

• 類似度スコアにのみ依存するスコアベースのアプローチは、系統的なバイアスを生じさせ、真の証拠価値を正しく反映しない。
• 差分スコアにのみ依存する手法も、代表性の考慮が欠如しているため、正確な尤度比を生成できない。
• 検証対象サンプルの類似度と代表性の両方を統合する手法は、真の値にはるかに近い尤度比を生成する。
• 代表性の組み込みにより、スコアベースの尤度比の信頼性と法医学的解釈可能性が著しく向上する。
• 異なるスコアから尤度比への変換手順は性能に差を示し、代表性を考慮した場合、一部の手法で顕著な改善が見られた。
• モンテカルロシミュレーションの結果、真の尤度比を最もよく近似するのは、類似度と集団の代表性の両方をモデル化した場合であると確認された。