[論文レビュー] Responses to Critiques on Machine Learning of Criminality Perceptions (Addendum of arXiv:1611.04135)

Xiaolin Wu, Xi Zhang|arXiv (Cornell University)|Nov 13, 2016

Crime Patterns and Interventions参考文献 33被引用数 36

ひとこと要約

この論文は、顔画像から犯罪性を予測する深層学習の研究に対する広範な批判に応えるものである。研究の目的は純粋に学術的であり、機械学習が人間の顔に対する社会的認識を再現できるかを検証することにあり、法執行機関の利用や優生学の推進を目的としたものではない。高い報告精度（89％の真正陽性率）にもかかわらず、ベイズ解析により、陽性予測が下された場合の実際の犯罪性の確率は、低ベースレートのためわずか4.39％にとどまることを示しており、マスコミ報道におけるベースレートの誤謬の危険性を強調している。

ABSTRACT

In November 2016 we submitted to arXiv our paper "Automated Inference on Criminality Using Face Images". It generated a great deal of discussions in the Internet and some media outlets. Our work is only intended for pure academic discussions; how it has become a media consumption is a total surprise to us. Although in agreement with our critics on the need and importance of policing AI research for the general good of the society, we are deeply baffled by the ways some of them mispresented our work, in particular the motive and objective of our research.

研究の動機と目的

• 機械学習が、犯罪性などといった特徴を含む顔に対する人間の社会的認識を再現できるかどうかを調査すること。
• 顔の特徴と社会的行動の間に相関があるという仮説を検証し、犯罪性を対照的で明確なテストケースとして用いること。
• 本研究が実世界への導入を意図したものではなく、人種的・社会的バイアスを助長するものでもないことを明確にすること。
• 本研究を科学的に人種的差別的とみなす、あるいは監視ツールであると誤解するマスコミ報道を是正すること。
• ベースレートを考慮した場合のAIモデルの性能解釈において、きめ細やかな統計的推論の重要性を強調すること。

提案手法

• 著者らは、2000枚の中国男性の身分証明写真のデータセットを用い、裁判の有罪判決に基づいて犯罪者または非犯罪者としてラベル付けされた。
• 顔の特徴点をアフィン変換によりアライメントすることで、変動を低減し、モデルの一般化性能を向上させた。
• 標準的な指標を用いてモデルを評価した。特に真正陽性率（89％）と偽陽性率（7％）を算出した。
• ベイズ推論を用いて、陽性予測が下された場合の犯罪性の事後確率を計算した。その式は以下の通りである：P(C|+) = [P(+|C)P(C)] / [P(+|C)P(C) + P(+|N)(1−P(C))]。
• 過学習の有無をテストするため、データセットをランダムに再ラベル付けし、どの分類器も偶然より優れた分離性能を示さなかった。これは、訓練データに対して過学習が生じていないことを示している。
• 顔の表情や画像アーチファクト（例：圧縮ノイズ）の影響を制御することで、表面的なパターン学習を防いだ。

実験結果

リサーチクエスチョン

• RQ1 機械学習モデルは、犯罪性のような社会的認識（例：犯罪性）と顔の特徴の間の相関を検出できるか？
• RQ2 深層学習モデルは、顔の外見に基づく人間の第一印象をどの程度再現できるか？
• RQ3 犯罪性のベースレートが低いことを考慮した場合、このようなモデルの実際の予測能力はどの程度か？
• RQ4 顔の認識における文化的な違いが、モデル出力の解釈にどのように影響するか？
• RQ5 モデルの結果は、データバイアスや過学習の影響によるものであり、本質的な相関関係によるものではない可能性はどの程度か？

主な発見

• CNN分類器は、中国男性の身分証明写真から有罪判決を受けた人物を89％の真正陽性率で特定した。
• 高い真正陽性率にもかかわらず、中国におけるベースレートが0.36％という低さのため、陽性予測が下された場合の実際の犯罪性の事後確率はわずか4.39％であった。
• ランダムラベル付け実験により、どの分類器もランダムラベルデータを偶然よりよく分離できなかったため、訓練データに対して過学習が生じていないことが示された。
• モデルの性能は、画像の圧縮やカメラの違いといった画像レベルの変動に対して頑健であった。これは、モデルが表面的なアーチファクトではなく、顔の構造的パターンを学習していることを示唆している。
• 文化的な顔の認識の違いが観察された：西洋の被験者らは特定の顔のクラスタで笑顔を認識したが、中国の被験者らはそうではなかった。これは、解釈に文化的な差が存在することを示している。
• 著者らは、文化的要因（例：白いワイシャツ）の影響が制御されていないこと、これがモデルの性能に影響を与え、公平性や代表性に関する懸念を生じうることを認めている。