Skip to main content
QUICK REVIEW

[論文レビュー] Equal Opportunity in Online Classification with Partial Feedback

Yahav Bechavod, Katrina Ligett|arXiv (Cornell University)|Feb 6, 2019
Advanced Bandit Algorithms Research参考文献 25被引用数 6
ひとこと要約

本稿は、陽性と分類された個人に対してのみラベルが観測される部分的フィードバックの下でのオンライン二値分類を研究する。各ラウンドで等価機会の公平性制約(等しい偽陽性率/偽陰性率)を満たす、オракル効率の良いアルゴリズムを提案し、公平性のレジレットコストが軽微であることを示す。具体的には、γ-公平性の下でレジレットコストはΩ(1/γ²)であり、タイトな上界と下界が確立されている。

ABSTRACT

We study an online classification problem with partial feedback in which individuals arrive one at a time from a fixed but unknown distribution, and must be classified as positive or negative. Our algorithm only observes the true label of an individual if they are given a positive classification. This setting captures many classification problems for which fairness is a concern: for example, in criminal recidivism prediction, recidivism is only observed if the inmate is released; in lending applications, loan repayment is only observed if the loan is granted. We require that our algorithms satisfy common statistical fairness constraints (such as equalizing false positive or negative rates -- introduced as "equal opportunity" in Hardt et al. (2016)) at every round, with respect to the underlying distribution. We give upper and lower bounds characterizing the cost of this constraint in terms of the regret rate (and show that it is mild), and give an oracle efficient algorithm that achieves the upper bound.

研究の動機と目的

  • 貸付や犯罪再犯予測の応用例のように、陽性と分類された個人に対してのみフィードバックが得られる状況におけるオンライン分類における公平性を扱う。
  • 特に等価機会(等しい偽陽性率および偽陰性率)を含む統計的公平性制約が、潜在的な分布に関して各ラウンドで満たされることを保証する。
  • フィードバックバイアスのため、標準的なバッチ手法が失敗する部分的フィードバック設定において、公平性制約と学習のレジレットのトレードオフを分析する。
  • レジレットの観点から、公平性のコストを理論的に評価し、それが軽微で定量的であることを示す。
  • 公平性制約の下で最適なレジレットバウンドを達成する、オラクル効率の良いアルゴリズムを設計する。

提案手法

  • 部分的フィードバックの下でオンライン学習として問題をモデル化し、陽性と分類された個体の真のラベルのみが観測可能であることを定式化する。
  • 公平性をγ-等価偽陽性率(γ-EFP)制約として定義し、任意の分類器πに対して|FPR₁(π) − FPR₋₁(π)| ≤ γを要求する。
  • 特徴量x(特に感受性属性aを含む)とラベルyの組み合わせが、未知の分布Dにi.i.d.に抽出される確率的モデルを採用する。
  • KLダイバージェンスを含む情報理論的ツールを用いて、D₁とD₂という2つの識別が困難な分布を区別するにはΩ(1/γ²)のサンプルが必要であることを証明する。
  • D₁とD₂を区別できない間、アルゴリズムは定数分類器に強く依存せざるを得ず、高いレジレットを被るため、レジレットの下界を導出する。
  • 各ラウンドで公平性を維持することができ、下界と定数倍の差異まで一致する上界に達する、オラクル効率の良いアルゴリズムを設計する。

実験結果

リサーチクエスチョン

  • RQ1部分的フィードバックの下で等価機会の公平性制約を課すことによる、オンライン分類におけるレジレットコストはどの程度か?
  • RQ2常にサブ線形レジレットを達成しつつ、各ラウンドで公平性(等価偽陽性/偽陰性率)を満たすアルゴリズムは可能か?
  • RQ3部分的フィードバックの下で、公平性の性質のみが異なる2つの分布を区別するのはどの程度困難か?
  • RQ4このオンライン学習設定における、公平性とレジレットの最適なトレードオフは何か?
  • RQ5公平性制約の下で最適なレジレットバウンドを達成する、オラクル効率の良いアルゴリズムを設計可能か?

主な発見

  • γ-EFP公平性を課すことによるレジレットコストはΩ(1/γ²)であり、学習性能への影響が軽微で定量的であることを示している。
  • KLダイバージェンス≤64γ²である2つの分布D₁とD₂を構築することで、Ω(1/γ²)のレジレット下界を確立し、アルゴリズムが慎重に探索する必要があることを示した。
  • 任意のアルゴリズムがγ-EFP(δ)-公平性を満たす場合、期待される0-EFPレジレットはΩ(T²α)に達する。これは、公平性とレジレットの根本的トレードオフを示している。
  • 下界と定数倍の差異まで一致する上界に達する、オラクル効率の良いアルゴリズムを構築した。これにより、レジレットバウンドのタイトさが証明された。
  • 分析から、公平性制約は探索と利用の両方を制限するため、バッチ学習とは根本的に異なる、公平性制約付きオンライン学習の本質が明らかになった。
  • 結果は等価機会を越えて、統計的差し引き(statistical parity)などの他の統計的公平性制約に対しても一般化可能であり、本フレームワークの広範な適用可能性が示された。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。