[論文レビュー] Difference-in-Differences for Policy Evaluation

Brantly Callaway|arXiv (Cornell University)|Jan 1, 2022

Advanced Causal Inference Techniques被引用数 4

ひとこと要約

この論文は、処置効果の非同一性と処置タイミングのばらつきが生じる状況下での差の差（DID）手法における最近の進展をレビューし、二重固定効果（TWFE）回帰の限界を強調している。処置効果の非同一性と処置タイミングのばらつきに対してより頑健で、実装が容易な代替推定法を提案し、政策評価における因果推論を改善する。実証的応用と感受性分析を通じて、平行トレンド仮定の破れに対する耐性を検証している。

ABSTRACT

Difference-in-differences is one of the most used identification strategies in empirical work in economics. This chapter reviews a number of important, recent developments related to difference-in-differences. First, this chapter reviews recent work pointing out limitations of two way fixed effects regressions (these are panel data regressions that have been the dominant approach to implementing difference-in-differences identification strategies) that arise in empirically relevant settings where there are more than two time periods, variation in treatment timing across units, and treatment effect heterogeneity. Second, this chapter reviews recently proposed alternative approaches that are able to circumvent these issues without being substantially more complicated to implement. Third, this chapter covers a number of extensions to these results, paying particular attention to (i) parallel trends assumptions that hold only after conditioning on observed covariates and (ii) strategies to partially identify causal effect parameters in difference-in-differences applications in cases where the parallel trends assumption may be violated.

研究の動機と目的

• 処置効果の非同一性が生じる状況下での差の差（DID）応用において、二重固定効果（TWFE）回帰の重大な限界を特定・解決すること。
• 処置効果の非同一性や処置タイミングのばらつきに対して、より頑健であるとされる最近開発された代替推定法を提示・評価すること。
• 特に、観察された共変量に条件づけた場合にのみ成り立つ可能性がある平行トレンド仮定の役割を検討すること。
• 平行トレンド仮定が破れている可能性がある状況下で、因果効果の部分的同定をどのように行うかを検討すること。
• 特に最低賃金と若年労働参加に関する研究を例に、実証的応用と感受性分析を通じて実務的インパクトを示すこと。

提案手法

• 処置後経過時間ごとに処置効果を分解する代替DID推定法を提案し、TWFE回帰に内在する重み付け問題を回避すること。
• 適切な重み付けスキームを用いたイベントスタディ推定法を用い、非同一性が生じる状況下でも動的処置効果を回復すること。
• 平行トレンド仮定の破れに対する感受性分析技術を用いて、結果の頑健性を評価すること。
• 必要に応じて、観察された共変量に条件づけた平行トレンド仮定の下での反事後経路推定を実施すること。
• 段階的導入設計に適したソフトウェア実装手法（例：Callaway and Sant'Anna, 2021）を用いること。
• 事前トレンド分析と形式的な感受性分析を組み合わせ、平行トレンド仮定の妥当性を評価すること。

実験結果

リサーチクエスチョン

• RQ1 処置効果の非同一性と段階的処置タイミングが生じる状況下で、二重固定効果回帰はどのように機能するか？
• RQ2 複数の時間期間と非同一な処置効果を伴うDID応用において、TWFE回帰の主な限界は何か？
• RQ3 処置効果の非同一性が生じる状況下で、代替推定法はTWFE回帰よりも信頼性の高い因果推定を可能にするか？
• RQ4 平行トレンド仮定が破れている可能性がある場合、研究者はDID結果の頑健性をどのように評価できるか？
• RQ5 TWFE回帰における推定重みが、特に早期および後発の導入者を比較する際に、どのように誤解を招くか？

主な発見

• 2つ以上の時間期間と段階的処置タイミングが存在する状況下では、TWFE回帰は処置効果の非同一性に対して頑健ではなく、効果の重みが不適切である可能性があるため、バイアスが生じる推定器となる。
• イベントスタディ法やグループ別DID法といった代替推定法は、非同一性が生じる状況下でも、より正確で解釈可能な処置効果推定値を提供する。
• 最低賃金に関する応用において、2007年のデータを含めるかどうかによって結果が敏感に変化したため、処置効果の非同一性が推定影響に顕著に影響していることが示された。
• 感受性分析の結果、若年労働参加への影響推定値は、事前期間に観察された程度の平行トレンド仮定の破れに対して頑健でないことが判明し、信頼区間は-0.073から0.023の範囲にわたり、広がっていた。
• すでに処置を受けた単位を対照群として使用する「悪影響のある比較」に、無視できない程度の重みが割り当てられていたため、早期に処置を受けた単位や処置後期間を除外するなど、慎重な研究設計が不可欠であることが示された。
• 一部のケースでは点推定値が類似していたが、TWFEと新しい手法との間には十分に大きな差が生じており、研究者はより頑健な新しいアプローチを優先すべきであると示唆された。