[논문 리뷰] Interpreting Event-Studies from Recent Difference-in-Differences Methods

Jonathan Roth|arXiv (Cornell University)|2024. 01. 22.

Advanced Causal Inference Techniques인용 수 35

한 줄 요약

본 논문은 최신 DiD 방법들(dCDH, CS, BJS)의 이벤트-스터디 그래프가 비대칭적 전처리/사후 처리 구성으로 인해 전통적인 TWFE 그래프와 구조적으로 다르며, 실용적인 플로팅 권고를 제공한다.

ABSTRACT

This note discusses the interpretation of event-study plots produced by recent difference-in-differences methods. I show that even when specialized to the case of non-staggered treatment timing, the default plots produced by software for several of the most popular recent methods do not match those of traditional two-way fixed effects (TWFE) event-studies. The plots produced by the new methods may show a kink or jump at the time of treatment even when the TWFE event-study shows a straight line. This difference stems from the fact that the new methods construct the pre-treatment coefficients asymmetrically from the post-treatment coefficients. As a result, visual heuristics for evaluating violations of parallel trends using TWFE event-study plots should not be immediately applied to those from these methods. I conclude with practical recommendations for constructing and interpreting event-study plots when using these methods.

연구 동기 및 목표

• 현대 DiD 방법이 전통적인 TWFE 그래프와 다른 이벤트-스터디 그래프를 산출하는 동기를 제시한다.
• CS/dCDH 및 BJS에서 전처리(Pre-treatment)와 사후처리(Post-treatment) 계수가 비대칭적으로 구성되는 이유를 설명한다.
• 이 차이들이 이벤트-스터디 그래프의 시각적 해석에 어떻게 영향을 미치는지 시뮬레이션을 통해 시연한다.
• CS/dCDH 및 BJS로 이벤트-스터디 그래프를 구성하고 해석하기 위한 실용적 권고를 제시한다.

제안 방법

• TWFE, CS, dCDH, BJS 이벤트-스터디를 비교하기 위해 간단한 비-스태거드 DiD 설정을 시뮬레이션한다.
• TWFE, CS/dCDH, 및 BJS에 대한 전처리/사후처리 계수 구성을 수학적으로 도출한다.
• CS/dCDH가 처리 전에는 짧은 차이(short-differences)를, 처리 후에는 긴 차이(long-differences)를 사용하여 잠재적인 kink를 만든다.
• BJS가 비대칭적 보간(imputation)과 전처리 평균화를 사용하여 TWFE 그래프와 차이가 생김을 입증한다.
• 일반적 기저 기간의 사용이나 긴 차이(long-differences)와 같은 실질적 해결책을 제시하여 그래프를 일반적 해석과 일치시키는 방법을 제안한다.

(a) Dynamic TWFE

실험 결과

연구 질문

• RQ1 비-스태거드 설정에서 dCDH, CS, 및 BJS의 이벤트-스터디 그래프가 전통적인 TWFE 그래프와 일치하는가?
• RQ2 평행 추세에도 불구하고 현대 DiD 이벤트 연구에서 처리일 근처에 커브나 급등이 나타나는 이유는?
• RQ3 전처리 계수와 사후처리 계수의 구성은 방법별로 어떻게 다른가?
• RQ4 연구자들이 이러한 그래프를 더 비교 가능하고 해석 가능하게 만들기 위해 어떤 실용적 조치를 취할 수 있는가?

주요 결과

• TWFE 이벤트-스터디는 비-스태거드 설정에서 처리 전 선형 추세를 생성하고 처리 후에도 이를 계속한다.
• CS와 dCDH는 처리 날짜에서 비대칭적 전처리(짧은 차이) 및 사후처리(긴 차이) 구성으로 인해 kink를 생성한다.
• BJS는 보간 기반이면서 비대칭적 설계의 특성을 반영하여 처리 시점에서 위로 향하는 선행 추세와 급격한 하방 급락을 보일 수 있다.
• 전처리/사후처리 구성의 비대칭성이 TWFE 그래프의 시각적 직관이 CS/dCDH 및 BJS 그래프에 적용될 때 오해를 불러오는 이유를 설명한다.
• 전처리 계수에 긴 차이(long-differences)를 사용한다면(보편적 기저 기간) CS/dCDH 그래프를 TWFE 그래프와 더 비교 가능하게 만들 수 있다.
• 전처리의 병렬 추세 테스트와 처리 후 효과 추정은 각 가정하에서 여전히 타당하지만, 시각화는 신중하게 해석되어야 한다.

(b) CS