[논문 리뷰] Local Regression Distribution Estimators

Matias D. Cattaneo, Michael Jansson외 1명|arXiv (Cornell University)|2020. 09. 30.

Statistical Methods and Inference참고 문헌 6인용 수 11

한 줄 요약

이 논문은 국소 다항 회귀를 이용한 밀도 및 분포 함수의 효율적이고 경계 적응형 추정을 가능하게 하는 새로운 국소 회귀 분포 추정기의 클래스를 제안한다. 점별 및 균일한 점 渐진적 근사, 이론적 효율 경계에 도달하는 최소 거리 추정기의 유도, R 및 Stata 소프트웨어 지원이 있는 프로그램 평가에의 응용을 포함한다.

ABSTRACT

This paper investigates the large sample properties of local regression distribution estimators, which include a class of boundary adaptive density estimators as a prime example. First, we establish a pointwise Gaussian large sample distributional approximation in a unified way, allowing for both boundary and interior evaluation points simultaneously. Using this result, we study the asymptotic efficiency of the estimators, and show that a carefully crafted minimum distance implementation based on "redundant" regressors can lead to efficiency gains. Second, we establish uniform linearizations and strong approximations for the estimators, and employ these results to construct valid confidence bands. Third, we develop extensions to weighted distributions with estimated weights and to local $L^{2}$ least squares estimation. Finally, we illustrate our methods with two applications in program evaluation: counterfactual density testing, and IV specification and heterogeneity density analysis. Companion software packages in Stata and R are available.

연구 동기 및 목표

• 국소 회귀를 이용한 분포 및 밀도 추정기의 대표적 추론을 위한 통합 프레임워크 개발.
• 비모수 밀도 추정에서 경계 편향 문제를 해결하기 위해 경계 적응형 추정기 구축.
• 다중 회귀변수를 활용한 최소 거리 접근을 통해 커널 기반 밀도 추정기의 효율성 향상.
• 지역에서의 유효한 신뢰구간을 구성하기 위해 지역에 걸쳐 균일한 선형화 및 강한 근사 유도.
• 더 넓은 계량경제학 응용을 위해 가중치가 부여된 분포 및 국소 L² 최소제곱 추정으로 방법 확장.

제안 방법

• 차수 p 이하의 다항식 기저를 가진 커널 가중치 기반의 국소 최소제곱 근사로 경험 분포함수를 근사.
• n에 따라 변하는 커널을 사용한 U통계량 구조를 도입하여 완전 자동 표준화 및 일致한 표준오차 확보.
• 다중 회귀변수를 도입하여 점 渐진적 분산을 최소화함으로써 최소 거리 추정을 적용하고 이론적 효율 경계 달성.
• 경험 과정 이론을 활용해 균일한 선형화 및 강한 근사를 도출하여 간격 전체에 걸친 동시 추론 지원.
• 통합 평균제곱오차를 최소화하는 밴드위드 선택을 통한 고차수 국소 다항식 회귀(차수 3)를 활용한 강력한 신뢰구간 구성.
• 도구변수 설정에서 잠재적 결과 분포를 추정하기 위해 가중치 기반 방법을 적용하여 분포적 처리효과 분석 가능.

실험 결과

연구 질문

• RQ1 국소 회귀 분포 추정기는 밀도 추정에서 이론적 하한 경계에 비슷한 점 渐진적 효율성을 달성할 수 있는가?
• RQ2 국소 다항식 밀도 추정에서 추가 수정 없이 경계 적응이 어떻게 달성될 수 있는가?
• RQ3 다중 회귀변수는 최소 거리 추정기의 효율성을 향상시키는 데 어떤 역할을 하는가?
• RQ4 지역 전체에 걸쳐 유효한 신뢰구간을 구성하기 위해 균일한 선형화 및 강한 근사를 유도할 수 있는가?
• RQ5 제안된 방법은 계량경제학 응용에서 가중치가 부여된 분포 및 국소 L² 최소제곱 추정으로 어떻게 확장될 수 있는가?

주요 결과

• 제안된 최소 거리 추정기는 이론적 효율 경계에 임의로 가까운 점 渐진적 분산을 달성하며, Granovsky와 Müller(1991) 및 Cheng, Fan, Marron(1997)이 확립한 하한 경계와 일치한다.
• 다항식 기저 함수를 사용할 경우 추가 수정 없이 자연스럽게 경계 적응형 밀도 추정기가 도출된다.
• 내부 및 경계 평가점 모두에 대해 일致한 표준오차를 갖는 점별 가우시안 근사가 확립되어 유효한 추론이 가능하다.
• 균일한 선형화 및 강한 근사가 도출되어 관심 영역 전체에 걸쳐 유효한 신뢰구간을 구성할 수 있다.
• JTPA 데이터셋에 적용한 결과, 도구변수의 타당성이 확인되었으며, 수강자에 대한 치료효과는 의도-치료 효과보다 크지만 등록 효과보다는 작다는 것이 드러났다.
• 추정기 구현을 위해 R 및 Stata 전용 패키지가 개발되었으며, 통합 평균제곱오차를 최소화하는 밴드위드가 선택되었다.