[논문 리뷰] Bayes Factors for Peri-Null Hypotheses

Alexander Ly, Eric‐Jan Wagenmakers|arXiv (Cornell University)|2021. 02. 14.

Statistical Methods and Inference인용 수 4

한 줄 요약

이 논문은 베이지안 가설 검정에서 날카로운 점-null 가설의 실용적 대안으로, 점-null 값 중심에 놓인 좁은 사전분포인 페리-null 가설의 사용을 조사한다. 중간 크기의 표본 크기에서는 페리-null 베이즈 요법이 점-null 베이즈 요법과 거의 동일하지만, 큰 표본에서는 일관성이 상실되어 최대우도추정치에서의 사전밀도 비율에 의해 결정되는 한계로 수렴함을 보여주며, 이는 대립가설 하에서의 신뢰성에 악영향을 미친다.

ABSTRACT

A perennial objection against Bayes factor point-null hypothesis tests is that the point-null hypothesis is known to be false from the outset. We examine the consequences of approximating the sharp point-null hypothesis by a hazy `peri-null' hypothesis instantiated as a narrow prior distribution centered on the point of interest. The peri-null Bayes factor then equals the point-null Bayes factor multiplied by a correction term which is itself a Bayes factor. For moderate sample sizes, the correction term is relatively inconsequential; however, for large sample sizes the correction term becomes influential and causes the peri-null Bayes factor to be inconsistent and approach a limit that depends on the ratio of prior ordinates evaluated at the maximum likelihood estimate. We characterize the asymptotic behavior of the peri-null Bayes factor and briefly discuss suggestions on how to construct peri-null Bayes factor hypothesis tests that are also consistent.

연구 동기 및 목표

• 실제로 점-null 가설이 항상 거짓이라는 일반적인 비판을 해결하기 위해, 이를 페리-null 가설로 대체함으로써.
• 점-null 값 중심에 놓인 좁은 사전분포로 근사된 귀무가설에 대해 베이즈 요법의 점차적 행동을 조사함으로써.
• 표본 크기가 증가함에 따라 진정한 가설을 올바르게 지지하는지 여부를 평가하기 위해, 귀무모형과 대립모형 양쪽 모두에서 페리-null 베이즈 요법이 일관성을 유지하는지 평가함으로써.
• 큰 표본 설정에서 일관성을 복원하는 데 목적이 있는, 페리-null 사전의 대안적 구성 방법을 제안하고 분석함으로써.
• 사전 밀도의 너비 선택이 가설 검정에서 베이즈 요법의 점차적 행동에 미치는 영향을 명확히 함으로써.

제안 방법

• 논문은 페리-null 가설을 점-null 값 중심에 놓인 좁은 사전분포로 모델링하며, 특히 작은 분산 κ₀²를 가진 정규분포를 사용함으로써.
• 표준 점-null 베이즈 요법과 보정항의 곱으로서 페리-null 베이즈 요법을 유도함으로써, 이 보정항은 페리-null 사전과 점-null 사전을 비교하는 베이즈 요법임을 보임.
• 보정항이 최대우도추정치에서 평가된 사전밀도 비율에 의존함을 보여주며, 이는 큰 표본 크기에서 영향을 미침.
• 라플라스 근사법을 사용하여 페리-null 베이즈 요법의 점차적 표본분포를 유도함으로써, 이는 사전밀도 비율에 의존하는 한계로 수렴하는 것으로 드러남.
• 세 가지 대안적 구성 방법을 분석함: 고정폭 페리-null, 페리-포인트 믹스처 모델, 수축하는 페리-null (κ₀가 n에 따라 감소함).
• 이론적 일관성은 표본 크기 n → ∞ 일 때 베이즈 요법이 귀무가설 하에서 무한대로 발산하고 대립가설 하에서 0으로 수렴하는지 여부를 검토함으로써 평가됨.

실험 결과

연구 질문

• RQ1 점-null 가설을 점-null 값 주변의 좁은 사전분포로 구성된 페리-null 가설로 대체할 경우, 큰 표본에서 베이즈 요법의 일관성이 유지되는가?
• RQ2 페리-null 베이즈 요법의 점차적 행동은 표준 점-null 베이즈 요법과 어떻게 다를까?
• RQ3 표본 크기의 한계값을 결정하는 데 있어 사전 너비(κ₀)의 역할은 무엇인가?
• RQ4 수축하는 폭이나 믹스처 사전과 같은 대안적 페리-null 구성 방식이 베이즈 요법의 일관성을 복원할 수 있는가?
• RQ5 최대우도추정치에서의 사전밀도 비율에 기인한 보정항이 큰 표본에서 페리-null 베이즈 요법의 행동을 얼마나 지배하는가?

주요 결과

• 중간 크기의 표본 크기에서는 페리-null 베이즈 요법이 점-null 베이즈 요법과 거의 동일하여, 이 근사가 실용적으로 문제가 되지 않는다.
• 큰 표본 크기에서는 페리-null 베이즈 요법이 일관성이 상실되며, 귀무가설 하에서 발산하거나 대립가설 하에서 0으로 수렴하는 대신 유한한 한계로 수렴함.
• 페리-null 베이즈 요법의 한계값은 최대우도추정치에서의 사전밀도 비율에 의해 결정되며, 이는 데이터와 무관하고 오직 사전 너비와 모형 파라미터에만 의존함.
• 페리-포인트 믹스처 모델은 귀무가설 하에서는 일관성을 달성하지만, 대립가설 하에서는 그렇지 않으며, 따라서 표준 일관성 요구사항을 충족하지 못함.
• 수축하는 페리-null 가설(예: κ₀ = cσ/√n)은 일관성을 복원하지만, 사전이 의도된 표본 크기에 의존함으로써 비일관성을 유도하며, 이는 우도원칙을 위반함.
• 논문은 페리-null 접근법이 점-null 대비 점차적 행동 측면에서 실질적인 이점이 없으며, 대립가설 하에서 유한한 증거로 인해 오해의 소지가 있음을 결론 내림.