[논문 리뷰] Remarks on the monotonicity of default probabilities

Dirk Tasche|arXiv (Cornell University)|2002. 07. 23.

Credit Risk and Financial Regulations참고 문헌 5인용 수 6

한 줄 요약

이 논문은 조건부 디폴트 확률의 단조성과 가장 강력한 검정 기준에서 점수 기반 검정의 최적성 간의 동치성을 증명함으로써 신용 등급 시스템에서 단조성의 의사결정 이론적 기반을 확립한다. 핵심 결과는 점수 함수의 순서 우세성 그래프(ROC 곡선)가 오목일 때에만 이러한 단조성이 성립하며, 이는 통계적 최적성과 ROC 곡선의 기하학적 성질 간의 연결을 제시한다.

ABSTRACT

The consultative papers for the Basel II Accord require rating systems to provide a ranking of obligors in the sense that the rating categories indicate the creditworthiness in terms of default probabilities. As a consequence, the default probabilities ought to present a monotonous function of the ordered rating categories. This requirement appears quite intuitive. In this paper, however, we show that the intuition can be founded on mathematical facts. We prove that, in the closely related context of a continuous score function, monotonicity of the conditional default probabilities is equivalent to optimality of the corresponding decision rules in the test-theoretic sense. As a consequence, the optimality can be checked by inspection of the ordinal dominance graph (also called Receiver Operating Characteristic curve) of the score function: it obtains if and only if the curve is concave. We conclude the paper by exploring the connection between the area under the ordinal dominance graph and the so-called Information Value which is used by some vendors of scoring systems. Keywords: Conditional default probability, score function, most powerful test, Information Value, Accuracy Ratio.

연구 동기 및 목표

• 신용 등급 시스템에서 디폴트 확률이 등급 카테고리에 따라 단조 감소해야 한다는 요구 조건에 대한 이론적 근거를 제공하는 것.
• 조건부 디폴트 확률의 단조성과 통계적 개념인 가장 강력한 검정 간의 공식적 연결을 수립하는 것.
• 이러한 단조성 조건이 점수 함수의 순서 우세성 그래프(ROC 곡선)의 오목성과 동치임을 보이는 것.
• 신용 스코링에서 널리 사용되는 두 성능 지표인 정확도 비율(AR)과 정보가치(IV) 간의 관계를 명확히 하는 것.

제안 방법

• 연속적인 점수 함수 S와 이진 디폴트 지표 T ∈ {D, N}를 사용하여 신용 스코링 문제를 수식화하고, 부드러운 조건부 밀도 f_D(s)와 f_N(s)를 가정한다.
• 우도 비율 L(s) = f_D(s)/f_N(s)를 정의하고 베이즈 정리에 의해 조건부 디폴트 확률 P(D|S=s)를 유도한다.
• u = P(S ≤ s | N)에 대해 순서 우세성 그래프 δ_S(u) = P(S ≤ s | D) / P(S ≤ s | N)를 도입하며, 이는 디폴트 및 비디폴트 상태에서 점수의 누적분포함수를 매핑한다.
• 네이만-피어슨 보조정에 기반해 가장 강력한 검정과의 등가성을 이용하여 P(D|S=s)의 단조성이 ROC 곡선 δ_S(u)의 오목성과 동치임을 증명한다.
• 정보가치(IV_S)를 전역적인 분류 능력의 척도로 정의하며, 이는 디폴트 및 비디폴트 상태에서 로그 우도 비율의 기대 차이로 표현된다.
• IV_S와 정확도 비율(AR_S)을 비교하여, AR_S는 ROC 곡선과 대각선 사이의 면적의 두 배와 동일하며, 이는 모든 유의수준에서 절단점 기반 검정의 평균 검정력 측도임을 보여준다.

실험 결과

연구 질문

• RQ1 디폴트 확률의 단조성 요구 조건은 수학적으로 타당한가, 아니면 단지 직관적인가?
• RQ2 어떤 조건에서 점수 함수에 대응하는 검정 절차가 가장 강력한 검정 기준에서 통계적으로 최적인가?
• RQ3 순서 우세성 그래프(ROC 곡선)의 오목성은 조건부 디폴트 확률의 단조성과 어떻게 관련이 있는가?
• RQ4 신용 스코링 시스템에서 정보가치(IV)와 정확도 비율(AR) 간의 관계는 무엇인가?
• RQ5 점수 함수의 성능을 ROC 곡선의 기하학적 성질을 통해 평가할 수 있는가?

주요 결과

• 조건부 디폴트 확률 P(D|S=s)의 단조성은 점수 함수 S의 순서 우세성 그래프(ROC 곡선)의 오목성과 수학적으로 동치이다.
• 이러한 단조성 조건은 네이만-피어슨 보조정에 따라, 주어진 제1종 오류 수준에서 해당 점수 기반 검정이 항상 가장 강력한 검정임을 보장한다.
• 정확도 비율(AR_S)은 ROC 곡선과 대각선 사이의 면적의 두 배와 동일하며, 이는 모든 유의수준에서 절단점 기반 검정의 평균 검정력을 측정한다.
• 정보가치(IV_S)는 디폴트 및 비디폴트 상태에서 로그 우도 비율의 기대 차이로 정의되며, 항상 비음수이면서 f_D와 f_N에 대해 대칭적이다.
• AR_S는 0에서 1 사이로 유계이지만, IV_S는 유계가 아니며, AR_S는 로그 우도 비율 대신 점수의 누적분포함수로 대체된 경우 IV_S의 특수한 경우로 볼 수 있다.
• S* = log L(S)의 변환을 통해 ROC 곡선의 오목성이 P(D|S=s)의 단조성과 동치가 되는 점수 함수를 도출할 수 있으며, 이 변환된 점수로부터 AR_S가 유도된다.