[논문 리뷰] Expected Supremum Representation of the Value of a Singular Stochastic Control Problem

Luis H. R. Alvarez E., Pekka Matomäki|arXiv (Cornell University)|2015. 08. 12.

Capital Investment and Risk Analysis참고 문헌 30인용 수 3

한 줄 요약

이 논문은 비정상적인 확률적 제어 문제에서 가치 함수의 새로운 표현을 제안한다. 이 표현은 제어된 확산 과정의 유도된 함수의 기대 최대값으로서의 가치 함수 표현을 제공한다. 일정 경계 반사 정책의 가치를 알려지지 않은 함수의 기대 최대값과 동일시함으로써, 저자들은 표현 함수를 명시적으로 유도하고, 최적성 조건이 이 함수의 도함수가 0이 되는 임계값과 일치함을 보여준다. 이는 표준 C²-연속성 조건과 일치한다.

ABSTRACT

We consider the problem of representing the value of singular stochastic control problems of linear diffusions as expected suprema. Setting the value accrued from following a standard reflection policy equal with the expected value of a unknown function at the running supremum of the underlying is shown to result into a functional equation from which the unknown function can be explicitly derived. We also consider the stopping problem associated with the considered singular stochastic control problem and present a similar representation as an expected supremum in terms of characteristics of the control problem.

연구 동기 및 목표

• 기초가 되는 확산 과정의 누적 최대값의 함수로 표현된 기대 최대값으로서 비정상적인 확률적 제어 문제의 가치를 표현하는 것.
• 일차 확산 설정에서 표현 함수를 명시적으로 유도하여 닫힌 형태의 분석을 가능하게 하는 것.
• 비정상 제어 문제에서의 연속성 조건과 표현 함수의 도함수의 0이 되는 조건 사이의 연결 고리를 설정하는 것.
• 이 표현을 관련된 최적 정지 문제로 확장하여 유사한 기대 최대값 구조를 보여주는 것.

제안 방법

• 일정 경계 반사 정책의 가치를 일정 경계에 의해 할인된 수익 흐름의 적분으로 공식화한다.
• 기댓값을 지정된 초지수 분포를 가진 랜덤 시간에서의 누적 최대값의 알려지지 않은 함수의 기댓값으로 표현하며, 알려진 제1도달 분포를 활용한다.
• 두 표현식을 동일시하여 표현 함수를 명시적으로 결정하는 함수 방정식을 구성한다.
• 0에서 사라지는 확산 과정의 최대값 분포를 이용하여 기댓값 최대값 항을 계산한다.
• 선형 확산에서 척도 함수와 속도 측도의 성질을 활용하여 유도된 정체성의 해를 구함으로써 표현 함수를 유도한다.
• 최적 경계가 표현 함수의 도함수가 0이 되는 지점과 일치함을 검증하며, 이는 표준 C²-연속성 조건과 일치한다.

실험 결과

연구 질문

• RQ1 비정상적인 확률적 제어 문제의 가치는 기초 과정의 누적 최대값의 함수로 표현된 기대 최대값으로 표현될 수 있는가?
• RQ2 일정 반사 경계를 가진 선형 확산 설정에서 표현 함수의 명시적 형태는 무엇인가?
• RQ3 반사 경계의 최적성은 표현 함수의 특정한 성질, 예를 들어 도함수의 0이 되는 성질과 일치하는가?
• RQ4 비정상 제어 문제의 표현 함수는 관련된 최적 정지 문제의 가치 함수와 어떻게 관련이 있는가?
• RQ5 비정상 제어 문제의 마진 가치 함수에 대해 비슷한 기대 최대값 표현을 확립할 수 있는가?

주요 결과

• 반사 경계에서 비록 최적이 아니더라도 표현 함수는 항상 0이 된다. 이는 최적 정지 문제와 대조된다.
• 비정상 제어 문제에서 최적성은 표현 함수의 도함수가 0이 되는 지점에서 정확히 달성되며, 이는 표준 C²-연속성 조건과 일치한다.
• 일부 선형 확산 클래스에 대해 표현 함수를 닫힌 형태로 명시적으로 유도할 수 있다. 이는 거듭제곱 및 지수 성분을 포함한 경우에도 적용된다.
• 최적 경계에서는 표현 함수가 상태 공간 전역에서 비음성을 유지하지만, 비최적 경계에서는 함수가 음수가 되는 영역이 발생한다.
• 마진 가치 함수에 대해서도 유사한 기대 최대값 표현을 확립하였으며, 특정 조건 하에서는 이는 관련된 최적 정지 문제의 가치 함수와 일치한다.
• 제어 문제와 정지 문제의 표현 함수 간의 연결 고리는 경계 특성화에 요구되는 서로 다른 정규성 조건을 설명한다.