[논문 리뷰] A Class of Solvable Stationary Singular Stochastic Control Problems

Luis H. R. Alvarez E.|arXiv (Cornell University)|2018. 03. 09.

Stochastic processes and financial applications참고 문헌 36인용 수 10

한 줄 요약

이 논문은 선형 확산에서 비대칭적이거나 비볼록인 비용 조건이 존재할 경우에도 두 경계에서 국소 시간 반사 정책이 최적임을 보여주는 해석 가능한 정적 특이 확률적 제어 문제의 클래스를 개발한다. 주요 기여는 이러한 반사 정책의 최적성을 보장하는 약한 단조성 및 경계 조건이며, 일阶 조건을 통한 경계의 명시적 특성화와 변동성의 계속 영역에 미치는 영향 분석을 포함한다.

ABSTRACT

We consider the determination of the optimal stationary singular stochastic control of a linear diffusion for a class of average cumulative cost minimization problems arising in various financial and economic applications of stochastic control theory. We present a set of conditions under which the optimal policy is of the standard local time reflection type and state the first order conditions from which the boundaries can be determined. Since the conditions do not require symmetry or convexity of the costs, our results cover also the cases where costs are asymmetric and non-convex. We also investigate the comparative static properties of the optimal policy and delineate circumstances under which higher volatility expands the continuation region where utilizing the control is suboptimal.

연구 동기 및 목표

• 선형 확산에서 평균 누적 비용 최소화 문제의 클래스에 대한 최적 정적 특이 제어 정책을 특성화하는 것.
• 비용이 비대칭적이거나 비볼록일 경우에도 두 고정 경계에서 표준 국소 시간 반사 유형의 최적 정책이 성립하는 조건을 규명하는 것.
• 최적 정책의 비교정적 분석을 수행하며, 특히 변동성 증가가 계속 영역에 미치는 영향을 분석하는 것.
• 기존의 에르고딕 특이 제어 결과를 대칭적이거나 볼록한 비용 구조를 초월하여 확장하는 것.
• 일방향 제어 설정에서 유일한 최적 단일 경계 반사 정책이 존재하는 조건을 설정하는 것.

제안 방법

• 두 경계 사이의 국소 시간 반사 정책에 대한 장기 평균 비용 기능을 수립한다.
• 확산의 척도 함수와 속도 측도를 사용하여 장기 평균 비용의 명시적 표현을 도출한다.
• 자유 경계 문제를 통해 최적 정책을 특성화하고, 비용 및 드리프트 함수에 대한 약한 조건 하에서 이를 해결한다.
• 비용의 볼록성이나 대칭성 조건 없이도 반사가 발생해야 할 경계를 일阶 최적성 조건을 통해 결정한다.
• 정규 선형 확산 이론과 에르고딕 제어 이론을 활용하여 최적성의 필요 및 충분 조건을 유도한다.
• 구체적인 예시를 통해 결과를 시각화하며, 제어된 옴스타인-울렌벡 과정을 포함하고, 최적 경계가 변동성에 대해 선형 의존성을 보임을 도출한다.

실험 결과

연구 질문

• RQ1 선형 확산에서 비볼록성과 비대칭성의 비용 조건이 존재할 경우, 두 고정 경계에서의 국소 시간 반사가 에르고딕 특이 제어에서 최적일 조건은 무엇인가?
• RQ2 증가하는 변동성은 제어가 최적적이지 않은 계속 영역의 크기에 어떤 영향을 미치는가?
• RQ3 비용 함수의 볼록성 또는 대칭성 조건 없이도 반사 정책의 최적성을 확립할 수 있는가?
• RQ4 일방향 제어 문제에서 유일한 최적 단일 경계 반사 정책이 존재하는 조건은 무엇인가?
• RQ5 대칭 반사 문제에서 최적 경계는 변동성과 어떻게 스케일링되는가?

주요 결과

• 비용 함수가 볼록하거나 대칭이 아니더라도, 약한 단조성 및 경계 조건이 만족되면 두 고정 경계에서의 표준 국소 시간 반사 정책이 최적임이 보장된다.
• 변동성 증가는 가치 함수의 볼록성에 기인해 계속 영역을 확장시키며, 제어의 최적 실행을 연기한다.
• 최적 경계는 경계에서의 비용과 불변 분포 하의 기대 비용이 동일해지는 일阶 조건을 통해 결정되며, 수식으로는 $\mathbb{E}[\pi_i(\bar{X}_\infty)] = \pi_i(b^*)$ 로 표현된다.
• 제어된 옴스타인-울렌벡 과정의 예시에서 최적 경계는 변동성에 대해 선형적으로 스케일링되며, $b^* = \zeta^* \sigma$ 로 표현되며, 여기서 $\zeta^*$ 는 드리프트 및 비용 파라미터를 포함한 비선형 방정식의 근이다.
• 드리프트 계수의 연속성은 결과가 성립하는 데 반드시 필요하지 않으며, 교대 드리프트를 갖는 브라운 운동의 경우 이를 입증하였다.
• 단일 경계 문제에서는 비대칭 비용 구조 하에서도 최적 정책이 존재하며, 이를 유일한 경계가 만족하는 일阶 최적성 조건으로 특성화할 수 있다.