[논문 리뷰] An optimal control problem for mean-field forward-backward stochastic differential equation with noisy observation

Guangchen Wang, Hua Xiao외 1명|arXiv (Cornell University)|2015. 09. 12.

Stochastic processes and financial applications참고 문헌 15인용 수 5

한 줄 요약

이 논문은 상태 및 그 기대값에 대해 선형인 드리프트 계수를 갖는 노이즈 관측이 있는 평균장 전진-역행 스토케스 미분방정식(MF-FBSDEs)에 대한 최적 제어 프레임워크를 개발한다. 후행 분리 방법과 분해 기법을 사용하여 두 개의 최적성 조건과 결합된 전진-역행 최적 필터를 도출함으로써 금융 수학 및 체계적 리스크 모델링에서 선형-제곱 제어 문제에 대한 닫힌 형태 해를 가능하게 한다.

ABSTRACT

This article is concerned with an optimal control problem derived by mean-field forward-backward stochastic differential equation with noisy observation, where the drift coefficients of the state equation and the observation equation are linear with respect to the state and its expectation. The control problem is different from the existing literature on optimal control for mean-field stochastic systems, and has more applications in mathematical finance, e.g., asset-liability management problem with recursive utility, systematic risk model. Using a backward separation method with a decomposition technique, two optimality conditions along with two coupled forward-backward optimal filters are derived. Several linear-quadratic optimal control problems for mean-field forward-backward stochastic differential equations are studied. Closed-form optimal solutions are explicitly obtained in detailed situations.

연구 동기 및 목표

• 부분적(노이즈 있는) 관측 하에서 평균장 전진-역행 스토케스 미분방정식의 최적 제어를 다루는 것. 상태 및 관측 동역학이 상태와 그 기대값에 대해 선형으로 의존한다.
• 기존 문헌을 확장하여 평균장 스토케스 제어에 노이즈 관측을 통합함으로써 자산-부채 관리 및 순차적 유틸리티 모델에의 응용을 가능하게 한다.
• 새로운 후행 분리 방법을 사용하여 제어 문제에 대한 필수 및 충분한 최적성 조건을 유도하는 것.
• 부분 관측 하에서 상태 추정을 가능하게 하는 두 개의 결합된 전진-역행 최적 필터를 구축하는 것.
• 금융 및 체계적 리스크 모델링에서 발생하는 특정 선형-제곱(LQ) 제어 문제에 대한 명시적 닫힌 형태 해를 제공하는 것.

제안 방법

• 노이즈 관측 하에서 MF-FBSDE 시스템의 전진 및 역행 성분을 분리하기 위해 후행 분리 방법을 적용한다.
• 상태와 그 기대값을 분리하기 위해 분해 기법을 활용하여 평균장 항의 분석을 가능하게 한다.
• 분리 및 분해 결과를 이용해 두 개의 결합된 전진-역행 최적 필터를 도출함으로써 노이즈 있는 관측으로부터 상태와 그 기대값을 추정할 수 있도록 한다.
• 최대 원리와 확률적 해밀토니안-자코비-벨만(HJB) 접근법을 사용하여 필수 및 충분한 최적성 조건을 도출한다.
• 시스템을 리카티 유형의 방정식으로 감소시켜 닫힌 형태로 풀 수 있도록 선형-제곱(LQ) 제어 문제를 명시적으로 해결한다.
• 이토의 공식, 그론월드 부등식, 버크홀더-데이비스-건디 부등식을 사용한 철저한 분석을 통해 해 프레임워크의 타당성을 검증한다.

실험 결과

연구 질문

• RQ1 상태의 노이즈 있는 관측만 가능할 경우, 평균장 전진-역행 스토케스 미분방정식에 대한 최적 제어는 어떻게 수립할 수 있는가?
• RQ2 상태 및 그 기대값에 대해 선형 드리프트를 갖는 이러한 제어 문제에 대해 필수 및 충분한 최적성 조건은 무엇인가?
• RQ3 평균장 맥락에서 노이즈 있는 관측으로부터 상태와 그 기대값을 어떻게 최적으로 추정할 수 있는가?
• RQ4 이 프레임워크에서 선형-제곱 제어 문제에 대해 닫힌 형태의 해를 도출할 수 있는가?
• RQ5 이 노이즈가 존재하고 평균장이 적용되는 설정에서 최적 필터 및 제어 법칙의 구조적 특성은 무엇인가?

주요 결과

• 논문은 노이즈 관측과 평균장 의존성 존재 하에서 최적 제어 문제에 대한 두 개의 최적성 조건—필수 및 충분 조건—을 수립한다.
• 노이즈 있는 관측으로부터 상태와 그 기대값을 추정할 수 있는 두 개의 결합된 전진-역행 최적 필터를 도출한다. 이는 부분 정보 하에서 실시간 제어를 가능하게 한다.
• 선형-제곱(LQ) 제어 문제의 경우, 명시적인 닫힌 형태 해를 확보함으로써 이 프레임워크의 해석 가능성과 실용성을 입증한다.
• 해법 방법은 상태와 그 기대값의 후행 분리 기법과 분해를 기반으로 하며, 이는 MF-FBSDE 시스템 분석을 단순화한다.
• 제어 수렴 하에서 가치 함수의 수렴성을 증명함으로써 최적 제어 정책의 안정성을 보장한다.
• 이 프레임워크는 순차적 유틸리티를 포함한 자산-부채 관리 및 은행 간 대출에서의 체계적 리스크 모델링과 같은 실제 문제에 적용 가능하다.