[논문 리뷰] Time-Inconsistent Stochastic Linear--Quadratic Control

Ying Hu, Hanqing Jin외 1명|arXiv (Cornell University)|2011. 11. 03.

Stochastic processes and financial applications참고 문헌 16인용 수 34

한 줄 요약

이 논문은 예상 상태에 대한 제곱항과 상태에 의존하는 항을 포함하는 일반적인 시간 비일관성 확률적 선형-제곱형(LQ) 제어 문제를 수립하며, 개방 루프 전략을 통해 평형 제어를 정의한다. 유연한 정방형 확률 미분 방정식(FBSDE)의 흐름을 사용하여 평형을 위한 충분 조건을 도출하고, 스칼라 및 결정론적 경우에서 명시적인 평형 제어를 얻으며, 변동하는 시장 파rameter를 가진 평균-분산 포트폴리오 선택에 이 프레임워크를 적용한다.

ABSTRACT

In this paper, we formulate a general time-inconsistent stochastic linear--quadratic (LQ) control problem. The time-inconsistency arises from the presence of a quadratic term of the expected state as well as a state-dependent term in the objective functional. We define an equilibrium, instead of optimal, solution within the class of open-loop controls, and derive a sufficient condition for equilibrium controls via a flow of forward--backward stochastic differential equations. When the state is one dimensional and the coefficients in the problem are all deterministic, we find an explicit equilibrium control. As an application, we then consider a mean-variance portfolio selection model in a complete financial market where the risk-free rate is a deterministic function of time but all the other market parameters are possibly stochastic processes. Applying the general sufficient condition, we obtain explicit equilibrium strategies when the risk premium is both deterministic and stochastic.

연구 동기 및 목표

• 비기대 효용 항이 존재하여 표준 동적 프ogramming가 실패하는 시간 비일관성 확률적 LQ 제어 문제를 다루기 위해.
• 이전 연구에서 피드백 제어에 국한된 것과는 달리, 더 넓은 개방 루프 제어의 범주 내에서 평형 제어를 정의하기 위해.
• 시간에 따라 변화하는 흐름을 이루는 정방형 확률 미분 방정식(FBSDE)을 사용하여 평형을 위한 일반적인 충분 조건을 도출하기 위해.
• 기존의 HJB 기반 방법이 실패하는 변동하는 시장 파rameter를 가진 평균-분산 포트폴리오 선택으로 평형 전략을 확장하기 위해.
• 개방 루프 평형 정의가 피드백 기반 정의와 다른 전략을 도출함을 보여주며, 제약 조건 선택의 중요성을 부각하기 위해.

제안 방법

• 목적 기능에 제곱형 기대값 항과 상태에 의존하는 항을 포함하는 일반적인 시간 비일관성 확률적 LQ 제어 문제를 수립한다.
• 어느 시점에서든 제어에서 이탈하는 것이 유리하지 않다는 게임 이론적 관점에서 평형 제어를 정의한다.
• 시간에 따라 변화하는 정방형 확률 미분 방정식(FBSDE) 시스템을 사용하여 평형을 위한 충분 조건을 유도한다.
• 스칼라 및 결정론적 계수 경우에서 FBSDE 시스템을 리카티 유사 상미분방정식(ODE)으로 간소화하여 명시적인 평형 제어를 도출한다.
• 일반적 프레임워크를 연속 시간 평균-분산 포트폴리오 선택 문제에 적용하여 FBSDE를 명시적으로 해석한다.
• 기존 피드백 제어 기반 접근과 결과를 비교하여, 서로 다른 평형 정의로 인해 평형 전략에 차이가 있음을 보여준다.

실험 결과

연구 질문

• RQ1 시간 비일관성 확률적 LQ 제어 문제는 어떻게 재구성되어야 하며, 사전 약속 최적 제어가 아닌 동적 평형 기반 해를 가능하게 할 수 있는가?
• RQ2 개방 루프 제어는 시간 비일관성 설정에서 평형 전략을 정의하는 데 어떤 역할을 하는가? 피드백 기반 평형과는 어떻게 다를까?
• RQ3 시간 매개변수화된 흐름을 이루는 정방형 확률 미분 방정식(FBSDE)을 사용하여 평형을 위한 일반적인 충분 조건을 도출할 수 있는가?
• RQ4 예를 들어 변동하는 리스크 프리미엄과 같은 랜덤 시장 파rameter는 평균-분산 모델에서 평형 포트폴리오 전략의 구조에 어떻게 영향을 미치는가?
• RQ5 변동 파rameter 하에서 개방 루프와 피드백 기반 평형 전략 간의 정량적 차이는 무엇인가?

주요 결과

• 논문은 시간 비일관성 확률적 LQ 문제에서 평형 제어를 위한 일반적인 충분 조건을 정방형 확률 미분 방정식(FBSDE)의 흐름을 사용하여 도출한다.
• 스칼라 및 결정론적 계수 경우에서 평형 제어는 선형 피드백 형태로 명시적으로 유도되며, FBSDE 시스템은 리카티 유사 상미분방정식(ODE)으로 간소화된다.
• 결정론적 리스크 프리미엄을 가진 평균-분산 포트폴리오 선택에서, 피드백 성분이 없는 경우 유도된 평형 전략은 이전 피드백 제어 프레임워크의 결과와 일치한다.
• 리스크 프리미엄이 변동하는 경우, 본 논문은 개방 루프 프레임워크에서 처음으로 명시적인 평형 전략을 제공하며, 이는 서로 다른 평형 정의로 인해 피드백 기반 결과와 다름을 보여준다.
• 변동 리스크 프리미엄 경우의 평형 전략은 두 부분으로 구성된다: 하나는 결정론적 경우의 대응 형태와 유사하고, 다른 하나는 시장 리스크 가격의 랜덤성을 헤지하는 부분이다.
• 결과는 개방 루프와 피드백 기반 평형 정의의 선택이 심지어 결정론적 경우에서도 근본적으로 다른 전략을 초래하며, 시간 비일관성 제어 문제에서 제약 조건 설정의 결정적 역할을 강조한다.