[논문 리뷰] The Principal-Agent Problem; A Stochastic Maximum Principle Approach

Boualem Djehiche, Peter Helgesson|arXiv (Cornell University)|2014. 10. 23.

Stochastic processes and financial applications참고 문헌 26인용 수 4

한 줄 요약

이 논문은 확률적 최대원리(stochastic maximum principle)를 사용하여 은닉 행동(hidden actions)이 있는 연속시간 주식-에이전트 문제를 수식화하고, 정방향-역방향 확률미분방정식(FBSDEs)을 통해 최적 계약에 대한 필요조건을 유도한다. 에이전트의 최적 노력과 주식의 최적 보상이 동시에 특징지어지는 결합된 확률적 제어 프레임워크를 수립하였으며, 이중성-제곱형 예시를 통해 제곱형 성과와 선형 동역학 하에서 계약의 구조를 보여준다.

ABSTRACT

We study a general class of Principal-Agent problems in continuous time under hidden action. By formulating the model as a coupled stochastic optimal control problem we are able to find a set of necessary conditions characterizing optimal contracts, using the stochastic maximum principle. An example is carried out to illustrate the proposed approach to the Principal-Agent problem under linear stochastic dynamics with a quadratic performance function.

연구 동기 및 목표

• 은닉 행동 하에서 연속시간 주식-에이전트 문제를 위한 일반적 프레임워크를 개발하는 것.
• 동적 프ogram밍 원리에 의존하지 않고, 확률적 최대원리를 사용하여 최적 계약을 특징짓는 것.
• 주식과 에이전트의 문제를 결합된 확률적 최적 제어 문제로 공식화하는 것.
• 정방향-역방향 확률미분방정식(FBSDEs)을 통해 최적성의 필요조건을 수립하는 것.
• 제곱형 성과와 선형 동역학 하에서 선형-제곱형 예시를 통해 접근 방식을 시연하는 것.

제안 방법

• 은닉 행동 하에서 주식-에이전트 문제를 결합된 확률적 최적 제어 문제로 공식화하며, 주식의 목표는 에이전트의 inccentive compatibility 및 참여 제약 조건에 의해 제약된다.
• 에이전트 문제에 대해 확률적 최대원리를 적용하여 최적 노력에 대한 필요조건을 도출하며, 보상은 주어진 적응 과정으로 간주한다.
• 결과로 얻어진 최적 노력으로 주식 문제를 상태 제약이 있는 최적 제어 문제로 변환하며, 이는 FBSDEs를 포함한다.
• 상태 분포의 진화를 기술하기 위해 Fokker-Planck 방정식을 사용하여 주식 문제를 PDE 제약이 있는 최적 제어 문제로 환원한다.
• FBSDEs의 해가 존재하고 유일함을 보장하는 결과에 의존하며, 기술적 증명에는 Ekeland의 변분원리와 Clarke의 일반화된 도함수를 사용한다.
• 첨도 과정과 첨도 역방향 SDEs를 통해 최적성의 필요조건을 도출하며, Pontryagin의 최대원리를 확률적 설정으로 확장한다.

실험 결과

연구 질문

• RQ1 은닉 행동이 있는 연속시간 주식-에이전트 모델에서 확률적 최대원리를 적용하여 최적 계약에 대한 필요조건을 도출할 수 있는가?
• RQ2 에이전트의 노력이 관측 불가능하고 주식이 지속적인 인centive를 제공해야 할 경우, 최적성의 필요조건은 무엇인가?
• RQ3 주식과 에이전트의 제어 문제 간의 결합이 FBSDE 프레임워크에서 어떻게 나타나는가?
• RQ4 Fokker-Planck 방정식을 사용하여 주식의 최적 보상이 상태 분포의 함수로 특징지워질 수 있는가?
• RQ5 선형 동역학과 제곱형 성과 하에서 최적 계약에 어떤 구조적 성질이 드러나는가?

주요 결과

• 최적 계약은 정방향-역방향 확률미분방정식(FBSDEs)의 체계를 통해 특징지어지며, 이는 에이전트의 최적 노력과 주식의 인센티브 설계 간의 일관성을 보장한다.
• 주식 문제는 주로 에이전트의 동역학에 따라 상태 분포가 진화하는 Fokker-Planck 방정식에 대한 결정론적 최적 제어 문제로 환원된다.
• 선형-제곱형 예시에서는 최적 보상이 상태에 대해 선형임을 보여주며, Holmström과 Milgrom의 이전 결과와 일치하지만, 이는 확률적 최대원리 접근법을 통해 도출되었다.
• 이 방법은 HJB 방정식과 동적 프로그래밍을 피함으로써, HJB 접근법이 적용되지 않는 비-마르코프 설정에서도 분석이 가능하게 한다.
• FBSDEs의 해가 존재하고 유일함은 이 프레임워크의 핵심이며, 이는 이론적 기초로 기존의 확률적 분석 결과에 의존한다.
• Ekeland의 변분원리와 Clarke의 일반화된 도함수의 사용은 약한 정규성 가정 하에서도 최적 제어의 존재를 보장한다.