[논문 리뷰] Optimization of a Dynamic Profit Function using Euclidean Path Integral

Paramahansa Pramanik, Alan M. Polansky|arXiv (Cornell University)|2020. 02. 21.

Advanced Thermodynamics and Statistical Mechanics인용 수 4

한 줄 요약

이 논문은 웰라시안, 파레토, 비협력 나이시 균형 조건 하에서 동적 수익 함수를 최적화하기 위해 유클리드 경로 적분 방법의 새로운 응용을 제안한다. 파인먼 유형의 경로 적분과 위크 회전을 활용함으로써, 기존의 본트랴긴 방법이 실패하는 비선형 확률 미분 게임(예: 메르톤-가르만-해밀토니안 시스템)을 해결할 수 있으며, 선형 제약 조건과 확률적 동역학 하에서 비가산적 볼록 전략에 대한 닫힌 형태의 해를 도출할 수 있다.

ABSTRACT

A Euclidean path integral is used to find an optimal strategy for a firm under a Walrasian system, Pareto optimality and a non-cooperative feedback Nash Equilibrium. We define dynamic optimal strategies and develop a Feynman type path integration method to capture all non-additive convex strategies. We also show that the method can solve the non-linear case, for example Merton-Garman-Hamiltonian system, which the traditional Pontryagin maximum principle cannot solve in closed form. Furthermore, under Walrasian system we are able to solve for the optimal strategy under a linear constraint with a linear objective function with respect to strategy.

연구 동기 및 목표

• 기존 최적 제어 기법이 실패하는 환경에서 동적 수익 함수 최적화를 위한 경로 적분 기반 방법을 개발하는 것.
• 유클리드 경로 적분을 사용하여, 메르톤-가르만-해밀토니안 시스템과 같은 비선형 시스템의 최적 제어 적용 범위를 확장하는 것.
• 웰라시안, 파레토, 비협력 피드백 나이시 균형이라는 세 경제 균형 프레임워크 하에서 최적 전략을 유도하는 것.
• 유계이고 완비된 함수 공간을 갖는 확률적 미분 게임 설정에서 경로 적분 공식의 수렴성 및 존재 조건을 설정하는 것.
• 선형 제약 조건과 선형 목표 함수 하에서 비퍼티urbation 경로 적분 접근법을 사용해 수익 극대화 문제를 해결하는 것.

제안 방법

• 모든 가능한 시장 점유율 및 전략 경로에 대해 통합하는 파인먼 유형의 경로 적분 공식을 사용하여 시간에 따른 누적 수익 적분의 기대값을 표현한다.
• 확률적 과정을 유클리드 작용 함수로 변환하기 위해 위크 회전을 적용하여 양자장 이론 기반 경로 적분 기법을 사용할 수 있도록 한다.
• 수익 함수 및 동역학 함수로부터 유도된 경로 적분의 핵심인 유클리드 작용 함수 $\mathcal{A}_{0,t}(x)$를 정의하며, 매끄럽고 유계인 도함수 조건 하에서 수렴성을 보장한다.
• 경로 적분의 절대 수렴성을 확보하기 위해 $\omega_\varepsilon(x)$ 함수를 사용한 정규화 체계를 도입하며, $\varepsilon \to 0$ 으로 한없이 간다.
• 소규모 시간 간격 동안 국소 전이 함수 $\Psi_{s,s+\Delta s}(x)$ 를 도입하여 점진적으로 전역 경로 적분 해를 구축하며, 확률적 동역학과의 일致성을 확보한다.
• 경로 적분 표현의 존재성과 수렴성을 보장하기 위해 수익 및 작용 함수의 매끄럽고 유계인 도함수 조건(가정 1 및 2)을 도입한다.

실험 결과

연구 질문

• RQ1 웰라시안, 파레토, 나이시 균형 제약 조건 하에서 비선형 확률적 미분 게임을 해결하기 위해 유클리드 작용 함수 기반 경로 적분 공식이 성립하는가?
• RQ2 파인먼 경로 적분 방법은 비가산적 볼록 전략을 확률적 동적 최적화 설정에서 어떻게 포괄할 수 있는가?
• RQ3 웰라시안, 파레토, 나이시 균형 제약 조건 하에서 동적 수익 함수에 대한 유클리드 경로 적분이 수렴하는 조건은 무엇인가?
• RQ4 메르톤-가르만-해밀토니안 시스템, 즉 비선형 확률적 제어 문제에 대해 이 방법이 닫힌 형태의 최적 전략을 도출할 수 있는가?
• RQ5 전략에 대한 선형 제약 조건과 선형 목표 함수는 경로 적분 공식의 해법 가능성과 구조에 어떤 영향을 미치는가?

주요 결과

• 경로 적분 공식은 기존의 고전적 본트랴진 최대 원리로는 해결할 수 없는 메르톤-가르만-해밀토니안 시스템을 닫힌 형태로 성공적으로 해결한다.
• 이 방법은 각 기업이 동일한 시장 동역학을 겪고 시간에 따라 기대 수익을 극대화하고자 하는 웰라시안 균형 하에서 최적 전략을 일관되게 도출하는 프레임워크를 제공한다.
• 파레토 최적성의 경우, 이 경로 적분 접근법은 기업 간 수익의 가중합을 극대화하며, 최적 전략은 단일 전역 작용 함수에서 도출된다.
• 비협력 피드백 나이시 균형의 경우, 이 방법은 각 기업의 최적 전략이 다른 기업의 전략이 고정되어 있다는 가정 하에서 일관된 해를 도출한다.
• 가정 1 및 2에 따라 수렴성이 엄밀히 확립되며, 이는 수익 및 작용 함수의 매끄럽고 유계인 도함수 조건을 요구한다.
• 위크 회전 이후 유클리드 작용 함수 $\mathcal{A}_{0,t}(x)$ 는 조건부 기대값 항이 $G[s,x(s),u(s)] \geq 0$ 일 때 비음수를 유지함으로써 물리적 및 경제적 해석 가능성을 유지한다.