[논문 리뷰] Long-Term Average Impulse and Singular Control of a Growth Model with Two Revenue Sources

K. L. Helmes, R. H. Stockbridge외 1명|arXiv (Cornell University)|2026. 01. 14.

Economic theories and models인용 수 0

한 줄 요약

이 논문은 한 차원 확산으로 두 가지 수익원을 가진 시스템에서 장기 평균 임펄스 제어 및 관련 특이 제어 문제를 renewal 이론과 준-변분 불평등(QVI)을 사용하여 최적의 정책을 명시적으로 분석하고 해를 구한다.

ABSTRACT

This paper analyzes and explicitly solves a class of long-term average impulse control problems and a related class of singular control problems. The underlying process is a general one-dimensional diffusion with appropriate boundary behavior. The model is motivated by applications such as the optimal long-term management of renewable resources and financial portfolio management. A large class of admissible policies is identified over which the agent seeks to maximize her long-term average reward, consisting of a running reward and income from either discrete impulses or singular actions. The long-term expected total reward and its relation to overtaking optimality is also considered. Sensitivity analysis with regard to the parameters of the impulse control model are performed. Key connections between the impulse and singular control problems are displayed.

연구 동기 및 목표

• 재생 가능 자원 관리와 금융 포트폴리오 맥락에서 발생하는 장기 평균 임펄스 제어 및 특이 제어 문제를 동기 부여하고 모델링한다.
• 허용 가능한 임펄스 정책의 큰 클래스를 식별하고, $(s,S)$ 유형(여기서는 $(w,y)$) 정책이 최적일 때를 특징화한다.
• 임펄스 제어와 특이 제어 간의 연관성을 확립하고, 특히 초과적 최적성 고려를 포함한다.
• 장기 보상과 공급 속도를 표현하고 분석하기 위한 renewal 이론 프레임워크를 개발한다.
• 모델 매개변수에 대한 민감도 분석을 수행하고 임펄스 제어와 특이 제어 간의 관계를 명확히 한다.

제안 방법

• 상태를 조건 2.1에 따른 경계 거동을 가진 1차원 확산으로 모델링한다.
• 임펄스 정책을 $R=\bigl\\u0303(\\tau_k,Y_k)\bigr\\to$로 정의하고 제어된 과정 $X^R$를 도출한다(식(1.2)).
• $(w,y)$-정책을 도입하고 재생 논리를 이용하여 $F(w,y;p,K,\\beta)$ 함수로 그 보상을 표현한다(식(3.3)).
• $(w,y)$ 하의 정상 분포를 특징지하고 사이클 길이를 퍼텐셜 함수 $\\xi$와 $g$에 연결한다(식(3.4, 3.5)).
• QVI를 이용하여 장기 평균 임펄스 제어 문제를 형식화하고 분석하며, 최적 정책의 존재성과 유일성에 대한 결과를 포함한다(섹션 4).
• 고정 비용이 0에 수렴하는 극한으로 특이 제어 문제를 고찰하고 초과적 최적성을 논의한다(섹션 7).

실험 결과

연구 질문

• RQ1 이 확산 설정에서 장기 평균 이익을 극대화하기 위한 최적의 임펄스 전략은 무엇인가?
• RQ2 어떤 조건에서 고유한 $(w,y)$ 정책이 장기 평균 보상을 극대화하는가?
• RQ3 임펄스 제어와 특이 제어 문제는 어떻게 연결되며, 고정 비용이 소멸할 때의 극한 거동은 무엇인가?
• RQ4 정적 분포와 renewal 구조가 정책의 가치와 최적성에 어떻게 정보를 주는가?
• RQ5 매개변수 $(p,K,\beta)$와 실행 보상 함수 $c$에 대한 최적 정책의 민감도는 어떠한가?

주요 결과

• $(w,y)$ 정책의 장기 평균 보상에 대한 명시적 형태를 $F(w,y;p,K,\tilde\beta)$로 도출한다.
• $(w,y)$ 정책 하의 정상 밀도는 속도 측정과 스케일 함수가 포함된 조각식으로 주어진다(식(3.4)).
• (0,z0) 구간의 z는 어떤 $(w,y)$ 정책에 의해 달성될 수 있으며 허용 공급 속도에 대한 상한 z0를 설정한다(제3.3절).
• 적절한 조건하에서 고유한 최적의 $(w,y)$ 정책이 존재하고, 임펄스 보상 잠재량인 G와 F*가 관련 QVI를 풀이한다(섹션 4).
• 임펄스 제어 해는 K → 0일 때 특이 제어 해로 수렴하여 두 문제를 연결한다(섹션 7).
• 민감도 분석은 최적 정책과 가치가 $(p,K,\beta)$ 및 실행 보상 $c$에 어떻게 반응하는지 보여준다(섹션 6).