[논문 리뷰] A para-model agent for dynamical systems

Loïc Michel|arXiv (Cornell University)|2012. 02. 21.

Extremum Seeking Control Systems참고 문헌 26인용 수 5

한 줄 요약

이 논문은 비모델 기반 및 도함수 기반 제어 프레임워크인 파라모델 에이전트(PMA)를 소개한다. 이는 비선형 동적 시스템을 동시에 안정화시키고 극값 탐색 최적화를 수행할 수 있도록 표준 비모델 기반 제어를 일반화한다. 수치 도함수 대신 초기화 함수를 도입하고 내부 순환 업데이트를 통합함으로써 PMA는 스위치 제어, 비최소상태 위상, 비선형 시스템에 대한 강건한 제어를 가능하게 하며, 기울기 계산 없이도 최적 운영 지점으로 유도한다.

ABSTRACT

Consider a dynamical system $u \mapsto x, \dot{x} = f_{nl}(x,u)$ where $f_{nl}$ is a nonlinear (convex or nonconvex) function, or a combination of nonlinear functions that can eventually switch. We present, in this preliminary work, a generalization of the standard model-free control, that can either control the dynamical system, given an output reference trajectory, or optimize the dynamical system as a derivative-free optimization based "extremum-seeking" procedure. Multiple applications are presented and the robustness of the proposed method is studied in simulation.

연구 동기 및 목표

• 비모델 기반 제어를 확장하여 명시적인 시스템 모델 또는 도함수 없이도 비선형, 스위치 제어, 비최소상태 위상 동적 시스템을 다룰 수 있도록 한다.
• 출력 기준 궤적 재정의를 통해 도함수 계산 없이도 극값 탐색 제어를 가능하게 하는 도함수 기반 최적화 전략을 개발한다.
• 수치 도함수 계산 대신 초기화 함수를 도입하여 불안정하거나 스위치 제어 시스템의 제어에서 강건성을 향상시킨다.
• 기계적, 전기적, 생물학적, 히스테리시스 시스템을 포함한 다양한 적용 분야에서 PMA의 성능을 검증한다.
• 미래 연구를 위한 PMA 제어기의 이론적 안정성 분석 기반을 마련한다.

제안 방법

• PMA 제어기는 수치 도함수를 대체하기 위해 지수 기준 함수 $ k_α e^{-k_β k} $ 기반의 순환 내부 상태 $ u_k^i $ 를 사용하는 이산 시간 제어 법칙을 사용한다.
• 제어 입력 $ u_k $ 는 내부 적분 항 $ ⋯ $ 와 추적 오차 $ \varepsilon_{k-1} = y^*_k - y_{k-1} $ 를 포함하는 피드백 항의 곱으로 계산되며, 이는 이득 $ K_p $ 와 $ K_i $ 를 사용한다.
• 강건성을 향상시키기 위해 스위치 제어 또는 불안정한 시스템에서 유연하게 작동하도록 초기화 함수 $ k_α e^{-k_β k} $ 가 도입되어 내부 상태의 부드러운 기준 궤적을 제공한다.
• 제어기는 출력 $ y $ 가 기준 $ y^* $ 쪽으로 유도되는 닫힌 루프 구조로 적용되며, 극값 탐색 모드에서는 $ y^* $ 가 재정의되어 시스템이 최소값으로 유도되도록 한다.
• 최적화를 위해 출력 기준 $ y^* $ 는 비선형 함수 $ f_{nl}(x) $ 의 최소값을 따라가도록 설계되어 기울기 계산 없이도 최적 해에 수렴하도록 한다.
• 선형 필터 $ Q $ 는 비다이나믹 함수에 최소한의 동적 특성을 제공하기 위해 선택적으로 사용되며, $ f_{nl} $ 이 이미 다이나믹한 경우 필수는 아니다.

실험 결과

연구 질문

• RQ1 PMA 제어기는 명시적인 시스템 모델이나 도함수 없이도 비선형, 스위치 제어, 비최소상태 위상 시스템을 안정화시킬 수 있는가?
• RQ2 초기화 함수 $ k_\alpha e^{-k_\beta k} $ 의 사용이 기존의 수치 도함수 기반 비모델 기반 제어보다 강건성을 어떻게 향상시키는가?
• RQ3 출력 기준 궤적 재정의를 통해 시스템을 최소값으로 유도함으로써 PMA는 도함수 기반 최적화를 얼마나 잘 수행할 수 있는가?
• RQ4 PMA는 모터 제어, 탄도 시스템, HIV-1 모델링, 자성 히스테리시스 제어와 같은 실제 응용 분야에서 어떻게 성능을 발휘하는가?
• RQ5 비볼록 및 제약 조건이 있는 최적화 문제에서 PMA가 최적 해로 수렴하는 조건는 무엇인가?

주요 결과

• PMA는 비선형 전기 시스템에서 $ dq $ 프레임 기반 3상 모터 제어에 성공적으로 적용되어 강건성을 입증했다.
• PMA는 스위치 비최소상태 위상 시스템, 특히 에프스타프 프레임을 실험적으로 안정화했으며, 프랑스 전기공학 심포지엄(2016)에서 검증되었다.
• 극값 탐색 모드에서 PMA는 1차원 볼록 함수 $ (x-30)^2 $ 의 최소값으로 수렴하며, 최적값에서 멀리 떨어진 초기 조건에서도 수렴이 관찰되었다.
• 시간에 따라 변하는 최소값, 예를 들어 $ (x-30)^2 \to (x-40)^2 $ 가 알려지지 않은 시간 $ t_1 $ 에 변화할 경우, PMA는 재초기화 없이도 새로운 최소값을 적응적으로 추적한다.
• 제약 조건이 있는 비볼록 1차원 함수 $ \min_{x,y} 10(1.5\cos(x) - x) + \exp(x-5) + 100 $ 에 대해 PMA는 전역 최소값으로 수렴하며, 그 결과는 그림 38에 도시되어 있다.
• PMA는 다양한 비선형 및 스위치 시스템에서 시뮬레이션을 통해 강건성을 입증했으며, 성능은 $ y^* $, $ K_p $, $ K_i $, $ k_\alpha $, $ k_\beta $ 의 선택에 따라 달라지지만, 최적의 튜닝 방법은 아직 체계화되지 않았다.