[논문 리뷰] Value of structural health information in partially observable stochastic environments

Charalampos Andriotis, Konstantinos G. Papakonstantinou외 1명|arXiv (Cornell University)|2019. 12. 28.

Probabilistic and Robust Engineering Design참고 문헌 64인용 수 5

한 줄 요약

이 논문은 부분적으로 관찰 가능한 마르코프 결정 과정(POMDP) 내에서 정보의 가치(VoI)와 구조적 건강 모니터링의 가치(VoSHM)를 수식화하여 노후화되는 공학 시스템에서 점검 및 모니터링 전략을 최적화한다. 연구는 POMDP 정책이 본질적으로 VoI를 최대화함을 보이며, 구조적 건강 정보가 국소적으로 최적인 정책과 달리 장기적인 의사결정 비용을 일관되게 향상시킴을 입증한다.

ABSTRACT

Efficient integration of uncertain observations with decision-making optimization is key for prescribing informed intervention actions, able to preserve structural safety of deteriorating engineering systems. To this end, it is necessary that scheduling of inspection and monitoring strategies be objectively performed on the basis of their expected value-based gains that, among others, reflect quantitative metrics such as the Value of Information (VoI) and the Value of Structural Health Monitoring (VoSHM). In this work, we introduce and study the theoretical and computational foundations of the above metrics within the context of Partially Observable Markov Decision Processes (POMDPs), thus alluding to a broad class of decision-making problems of partially observable stochastic deteriorating environments that can be modeled as POMDPs. Step-wise and life-cycle VoI and VoSHM definitions are devised and their bounds are analyzed as per the properties stemming from the Bellman equation and the resulting optimal value function. It is shown that a POMDP policy inherently leverages the notion of VoI to guide observational actions in an optimal way at every decision step, and that the permanent or intermittent information provided by SHM or inspection visits, respectively, can only improve the cost of this policy in the long-term, something that is not necessarily true under locally optimal policies, typically adopted in decision-making of structures and infrastructure. POMDP solutions are derived based on point-based value iteration methods, and the various definitions are quantified in stationary and non-stationary deteriorating environments, with both infinite and finite planning horizons, featuring single- or multi-component engineering systems.

연구 동기 및 목표

• 부분적으로 관찰 가능하고 확률적인 환경에서 구조적 건강 정보의 가치를 정량화하기 위한 이론적 및 계산적 프레임워크를 수립하기.
• 점검 및 모니터링 전략이 종종 국소적으로 최적인, 이른바 탐욕적인 정책에 기반하는 도로 및 인프라 시스템의 의사결정 갭을 메우기.
• POMDP 내에서 단계별 및 수명주기 정의의 VoI와 VoSHM를 형식화하여 점검 및 모니터링의 객관적 스케줄링을 가능하게 하기.
• 벨만 방정식의 성질과 최적 가치 함수를 이용해 VoI와 VoSHM의 경계를 분석하기.
• 정보 확보로 인한 장기적 비용 감소를 수량화함으로써, POMDP 기반 정책이 국소적으로 최적인 정책보다 우수함을 보여주기.

제안 방법

• 벨만 방정식을 사용하여 최적 가치 함수를 유도함으로써, POMDP 프레임워크 내에서 단계별 및 수명주기 VoI와 VoSHM 지표를 수식화한다.
• 점기반가치 반복(point-based value iteration) 방법을 적용하여 복잡한 부분적으로 관찰 가능한 환경에서의 POMDP 해를 효율적으로 계산한다.
• 무한 및 유한 계획 수평을 갖는 단일 및 다중 구성요소 시스템에 대해 정적 및 비정적 노후화 과정을 모델링한다.
• 최적 가치 함수의 구조와 POMDP 동역학을 바탕으로 VoI 및 VoSHM의 이론적 경계를 유도한다.
• 정보 확보로 인한 장기적 비용 감소를 수량화하기 위해 POMDP 기반 정책과 국소적으로 최적인 정책을 비교한다.
• 간헐적 또는 영구적인 모니터링 데이터를 갖는 다양한 공학 시스템 구성에 대해 지표를 정량화한다.

실험 결과

연구 질문

• RQ1 어떻게 부분적으로 관찰 가능한 마르코프 결정 과정(POMDP) 프레임워크 내에서 노후화되는 공학 시스템에 대해 정보의 가치(VoI)를 공식적으로 정의하고 경계를 설정할 수 있는가?
• RQ2 구조적 건강 모니터링(SHM)은 모니터링 없음 또는 국소적으로 최적의 전략과 비교해 장기적인 의사결정 비용을 어느 정도 향상시키는가?
• RQ3 단계별 및 수명주기 VoI와 VoSHM 지표는 점검 및 모니터링 스케줄링에 있어 어떤 차이를 갖는가?
• RQ4 POMDP 정책은 각 의사결정 단계에서 정보의 가치(VoI)를 어떻게 본질적으로 활용하여 최적의 관측 행동을 이끌어내는가?
• RQ5 VoI와 VoSHM의 이론적 경계는 무엇이며, 이는 POMDP의 최적 가치 함수의 성질과 어떻게 관련되어 있는가?

주요 결과

• POMDP 정책은 장기적 비용을 최소화하는 방식으로 정보의 가치(VoI)를 본질적으로 활용하여 관측 행동을 이끌어낸다.
• SHM 또는 점검에서 얻는 영구적 또는 간헐적 정보는 국소적으로 최적인 정책과 달리 정책의 장기적 비용 성능을 일관되게 향상시킨다.
• 벨만 방정식과 최적 가치 함수의 구조를 이용하여 VoI 및 VoSHM의 이론적 경계를 도출하였다.
• 점기반가치 반복 방법은 무한 및 유한 계획 수평을 갖는 단일 및 다중 구성요소 시스템에 대해 POMDP 해를 성공적으로 계산한다.
• 수명주기 VoSHM 지표는 시스템 수명 주기 동안 모니터링로 인해 발생하는 총 기대 비용 감소를 정량화하며, SHM 투자에 대한 의사결정 이론적 근거를 제공한다.
• 비정적 노후화 환경에서도 정보의 가치가 유의미하게 유지되며, POMDP 정책은 탐욕적인 대안보다 변화하는 시스템 상태에 더 효과적으로 적응한다.