[논문 리뷰] To Improve Cyber Resilience, Measure It

Alexander Kott, Igor Linkov|arXiv (Cornell University)|2021. 02. 18.

Information and Cyber Security참고 문헌 8인용 수 8

한 줄 요약

이 논문은 정적 고장 확률이 아닌 시간에 따라 변화하는 복구 및 적응 패턴에 초점을 맞춰 사이버 복원력을 엄밀하고 정량적으로 측정하는 프레임워크를 제안한다. 방법론의 신뢰성을 보장하기 위한 기준을 도입함으로써 의사결정자들이 사이버 사고에 대응하는 가시화되고 동적인 성능 지표를 통해 객관적으로 복원력을 평가하고 향상시킬 수 있도록 한다.

ABSTRACT

We are not very good at measuring -- rigorously and quantitatively -- the cyber security of systems. Our ability to measure cyber resilience is even worse. And without measuring cyber resilience, we can neither improve it nor trust its efficacy. It is difficult to know if we are improving or degrading cyber resilience when we add another control, or a mix of controls, to harden the system. The only way to know is to specifically measure cyber resilience with and without a particular set of controls. What needs to be measured are temporal patterns of recovery and adaptation, and not time-independent failure probabilities. In this paper, we offer a set of criteria that would ensure decision-maker confidence in the reliability of the methodology used in obtaining a meaningful measurement.

연구 동기 및 목표

• 시스템 신뢰성에 매우 중요함에도 불구하고 여전히 정량화가 부족한 사이버 복원력 측정의 핵심 격차를 해소하기 위해.
• 시간에 의존하지 않는 고장 확률에 의존하는 기존 접근 방식이 복원력의 동적 성격을 포착하지 못함을 밝히기 위해.
• 측정 가능한 시간에 따라 변화하는 복구 및 적응 행동에 기반한 방법론을 개발하여 복원력 평가에 대한 신뢰도를 향상시키기 위해.
• 사이버 복원력 제어의 효과성을 객관적으로 평가할 수 있도록 의사결정자들에게 신뢰할 수 있고 반복 가능한 기준을 제공하기 위해.
• 특정 보안 제어가 있는 경우와 없는 경우의 시스템 성능을 비교함으로써 증거 기반의 복원력 향상 전략을 가능하게 하기 위해.

제안 방법

• 정적 고장 확률에서 벗어나 사이버 사고 이후의 동적 시간 패턴인 복구 및 적응에 초점을 맞추기 위해.
• 장애 이후 시스템이 얼마나 빠르고 효과적으로 기능을 복원하는지 평가하는 측정 프레임워크를 제안하기 위해.
• 재현 가능성, 복원력 지표의 일관성 및 정당성 등을 포함한 방법론적 신뢰성 기준을 도입하기 위해.
• 복구 시간, 성능 저하 내성, 적응 반응 속도와 같은 운영 지표를 핵심 측정 요소로 사용하기 위해.
• 시스템 설계 및 제어 평가 과정에 복원력 측정을 통합하여 반복적 개선을 지원하기 위해.
• 신뢰성 있고 비교 가능한 시스템 간 및 조직 간 측정을 보장하기 위해 표준화되고 감사 가능한 측정 프로토콜의 필요성을 강조하기 위해.

실험 결과

연구 질문

• RQ1 정적 고장 확률에 의존하지 않고, 복원력의 동적이고 시간에 따라 변화하는 성격을 반영할 수 있는 사이버 복원력 측정 방법은 무엇인가요?
• RQ2 사이버 복원력 측정 방법론의 신뢰성과 신뢰도를 확보하기 위해 필요한 기준은 무엇인가요?
• RQ3 특정 보안 제어의 효과성을 복원력에 미치는 영향 측면에서 객관적으로 평가하는 방법은 무엇인가요?
• RQ4 강력한 사이버 복원력을 나타내는 데 가장 유의미한 복구 및 적응의 시간 패턴은 무엇인가요?
• RQ5 측정 기반 피드백 루프는 사이버 복원력 전략의 설계 및 구현을 어떻게 향상시킬 수 있나요?

주요 결과

• 시간에 따라 변화하는 복구 및 적응 패턴을 통해 사이버 복원력을 측정하면 정적 고장 확률에 비해 더 정확하고 실천 가능한 평가가 가능하다.
• 제안된 프레임워크는 특정 보안 제어가 있는 경우와 없는 경우의 시스템 복원력 간 객관적 비교를 가능하게 한다.
• 신뢰할 수 있는 측정은 방법론의 엄밀함, 재현 가능성, 정당성을 보장하는 기준을 준수해야 한다.
• 복구 시간, 적응 반응 속도와 같은 시간 지표는 복원력 성능을 정량화하는 데 핵심적인 역할을 한다.
• 표준화되고 반복 가능한 측정이 없으면 사이버 복원력 향상 조치는 검증되거나 신뢰받을 수 없다.
• 이 논문은 측정가능성이 뿐 아니라 복원력 공학 분야에서의 의미 있는 진전을 위해 필수적임을 입증한다.