[논문 리뷰] Augmented Probability Simulation Methods for Non-cooperative Games.

Tahir Ekin, Roi Naveiro외 2명|arXiv (Cornell University)|2019. 10. 10.

Simulation Techniques and Applications참고 문헌 38인용 수 7

한 줄 요약

이 논문은 완전 정보 하에서 비협력적 순차 게임의 부분게임 완전均衡을 효율적으로 근사하고, 불완전 정보 하에서의 적대적 위험 분석을 위해 확장된 확률 시뮬레이션 프레임워크를 도입한다. 시뮬레이션 기반 계산을 향상시켜 사이버보안 및 반테러와 같은 복잡하고 불확실한 환경에서 견고한 의사결정 지원을 가능하게 한다.

ABSTRACT

We present a robust decision support framework with computational algorithms for decision makers in non-cooperative sequential setups. Existing simulation based approaches can be inefficient when there is a large number of feasible decisions and uncertain outcomes. Hence, we provide a novel alternative to solve non-cooperative sequential games based on augmented probability simulation. We propose approaches to approximate subgame perfect equilibria under complete information, assess the robustness of such solutions and, finally, approximate adversarial risk analysis solutions when lacking complete information. This framework could be especially beneficial in application domains such as cybersecurity and counter-terrorism.

연구 동기 및 목표

• 많은 가능 결정과 불확실한 결과를 가진 대규모 비협력적 순차 게임에서 기존의 시뮬레이션 기반 방법의 비효율성을 해결한다.
• 향상된 시뮬레이션 기법을 사용하여 완전 정보 하에서 부분게임 완전균형을 근사하는 계산 프레임워크를 개발한다.
• 게임 매개변수 또는 믿음에 대한 변화에 대한 균형 해의 안정성 평가를 수행한다.
• 완전 정보가 확보되지 않은 경우에도 적대적 위험 분석을 처리할 수 있도록 프레임워크를 확장한다.
• 결정 품질이 핵심적인 고위험 분야인 사이버보안 및 반테러와 같은 분야에서의 실용적 적용을 가능하게 한다.

제안 방법

• 큰 결정 공간에서의 표본 추출 효율성을 향상시키기 위해 확장된 확률 시뮬레이션을 활용하여 균형에 도달하는 경로에 집중한다.
• 순차 게임에서 부분게임 완전균형을 근사하기 위해 시뮬레이션 루프에 역행추론 원리를 통합한다.
• 모델 입력을 변형하고 균형 결과의 안정성 측정을 통해 복원력 분석을 수행한다.
• 정보가 불완전할 경우 베이지안 업데이트와 믿음 모델링을 사용하여 적대적 행동을 시뮬레이션한다.
• 시뮬레이션과 위험 평가를 결합하여 불확실성 하에서 의사결정 지원 출력을 생성한다.
• 복잡하고 다단계적인 의사결정 과정에서의 불확실한 보상에 대응할 수 있도록 확장 가능한 알고리즘을 설계한다.

실험 결과

연구 질문

• RQ1 어떻게 시뮬레이션 기반 방법을 개선하여 대규모 비협력적 순차 게임에서 부분게임 완전균형을 효율적으로 근사할 수 있는가?
• RQ2 게임 매개변수나 믿음에 대한 변화에 대해 계산된 균형이 얼마나 안정적인가?
• RQ3 확장된 확률 시뮬레이션은 정보가 불완전한 적대적 환경에서 의사결정 지원에 효과적으로 기여할 수 있는가?
• RQ4 복잡한 게임 구조에서 기존의 시뮬레이션 또는 분석적 방법과 비교해 본다면, 제안된 프레임워크는 성능과 정확도 면에서 어떤가?
• RQ5 사이버보안 또는 반테러와 같은 실제 도메인에서 이 프레임워크는 어떻게 실질적인 의사결정 지원을 제공할 수 있는가?

주요 결과

• 확장된 확률 시뮬레이션 프레임워크는 기존의 표준 시뮬레이션 방법에 비해 부분게임 완전균형 근사에서 계산 효율성을 크게 향상시킨다.
• 프레임워크는 게임 매개변수나 믿음 구조의 변화에 대한 민감도를 정량화함으로써 균형의 복원력 평가를 가능하게 한다.
• 완전 정보가 확보되지 않은 경우에도 적대적 위험 분석 해법을 효과적으로 근사할 수 있다.
• 이 방법은 사이버보안 및 반테러와 같은 분야에서 흔히 볼 수 있는 복잡하고 순차적이며 불확실한 환경에서 확장 가능한 의사결정 지원을 가능하게 한다.
• 시뮬레이션 내부에 역행추론 원리를 통합함으로써 균형 해에의 수렴성이 향상된다.
• 이 접근법은 대규모 비협력적 게임에서 정확한 균형 계산의 대안으로 실용적이고 계산 가능하다.