[논문 리뷰] MessageGuard: A Browser-based Platform for Usable, Content-Based Encryption Research

Scott Ruoti, Jeff Andersen외 3명|arXiv (Cornell University)|2015. 10. 30.

User Authentication and Security Systems참고 문헌 36인용 수 8

한 줄 요약

MessageGuard는 기존 웹 애플리케이션에 사용자 친화적인 콘텐츠 기반 암호화를 신속하게 프로토타이핑하고 평가할 수 있도록 해주는 브라우저 기반 플랫폼이다. 안전한 암호 연산, 모듈식 확장성, 공통 코드베이스를 제공함으로써 개발 부담을 줄이고, Gmail, 페이스북 채팅 등과의 안전한 통합을 지원하며, A/B 테스트, 사용성 연구를 가능하게 하여 사용자 테스트에서 SUS 점수 80.0을 기록했다.

ABSTRACT

This paper describes MessageGuard, a browser-based platform for research into usable content-based encryption. MessageGuard is designed to enable collaboration between security and usability researchers on long-standing research questions in this area. It significantly simplifies the effort required to work in this space and provides a place for research results to be shared, replicated, and compared with minimal confounding factors. MessageGuard provides ubiquitous encryption and secure cryptographic operations, enabling research on any existing web application, with realistic usability studies on a secure platform. We validate MessageGuard's compatibility and performance, and we illustrate its utility with case studies for Gmail and Facebook Chat.

연구 동기 및 목표

• 실제 웹 애플리케이션에 사용자 친화적인 콘텐츠 기반 암호화를 통합하는 데 오랫동안 지속된 과제를 해결한다.
• 사용성 및 암호학 분야의 연구자들이 접근하기 어려운 높은 장벽을 낮추기 위해 즉시 사용할 수 있고 확장 가능한 플랫폼을 제공한다.
• 사용성 연구에서 혼동 요소를 최소화함으로써 경쟁 암호화 설계 간 직접 비교를 가능하게 한다.
• 애플리케이션 제공업체의 협조 없이도 암호화 인터페이스의 안전하고 실제 세계 테스트를 지원한다.
• 공동으로 관리되는 버전 제어 코드 패치를 통해 사용성 연구자와 보안 연구자 간 협업을 촉진한다.

제안 방법

• 클라이언트 측에서 사용자 데이터를 격리하고 암호화하는 데 브라우저 기반 보안 오버레이를 활용함으로써 웹 애플리케이션은 항상 암호화된 콘텐츠만 처리하도록 보장한다.
• 연구자가 키 관리나 UI와 같은 특정 구성 요소만 수정할 수 있도록 모듈식이고 패치 기반 아키텍처를 제공함으로써 전체 시스템을 다시 작성할 필요 없이 개선이 가능하다.
• 북마크릿과 콘텐츠 스크립트를 통해 기존 웹 애플리케이션(예: Gmail, 페이스북 채팅)과 통합함으로써 백엔드 변경 없이도 원활한 리모델링을 가능하게 한다.
• 시스템 사용성 척도(SUS)를 사용하여 제어된 연구 다수에서 프로토타입의 사용성에 정량적 평가를 수행한다.
• 다른 구성 요소는 동일하게 유지하고 오직 수정된 구성 요소만 다를 수 있도록 하여 경쟁 설계 간 A/B 테스트를 지원한다.
• 사용자가 익숙한 실제 세계 환경에서 암호화를 장기간 사용할 수 있도록 해, 장기적인 사용성 연구를 가능하게 한다.

실험 결과

연구 질문

• RQ1 브라우저 기반 플랫폼이 사용자 친화적인 콘텐츠 기반 암호화 시스템을 프로토타이핑하고 평가하는 데 필요한 노력의 양을 크게 줄일 수 있는가?
• RQ2 MessageGuard는 실제 세계의 사용성 연구에서 경쟁 설계 간 직접적이고 통제 가능한 비교를 어느 정도 지원할 수 있는가?
• RQ3 Gmail과 페이스북 채팅과 같은 널리 사용되는 웹 애플리케이션에 콘텐츠 기반 암호화 시스템을 통합했을 때 사용자 친화도는 어떠한가?
• RQ4 웹 애플리케이션으로부터 암호화 연산을 신뢰성 있게 격리시킬 수 있는가? 이는 사용성이나 성능을 손상시키지 않는다.
• RQ5 연구자들이 기존 웹 인터페이스에 최소한의 변경만으로 MessageGuard를 통해 높은 사용성 점수(SUS ≥ 80)를 달성할 수 있는가?

주요 결과

• MessageGuard는 보안 이메일 프로토타입 Pwm의 개발을 약 150시간 내에 성공적으로 완료하여 빠른 프로토타이핑 능력을 입증했다.
• 51명의 참가자가 참여한 사용성 연구에서 Pwm 프로토타입은 SUS 점수 80.0을 기록했으며, 이는 SUS로 평가된 시스템 중 88번째 백분위수에 해당한다.
• 이전 연구에서의 사용자 피드백은 암호화 세부 정보의 과도한 투명성으로 인한 신뢰도 저하 문제를 드러냈으며, 이는 인터페이스 재설계를 통해 해결되었다.
• 기초적 보급 연구에서 참가자 92%가 친구 및 가족이 Pwm을 쉽게 사용할 수 있을 것이라고 평가하여 강력한 사용자 친화도와 학습 용이성을 시사했다.
• MessageGuard는 혼동 요소가 최소화된 상태에서 경쟁 설계의 A/B 테스트 및 사용성 평가를 성공적으로 지원하여 비교 연구에 대한 유용성을 입증했다.
• MessageGuard의 안전한 암호화 오버레이 덕분에 웹 애플리케이션에 노출된 것은 오직 암호화된 데이터뿐이었으며, 이로 인해 안전하고 기능적인 시스템에서 현실적인 사용성 테스트가 가능했다.