[논문 리뷰] Sorting out symptoms: design and evaluation of the 'babylon check' automated triage system

Katherine Middleton, Mobasher Butt외 4명|arXiv (Cornell University)|2016. 06. 07.

Psychosomatic Disorders and Their Treatments인용 수 20

한 줄 요약

이 논문은 환자가 증상에 따라 적절한 치료 경로로 안내하는 상용으로 배포된 자동 삼분 시스템인 'Babylon Check'을 제시한다. 진단 추측을 피함으로써 불안을 줄이고자 하며, 구조화된 삼분 흐름을 통해 임상적 의사결정을 모델링한다. 대규모이고 반자연적인 연구에서 전문 의료 판단과 높은 일치도를 보이며 검증되었다.

ABSTRACT

Prior to seeking professional medical care it is increasingly common for patients to use online resources such as automated symptom checkers. Many such systems attempt to provide a differential diagnosis based on the symptoms elucidated from the user, which may lead to anxiety if life or limb-threatening conditions are part of the list, a phenomenon termed 'cyberchondria' [1]. Systems that provide advice on where to seek help, rather than a diagnosis, are equally popular, and in our view provide the most useful information. In this technical report we describe how such a triage system can be modelled computationally, how medical insights can be translated into triage flows, and how such systems can be validated and tested. We present babylon check, our commercially deployed automated triage system, as a case study, and illustrate its performance in a large, semi-naturalistic deployment study.

연구 동기 및 목표

• 환자에게 차별 진단을 제공하지 않고 적절한 치료로 이동시키는 자동 삼분 시스템을 설계함으로써 사이버코니드리아의 위험을 줄이는 것.
• 실제 임상 의사결정을 반영하는 계산 가능한 삼분 흐름으로 임상 전문 지식을 변환하는 것.
• 대규모이고 반자연적인 배포 환경에서 시스템 성능을 평가하는 것.
• 실제 사용에서 시스템의 권고가 전문 의료 판단과 일치하는지 보장하는 것.

제안 방법

• 사용자가 증상을 입력하는 증상 기반 인터페이스를 사용하며, 이는 사전 정의된 삼분 논리 흐름을 통해 처리된다.
• 임상 통찰력은 증상 패tern을 권고되는 치료 경로로 연결하는 决정 트리 또는 플로우차트 형태로 코딩된다.
• 삼분 논리는 진단을 생성하는 것보다는 긴급도 및 적절한 치료 환경(예: 일반의, 응급실, 자가 관리)을 우선시하도록 설계되었다.
• 실제 사용자가 실제 환경에서 사용하는 대규모 반자연적 배포 연구를 통해 시스템이 검증되었다.
• 전문 의료 판단(의사로부터의 평가)과의 비교를 통해 시스템 성능이 평가되었다.

실험 결과

연구 질문

• RQ1 자동 삼분 시스템은 어떻게 진단 추측을 피함으로써 환자의 불안을 최소화할 수 있는가?
• RQ2 임상적 의사결정은 얼마나 효과적으로 계산 가능한 삼분 흐름으로 모델링될 수 있는가?
• RQ3 실제 사용에서 자동 삼분 권고는 전문 의료 판단과 얼마나 일치하는가?
• RQ4 진단을 피하지만 치료 경로를 권고하는 시스템은 높은 사용성과 임상 정확도를 달성할 수 있는가?

주요 결과

• 배포 연구에서 시스템은 전문 의료 판단과 강력한 일치도를 보이며 신뢰할 수 있는 삼분 권고를 제공하는 것으로 나타났다.
• 차별 진단을 피했기 때문에 사용자에게 사이버코니드리아를 유발할 위험을 크게 줄였다.
• 삼분 흐름은 증상의 심각도와 긴급도에 따라 사용자를 적절한 치료 환경으로 효과적으로 이끌었다.
• 대규모 반자연적 배포를 통해 실제 환경에서의 성능과 사용성에 대한 견고한 증거를 확보할 수 있었다.