[논문 리뷰] Accessible Melanoma Detection using Smartphones and Mobile Image Analysis

Thanh-Toan Do, Tuan Hoang외 7명|arXiv (Cornell University)|2017. 11. 27.

Cutaneous Melanoma Detection and Management참고 문헌 48인용 수 5

한 줄 요약

이 논문은 일반 스마트폰을 활용한 모바일 헬스 시스템을 제안하여 가시광선 영상만을 사용해 악성 피부종양의 조기 검출을 가능하게 한다. 경량 피부 병변 분할, 새로운 영상 특징, 최적화된 특징 선택을 조합하여 임상 데이터셋(184개 피부 병변)에서 90% 이상의 특이도를 확보하면서도 민감도 89.09%를 달성하였으며, 사용성 및 수용성 문제는 HCI 평가를 통해 해결하였다.

ABSTRACT

We investigate the design of an entire mobile imaging system for early detection of melanoma. Different from previous work, we focus on smartphone-captured visible light images. Our design addresses two major challenges. First, images acquired using a smartphone under loosely-controlled environmental conditions may be subject to various distortions, and this makes melanoma detection more difficult. Second, processing performed on a smartphone is subject to stringent computation and memory constraints. In our work, we propose a detection system that is optimized to run entirely on the resource-constrained smartphone. Our system intends to localize the skin lesion by combining a lightweight method for skin detection with a hierarchical segmentation approach using two fast segmentation methods. Moreover, we study an extensive set of image features and propose new numerical features to characterize a skin lesion. Furthermore, we propose an improved feature selection algorithm to determine a small set of discriminative features used by the final lightweight system. In addition, we study the human-computer interface (HCI) design to understand the usability and acceptance issues of the proposed system.

연구 동기 및 목표

• 일반 스마트폰을 활용한 저비용, 접근성 있는 조기 악성 피부종양 검출 모바일 솔루션 개발.
• 환경적 왜곡과 계산 자원 제약 등 스마트폰 촬영 영상에서 발생하는 문제 해결.
• 실시간, 현장에서의 분류가 가능한 경량형, 디바이스 내 처리 시스템 설계.
• 새로운 영상 특징과 최적화된 특징 선택을 통한 정확도 향상.
• HCI 연구를 통한 사용성 및 사용자 수용성 평가를 통해 실생활 구현에 필요한 주요 설계 과제 규명.

제안 방법

• 경량 피부 탐지 기법과 두 가지 빠른 분할 알고리즘을 조합한 계층적 분할 방법을 통해 피부 병변을 국소화한다.
• 가시광선 스마트폰 영상에서 색상 변화와 가장자리 비정상성을 캡처하기 위해 새로운 수치적 영상 특징 세트를 제안한다.
• 계산 부하를 줄이기 위해 단순화되고 특징적인 특징 조합을 식별하는 개선된 특징 선택 알고리즘을 적용한다.
• 저자원 사용을 유지하면서도 분류 성능을 향상시키기 위해 융합 전략을 적용한 분류기 어레이를 구성한다.
• 모든 시스템 기능을 스마트폰 내부에 완전히 구현하여 개인정보 보호와 실시간 동작을 보장한다.
• 사용자 신뢰, 인식, 인터페이스 설계 평가를 위해 반구조화된 인터뷰와 케이스 스터디를 통한 HCI 평가를 수행한다.

실험 결과

연구 질문

• RQ1 가시광선 영상만을 사용하는 스마트폰 기반 시스템이 악성 피부종양 검출에서 높은 민감도와 특이도를 달성할 수 있는가?
• RQ2 자원 제약이 있는 모바일 플랫폼에서 영상 분할 및 특징 추출을 어떻게 최적화할 수 있는가?
• RQ3 스마트폰 촬영 영상에서 피부과적 징후를 가장 잘 반영하는 새로운 영상 특징은 무엇인가?
• RQ4 정확도를 유지하면서도 계산 부하를 최소화하기 위해 특징 선택을 어떻게 개선할 수 있는가?
• RQ5 일반 사용자를 대상으로 자가 진단 악성 피부종양 앱을 배포할 때 발생하는 사용성 및 수용성 과제는 무엇인가?

주요 결과

• 117개의 양성 피부종양과 67개의 악성 피부종양으로 구성된 데이터셋에서 특이도 90% 이상에서 민감도 89.09%를 달성하였다.
• 제안된 계층적 분할 방법은 다양한 조명 조건과 영상 품질에서도 효과적으로 피부 병변을 국소화하였다.
• 새로운 영상 특징은 색상 변화와 가장자리 비정상성과 같은 핵심 피부과적 징후를 잘 포착하여 분류 정확도를 크게 향상시켰다.
• 최적화된 특징 선택 알고리즘은 특징 수를 단순화하고 고도로 특징적인 조합으로 줄여 효율적인 디바이스 내 처리를 가능하게 하였다.
• HCI 평가 결과, 특히 노인층 사용자들이 직접 진단 결과보다 위험도 확률 기반의 투명한 결과를 요구하며 잠재적 피해에 대한 우려를 표명하였다.
• 참가자들은 해석 가능성의 중요성을 강조하며, 진단의 근거가 되는 과정을 설명해 줄 것을 요청하여 신뢰를 구축하고 의료진 방문을 유도하고자 하였다.