[논문 리뷰] A computer simulation protocol to assess the accuracy of a Radio Stereometric Analysis (RSA) image processor according to the ISO-5725

Marco Bontempi, Umberto Cardinale외 6명|arXiv (Cornell University)|2020. 06. 06.

Medical Imaging Techniques and Applications참고 문헌 24인용 수 7

한 줄 요약

이 논문은 제어된 변수를 가진 합성 X선 영상과 함께 ISO-5725 기준에 따라 방사선 입체 분석(RSA) 영상 처리기의 정확도를 평가하기 위한 컴퓨터 시뮬레이션 프로토콜을 제시한다. 이 프로토콜은 정밀도와 진정성의 정량적 평가를 가능하게 하며, 0.092±0.14 mm(관 위치 기준), 0.22±0.46 mm/0.26±0.22°(모델 위치 기준)의 고해상도 정확도를 입증하였고, 이stituto Ortopedico Rizzoli에서 개발한 맞춤형 RSA 소프트웨어의 검증 과정에서 숨겨진 소프트웨어 버그를 성공적으로 탐지하고 수정하였다.

ABSTRACT

Radio-Stereometric-Analysis and x-ray fluoroscopy are radiological techniques that require dedicated software to process data. The accurate calibration of these software is therefore critical. The aim of this work is to produce a protocol for evaluating the softwares' accuracy according to the ISO-5725. A series of computer simulations of the radiological setup and images were employed. The noise level of the images was also changed to evaluate the accuracy with different image qualities. The protocol was tested on a custom software developed by the authors. Radiological scene reconstruction accuracy was of (0.092 +- 0.14) mm for tube position, and (0.38 +- 0.31) mm / (2.09 +- 1.39) deg for detectors oriented in a direction other than the source-detector direction. In the source-detector direction the accuracy was of (2.68 +- 3.08) mm for tube position, and of (0.16 +- 0.27) mm / (0.075 +- 1.16) deg for the detectors. These disparate results are widely discussed in the literature. Model positioning and orientation was also highly accurate: (0.22 +- 0.46) mm / (0.26 +- 0.22) deg. Accuracy was not affected by the noise level. The protocol was able to assess the accuracy of the RSA system. It was also useful to detect and fix hidden bugs. It was also useful to detect and resolve hidden bugs in the software, and in optimizing the algorithms.

연구 동기 및 목표

• ISO-5725 기준에 따라 RSA 영상 처리 소프트웨어의 정확도를 평가하기 위한 표준화된, 시뮬레이션 기반 방법을 개발하기 위해.
• 실험적 벤치마크를 초월해 신뢰할 수 있고 정량적인 RSA 소프트웨어 검증 방법의 부족을 보완하기 위해.
• 통제된 반복 가능한 시뮬레이션을 통해 서로 다른 RSA 소프트웨어 시스템 간의 객관적 비교를 가능하게 하기 위해.
• 검증 과정에서 RSA 재구성 파이프라인 내 숨겨진 알고리즘 버그를 탐지하고 수정하기 위해.
• 노이즈, 기하학적 요건, 재구성 오차를 고려한 소프트웨어 정확도 기준 표준을 제공하기 위해.

제안 방법

• 정의된 원천, 검출기 및 물체의 위치/방향에 기반해 합성 X선 영상을 생성하기 위한 맞춤형 시뮬레이션 소프트웨어를 개발하였다.
• X선 원천 및 검출기 기하학, 물체 배치, 영상 노이즈 수준(0–22.5%) 등 변수를 제어하였다.
• 실제 감쇠 및 노이즈 모델을 반영한 빔 트레이서 알고리즘을 사용하여 3차원 물체 특징을 2차원 검출기 평면에 투영함으로써 방사선 영상을 생성하였다.
• 시뮬레이션된 영상은 맞춤형 RSA 소프트웨어에 의해 마커 및 물체의 3차원 위치와 방향을 재구성하는 데 처리되었다.
• 정확도는 ISO-5725 정의에 따라 정량화되었으며, 진정성(시뮬레이션 기반 참값에서의 편향)과 정밀도(반복 측정의 재현성)로 정의되었다.
• 이 프로토콜은 Istituto Ortopedico Rizzoli에서 개발한 맞춤형 RSA 소프트웨어에 적용되었으며, 다양한 노이즈 및 기하 구조 조건에서 결과가 검증되었다.

실험 결과

연구 질문

• RQ1 컴퓨터 시뮬레이션 프로토콜이 ISO-5725 기준에 따라 RSA 소프트웨어 정확도를 신뢰할 수 있고 정량적으로 평가할 수 있는가?
• RQ2 이미지 노이즈는 통제된 시뮬레이션에서 RSA 영상 처리 알고리즘의 진정성과 정밀도에 어떤 영향을 미치는가?
• RQ3 시뮬레이션을 통해 RSA 재구성 파이프라인 내 숨겨진 소프트웨어 버그를 어느 정도 탐지할 수 있는가?
• RQ4 원천-검출기 구성의 기하학적 제약으로 인해 발생하는 3차원 재구성 정확도의 본질적 한계는 무엇인가?
• RQ5 맞춤형 RSA 소프트웨어의 정확도 지표는 기존 기준 및 다른 운동 캡처 시스템과 비교해 어떻게 나타나는가?

주요 결과

• RSA 소프트웨어는 X선 관 위치 기준으로 (0.092±0.14) mm의 진정성을 달성하였고, 모델 위치 기준으로는 (0.22±0.46) mm/(0.26±0.22)°로 높은 정확도를 보였다.
• 검출기 재구성 정확도는 원천-검출기 방향에서 (0.38±0.31) mm 및 (2.09±1.39)°였고, 수직 방향에서는 (2.68±3.08) mm 및 (0.16±0.27) mm/(0.75±1.16)°로 상당히 낮은 정확도를 보였으며, 이는 본질적인 기하학적 제약을 드러냈다.
• 이 프로토콜은 노이즈에 민감한 마커 검출 버그를 식별하였고, 새로운 사전처리 알고리즘을 도입함으로써 이 문제를 해결하여 정확도가 노이즈 수준과 무관하게 유지되도록 하였다.
• 버그 수정 후에는 노이즈 수준이 정확도에 유의미한 영향을 미치지 않았으며, 이는 다양한 영상 품질 조건에서도 강건함을 시사한다.
• 시뮬레이션 기반 접근은 체계적 오차(편향)와 임의 오차(정밀도)의 정밀한 정량화를 가능하게 하여 알고리즘 개선을 위한 교정 지도 제작을 지원하였다.
• 결과적으로, 시뮬레이션 기반 검증이 최신 정적 모델 기반 RSA 시스템과 비교해 유사한 정확도를 달성할 수 있음을 입증하였고, Vicon 및 Kinect과 같은 상용 시스템보다 진정성 측면에서 뛰어난 성능을 보였다.