[논문 리뷰] Toward Accurate and Accessible Markerless Neuronavigation

Ziye Xie, Oded Schlesinger외 8명|arXiv (Cornell University)|2026. 02. 04.

Gaze Tracking and Assistive Technology인용 수 0

한 줄 요약

본 논문은 RGB-D 및 스테레오 RGB 카메라와 얼굴 priors를 사용하여 표식 없는 신경내비게이션(markerless neuronavigation) 방법을 개발하고 머리 자세를 추적하며, 50명의 대상에서 기존의 마커 기반 시스템과 비교해 중앙값 편차가 약 2.0–2.3 mm 및 ~2°에 도달했다.

ABSTRACT

Neuronavigation is widely used in biomedical research and interventions to guide the precise placement of instruments around the head to support procedures such as transcranial magnetic stimulation. Traditional systems, however, rely on subject-mounted markers that require manual registration, may shift during procedures, and can cause discomfort. We introduce and evaluate markerless approaches that replace expensive hardware and physical markers with low-cost visible and infrared light cameras incorporating stereo and depth sensing combined with algorithmic modeling of the facial geometry. Validation with $50$ human subjects yielded a median tracking discrepancy of only $2.32$ mm and $2.01°$ for the best markerless algorithms compared to a conventional marker-based system, which indicates sufficient accuracy for transcranial magnetic stimulation and a substantial improvement over prior markerless results. The results suggest that integration of the data from the various camera sensors can improve the overall accuracy further. The proposed markerless neuronavigation methods can reduce setup cost and complexity, improve patient comfort, and expand access to neuronavigation in clinical and research settings.

연구 동기 및 목표

• 피험자 부착 마커를 대체하여 신경내비게이션의 불편함과 작업 흐름의 복잡성을 줄이려는 동기를 부여한다.
• RGB-D 및 스테레오 RGB 데이터를 사용한 표식 없는 머리 추적 파이프라인을 개발하고 평가한다.
• 머리 사전 정보를 도입하여 머리 모양 추정을 정규화하고 추적 강건성을 향상시키려는.
• 다양한 피험자 코호트를 대상으로 여러 표식 없는 접근법을 기존의 마커 기반 기준 시스템과 비교한다.

제안 방법

• 단안 RGB, 스테레오 RGB, 깊이 기반 추적의 세 가지 표식 없는 추적 전략을 개발한다.
• MediaPipe를 사용하여 468개의 얼굴 랜드마크를 감지하고 추적에 대한 견고한 하위 집합을 선택한다.
• 단안 및 스테레오 설정에서 PnP를 통한 SE(3) 최적화로 머리 자세 추정을 공식화한다.
• 깊이 기반 추적의 경우 피험자별 안면 템플릿을 구축하고 Chamfer 거리로 정렬한다.
• 모든 방법에 PHM(개인화된 머리 모델)을 더해 3D 형태가변 머리 모델을 피팅하여 완전한 머리 표현을 만든다.
• 50명의 피험자 코호트에서 표준 NDI Polaris Vicra 시스템과 방법들을 검증하고 비교한다.

실험 결과

연구 질문

• RQ1 표식 없는 머리 추적이 전통적 마커 기반 신경내비게이션과 비교해 임상적으로 관련된 정확도를 달성할 수 있는가?
• RQ2 표식 없는 머리 자세 추정에서 단안, 스테레오 및 깊이 데이터 간의 비교는 어떠한가?
• RQ3 개인화된 머리 사전 정보를 도입하면 추적 견고성과 정확도가 향상되는가?
• RQ4 다른 머리 움직임과 자세가 표식 없는 추적 성능에 미치는 영향은 무엇인가?
• RQ5 표식 없는 추적이 표준화된 조건에서 이전의 표식 없는 방법(MarLe)에 비해 어떤 성능을 보이는가?

주요 결과

• 최적의 표식 없는 방법은 마커 기반 시스템과의 비교에서 중앙값 이동/회전 편차가 약 2.0–2.3 mm 및 약 2.0–2.0°에 가까운 것으로 나타났다.
• PHM 여부에 상관없이 스테레오 RGB는 단안 RGB 방법 및 깊이 만으로 추적보다 상당히 우수했다.
• PHM을 포함한 깊이 기반 추적도 견고하게 수행되어 낮은 RMSD와 비교적 낮은 실패율을 달성했다.
• 표식 없는 방법은 이전의 표식 없는 접근법(MarLe)에 비해 현저한 정확도 이점을 보였고 설치 비용 및 복잡성을 줄일 가능성을 보였다.
• 50명의 참가자를 대상으로 한 포괄적 평가가 다양한 안면 특징에 걸친 일반화 가능성을 보여주었다.