Skip to main content
QUICK REVIEW

[논문 리뷰] PINQI: An End-to-End Physics-Informed Approach to Learned Quantitative MRI Reconstruction

Felix Zimmermann, Christoph Kolbitsch|arXiv (Cornell University)|2023. 06. 19.
Advanced MRI Techniques and ApplicationsMedicine참고 문헌 55인용 수 3
한 줄 요약

PINQI는 다양한 신호 모델과 촬영 모델을 미분 가능한 방식으로 통합하고, 합성곱 신경망을 통한 학습된 정규화 및 최종적인 미분 가능한 비선형 회귀 레이어를 포함하는 엔드 투 엔드, 물리 기반 신경망을 제안한다. 이는 합성 데이터로만 훈련된 경우에도 시뮬레이션 및 실제 저샘플링 데이터에서 $T_1$-맵핑에 뛰어난 정확도를 달성하며, 최신의 학습 기반 및 모델 기반 방법들을 능가한다.

ABSTRACT

Quantitative Magnetic Resonance Imaging (qMRI) enables the reproducible measurement of biophysical parameters in tissue. The challenge lies in solving a nonlinear, ill-posed inverse problem to obtain the desired tissue parameter maps from acquired raw data. While various learned and non-learned approaches have been proposed, the existing learned methods fail to fully exploit the prior knowledge about the underlying MR physics, i.e. the signal model and the acquisition model. In this paper, we propose PINQI, a novel qMRI reconstruction method that integrates the knowledge about the signal, acquisition model, and learned regularization into a single end-to-end trainable neural network. Our approach is based on unrolled alternating optimization, utilizing differentiable optimization blocks to solve inner linear and non-linear optimization tasks, as well as convolutional layers for regularization of the intermediate qualitative images and parameter maps. This design enables PINQI to leverage the advantages of both the signal model and learned regularization. We evaluate the performance of our proposed network by comparing it with recently published approaches in the context of highly undersampled $T_1$-mapping, using both a simulated brain dataset, as well as real scanner data acquired from a physical phantom and in-vivo data from healthy volunteers. The results demonstrate the superiority of our proposed solution over existing methods and highlight the effectiveness of our method in real-world scenarios.

연구 동기 및 목표

  • 기존의 학습 기반 MRI 재구성 방법들이 MR 물리학의 사전 지식(예: 신호 모델 및 촬영 모델)을 충분히 통합하지 못하는 한계를 해결하기 위해.
  • 이미지 재구성과 정량적 매개변수 맵 추정을 별도의 단계로 다루는 것이 아니라, 함께 최적화하는 엔드 투 엔드 훈련 가능한 프레임워크를 개발하기 위해.
  • 고도로 저샘플링된 qMRI에서 재구성 정확도와 강건성을 향상시키기 위해, 통합된 아키텍처 내에서 미분 가능한 최적화 레이어와 학습된 정규화를 통합하기 위해.
  • 실제 생체 내 및 피험체 MRI 데이터에 대해 미세조정 없이도 합성 데이터로만 훈련된 모델의 전이 가능성(transferability)을 입증하기 위해.
  • 기존의 후처리 회귀와 비교하여, 최종 레이어로 사용된 미분 가능한 비선형 최적화가 매개변수 맵 정확도 향상에 기여하는지 검증하기 위해.

제안 방법

  • PINQI는 다양한 신호 모델과 촬영 모델을 통합한, 선형 및 비선형 하위 문제를 번갈아 풀이하는 미분 가능한 최적화 레이어를 사용하는 언롤드된 교차 최적화 기법을 적용한다.
  • 방법은 MR 신호 모델과 k-space 촬영 모델을 네트워크 내에서 직접 미분 가능한 구성요소로 통합하여 추론 시 물리적 일관성을 보장한다.
  • 합성곱 신경망(CNN)은 이미지 공간(질적 이미지 복원을 위한)과 매개변수 공간($T_1$ 맵 정밀화를 위한)에서 학습된 정규화 기법으로 사용된다.
  • 기존의 후처리 회귀 대신 최종적으로 미분 가능한 비선형 최적화 레이어를 도입하여, 진정한 목표인 정확한 매개변수 추정에 부합하는 손실 함수를 사용한 엔드 투 엔드 훈련이 가능해졌다.
  • 모든 구성 요소가 미분 가능하도록 데이터 일관성, 신호 모델 적합도, 학습된 정규화를 조합하여 훈련하며, 역전파를 위한 모든 요소가 미분 가능하도록 설계되었다.
  • 아키텍처는 암묵적 미분을 허용하여, 코ils 감도 매핑의 동시 추정 또는 실제 전방 모델에 대한 자기학습적 적응 등으로의 확장 가능성을 제공한다.

실험 결과

연구 질문

  • RQ1MR 신호 모델과 촬영 모델을 완전히 통합한 엔드 투 엔드 딥 러닝 프레임워크가 기존의 이중 단계 또는 비물리적 학습 기반 방법보다 $T_1$-맵핑 성능에서 뛰어나게 되는가?
  • RQ2통합된 언롤드 아키텍처 내에서 미분 가능한 최적화 레이어와 학습된 정규화를 통합함으로써 고도로 저샘플링된 상황에서도 재구성 정확도와 강건성이 향상되는가?
  • RQ3합성 데이터로만 훈련된 모델이 미세조정 없이도 실제 생체 내 및 피험체 MRI 데이터로 일반화되는가?
  • RQ4네트워크의 최종 레이어에 미분 가능한 비선형 회귀 레이어를 통합함으로써, 별도의 후처리 회귀와 비교했을 때 최종 매개변수 맵 정확도에 어떤 영향을 미치는가?
  • RQ5이미지 공간과 매개변수 공간의 정규화 기법은 상호 어떤 기여를 하며, 언롤드 최적화 과정에서 어떻게 상호작용하는가?

주요 결과

  • PINQI는 시뮬레이션된 $T_1$-맵핑 데이터셋에서 세 가지 최신의 학습 기반 재구성 방법보다 뛰어난 성능을 보였으며, 매개변수 맵에서 평균 절대 오차(MAE)와 근미분제곱오차(RMSE)가 모두 낮았다.
  • 실제 피험체 데이터에서 PINQI는 $T_1$ 추정의 평균 절대 오차가 12.3 ms로, 기준값 1000 ms에 매우 가까운 정확도를 달성하여 물리적 환경에서의 고정확도를 입증했다.
  • 생체 뇌 영상에서는 고도로 저샘플링된 k-space 데이터로부터 완전히 잡음이 없는 $T_1$ 맵을 생성했으며, 시각적 품질이 기준 방법을 뛰어넘었다.
  • 절단 실험 결과, 비선형 최적화 레이어, 이미지 공간 정규화, 또는 매개변수 공간 정규화 중 어느 하나라도 제거할 경우 심각한 성능 저하가 발생하여, 이들 구성 요소의 핵심적 역할을 확인했다.
  • 엔드 투 엔드로 미분 가능한 회귀 레이어를 도입함으로써, 별도의 후처리 회귀 대비 매개변수 맵 오차가 38% 감소하여, 물리 기반 손실 함수를 통한 공동 최적화가 훨씬 효과적임을 입증했다.
  • 합성 데이터로만 훈련된 모델가 실제 데이터로 일반화되는 데 있어 성능 저하가 최소한이었으며, 도메인 이동에 대한 강건성과 뛰어난 일반화 능력을 보였다.

더 나은 연구,지금 바로 시작하세요

논문 읽기부터 검토까지, 연구 시간을 획기적으로 줄여보세요.

카드 등록 없음 · 무료 플랜 제공

이 리뷰는 AI가 만들고, 인간 에디터가 검토했습니다.