Skip to main content
QUICK REVIEW

[論文レビュー] Unsupervised CT Metal Artifact Learning using Attention-guided beta-CycleGAN

Jung-Hyun Lee, Jawook Gu|arXiv (Cornell University)|Jul 7, 2020
Advanced X-ray and CT Imaging参考文献 40被引用数 5
ひとこと要約

本稿では、アテンションガイドドβ-CycleGANフレームワークを用いて、教師あり学習に必要なペアデータが存在しないCT画像における金属アーチファクト低減(MAR)手法を提案する。分散パrameter βと畳み込みブロックアテンションモジュール(CBAM)を統合することで、ストリークアーチファクトやシェーディングアーチファクトを効果的に抑制しながら解剖学的詳細を保持し、合成データおよび実臨床データの両方で最先端の性能を達成した。

ABSTRACT

Metal artifact reduction (MAR) is one of the most important research topics in computed tomography (CT). With the advance of deep learning technology for image reconstruction,various deep learning methods have been also suggested for metal artifact removal, among which supervised learning methods are most popular. However, matched non-metal and metal image pairs are difficult to obtain in real CT acquisition. Recently, a promising unsupervised learning for MAR was proposed using feature disentanglement, but the resulting network architecture is complication and difficult to handle large size clinical images. To address this, here we propose a much simpler and much effective unsupervised MAR method for CT. The proposed method is based on a novel beta-cycleGAN architecture derived from the optimal transport theory for appropriate feature space disentanglement. Another important contribution is to show that attention mechanism is the key element to effectively remove the metal artifacts. Specifically, by adding the convolutional block attention module (CBAM) layers with a proper disentanglement parameter, experimental results confirm that we can get more improved MAR that preserves the detailed texture of the original image.

研究の動機と目的

  • 教師あり学習に必要な実際の金属非影響画像と金属影響画像のペアがほとんど存在しないCT画像における金属アーチファクト低減(MAR)の課題に対処すること。
  • モード崩壊を回避し、局所的な金属物体に起因する複雑でグローバルに広がるアーチファクトを処理できる、軽量で効果的な教師なし深層学習手法を開発すること。
  • 最適輸送理論から導出されたβパラメータを用いて、アーチファクト生成とアーチファクトなし画像再構成の特徴の分離を向上させること。
  • CBAMアテンションモジュールを組み込むことで表現学習を強化し、ネットワークがチャネルおよび空間次元の両方で顕著なアーチファクト領域に注目できるようにすること。
  • 実臨床データにおける本手法の頑健性を検証し、既存の教師ありおよび教師なしMAR手法を上回ることを示すこと。

提案手法

  • 最適輸送理論に基づいて導出された新しいβ-CycleGANアーキテクチャを採用し、βがアーチファクトなし画像の再構成と金属アーチファクトの生成の相対的重要性を制御する。
  • 生成器ネットワークに畳み込みブロックアテンションモジュール(CBAM)を統合し、空間的およびチャネルワイドな特徴に注目することで、特徴マップを再キャリブレーションし、アーチファクト領域の局在化を向上させる。
  • 訓練目的として、実際の金属影響画像と再構成されたアーチファクトなし画像間のサイクル整合性を強制し、画像間変換が可逆的かつ安定であることを保証する。
  • 損失関数には adversarial loss、cycle-consistency loss、およびβ重み付き再構成損失を組み合わせ、アーチファクトなし画像の忠実度を強調する。
  • ペアのクリーン画像を必要とせず、実際の金属影響CTスキャンのみを用いて教師なしで学習を行う。
  • 分散パrameter βは、正確なアーチファクト生成と高忠実度のアーチファクトなし画像再構成のトレードオフをバランスさせるために調整される。

実験結果

リサーチクエスチョン

  • RQ1教師あり学習に必要なペアデータが存在しない状況でも、教師なし深層学習フレームワークがCT画像における金属アーチファクトを効果的に低減できるか?
  • RQ2CBAMのようなアテンション機構の統合は、CT画像における金属アーチファクトの局在化と低減にどのように寄与するか?
  • RQ3分散パrameter βがβ-CycleGANフレームワークにおけるアーチファクト除去の品質と安定性に与える影響は何か?
  • RQ4本手法は、既存の教師なしMAR手法と比較して、細かな解剖学的テクスチャや構造をよりよく保持できるか?
  • RQ5合成またはシミュレートされたデータのみで学習した場合、本モデルは実臨床CTスキャンにどのように一般化するか?

主な発見

  • 提案されたアテンションガイドドβ-CycleGANは、ベースラインのCycleGANおよび他の教師なし手法と比較して優れた金属アーチファクト低減効果を示し、視覚的品質と構造的保持性の両面で顕著な向上を達成した。
  • CBAMの統合により、特に背景領域における残存アーチファクトが著しく低減され、金属インプラントの誤って除去を防ぐことができた。
  • 分散パrameter βを1から10に増加させることで、アーチファクト抑制が顕著に向上し、βがアーチファクトなし画像再構成の強調に果たす役割を示した。
  • 本手法は、金属源から遠く離れた領域でさえも、細かな解剖学的テクスチャや詳細を再構成画像に保持しており、グローバルなアーチファクト処理の有効性を示した。
  • 非アーチファクト画像に対してもモデルは頑健であり、金属のないスキャンに適用しても画像品質の低下が最小限に抑えられた。
  • アブレーションスタディにより、βおよびCBAMの両方が不可欠な構成要素であることが確認され、いずれかを除去すると、アーチファクト低減性能および画像忠実度に顕著な低下が見られた。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。