[論文レビュー] Scaling Ultrasound Volumetric Reconstruction via Mobile Augmented Reality

Kian Wei Ng, Yujia Gao+8 more|arXiv (Cornell University)|Feb 17, 2026

Digital Radiography and Breast Imaging被引用数 0

ひとこと要約

MARVUSは2D超音波とモバイルARを統合して低コストのキャリブレーションファ phantomとエッジベースのセグメンテーションを用い、3D結節を再構成。大規模なハードウェアなしで体積測定の精度を向上させ、ユーザー間のばらつきを低減。AR視覚は自信と使いやすさも向上させる。

ABSTRACT

Accurate volumetric characterization of lesions is essential for oncologic diagnosis, risk stratification, and treatment planning. While imaging modalities such as Computed Tomography provide high-quality 3D data, 2D ultrasound (2D-US) remains the preferred first-line modality for breast and thyroid imaging due to cost, portability, and safety factors. However, volume estimates derived from 2D-US suffer from high inter-user variability even among experienced clinicians. Existing 3D ultrasound (3D-US) solutions use specialized probes or external tracking hardware, but such configurations increase costs and diminish portability, constraining widespread clinical use. To address these limitations, we present Mobile Augmented Reality Volumetric Ultrasound (MARVUS), a resource-efficient system designed to increase accessibility to accurate and reproducible volumetric assessment. MARVUS is interoperable with conventional ultrasound (US) systems, using a foundation model to enhance cross-specialty generalization while minimizing hardware requirements relative to current 3D-US solutions. In a user study involving experienced clinicians performing measurements on breast phantoms, MARVUS yielded a substantial improvement in volume estimation accuracy (mean difference: 0.469 cm3) with reduced inter-user variability (mean difference: 0.417 cm3). Additionally, we prove that augmented reality (AR) visualizations enhance objective performance metrics and clinician-reported usability. Collectively, our findings suggests that MARVUS can enhance US-based cancer screening, diagnostic workflows, and treatment planning in a scalable, cost-conscious, and resource-efficient manner. Usage video demonstration available (https://youtu.be/m4llYcZpqmM).

研究の動機と目的

• 3D超音波体積再構成のコストを削減し、臨床分野全体でスケーラビリティを向上させる。
• 標準の2D-USシステムと最小限の追加ハードウェアで機能するモバイルARワークフローを開発する。
• 結節の体積測定の体積精度を向上させ、操作者間のばらつきを低減する。
• USベースのワークフローにおける臨床医の信頼と使いやすさを高めるARビジュアルを提供する。

提案手法

• 新規の単一部USファ phantomを用いた較正で単一フレーム空間較正を実現。
• プローブ、ファ phantom、カメラ上のArUcoマーカーを用いた外部較正でT_US_Probeと関連変換を導出。
• 自由手の2D-US走査からテクスチャ付3D点群へノードゥルを再構成するため、マルチカメラ姿勢追跡と固定参照フレームを使用。
• EdgeTAMを用いた半自動ノードゥルセグメンテーションと多フレーム伝搬により密な点群を取得。
• ボクセル化とマーチングキューブ法でメッシュを生成し体積推定とAR可視化を行う。
• 実再構成メッシュとライブUSデータを重ね合わせ、メッシュと画像の交点を表示して再構成品質を評価するAR検証。

実験結果

リサーチクエスチョン

• RQ1 MARVUSは標準的な手動楕円近似と比較して超音波ベースの体積測定の精度を改善するか。
• RQ2 ARビジュアライゼーションは3D-USノードゥル体積推定における操作者間ばらつきを低減するか。
• RQ3 提案された較正と再構成ワークフローは一般的な超音波深度とゲインで頑健か。
• RQ4 ARビジュアライゼーションの統合はモバイル3D-USシステムの信頼感と使いやすさの認知を高めるか。

主な発見

• MARVUSはエクスパートのみの試験で対照法に対する体積推定精度を有意に向上させた（ベースラインとの比較に対する具体的数値が報告されている）。
• ARを強化したワークフローはReconのみと比較して体積誤差と操作者間ばらつきをさらに低減した。
• 提案された単一フレーム・マーカーベース phantomの較正再現性は、複数のワイヤーベース手法と比べ競争力があり、特殊ハードウェアを回避して優位。
• 参加者はARビジュアルを用いたMARVUSにより自信を高めたと報告し、システムの使いやすさはARで穏やかに向上した。