[論文レビュー] A computer simulation protocol to assess the accuracy of a Radio Stereometric Analysis (RSA) image processor according to the ISO-5725

Marco Bontempi, Umberto Cardinale+6 more|arXiv (Cornell University)|Jun 6, 2020

Medical Imaging Techniques and Applications参考文献 24被引用数 7

ひとこと要約

本論文は、ISO-5725基準に準拠した放射線立体分析（RSA）画像処理ソフトウェアの精度を評価するためのコンピュータシミュレーションプロトコルを提示している。合成X線画像を用い、制御された変数のもとで評価を行う。このプロトコルにより、真正性と精度の定量的評価が可能となり、0.092±0.14 mm（管位置）、0.22±0.46 mm／0.26±0.22°（モデル位置）というサブミリメートルレベルの高精度が得られた。また、イタリア・リゾリ病院における独自RSAソフトウェアの検証において、隠れたソフトウェアバグを効果的に検出・是正した。

ABSTRACT

Radio-Stereometric-Analysis and x-ray fluoroscopy are radiological techniques that require dedicated software to process data. The accurate calibration of these software is therefore critical. The aim of this work is to produce a protocol for evaluating the softwares' accuracy according to the ISO-5725. A series of computer simulations of the radiological setup and images were employed. The noise level of the images was also changed to evaluate the accuracy with different image qualities. The protocol was tested on a custom software developed by the authors. Radiological scene reconstruction accuracy was of (0.092 +- 0.14) mm for tube position, and (0.38 +- 0.31) mm / (2.09 +- 1.39) deg for detectors oriented in a direction other than the source-detector direction. In the source-detector direction the accuracy was of (2.68 +- 3.08) mm for tube position, and of (0.16 +- 0.27) mm / (0.075 +- 1.16) deg for the detectors. These disparate results are widely discussed in the literature. Model positioning and orientation was also highly accurate: (0.22 +- 0.46) mm / (0.26 +- 0.22) deg. Accuracy was not affected by the noise level. The protocol was able to assess the accuracy of the RSA system. It was also useful to detect and fix hidden bugs. It was also useful to detect and resolve hidden bugs in the software, and in optimizing the algorithms.

研究の動機と目的

• ISO-5725基準に準拠したRSA画像処理ソフトウェアの精度を評価するための標準化された、シミュレーションベースの手法を開発すること。
• 実験的ベンチマークを超える、信頼性があり定量的なRSAソフトウェアの検証手法の不足を補うこと。
• 制御された繰り返し可能なシミュレーションを通じて、異なるRSAソフトウェアシステム間の客観的比較を可能にすること。
• 検証段階でRSA再構成パイプライン内の隠れたアルゴリズム的バグを検出・是正すること。
• ノイズ、幾何学的要因、再構成誤差を考慮したソフトウェア精度の基準基準を提供すること。

提案手法

• 定義された光源、検出器、物体の位置・姿勢に基づいて合成X線画像を生成するためのカスタムシミュレーションソフトウェアを開発した。
• X線光源および検出器の幾何学的配置、物体の配置、画像ノイズレベル（0–22.5％）を制御した。
• ビームトレーサー法を用いて、実際の減衰およびノイズモデルを反映した3次元物体特徴を2次元検出器面に投影することで、レントゲン画像を生成した。
• 合成画像は、カスタムRSAソフトウェアによって処理され、マーカーおよび物体の3次元位置・姿勢が再構成された。
• ISO-5725の定義に従い、真正性（シミュレートされた真値からのバイアス）と精度（繰り返し測定の再現性）を用いて精度を定量化した。
• プロトコルは、イタリア・リゾリ病院におけるカスタムRSAソフトウェアに適用され、複数のノイズおよび幾何的配置条件下で結果が検証された。

実験結果

リサーチクエスチョン

• RQ1 コンピュータシミュレーションプロトコルは、ISO-5725基準に準拠したRSAソフトウェア精度の信頼性があり定量的な評価を提供できるか？
• RQ2 画像ノイズは、制御されたシミュレーションにおけるRSA画像処理アルゴリズムの真正性と精度にどのように影響するか？
• RQ3 シミュレーションは、RSA再構成パイプライン内の隠れたソフトウェアバグをどの程度検出できるか？
• RQ4 光源-検出器配置における幾何的制約によって生じる3次元再構成精度の固有の限界は何か？
• RQ5 独自開発RSAソフトウェアの精度指標は、既存のベンチマークおよび他のモーショントラッキングシステムと比較していかなる差異を示すか？

主な発見

• RSAソフトウェアは、X線管位置に関して(0.092±0.14) mmの真正性を達成し、モデル位置に関しては(0.22±0.46) mm／(0.26±0.22)°を示し、高い精度を示した。
• 検出器再構成精度は、光源-検出器方向に(0.38±0.31) mmおよび(2.09±1.39)°であり、直交方向には著しく低い精度(2.68±3.08) mmおよび(0.16±0.27) mm／(0.75±1.16)°を示し、内在的な幾何的制限が明らかになった。
• プロトコルにより、ノイズに敏感なマーカー検出の深刻なソフトウェアバグが検出された。このバグは新しい前処理アルゴリズムにより是正され、ノイズレベルに依存しない精度が達成された。
• バグ是正後、画像ノイズの影響は顕著に認められず、画像品質の変動にかかわらず耐障害性が確認された。
• シミュレーションベースのアプローチにより、系統的誤差（バイアス）とランダム誤差（精度）の正確な定量化が可能となり、アルゴリズムの最適化に向けた補正マップの作成が可能になった。
• 結果として、シミュレーションベースの検証が、最先端の静的モデルベースRSAシステムと同等の精度を達成できることを示し、Vicon や Kinect などの商業システムを真正性の面で上回った。