[論文レビュー] Accelerating Data Processing and Benchmarking of AI Models for Pathology

J. Andrew Zhang, Guillaume Jaume+3 more|ArXiv.org|Feb 10, 2025

AI in cancer detection被引用数 3

ひとこと要約

Trident を用いた拡張可能な WSI 処理と、Patho-Bench による基盤モデルの標準化・大規模ベンチマークの提供。 curated downstream tasks とデータ分割を備えた。

ABSTRACT

Advances in foundation modeling have reshaped computational pathology. However, the increasing number of available models and lack of standardized benchmarks make it increasingly complex to assess their strengths, limitations, and potential for further development. To address these challenges, we introduce a new suite of software tools for whole-slide image processing, foundation model benchmarking, and curated publicly available tasks. We anticipate that these resources will promote transparency, reproducibility, and continued progress in the field.

研究の動機と目的

• 病理学における全スライド画像処理および基盤モデルのベンチマークに対する、拡張可能で標準化されたツールの不足を解消する。
• 複数の染色にわたる大規模 WSI リポジトリを処理するための拡張可能なパイプラインを提供する。
• curated タスクと訓練・テスト分割を備えた多様な公開ベンチマーク（Patho-Bench）を提供し、基盤モデルを評価する。
• オープンソースソフトウェアを通じた透明性・再現性・進歩を促進する。
• 既存のワークフローへの新しい基盤モデルの容易な統合を促進する。

提案手法

• Trident は組織背景のセグメンテーション、パッチ作成、複数の事前学習済みパッチ及びスライドエンコーダを用いた特徴抽出を含む WSI 処理の Python パッケージ。
• Patho-Bench はタスクレベルの並列処理と標準化された評価フレームワークを備えた大規模 FM ベンチマーキングの Python ライブラリ。
• Patho-Bench データ分割は 42 のタスクを六つのファミリーに分類し、訓練-テスト分割とタスクメタデータを CSV および YAML 形式で提供。
• 評価フレームワークには線形プロービング、Cox 回帰、監視下微調整、ケース検索が含まれ、Trident 抽出特徴上で動作。
• システムは並列実験実行、GPU 負荷分散、自動的な結果集計をサポート。
• ワークフローはモジュール式・再利用可能・カスタムパイプラインへの適応性を持つよう設計されている。

実験結果

リサーチクエスチョン

• RQ1 大規模病理組織学データ上で基盤モデルのベンチマーキングを標準化・高速化するにはどうすればよいか。
• RQ2 病理 FM モデルの臨床的に関連する性能評価に最も効果的なタスクとデータ分割は何か。
• RQ3 統一ツールチェーンでパッチレベルおよびスライドレベルの表現と様々な評価戦略を透明に比較できるか。
• RQ4 病理 FM ベンチマーキングにおける組合せ的な実験空間を並列化・拡張処理でどのように管理できるか。
• RQ5 curated down-stream タスクの提供が再現性と進歩に与える影響は何か。

主な発見

• Trident は組織背景セグメンテーションと要求時のパッチ読込機能を備え、複数染色に跨る WSIs のスケーラブル処理を実現。
• Patho-Bench は 42 タスクと標準化された訓練-テスト分割を持つ大規模な公開ベンチマークを提供し、FM の総合的評価を可能にする。
• 結合フレームワークは複数の評価戦略と並列化実験をサポートし、大規模な組合せ空間を扱える。
• これらのリソースは透明性と再現性を向上させることを目的とし、新しい基盤モデルの追加が容易になるよう設計されている。