Skip to main content
QUICK REVIEW

[論文レビュー] RhoanaNet Pipeline: Dense Automatic Neural Annotation

Seymour Knowles-Barley, Verena Kaynig|arXiv (Cornell University)|Nov 21, 2016
Advanced Neural Network Applications参考文献 12被引用数 22
ひとこと要約

RhoanaNetは、U-Netベースの膜分離とGalaベースの3次元領域凝集を用いて、電子線 microscopy 画像における高密度な自動神経注釈を実現するディープラーニング駆動のパイプラインであり、ベンチマークデータセットで最高のFスコア0.9438を達成した。このフレームワークにより、オープンソースのコードとデータを提供することで、再現可能なベンチマーク手法を用いた高スループット・高精度なコネクトーム再構築が可能になった。

ABSTRACT

Reconstructing a synaptic wiring diagram, or connectome, from electron microscopy (EM) images of brain tissue currently requires many hours of manual annotation or proofreading (Kasthuri and Lichtman, 2010; Lichtman and Sanes, 2008; Seung, 2009). The desire to reconstruct ever larger and more complex networks has pushed the collection of ever larger EM datasets. A cubic millimeter of raw imaging data would take up 1 PB of storage and present an annotation project that would be impractical without relying heavily on automatic segmentation methods. The RhoanaNet image processing pipeline was developed to automatically segment large volumes of EM data and ease the burden of manual proofreading and annotation. Based on (Kaynig et al., 2015), we updated every stage of the software pipeline to provide better throughput performance and higher quality segmentation results. We used state of the art deep learning techniques to generate improved membrane probability maps, and Gala (Nunez-Iglesias et al., 2014) was used to agglomerate 2D segments into 3D objects. We applied the RhoanaNet pipeline to four densely annotated EM datasets, two from mouse cortex, one from cerebellum and one from mouse lateral geniculate nucleus (LGN). All training and test data is made available for benchmark comparisons. The best segmentation results obtained gave $V^ ext{Info}_ ext{F-score}$ scores of 0.9054 and 09182 for the cortex datasets, 0.9438 for LGN, and 0.9150 for Cerebellum. The RhoanaNet pipeline is open source software. All source code, training data, test data, and annotations for all four benchmark datasets are available at www.rhoana.org.

研究の動機と目的

  • 電子線 microscopy (EM) データセットから大規模なコネクトームを手作業で再構築するという増大する課題に対処すること。特に、1 mm³あたり1 PBに達する巨大なサイズのため、手作業でのアノテーションは現実的ではない。
  • 最先端のディープラーニング技術を用いて、EM画像ボリュームにおける自動セグメンテーションのスループットと正確性を向上させること。
  • 4つの高密度にアノテートされたEMデータセットと真値アノテーションを提供することで、コネクトミクスにおける再現可能なベンチマークフレームワークを確立すること。
  • U-Netベースの膜検出とGalaベースの3次元凝集を改善することで、自動セグメンテーションの品質を高め、手作業での検証作業への依存度を低減すること。
  • www.rhoana.orgを通じてオープンソースのソフトウェア、トレーニングデータ、テストデータ、アノテーションを公開することで、コミュニティ全体でのコネクトミクス分野の進展を促進すること。

提案手法

  • KerasとTheanoを用いて、2次元EM画像から高解像度の膜確率マップを生成するU-Net畳み込みニューラルネットワークを採用した。
  • ECS Cortexデータセットのため、トレーニングボリュームを小さくするために、入力パッチサイズを540×540ピクセルに縮小した改良版U-Netアーキテクチャを適用した。
  • 3次元領域凝集にはGala (Nunez-Iglesias et al., 2014) を使用し、連続断層間の2次元セグメンテーションを統合して、幾何学的に整合性のある3次元ニューロン再構築を実現した。
  • 大規模ボリュームを処理するため、ブロック単位で並列処理が可能な、非効率的でない並列処理パイプラインを実装し、隣接するブロック間の重複セグメンテーションを後続で統合した。
  • MATLABからC++およびPythonへの移行によりパイプラインを最適化し、実行時間の大幅な向上を達成した。
  • 特に小規模なトレーニングセット(例:小脳)において一般化性能を向上させるために、ランダム回転、反転、非線形変形などのデータ拡張技術を適用した。

実験結果

リサーチクエスチョン

  • RQ1ディープラーニングベースの膜分離は、EMデータセットにおける自動コネクトーム再構築の正確性とスループットを顕著に向上させることができるか?
  • RQ2Galaベースの3次元凝集の統合は、従来の統合手法と比較して、ニューロンセグメンテーションの品質をどのように向上させるか?
  • RQ3事前学習済みU-Netを特定の組織タイプ(例:ミエリン被漿線維 vs. 非ミエリン被漿線維)に微調整することで、シナプス茎やミエリン被膜などの微細構造のセグメンテーションがどの程度向上するか?
  • RQ4コネクトミクスの多様な神経組織タイプ(皮質、小脳、LGN、ECS Cortex)において、コントラスト、ノイズ、構造的複雑さの違いを考慮して、RhoanaNetパイプラインの性能はどの程度か?
  • RQ5真値アノテーションを備えたオープンなベンチマークデータセットは、再現可能でコミュニティ主導のコネクトミクスアルゴリズム開発を促進できるか?

主な発見

  • S1皮質データセットでは、$V^{ ext{Info}}_{ ext{F-score}}$が0.9054、$V^{ ext{Rand}}_{ ext{F-score}}$が0.8478を記録し、優れたセグメンテーション性能を示した。
  • LGNデータセットでは、$V^{ ext{Info}}_{ ext{F-score}}$が最高の0.9438を達成し、低コントラストでアーティファクトが多発するデータにおいても優れた性能を示した。
  • 小脳データセットでは、非常に小さなトレーニングセットであったにもかかわらず、$V^{ ext{Info}}_{ ext{F-score}}$が0.9150に達し、データ拡張の有効性が顕著に現れた。
  • 入力パッチサイズを540×540ピクセルに縮小したECS Cortexデータセットでは、$V^{ ext{Info}}_{ ext{F-score}}$が0.9182を達成し、コンテキストの縮小による精度低下がほとんどなかった。
  • パイプラインのモジュラー設計により、膜分類や領域凝集といったコンponentsを個別に改善でき、直接的な手法比較が可能になった。
  • www.rhoana.orgでソースコード、トレーニングデータ、テストデータ、アノテーションを公開することで、再現可能なベンチマークとコミュニティ主導のコネクトミクス分野の進展が可能になった。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。