Skip to main content
QUICK REVIEW

[論文レビュー] Robust neural circuit reconstruction from serial electron microscopy with convolutional recurrent networks

Drew Linsley, Junkyung Kim|arXiv (Cornell University)|Nov 28, 2018
Advanced Electron Microscopy Techniques and Applications参考文献 83被引用数 6
ひとこと要約

本論文は、連続電子顕微鏡からの神経回路再構成における最先端のディープラーニングモデルの一般化性能の低さを是正するため、ソースおよび組織に依存しない再構成(STAR)チャレンジを導入する。本研究では、短距離の水平接続と長距離のトップダウン接続を統合した新規のフィードバックゲート付き再帰ユニット(fGRU)アーキテクチャを提案し、STARベンチマークで91.7%の精度と41.4%の再現率を達成し、未学習の脳組織においても顕著に優れた性能を示した。

ABSTRACT

Recent successes in deep learning have started to impact neuroscience. Of particular significance are claims that current segmentation algorithms achieve "super-human" accuracy in an area known as connectomics. However, as we will show, these algorithms do not effectively generalize beyond the particular source and brain tissues used for training -- severely limiting their usability by the broader neuroscience community. To fill this gap, we describe a novel connectomics challenge for source- and tissue-agnostic reconstruction of neurons (STAR), which favors broad generalization over fitting specific datasets. We first demonstrate that current state-of-the-art approaches to neuron segmentation perform poorly on the challenge. We further describe a novel convolutional recurrent neural network module that combines short-range horizontal connections within a processing stage and long-range top-down connections between stages. The resulting architecture establishes the state of the art on the STAR challenge and represents a significant step towards widely usable and fully-automated connectomics analysis.

研究の動機と目的

  • 神経回路計測分野における現在のディープラーニングモデルの一般化性能の制限を是正すること。これらモデルは、新しい脳組織や画像取得ソースに適用した際に失敗する。
  • 再トレーニングやファインチューニングを必要とせず、多様な脳組織や画像設定に一般化可能な手法を開発すること。
  • 複雑なEMボリュームにおけるセグメンテーションの向上を図るため、局所的および長距離の文脈的情報を活用するニューラルネットワークアーキテクチャを設計すること。
  • 複数の種や画像モダリティをカバーする一般化性能の評価を可能にするため、STARというベンチマークを確立すること。
  • フィードバック接続が再帰ネットワークにおいて、神経細胞再構成タスクのセグメンテーション性能を向上させられることを実証すること。

提案手法

  • 層内での水平接続と上位層からのトップダウンフィードバックを統合した新規のフィードバックゲート付き再帰ユニット(fGRU)を提案し、文脈理解を向上させる。
  • fGRUモジュールをフラッドフィルインネットワーク(FFN)フレームワークに統合し、神経細胞セグメンテーションのエンドツーエンド学習を可能にする。
  • CREMI、FIB-25、SNEMI3Dを含むマルチソース・マルチ組織トレーニングデータセットを用いて、fGRUベースのモデルを学習させ、一般化性能を向上させる。
  • ハイパーパramータチューニングに依存せずにセグメンテーション品質を評価するパッチワイズ評価プロトコルを採用し、堅牢な性能測定を保証する。
  • アーキテクチャの深さとフィードバック機構の寄与を分離するために、深さとサイズを低減した制御モデル(FFN-CNN-Control)を採用する。
  • トレーニングデータとは異なる組織タイプおよび画像パrameterを持つBriggmanボリュームからの独立テストセットを用いて、モデルを評価する。

実験結果

リサーチクエスチョン

  • RQ11つの脳組織で学習したディープラーニングモデルは、連続電子顕微鏡において未学習の新規組織に効果的に一般化できるか?
  • RQ2再帰ネットワークにおける短距離の水平接続および長距離のトップダウン接続は、複雑なEM画像におけるセグメンテーション性能にどのように影響するか?
  • RQ3ゲート付き再帰ユニットにフィードバック接続を組み込むことで、標準的な畳み込み型または再帰型アーキテクチャを上回る一般化性能が向上するか?
  • RQ4アーキテクチャの深さとモデルサイズは、神経回路セグメンテーションタスクにおける一般化性能にどの程度影響を与えるか?
  • RQ5ファインチューニングなしに、統一されたモデルアーキテクチャが多様な生物および画像設定で高い性能を達成できるか?

主な発見

  • 最先端の3D U-Netおよび標準的なFFNモデルはSTARテストセットに一般化できず、ボリューム内バリデーションでは良好な性能を示したが、未学習の組織では顕著に劣化した。
  • FFN-CNNモデルはSTARチャレンジで0.772の精度と0.057の再現率にとどまり、一般化性能の著しい失敗を示した。
  • サイズを低減したFFN-CNN-Controlモデルでさえ、0.821の精度と0.063の再現率にとどまり、フィードバックの欠如による浅いアーキテクチャの限界を裏付けた。
  • 提案されたfGRUベースのモデル(FFN-fGRU)は、STARチャレンジで91.7%の精度と41.4%の再現率を達成し、すべてのベースラインを大きく上回った。
  • fGRUモデルは、テストボリュームにおいても妥当な、やや過剰セグメンテーション傾向のある予測を生成し、分布シフトに対して堅牢であることを示した。
  • fGRUにおけるフィードバック機構が不可欠であり、単独のhGRU層で見られた病理的ダイナミクスを抑制し、複雑なEM画像における文脈の明確化を向上させた。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。