[論文レビュー] ToxTrac: a fast and robust software for tracking organisms

Alvaro Rodriquez, Hanqing Zhang+4 more|arXiv (Cornell University)|Jun 8, 2017

Species Distribution and Climate Change参考文献 5被引用数 27

ひとこと要約

ToxTrac は、実験室内の複数の生物（昆虫、魚、齧歯類など）を自動で動画追跡する、オープンソースで高速かつ頑丈なソフトウェアです。標準のデスクトップハードウェアで HD 動画で 25 fps 以上の高速リアルタイム追跡が可能で、組み込みのカメラキャリブレーション、歪み補正、遮蔽の強い対処が可能であり、複数形式での詳細な行動統計とヒートマップのエクスポートも可能です。

ABSTRACT

1. Behavioral analysis based on video recording is becoming increasingly popular within research fields such as; ecology, medicine, ecotoxicology, and toxicology. However, the programs available to analyze the data, which are; free of cost, user-friendly, versatile, robust, fast and provide reliable statistics for different organisms (invertebrates, vertebrates and mammals) are significantly limited. 2. We present an automated open-source executable software (ToxTrac) for image-based tracking that can simultaneously handle several organisms monitored in a laboratory environment. We compare the performance of ToxTrac with current accessible programs on the web. 3. The main advantages of ToxTrac are: i) no specific knowledge of the geometry of the tracked bodies is needed; ii) processing speed, ToxTrac can operate at a rate >25 frames per second in HD videos using modern desktop computers; iii) simultaneous tracking of multiple organisms in multiple arenas; iv) integrated distortion correction and camera calibration; v) robust against false positives; vi) preservation of individual identification if crossing occurs; vii) useful statistics and heat maps in real scale are exported in: image, text and excel formats. 4. ToxTrac can be used for high speed tracking of insects, fish, rodents or other species, and provides useful locomotor information. We suggest using ToxTrac for future studies of animal behavior independent of research area. Download ToxTrac here: https://toxtrac.sourceforge.io

研究の動機と目的

• 行動研究における多様な生物を追跡するための無料で使いやすく、頑丈なソフトウェアの不足を解消すること。
• 個体の体形や幾何学的形状を事前に知らなくても、複数のアリーナで複数の動物を同時に追跡できるソリューションを開発すること。
• 遮蔽や照明の変化を含む現実世界の条件下でも、高い処理速度と信頼性を確保すること。
• カメラキャリブレーションと歪み補正を追跡パイプラインに統合し、正確性を向上させること。
• 標準形式（画像、テキスト、Excel）で、包括的でリアルタイムの行動統計と可視化（例：ヒートマップ）を提供すること。

提案手法

• ビデオシーケンスにおけるリアルタイムのオブジェクト検出と追跡に、コンピュータビジョンアルゴリズムを活用すること。
• 背景差分法とボイドトラッキングを組み合わせ、個々の生物を特定して追跡すること。
• キャリブレーショングリッドまたは既知の基準点を用いて、自動カメラキャリブレーションとレンズ歪み補正を実施すること。
• 一時的な遮蔽や交差時でさえも、個体の同一性を維持する強力な追跡フレームワークを適用すること。
• 動的しきい値処理とモルフォロジカルフィルタリングを用いて、誤検出を低減し、追跡の安定性を向上させること。
• 画像オーバーレイ、テキストログ、空間的・時間的統計を含む Excel ファイルを含む、複数形式での処理済みデータのエクスポートを実施すること。

実験結果

リサーチクエスチョン

• RQ1 1 つのソフトウェアツールが、多様な種（無脊椎動物、顕著動物、哺乳類）をリアルタイムで効率的かつ正確に追跡できるか？
• RQ2 標準的な実験室条件下で、既存のオープンソース追跡ツールと比較して ToxTrac の速度と正確性はどの程度か？
• RQ3 遮蔽や密接な接近状態の相互作用時において、ToxTrac が個体の同一性をどの程度維持できるか？
• RQ4 統合されたカメラキャリブレーションと歪み補正は、手動のセットアップを必要とせずに追跡の正確性をどの程度向上させるか？
• RQ5 ToxTrac は、生動画データから信頼性があり使いやすい行動統計と可視化（例：ヒートマップ）を直接生成できるか？

主な発見

• ToxTrac は、標準のデスクトップハードウェアを用いて HD 動画で 25 fps を超えるリアルタイム追跡を達成している。
• ソフトウェアは、個体の体形や幾何学的形状を事前に知らなくても、複数の実験アリーナで複数の生物を同時に追跡している。
• ToxTrac は、誤検出の低減と交差・遮蔽時における個体同一性の維持という点で、強力な性能を示している。
• 統合されたカメラキャリブレーションと歪み補正は、ユーザーの介入なしに追跡の正確性を顕著に向上させている。
• システムは、移動度指標やヒートマップを含む行動データを、画像、テキスト、Excel 形式で信頼性高くエクスポートでき、後続の解析に適している。
• ToxTrac は、速度、頑丈さ、多様な種や実験設定への適応性において、既存のオープンソースツールを上回っている。