[論文レビュー] Pan-Tilt Camera and PIR Sensor Fusion Based Moving Object Detection for Mobile Security Robots

YongChol Sin, MyongSong Choe+1 more|arXiv (Cornell University)|Oct 26, 2015

Video Surveillance and Tracking Methods参考文献 8被引用数 3

ひとこと要約

本稿では、パン・チルトカメラとパassive赤外線（PIR）センサのデータを融合することで、動的背景や照明条件の変化がある複雑な屋内環境において、リアルタイムで移動物体を検出するモバイルセキュリティロボット向けのシステムを提案する。連続フレーム差分法とPIRによるカメラ起動を組み合わせることで、計算量が少なく、効率的な人間の検出を実現する。

ABSTRACT

One of fundamental issues for security robots is to detect and track people in the surroundings. The main problems of this task are real-time constraints, a changing background, varying illumination conditions and a non-rigid shape of the person to be tracked. In this paper, we propose a solution for tracking with a pan-tilt camera and a passive infrared range (PIR) sensor to detect the moving object based on consecutive frame difference. The proposed method is excellent in real-time performance because it requires only a little memory and computation. Experiment results show that this method can detect the moving object such as human efficiently and accurately in non-stationary and complex indoor environment.

研究の動機と目的

• 複雑な屋内環境で動作するモバイルセキュリティロボットにおけるリアルタイムで頑健な移動物体検出の課題に対処すること。
• 照明の変化や背景の変動に敏感な従来のビジョンベース手法の限界を克服すること。
• リソース制約のあるモバイルプラットフォームへのデプロイを可能にするために、計算負荷とメモリ使用量を低減すること。
• 視覚的および熱画像モーションセンシングの相補的利点を活用して、検出の信頼性を向上させること。
• 最小限の処理オーバーヘッドで、非定常的でごみだらけの屋内シーンにおける正確で効率的な人間検出を可能にすること。

提案手法

• パン・チルトカメラからの動画ストリームに対して連続フレーム差分法を適用し、フレーム間の動きの変化を検出する。
• パassive赤外線（PIR）センサを用いて熱的モーションを検出し、動きを検知した際にのみカメラを起動する。
• PIR検出がカメラの起動をトリガーとすることで、不要な処理を減らす統合戦略を適用する。
• 組み込みロボットシステムに適した、最小限のメモリと計算量を要する軽量アルゴリズムを実装する。
• 検出された動き領域に向かってパン・チルト機構を制御することで、追跡効率を向上させる。
• しきい値処理とモルフォロジカル操作を適用し、動き領域を精緻化して誤検出を低減する。

実験結果

リサーチクエスチョン

• RQ1 PIRセンサによるカメラ起動は、効果的なモーション検出を維持しつつ、計算負荷を低減できるか？
• RQ2 PIRとフレーム差分法の統合は、動的屋内環境における検出精度をどのように向上させるか？
• RQ3 照明条件や背景の変化が異なる条件下でも、提案手法はリアルタイム性能をどの程度維持できるか？
• RQ4 複雑で非定常的な屋内シーンにおける人間サイズの移動物体の検出において、このシステムはどの程度効果的か？
• RQ5 単独のビジョンまたはPIRベースの検出と比較して、統合アプローチは誤検出をどの程度低減できるか？

主な発見

• 提案手法は、組み込みロボットシステムに適した低メモリ・低計算量の要件を満たし、リアルタイム性能を達成している。
• PIRとフレーム差分法の統合は、動的背景を伴う複雑な屋内環境における検出精度を顕著に向上させた。
• 照明条件の変化があっても、人間サイズの移動物体を効果的に検出できた。
• PIRによるカメラ起動により、連続的なフルフレーム解析を回避することで、処理負荷が著しく低減された。
• 非定常環境においても、一貫した検出性能を維持するという、頑健性が確認された。
• 実験結果から、システムが効率的かつ正確に移動中の人間を検出し、局所化できることを確認した。