[论文解读] Pan-Tilt Camera and PIR Sensor Fusion Based Moving Object Detection for Mobile Security Robots

YongChol Sin, MyongSong Choe+1 more|arXiv (Cornell University)|Oct 26, 2015

Video Surveillance and Tracking Methods参考文献 8被引用 3

一句话总结

本文提出了一种用于移动安防机器人的实时移动物体检测系统，通过融合云台相机与被动红外（PIR）传感器的数据。利用连续帧差分法与PIR触发的相机激活机制，该方法在动态背景和光照变化的复杂室内环境中实现了高效、低计算量的人体检测。

ABSTRACT

One of fundamental issues for security robots is to detect and track people in the surroundings. The main problems of this task are real-time constraints, a changing background, varying illumination conditions and a non-rigid shape of the person to be tracked. In this paper, we propose a solution for tracking with a pan-tilt camera and a passive infrared range (PIR) sensor to detect the moving object based on consecutive frame difference. The proposed method is excellent in real-time performance because it requires only a little memory and computation. Experiment results show that this method can detect the moving object such as human efficiently and accurately in non-stationary and complex indoor environment.

研究动机与目标

• 解决移动安防机器人在复杂室内环境中实时、鲁棒的移动物体检测挑战。
• 克服传统基于视觉的方法在光照变化和背景变化下的敏感性等局限性。
• 降低计算与内存负载，以实现在资源受限移动平台上的部署。
• 利用视觉与热成像运动传感的互补优势，提升检测可靠性。
• 在非静态、杂乱的室内场景中实现对人体的精确且高效检测，处理开销最小化。

提出的方法

• 对云台相机的视频流应用连续帧差分法，检测帧间运动变化。
• 采用被动红外（PIR）传感器检测热运动，并在检测到运动时触发相机。
• 实施一种融合策略：由PIR检测激活相机进行帧差分处理，从而减少不必要的计算。
• 实现一种轻量级算法，计算与内存需求极低，适用于嵌入式机器人系统。
• 利用云台机构将相机朝向检测到的运动区域调整，提升跟踪效率。
• 应用阈值化与形态学操作对运动区域进行优化，减少误报。

实验结果

研究问题

• RQ1 PIR传感器触发的相机激活是否能在保持有效运动检测的同时降低计算负载？
• RQ2 PIR与帧差分法的融合在动态室内环境中如何提升检测准确性？
• RQ3 在光照与背景条件变化的情况下，该方法在多大程度上保持实时性能？
• RQ4 该系统在复杂、非静态的室内场景中检测人体尺寸移动物体的效率如何？
• RQ5 与独立基于视觉或PIR的检测方法相比，该融合方法是否能有效减少误报？

主要发现

• 所提方法在计算与内存需求极低的情况下实现了实时性能，适用于嵌入式机器人系统。
• PIR与帧差分法的融合显著提升了在具有动态背景的复杂室内环境中的检测准确性。
• 系统即使在光照条件变化的情况下，也能有效检测人体尺寸的移动物体。
• PIR触发的相机激活通过避免持续的全帧分析，显著降低了处理负载。
• 该方法在非静态环境中表现出鲁棒性，检测性能保持稳定。
• 实验结果证实，系统能够高效且准确地检测并定位移动的人体。