[论文解读] Tracking hidden objects with a single-photon camera

Geneviève Gariépy, Francesco Tonolini+3 more|arXiv (Cornell University)|Mar 5, 2015

Advanced Optical Sensing Technologies参考文献 2被引用 5

一句话总结

本文提出了一种基于单光子雪崩二极管（SPAD）相机的实时非视距成像系统，通过照射地面并捕捉经隐藏目标反射后多次散射返回的光子，实现对隐藏物体的检测与跟踪。该方法在定位和跟踪移动物体时达到厘米级精度——最高速度达5.3 cm/s——且无需反射墙或预先获取的背景数据，可在救援或监控等真实环境场景中部署。

ABSTRACT

The ability to know what is hidden around a corner or behind a wall provides a crucial advantage when physically going around the obstacle is impossible or dangerous. Previous solutions to this challenge were constrained e.g. by their physical size, the requirement of reflective surfaces or long data acquisition times. These impede both the deployment of the technology outside the laboratory and the development of significant advances, such as tracking the movement of large-scale hidden objects. We demonstrate a non-line-of-sight laser ranging technology that relies upon the ability, using only a floor surface, to send and detect light that is scattered around an obstacle. A single-photon avalanche diode (SPAD) camera detects light back-scattered from a hidden object that can then be located with centimetre precision, simultaneously tracking its movement. This non-line-of-sight laser ranging system is also shown to work at human length scales, paving the way for a variety of real-life situations.

研究动机与目标

• 开发一种非视距成像系统，可实时跟踪隐藏的移动物体，克服以往方法依赖反射表面或长时间采集的局限性。
• 通过仅依赖地面作为散射介质，消除对墙壁、门或高反射表面的依赖，实现在真实世界环境中的部署。
• 利用单光子灵敏度和皮秒级时间分辨率实现隐藏物体的高精度定位，支持快速数据采集。
• 展示对以人速移动的物体（如一人在墙后行走）实现实时跟踪。
• 通过自参考背景减去方法验证系统的鲁棒性，消除对预扫描或背景参考数据的需求。

提出的方法

• 系统使用飞秒激光脉冲串（800 nm，67 MHz）照射相机视场左侧15 cm处的地面区域，使光子能够绕过拐角散射。
• 采用具备时间相关单光子计数（TCSPC）模式的单光子雪崩二极管（SPAD）相机，记录从隐藏物体散射返回的单个光子的到达时间。
• 相机的脉冲响应（约110 ps）提供几厘米的空间深度分辨率，实现对隐藏目标的精确位置定位。
• 将多个激光脉冲的光子到达时间累积，并计算联合概率分布 $ P(\vec{r}_o) $ 以估计目标位置。
• 该方法仅依赖地面散射作为成像表面，无需墙壁或镜子，同时支持自参考背景减去。
• 数据采集每位置约需3秒，仅受USB2.0数据传输速度限制，通过更快的数据下载或片上处理可实现10倍性能提升。

实验结果

研究问题

• RQ1 单光子相机系统能否在无需反射墙或预先获取背景数据的情况下，实现对移动物体的实时非视距跟踪？
• RQ2 地面表面本身能否作为有效的散射与成像介质，实现非视距探测，并支持在未经改造的真实环境中部署？
• RQ3 该系统可实现的最大跟踪速度是多少？其与采集时间及目标尺寸的关系如何？
• RQ4 当隐藏物体物理上位于墙边后方时，系统能否保持厘米级的定位精度？
• RQ5 在人尺度场景下（如跟踪一人绕过拐角移动），系统性能如何？

主要发现

• 系统在x方向的定位精度约为±5 mm，在y方向约为±1.5 cm，相对于目标尺寸的不确定性约为10%。
• 即使目标物理上位于墙边后方，该方法仍能成功恢复其位置，证明了对遮挡的强鲁棒性。
• 已实现实时跟踪移动目标，最高速度达5.3 cm/s，每3秒采集一次数据，实现离散但精确的位置估计。
• 系统无需预先获取的背景数据，依赖自参考背景减去，显著提升了在动态环境中的实用性。
• 成功在真实场景中实现实时人尺度跟踪，系统可靠检测并定位了在墙后移动的研究人员。
• 当前3秒的采集时间受限于USB2.0数据传输，但作者估计通过更快的数据处理或片上处理可实现10倍性能提升。