[논문 리뷰] Tracking hidden objects with a single-photon camera

Geneviève Gariépy, Francesco Tonolini외 3명|arXiv (Cornell University)|2015. 03. 05.

Advanced Optical Sensing Technologies참고 문헌 2인용 수 5

한 줄 요약

이 논문은 단일 광자 압반이른 다이오드(SPAD) 카메라를 사용하여 바닥 표면을 조명하고, 은폐된 목표물에 의해 반사된 다중 산산이 흩어진 광자를 캡처하여 은폐된 물체를 탐지하고 추적하는 실시간 비선형 시각화 시스템을 제시한다. 이 방법은 반사벽이나 사전 확보된 배경 데이터가 필요 없이도 이동하는 물체를 센티미터 수준의 정밀도로 위치 특정 및 추적할 수 있으며, 최대 시속 5.3cm까지의 속도에서 성공적으로 작동한다. 이는 구조적 환경이나 구조물이 없는 실제 환경에서의 적용 가능성을 보여주며, 구조나 감시와 같은 상황에서의 활용 가능성을 시사한다.

ABSTRACT

The ability to know what is hidden around a corner or behind a wall provides a crucial advantage when physically going around the obstacle is impossible or dangerous. Previous solutions to this challenge were constrained e.g. by their physical size, the requirement of reflective surfaces or long data acquisition times. These impede both the deployment of the technology outside the laboratory and the development of significant advances, such as tracking the movement of large-scale hidden objects. We demonstrate a non-line-of-sight laser ranging technology that relies upon the ability, using only a floor surface, to send and detect light that is scattered around an obstacle. A single-photon avalanche diode (SPAD) camera detects light back-scattered from a hidden object that can then be located with centimetre precision, simultaneously tracking its movement. This non-line-of-sight laser ranging system is also shown to work at human length scales, paving the way for a variety of real-life situations.

연구 동기 및 목표

• 기존 방법이 반사벽이나 장시간 측정이 필요로 하는 제약을 극복하고, 실시간으로 움직이는 은폐된 물체를 추적할 수 있는 비선형 시각화 시스템을 개발하는 것.
• 벽, 문, 또는 고반사 표면에 의존하지 않고, 바닥만을 산산이 흩어지는 매체로 사용하여 실제 환경에서의 구현 가능성을 높이는 것.
• 단일 광자 감도와 피코초 수준의 시간 해상도를 활용하여 높은 정밀도의 위치 특정을 달성하고, 빠른 데이터 수집을 가능하게 하는 것.
• 사람이 벽 뒤를 걷는 것과 같은 인간 척도의 속도로 움직이는 물체를 실시간으로 추적할 수 있도록 하는 것.
• 사전 스캔이나 배경 기준 데이터가 필요 없이 자체 기반 배경 제거를 통해 시스템의 강인성을 검증하는 것.

제안 방법

• 800 nm 파장, 67 MHz 주기의 펌프세컨드 레이저 펄스 열이 카메라의 시야 왼쪽 15cm 거리의 바닥 영역을 향해 조사되어, 레이저 빛이 모서리 뒤로 산산이 흩어지도록 한다.
• 시간 상관 단일 광자 수확(TCSPC) 모드로 동작하는 단일 광자 압반이른 다이오드(SPAD) 카메라가 은폐된 물체에서 산산이 흩어진 광자의 도착 시간을 기록한다.
• 카메라의 인파ulse 응답(약 110 ps)은 수센티미터 수준의 공간적 깊이 해상도를 제공하여 은폐된 목표물의 정확한 위치 특정이 가능하다.
• 여러 레이저 펄스 동안 광자의 도착 시간을 누적하고, 목표물의 위치를 추정하기 위해 공동 확률 분포 $ P(\vec{r}_o) $ 를 계산한다.
• 이 방법은 유일한 영상 표면으로 바닥 산산이 흩어짐을 이용하여 벽이나 거울이 필요 없도록 하며, 자체 기반 배경 제거가 가능하다.
• 데이터 수집은 위치당 약 3초가 소요되며, 이는 USB2.0 데이터 전송 속도에 의해 제한된다. 더 빠른 데이터 전송 또는 칩 내 처리 기술을 통해 10배 향상이 가능할 것으로 예상된다.

실험 결과

연구 질문

• RQ1 단일 광자 카메라 시스템이 반사벽이나 사전 확보된 배경 데이터 없이도 실시간으로 움직이는 물체를 비선형 시각화로 추적할 수 있는가?
• RQ2 바닥 표면만으로도 비선형 시각화 탐지에 효과적인 산산이 흩어짐 및 영상 매체로 기능할 수 있는가? 이는 수정되지 않은 실제 환경에서의 적용 가능성을 의미한다.
• RQ3 이 시스템에서 도달 가능한 최대 추적 속도는 얼마이며, 이는 측정 시간과 물체 크기와 어떻게 비례하는가?
• RQ4 물체가 벽 가장자리 뒤에 물리적으로 깊이 들어가 있을 경우에도 시스템이 은폐된 물체의 위치를 센티미터 수준의 정밀도로 유지할 수 있는가?
• RQ5 사람이 모서리 뒤를 움직이는 인간 척도의 상황에서 시스템은 어떻게 작동하는가?

주요 결과

• 시스템은 x축 방향으로 약 ±5 mm, y축 방향으로 약 ±1.5 cm의 정밀도를 달성하여, 목표물 크기에 비해 약 10%의 불확실성 수준을 보였다.
• 물체가 벽 가장자리 뒤로 물리적으로 깊숙이 숨어 있을 경우에도 시스템은 목표물의 위치를 성공적으로 복원하여, 가림에 대한 강인성을 입증했다.
• 최대 시속 5.3cm의 속도로 움직이는 목표물의 실시간 추적 성능이 입증되었으며, 데이터는 매 3초마다 수집되어 이산적이지만 정확한 위치 추정이 가능했다.
• 사전 확보된 배경 데이터 없이 자체 기반 배경 제거 기법을 사용하여, 동적인 환경에서의 실용성을 향상시켰다.
• 실제로 연구자가 벽 뒤를 걷는 상황에서 인간 척도의 추적 성능이 실시간으로 성공적으로 입증되었으며, 시스템은 연구자를 신뢰성 있게 탐지하고 위치를 특정했다.
• 현재 3초의 측정 시간은 USB2.0 전송 속도에 의해 제한되지만, 더 빠른 데이터 처리 또는 칩 내 처리 기술을 통해 10배 향상이 가능할 것으로 저자들이 추정하고 있다.