[논문 리뷰] A Solution for Crime Scene Reconstruction using Time-of-Flight Cameras

Silvio Giancola, Daniele Piron외 2명|arXiv (Cornell University)|2017. 08. 07.

Robotics and Sensor-Based Localization참고 문헌 15인용 수 3

한 줄 요약

이 논문은 키넥트 V2 타임오브플라잇(TOF) RGB-D 카메라와 3차원 키포인트 기반 SLAM 파이프라인을 사용하여 실시간 3차원 범죄 현장 재구성 시스템을 제시한다. 색채와 기하학적 특징을 결합한 키포인트 기술 및 매칭을 통해 실내 및 실외 환경에서 모두 1cm 이내의 하위 센티미터 수준 정확도(평균 오차 ~1 cm)를 달성하며, 레이저 스캐너에 비해 이동성과 비용 효율성이 뛰어나며 어두운 조명 조건에서도 뛰어난 성능을 발휘한다.

ABSTRACT

In this work, we propose a method for three-dimensional (3D) reconstruction of wide crime scene, based on a Simultaneous Localization and Mapping (SLAM) approach. We used a Kinect V2 Time-of-Flight (TOF) RGB-D camera to provide colored dense point clouds at a 30 Hz frequency. This device is moved freely (6 degrees of freedom) during the scene exploration. The implemented SLAM solution aligns successive point clouds using an 3D keypoints description and matching approach. This type of approach exploits both colorimetric and geometrical information, and permits reconstruction under poor illumination conditions. Our solution has been tested for indoor crime scene and outdoor archaeological site reconstruction, returning a mean error around one centimeter. It is less precise than environmental laser scanner solution, but more practical and portable as well as less cumbersome. Also, the hardware is definitively cheaper.

연구 동기 및 목표

• 범죄 현장과 고고학적 유적지의 3차원 재구성에 실용적이고 이동성 있으며 비용 효율적인 솔루션을 개발하기 위해.
• 기존 2차원 스케치와 이중 측정 방식의 한계를 해결하여 현장의 무결성을 유지하고 동적 분석을 가능하게 하기 위해.
• 이전의 RGB-D SLAM 시스템에 비해 어두운 조명 조건과 실외 환경에서도 재구성 정확도와 견고성을 향상시키기 위해.
• 범죄 분석을 위한 동적 시나리오 탐색과 가상 탐색을 가능하게 하여 궤적 재구성 및 혈액 패턴 분석과 같은 분석을 지원하기 위해.
• 루프 클로저를 지원하고 SLAM 파이프라인에서의 드리프트를 최소화하는 실시간 현장 재구성 방법을 제공하기 위해.

제안 방법

• 30 Hz에서 512×424 해상도로 조밀하고 색상 정보가 포함된 포인트 클라우드를 캡처하기 위해 토이모드 기반 RGB-D 카메라인 키넥트 V2를 사용한다.
• 심도 프레임에 기반한 3차원 키포인트를 검출하여 순차적인 포인트 클라우드를 처리하는 SLAM 파이프라인을 구현한다.
• 저조도 및 무문자 환경에서의 견고성을 향상시키기 위해 색채적 특징과 기하학적 특징을 융합한 하이브리드 C-SHOT 기술자를 사용하여 키포인트를 기술한다.
• RANSAC과 ICP를 사용한 3차원 키포인트 매칭을 통한 포인트 클라우드 정렬을 수행하며, 반복적 정밀 조정을 통해 실시간 온라인 재구성을 가능하게 한다.
• 누적된 드리프트를 보정하기 위해 루프 클로저 탐지를 적용하지만, 잘못된 매칭이 전파될 경우 한계를 보인다.
• 기하학적 일관성 확보를 위해 고정밀 환경 레이저 스캐너(Stonex X300)를 기준으로 결과를 검증한다.

실험 결과

연구 질문

• RQ1 키넥트 V2와 같은 TOF 기반 RGB-D 카메라가 실제 환경 조건에서 법의학적 3차원 범죄 현장 재구성에 충분한 정확도와 견고성을 확보할 수 있는가?
• RQ2 색채적 특징과 기하학적 특징을 융합한 3차원 키포인트를 사용할 경우 순수 색채 기반 또는 2차원 키포인트 방법에 비해 SLAM 성능이 어떻게 향상되는가?
• RQ3 복잡한 시나리오의 수동 스캔 중 제안된 SLAM 파이프라인이 재구성 정확도의 드리프트를 어느 정도 완화하는가?
• RQ4 고정밀 레이저 스캐너 대비 기하학적 일관성(예: 평면성, 수직성) 측면에서 시스템 성능은 어떠한가?
• RQ5 법의학적 응용 분야에서 소비자용 TOF 카메라와 전문 레이저 스캐너 간의 비용, 이동성, 정확도 간 상충 관계는 어떠한가?

주요 결과

• 제안된 시스템은 실내 범죄 현장 및 실외 고고학적 유적지 시나리오에서 평균 재구성 오차 약 1 cm를 달성한다.
• C-SHOT 기술자에서 색채적 특징과 기하학적 특징을 활용함으로써 무문자 환경에서의 견고성이 향상되어 무늬 의존도가 감소한다.
• 키넥트 V2 TOF 카메라는 이전의 구조광선 센서인 키넥트 V1과 달리 실외 환경에서도 신뢰할 수 있는 깊이 측정이 가능하다.
• 기하학적 일관성 평가 결과, SLAM 재구성의 평균 오차는 10.80 mm이며, 레이저 스캐너 기준값은 3.04 mm이며, 벽면 수직성의 경우 최대 3°의 각도 편차가 발생한다.
• 나쁜 키포인트 매칭으로 인한 드리프트 문제에도 불구하고, 루프 클로저 기법은 전반적인 오차를 감소시키지만, 초기 매칭이 잘못된 경우 왜곡이 전파될 수 있다.
• 환경 레이저 스캐너에 비해 상당히 이동성과 비용 효율성이 뛰어나 현장 적용에 실용적인 솔루션이다.