[论文解读] A Solution for Crime Scene Reconstruction using Time-of-Flight Cameras

Silvio Giancola, Daniele Piron+2 more|arXiv (Cornell University)|Aug 7, 2017

Robotics and Sensor-Based Localization参考文献 15被引用 3

一句话总结

本文提出了一种使用Kinect V2飞行时间（TOF）RGB-D相机和基于3D关键点的SLAM流程的实时3D犯罪现场重建系统。通过结合色彩和几何特征进行关键点描述与匹配，该方法在室内外环境中均实现了亚厘米级精度（平均误差约1厘米），提供了一种便携、低成本的激光扫描仪替代方案，在光照不良条件下也表现出稳健性能。

ABSTRACT

In this work, we propose a method for three-dimensional (3D) reconstruction of wide crime scene, based on a Simultaneous Localization and Mapping (SLAM) approach. We used a Kinect V2 Time-of-Flight (TOF) RGB-D camera to provide colored dense point clouds at a 30 Hz frequency. This device is moved freely (6 degrees of freedom) during the scene exploration. The implemented SLAM solution aligns successive point clouds using an 3D keypoints description and matching approach. This type of approach exploits both colorimetric and geometrical information, and permits reconstruction under poor illumination conditions. Our solution has been tested for indoor crime scene and outdoor archaeological site reconstruction, returning a mean error around one centimeter. It is less precise than environmental laser scanner solution, but more practical and portable as well as less cumbersome. Also, the hardware is definitively cheaper.

研究动机与目标

• 开发一种实用、便携且成本低廉的3D犯罪现场和考古遗址重建解决方案。
• 解决传统2D草图和二维测量在保持现场完整性及支持动态分析方面的局限性。
• 与早期的RGB-D SLAM系统相比，提升在光照不良和户外环境下的重建精度与鲁棒性。
• 支持动态场景探索和虚拟导航，以实现法医学分析，如轨迹重建和血迹模式分析。
• 提供一种实时、现场即时重建方法，支持回环检测并最小化SLAM流程中的漂移。

提出的方法

• 利用Kinect V2——一种基于TOF的RGB-D相机——以30 Hz的帧率捕获分辨率为512×424的密集彩色点云。
• 采用SLAM流程，通过在深度图像上检测3D关键点来处理连续的点云。
• 使用一种结合色彩和几何特征的混合C-SHOT描述子来描述关键点，以增强在低光照和纹理贫乏环境下的鲁棒性。
• 通过RANSAC和ICP算法进行3D关键点匹配并实现点云配准，经迭代优化，实现实时在线重建。
• 应用回环检测以纠正累积漂移，但该方法在错误匹配传播时存在局限性。
• 以高精度环境激光扫描仪（Stonex X300）作为真实值，验证结果的几何一致性。

实验结果

研究问题

• RQ1 基于TOF的RGB-D相机（如Kinect V2）是否能在真实环境中实现足够精度和鲁棒性，用于法医学3D犯罪现场重建？
• RQ2 与纯色彩或2D关键点方法相比，使用结合色彩和几何特征的3D关键点如何提升SLAM性能？
• RQ3 所提出的SLAM流程在复杂场景的自由手扫描过程中，能在多大程度上减轻重建精度的漂移？
• RQ4 与高精度激光扫描相比，该系统在几何一致性（如平面性、垂直性）方面的表现如何？
• RQ5 在法医学应用中，使用消费级TOF相机与专业激光扫描仪相比，在成本、便携性和精度之间存在何种权衡？

主要发现

• 所提出系统在室内犯罪现场和室外考古遗址场景中均实现了约1厘米的平均重建误差。
• 由于C-SHOT描述子中结合了色彩和几何特征，系统在低光照条件下表现出鲁棒性，降低了对纹理的依赖。
• Kinect V2 TOF相机在户外环境中也能实现可靠的深度感知，而早期的结构光传感器（如Kinect V1）则无法做到。
• 几何一致性评估显示，SLAM重建的平均误差为10.80毫米，而激光扫描仪真实值为3.04毫米，墙面垂直度的最大偏差达3°。
• 尽管关键点匹配不佳会导致漂移问题，但回环检测有助于减少全局误差，若初始匹配错误，也可能传播失真。
• 该方案相比环境激光扫描仪显著更便携且成本更低，使其在法医学调查中具有实际的现场部署可行性。