[論文レビュー] A Solution for Crime Scene Reconstruction using Time-of-Flight Cameras

Silvio Giancola, Daniele Piron+2 more|arXiv (Cornell University)|Aug 7, 2017

Robotics and Sensor-Based Localization参考文献 15被引用数 3

ひとこと要約

本稿では、Kinect V2 Time-of-Flight (TOF) RGB-Dカメラと3次元キーポoinトベースのSLAMパイプラインを用いたリアルタイム3次元犯罪現場再構築システムを提示する。カラーメトリックおよび幾何的特徴を組み合わせたキーポイント記述とマッチングにより、屋内および屋外環境において1cm未塔の精度（平均誤差〜1 cm）を達成し、レーザースキャナーよりも小型・低コストであり、劣悪な照明下でも高い性能を示す。

ABSTRACT

In this work, we propose a method for three-dimensional (3D) reconstruction of wide crime scene, based on a Simultaneous Localization and Mapping (SLAM) approach. We used a Kinect V2 Time-of-Flight (TOF) RGB-D camera to provide colored dense point clouds at a 30 Hz frequency. This device is moved freely (6 degrees of freedom) during the scene exploration. The implemented SLAM solution aligns successive point clouds using an 3D keypoints description and matching approach. This type of approach exploits both colorimetric and geometrical information, and permits reconstruction under poor illumination conditions. Our solution has been tested for indoor crime scene and outdoor archaeological site reconstruction, returning a mean error around one centimeter. It is less precise than environmental laser scanner solution, but more practical and portable as well as less cumbersome. Also, the hardware is definitively cheaper.

研究の動機と目的

• 犯罪現場および考古学的現場の3次元再構築のための実用的で、ポータブルかつ低コストなソリューションを開発すること。
• 従来の2次元スケッチおよび2次元測定の限界を克服し、現場の整合性を保ち、動的分析を可能とすること。
• 以前のRGB-D SLAMシステムと比較して、劣悪な照明下および屋外環境でも再構築精度と耐障害性を向上させること。
• 法医学的分析（例：軌道再構築、血液飛散パターン分析）を可能とする、動的シーンの探索および仮想ナビゲーションを可能とすること。
• ループクロージャーをサポートし、SLAMパイプラインにおけるずれを最小限に抑える、リアルタイムで即時の再構築手法を提供すること。

提案手法

• 30 Hzで512×424解像度の高密度なカラーポイントクラウドを取得できる、TOFベースのRGB-DカメラであるKinect V2を活用する。
• 深度フレーム上で検出された3次元キーポイントを処理するSLAMパイプラインを採用する。
• カラーメトリックおよび幾何的特徴を統合したハイブリッドC-SHOT記述子を用いてキーポイントを記述し、低照度およびテクスチャが乏しい環境での耐障害性を向上させる。
• RANSACとICPを用いた3次元キーポイントマッチングによる点群の整合化を実施し、反復的精錬を経てリアルタイムでのオンライン再構築を実現する。
• 累積的ずれを是正するためのループクロージャー検出を適用するが、誤ったマッチングが誤差を拡大する可能性があるという制限を同定する。
• 幾何的整合性を検証するため、高精度な環境レーザースキャナ（Stonex X300）を基準として結果を検証する。

実験結果

リサーチクエスチョン

• RQ1 Kinect V2のようなTOFベースのRGB-Dカメラは、実世界の状況下で法医学的3次元犯罪現場再構築に十分な精度と耐障害性を達成できるか？
• RQ2 カラーメトリックおよび幾何的特徴を併用した3次元キーポイントを用いることで、純粋にカラーベースまたは2次元キーポイント手法と比較してSLAM性能がどのように向上するか？
• RQ3 本稿で提案するSLAMパイプラインは、複雑なシーンの手動スキャンにおいて再構築精度のずれをどの程度軽減できるか？
• RQ4 高精度なレーザースキャナと比較して、本システムの幾何的整合性（例：平面性、垂直性）はどの程度の性能を示すか？
• RQ5 法医学的応用において、プロフェッショナルレーザースキャナーよりも消費者向けTOFカメラを用いる場合の、コスト・ポータビリティ・精度のトレードオフは何か？

主な発見

• 提案手法は、屋内犯罪現場および屋外考古学的現場の両方において、平均再構築誤差が約1 cmを達成した。
• C-SHOT記述子におけるカラーメトリックおよび幾何的特徴の活用により、テクスチャへの依存を減らし、低照度条件下でも耐障害性を示した。
• Kinect V2のTOFカメラは、以前の構造化光センサー（例：Kinect V1）とは異なり、屋外環境でも信頼性の高い深度センシングを可能にした。
• 幾何的整合性評価では、SLAM再構築の平均誤差は10.80 mm、レーザースキャナの基準値は3.04 mmであり、壁の垂直性に最大3°の角度偏差が認められた。
• 不良なキーポイントマッチングによるずれの問題は存在するが、ループクロージャーによりグローバル誤差を低減できる。ただし、初期マッチングが不正確な場合、歪みが拡大する可能性もある。
• 環境レーザースキャナーよりも顕著にポータブルかつ低コストであるため、法医学的調査における現場への実用的導入が可能となった。