[論文レビュー] 3D Reconstruction of Crime Scenes and Design Considerations for an Interactive Investigation Tool

Erkan Bostancı|arXiv (Cornell University)|Dec 10, 2015

3D Surveying and Cultural Heritage参考文献 22被引用数 17

ひとこと要約

本稿では、ビデオシーケンスとコンピュータビジョン技術を用いて、犯罪現場の自動3次元再構成手法を提案する。具体的には、キーフレーム抽出とバンドル調整に基づく高密度再構成を採用する。本手法は、実際のカメラ映像から計測可能で、写真と同一の質感を持つ3次元点群を生成し、正確な空間的分析を可能にするとともに、測定可能で法廷で受け入れられる結果が得られるインタラクティブな法医学的調査ツールの基盤を提供する。

ABSTRACT

Crime Scene Investigation (CSI) is a carefully planned systematic process with the purpose of acquiring physical evidences to shed light upon the physical reality of the crime and eventually detect the identity of the criminal. Capturing images and videos of the crime scene is an important part of this process in order to conduct a deeper analysis on the digital evidence for possible hints. This work brings this idea further to use the acquired footage for generating a 3D model of the crime scene. Results show that realistic reconstructions can be obtained using sophisticated computer vision techniques. The paper also discusses a number of important design considerations describing key features that should be present in a powerful interactive CSI analysis tool.

研究の動機と目的

• 高価なレーザースキャナに依存せず、標準的なビデオ映像を用いて、自動的かつ費用対効果に優れた犯罪現場の正確な3次元再構成手法を開発すること。
• 実際の写真証拠から得られるリアルな計測可能な3次元モデルを用いることで、犯罪現場の事後的空間的分析を可能にし、法医学的調査を向上させること。
• 捜査官が測定やアノテーション、可視化を支援できるインタラクティブ3次元分析ツールに不可欠な設計要因を定義すること。
• 再構成された3次元モデルが、計測精度を維持するとともに、元の写真証拠への追跡可能性を保つことで、法廷での使用に適していることを保証すること。
• 仮想現実（VR）や拡張現実（AR）などの没入型環境に3次元再構成を統合し、空間的関係の理解を強化する方法を検討すること。

提案手法

• 動きの十分な確保とフレーム間の特徴対応を確保するため、特徴ベース検出を用いてビデオシーケンスからキーフレームを抽出する。
• 選択されたキーフレームからカメラの姿勢と3次元点位置を推定するために、反復的バンドル調整技術を用いて高密度3次元再構成を実行する。
• 計算負荷を管理するため、シーンを画像クラスタに分割し、各クラスタごとに個別に点群を再構成する。
• 複数の点群の整合性を確保するために、少なくとも4つの対応点を用いて反復的最近接点（ICP）アルゴリズムで点群を再配置する。
• 最終的な3次元点群は、外部ソフトウェアを用いてノイズ低減、メッシュ生成、および元の画像からのテクスチャマッピング処理を受ける。
• システムは、アーカイブおよび証拠目的のためのレポート、アノテーション、測定データのエクスポートをサポートする。

実験結果

リサーチクエスチョン

• RQ1 高価なレーザースキャナに依存せず、コンピュータビジョン技術を用いて標準的なビデオ映像から犯罪現場の3次元再構成を正確に生成できるか？
• RQ2 ビデオベース再構成において、十分な特徴対応を維持するとともに、動きぼけの影響を低減するためのキーフレーム選択をどのように最適化できるか？
• RQ3 捜査の推論と測定を支援するためのインタラクティブ3次元法医学的分析ツールに不可欠な設計要因は何か？
• RQ4 再構成された3次元モデルは、計測精度をどの程度維持でき、法廷で受け入れられる証拠として使用可能か？
• RQ5 仮想現実（VR）や拡張現実（AR）のような没入型環境に3次元再構成をどのように統合し、空間的関係の理解を強化できるか？

主な発見

• 提案手法は、キーフレーム抽出とバンドル調整を用いて、ビデオ映像から計測可能で、写真と同一の質感を持つ3次元点群を効果的に生成した。
• 複数の点群の最終的整合化において、ICPアルゴリズムを用いて平均誤差限界が0.0010 mmに達し、高い幾何的正確性を示した。
• 再構成プロセスは自動的であり、実際の写真証拠に基づいているため、その信頼性が向上し、法廷での受け入れ可能性も高まる。
• システムは、物体間や被害者間の3次元距離測定といった法医学的重要な操作をサポートしており、その結果はアノテートおよび報告可能である。
• メッシュ生成、テクスチャマッピング、アノテーションツールとの統合により、犯罪現場の包括的な事後的分析が可能になった。
• 今後の研究では、仮想現実（VR）や拡張現実（AR）インターフェースをサポートするためのシステム拡張の可能性が確認された。