[論文レビュー] A comprehensive study of time-of-flight non-line-of-sight imaging

Julio Marco, Adrian Jarabo+4 more|arXiv (Cornell University)|Mar 10, 2026

Advanced Optical Sensing Technologies被引用数 0

ひとこと要約

この論文は ToF NLOS 画像化手法を共通の前方モデルの下で統一し、それらを Radon 変換と LOS 光学に結びつけ、同等のハードウェア条件下での実験的横断分析を提供する。

ABSTRACT

Time-of-Flight non-line-of-sight (ToF NLOS) imaging techniques provide state-of-the-art reconstructions of scenes hidden around corners by inverting the optical path of indirect photons scattered by visible surfaces and measured by picosecond resolution sensors. The emergence of a wide range of ToF NLOS imaging methods with heterogeneous formulae and hardware implementations obscures the assessment of both their theoretical and experimental aspects. We present a comprehensive study of a representative set of ToF NLOS imaging methods by discussing their similarities and differences under common formulation and hardware. We first outline the problem statement under a common general forward model for ToF NLOS measurements, and the typical assumptions that yield tractable inverse models. We discuss the relationship of the resulting simplified forward and inverse models to a family of Radon transforms, and how migrating these to the frequency domain relates to recent phasor-based virtual line-of-sight imaging models for NLOS imaging that obey the constraints of conventional lens-based imaging systems. We then evaluate performance of the selected methods on hidden scenes captured under the same hardware setup and similar photon counts. Our experiments show that existing methods share similar limitations on spatial resolution, visibility, and sensitivity to noise when operating under equal hardware constraints, with particular differences that stem from method-specific parameters. We expect our methodology to become a reference in future research on ToF NLOS imaging to obtain objective comparisons of existing and new methods.

研究の動機と目的

• ToF NLOS 測定の共通前方モデルを定式化する。
• 解ける逆問題を生み出す光伝送仮定を識別・比較する。
• ToF NLOS の逆問題を Radon 変換と LOS 波動伝播の原理と関連づける。
• 統一されたハードウェアとシーン条件下での横断的な理論的・実験的評価を提供する。
• ToF NLOS 手法の客観的比較を可能にする参照フレームワークを提供する。

提案手法

• ToF NLOS 画像の一般的な過渡的光伝播モデルを導出する。
• 一般的な仮定がモデルを三回反射、Lambertian、遮蔽なし伝播へ縮約することを示す。
• 前方モデルを楕円形、平面、球面の Radon 変換へ、異なる取得トポロジーの下で対応付ける。
• 逆解をフィルタリング付きのバックプロジェクションで記述し、SRT の場合は周波数領域の畳み込み除去を用いる。
• NLOS の逆問題を波動ベースの LOS 画像形成原理と関連づける。
• 同一ハードウェアで定性的・定量的実験を行い、手法を比較する。

実験結果

リサーチクエスチョン

• RQ1 代表的な ToF NLOS 手法の根底にある基本的な前方モデルは何か。
• RQ2 異なる取得トポロジーは Radon 変換へどう写像され、逆問題にどのような影響を及ぼすか。
• RQ3 同一ハードウェア条件下で、解像度、可視性、ノイズ感度の観点から ToF NLOS 手法はどのように比較されるか。
• RQ4 NLOS 逆問題の技術と LOS 光学理論の関係は何か。
• RQ5 統一されたフレームワークは ToF NLOS 手法間の客観的比較を可能にするか。

主な発見

• ほとんどの ToF NLOS 手法は、ハードウェアを一定に保つと、空間分解能、可視性、ノイズ感度において類似の制約を共有する。
• 手法間の相違は主にアルゴリズムパラメータと特定の取得構成から生じる。
• 共通仮定の下の前方モデルは楕円形、平面、球面の Radon 変換に対応し、それぞれ異なる逆解を持つ。
• SRT ベースの手法は、適切な再パラメータ化の下で周波数領域での畳み込み除去により効率的に解ける。
• NLOS-LOS アナロジーと光学原理は、光の伝播挙動と手法間の性能傾向を予測するのに役立つ。