[論文レビュー] 3D Particle Positions from Computer Stereo Vision in PK-4

Daniel Mohr, Peter Huber+2 more|arXiv (Cornell University)|Dec 9, 2019

Solar and Space Plasma Dynamics参考文献 9被引用数 10

ひとこと要約

本論文は、国際宇宙ステーションのPK-4施設で実施される複雑プラズマ実験において、二台のカメラを用いた画像から3次元粒子位置を再構成するステレオビジョン手法を提示する。レーザー光線を有限厚さを持つ平面としてモデル化し、レーザー面の幾何的制約を課した非線形最小二乗最適化問題を解くことで、2次元画像特徴から3次元再構成を高精度に実現し、マイクロ重力環境下でサブピクセル精度の追跡が可能となり、物理的キャリブレーションによってマイクロメーター単位の精度を達成する。

ABSTRACT

Complex plasmas consist of microparticles embedded in a low-temperature plasma containing ions, electrons and neutral particles. The microparticles form a dynamical system that can be used to study a multitude of effects on the level of the constituent particles. The microparticles are usually illuminated with a sheet of laser light, and the scattered light can be observed with digital cameras. Some complex plasma microgravity research facilities use two cameras with an overlapping field of view. An overlapping field of view can be used to combine the resulting images into one and trace the particles in the larger field of view. In previous work this was discussed for the images recorded by the PK-4 Laboratory on board the International Space Station. In that work the width of the laser sheet was, however, not taken into account. In this paper, we will discuss how to improve the transformation of the features into a joint coordinate system, and possibly extract information on the 3D position of particles in the overlap region.

研究の動機と目的

• ステレオビジョンにおいて有限なレーザー光線の厚さを考慮することで、複雑プラズマ内のマイクロ粒子の3次元再構成を改善すること。
• PK-4微小重力実験の設定において、二台のカメラからの画像から正確な3次元座標推定を可能にすること。
• ステレオ再構成からの任意単位を物理的マイクロメーター単位に変換するキャリブレーション手法を開発すること。
• 従来の手法がゼロ厚さのレーザー平面を仮定していたことによる位置誤差を是正すること。
• サブピクセル解像度を達成するための、重なり合うカメラ視野における粒子追跡のための堅牢なフレームワークを提供すること。

提案手法

• PK-4設定における両カメラに、標準的なピンホールカメラモデルと有理化された歪み補正を適用する。
• 重なり合うカメラ視野間の対応する粒子特徴を特定するために、正規化コサイン類似度をテンプレートマッチングに用いる。
• 3次元粒子位置が、z座標の上限および下限によって定義される有限厚さのレーザー光線内に位置しなければならないという幾何的制約を課す。
• 両カメラの再投影誤差を最小化する非線形最小二乗最適化問題を解き、レーザー光線およびカメラ投影の制約を満たす。
• scipyを用いた最小二乗ソルバーを用いて、投影行列、カメラパラメータ、および3次元粒子座標を同時に推定する。
• 事前実験データから得られた1ピクセル ≈ 14 μm の既知の対応関係を用いて、任意単位を物理単位にキャリブレーションする。

実験結果

リサーチクエスチョン

• RQ1 有限なレーザー光線の厚さを有する複雑プラズマ実験における二台カメラのステレオビジョンによって、3次元粒子位置を正確に再構成できるか？
• RQ2 レーザー光線を2次元平面ではなく3次元体としてモデル化することで、3次元再構成の精度がどのように向上するか？
• RQ3 再投影誤差を最小化すると同時に幾何的制約を満たす最適な非線形最適化問題の定式化は何か？
• RQ4 サブピクセル特徴マッチングとキャリブレーションは、3次元粒子追跡の空間分解能をどの程度向上できるか？
• RQ5 カメラパラメータとレーザー光線の深さは、3次元再構成の安定性と正確性にどのように影響するか？

主な発見

• 本手法は、二台のカメラ画像から3次元粒子座標を正常に再構成でき、焦点が合っている場合と合っていない場合の両方について図6に可視化されている。
• 最適化フレームワークは、48組の対応特徴点に対して最大274の未知数と288本の式を処理でき、複数台のカメラにスケーラブルであることを示している。
• 18組の対応特徴点を有する2カメラ設定では、108個のスカラー未知数と108本の式が得られ、最小二乗最小化により安定した解が得られる。
• レーザー光線を有限な深さ（d ≈ 1 mm）としてモデル化することで再構成誤差が低減され、ゼロ厚さの平面を仮定した場合に生じる奥行き方向のずれが是正される。
• サブピクセル特徴マッチングにより分解能が向上し、キャリブレーション係数（1 px ≈ 14 μm）により任意単位から物理的マイクロメーター単位への変換が可能になる。
• 粒子がレーザー光線の端縁付近に位置する場合でも、本手法は頑健に動作するが、焦点が合っていない領域では奥行きの変動により一部の不一致が生じる（図5(d)参照）。