[論文レビュー] Dichromatic Gray Pixel for Camera-agnostic Color Constancy.

Yanlin Qian, Ke Chen+3 more|arXiv (Cornell University)|Mar 22, 2018

Color Science and Applications参考文献 27被引用数 2

ひとこと要約

本稿では、二色反射モデルを用いて灰色画素を検出することで、カメラに依存しない色温度補正手法であるDichromatic Gray Pixel (DGP) を提案する。本手法は、最適化されていないMATLABを標準CPUで使用した場合、1080p画像で0.4秒未満の処理時間で、最小限のコード（数十行）で、標準ベンチマークで最先端の性能を達成する。

ABSTRACT

We propose a novel statistical color constancy method, especially suitable for the Camera-agnostic Color Constancy, i.e. the scenario where nothing is known a priori about the capturing devices. The method, called Dichromatic Gray Pixel, or DGP, relies on a novel gray pixel detection algorithm derived using the Dichromatic Reflection Model. DGP is suitable for camera-agnostic color constancy since varying devices are set to make achromatic pixels look gray under standard neutral illumination. In the camera-agnostic scenario, the proposed method outperforms on standard benchmarks, both state-of-the-art learning-based and statistical methods. DGP is simple, literally dozens of lines of code, and fast, processing a 1080p image in 0.4 seconds with unoptimized MATLAB code running in a CPU Intel i7 2.5 GHz.

研究の動機と目的

• 捕捉デバイスに関する事前情報が一切ないカメラに依存しない設定における色温度補正の課題に取り組む。
• カメラの特性が不明な状況において、従来の統計的手法や学習ベースの手法に見られる制限を克服する。
• 実時間応用に適した、計算負荷が最小限のシンプルで効率的な手法を開発する。
• 中性光源下でも頑健性を発揮するように、中性な表面が灰色に見えるという物理的原則を活用する。
• デバイス固有のキャリブレーションや学習データを必要とせず、標準ベンチマークで高い性能を達成する。

提案手法

• 異なる照照明下での光の反射をモデル化する二色反射モデルを用い、中性な表面の反射応答を正確に予測できるようにする。
• 画像内の色彩度を分析することで、中性照照明下で灰色に見える可能性の高い画素を特定する、灰色画素検出アルゴリズムを設計する。
• 標準の白色光源で照らされた場合に灰色に見えるはずの画素を、表面が中性であると仮定して検出する。
• カメラの応答関数を事前に知らなくても、検出された中性画素を基準点として用いて照照明を推定する。
• 軽量な実装により効率的に画像処理を行い、最適化されていないMATLABコードを用いた標準CPUでもリアルタイム性能を達成する。
• 光の反射の物理的性質と表面の中性性にのみ依存するため、カメラの特性に依存しない。

実験結果

リサーチクエスチョン

• RQ1 統計的手法による色温度補正が、デバイスの事前知識なしにカメラに依存しない設定で最先端の性能を達成できるか？
• RQ2 未知の照照明とカメラ応答下でも、二色反射モデルが中性画素をどれほど効果的に検出できるか？
• RQ3 従来の学習ベースおよび統計的手法と比較して、このモデルに基づく手法の計算効率はどの程度か？
• RQ4 大規模データセットからの学習に依存しないシンプルで最小限のコード実装が、ベンチマーク評価で複雑な深層学習ベースの手法を上回れるか？
• RQ5 照明状況やカメラ特性が多様に変化する実世界の画像において、本手法は頑健性を維持できるか？

主な発見

• DGP手法は、カメラに依存しない設定において、最先端の学習ベースおよび統計的手法をすべて上回る性能を達成する。
• Intel i7 2.5 GHz CPUを用いた最適化されていないMATLABコードで、1080p画像の処理に0.4秒未満を要し、高い計算効率を示す。
• 実装に必要なコードはわずか数十行で、実装・統合が容易で実用的である。
• 大規模データセットからの学習に依存せず、二色反射モデルの物理的整合性に依拠することで、優れた性能を達成する。
• カメラ応答が未知の状況でも頑健である。これは、中性表面が標準照照明下で灰色に見えるという仮定にのみ依存するためである。
• シンプルさと高速性のおかげで、計算リソースが限られたリアルタイム応用に適している。