[論文レビュー] MS and PAN image fusion by combining Brovey and wavelet methods

Hamid Reza Shahdoosti|arXiv (Cornell University)|Jan 8, 2017

Advanced Image Fusion Techniques参考文献 20被引用数 10

ひとこと要約

本論文は、空間的詳細の保持にBrovey法を、スペクトル忠実度にウェーブレット変換を組み合わせた、新規なマルチスペクトル（MS）およびパノラマ（PAN）画像融合手法を提案する。離散ウェーブレット変換（DWT）を用いた分解とBroveyの強度変調を統合することにより、色ずれを低減するとともに、空間的およびスペクトル的品質を向上させる。IHS、PCA、HPF、および標準DWTに比べ、相関係数およびUIQI指標で優れた性能を示す。

ABSTRACT

Among the existing fusion algorithms, the wavelet fusion method is the most frequently discussed one in recent publications because the wavelet approach preserves the spectral characteristics of the multispectral image better than other methods. The Brovey is also a popular fusion method used for its ability in preserving the spatial information of the PAN image. This study presents a new fusion approach that integrates the advantages of both the Brovey (which preserves a high degree of spatial information) and the wavelet (which preserves a high degree of spectral information) techniques to reduce the colour distortion of fusion results. Visual and statistical analyzes show that the proposed algorithm clearly improves the merging quality in terms of: correlation coefficient and UIQI; compared to fusion methods including, IHS, Brovey, PCA , HPF, discrete wavelet transform (DWT), and a-trous wavelet.

研究の動機と目的

• MSおよびPAN画像融合におけるスペクトル保持と空間的詳細の保持のトレードオフを解決すること。
• 従来の手法でよく見られる色ずれを低減すること。
• Brovey法（空間的詳細）とウェーブレット法（スペクトル忠実度）の長所を統合した単一の融合フレームワークを構築すること。
• 既存手法に比べ、相関係数およびUIQIなどの融合品質指標を向上させること。
• リモートセンシング応用に適した、堅牢で計算効率の良い融合手法を提供すること。

提案手法

• 離散ウェーブレット変換（DWT）を用いて、マルチスペクトル（MS）およびパノラマ（PAN）画像を低周波数および高周波数サブバンドに分解する。
• 高周波数サブバンドにBrovey変換を適用し、空間的分解能を向上させつつ強度変調を維持する。
• 強度変調された高周波数成分を、DWT分解からの低周波数成分と統合する。
• 変更されたサブバンド係数から逆DWTを適用し、融合画像を再構築する。
• 重み付けされた強度変調を通じて、PAN画像からの空間的詳細とMS画像からのスペクトル一貫性を強調する。
• 融合過程でMS画像の元のスペクトル特性を維持することで、スペクトルずれを最小限に抑えるようにアルゴリズムを設計する。

実験結果

リサーチクエスチョン

• RQ1 Brovey法とウェーブレット法を組み合わせることで、MSおよびPAN画像融合における空間的およびスペクトル的品質を向上させることができるか？
• RQ2 提案手法は、IHSやPCAなどの従来の融合手法に比べ、色ずれを低減するか？
• RQ3 相関係数およびUIQIの観点から、提案手法の融合性能はDWT、HPF、およびa-trousウェーブレットに比べてどう異なるか？
• RQ4 ハイブリッド手法は、元のMS画像のスペクトル整合性をどの程度保持するか？
• RQ5 個別のBrovey法またはウェーブレットベースの融合手法に比べ、提案手法は画像品質の維持においてより効果的か？

主な発見

• 提案手法は、IHS、Brovey、PCA、HPF、DWT、a-trousウェーブレット融合手法に比べ、高い相関係数を達成した。
• すべてのベンチマーク手法に比べ、融合結果のUIQI（ユニバーサル画像品質指標）が向上しており、構造的類似性が優れていることが示された。
• 視覚的分析により、色ずれが低減され、融合画像の空間分解能が向上していることが確認された。
• 本手法は、マルチスペクトル画像のスペクトル特性を効果的に保持するとともに、パノラマ画像からの空間的詳細を強化した。
• Brovey法とウェーブレット手法の統合により、単独で使用する場合よりもバランスが取れて、より高品質な融合出力が得られた。
• 統計的および視覚的評価指標の両方において、本アルゴリズムは一貫した性能向上を示した。