[論文レビュー] Rule of Three for Superresolution of Still Images with Applications to Compression and Denoising

Mario Mastriani|arXiv (Cornell University)|May 4, 2014

Image and Signal Denoising Methods参考文献 62被引用数 3

ひとこと要約

本稿では、隣接するスケール間の近似サブバンドとディテールサブバンドの空間的関係を活用して、波ドメインで欠落している高周波数ディテールサブバンド画素を再構築する、Waveletドメインにおけるスーパーレゾリューション技術「Threeの法則（Ro3）」を紹介する。スケール間の構造的一致性を活用することで、圧縮およびノイズ除去の両面で画像品質を向上させ、JPEGおよびJPEG2000におけるより高い圧縮レートを実現するとともに、忠実度および効率性の面で標準的手法を上回る性能を発揮する。

ABSTRACT

We describe a new method for superresolution of still images (in the wavelet domain) based on the reconstruction of missing details subbands pixels at a given ith level via Rule of Three (Ro3) between pixels of approximation subband of such level, and pixels of approximation and detail subbands of (i+1)th level. The histogramic profiles demonstrate that Ro3 is the appropriate mechanism to recover missing detail subband pixels in these cases. Besides, with the elimination of the details subbands pixels (in an eventual compression scheme), we obtain a bigger compression rate. Experimental results demonstrate that our approach compares favorably to more typical methods of denoising and compression in wavelet domain. Our method does not compress, but facilitates the action of the real compressor, in our case, Joint Photographic Experts Group (JPEG) and JPEg2000, that is, Ro3 acts as a catalyst compression

研究の動機と目的

• 学習を明示的に行わない新しい静止画像スーパーレゾリューション手法の開発。
• ディテールサブバンド係数の除去を積極的に行えるようにすることで、画像圧縮効率の向上。
• 構造的一致性を用いて欠落した高周波成分を再構築することで、ノイズ除去機構の提供。
• JPEG や JPEG2000 などの既存圧縮アルゴリズムのコアアルゴリズムを変更せずに、それらの性能を向上させる前処理の促進要因としての機能。

提案手法

• 本手法は離散ウェーブレット変換（DWT）ドメインで動作し、レベル i のディテールサブバンドにおける欠落画素に焦点を当てる。
• Threeの法則（Ro3）を適用し、レベル i の近似サブバンドから2つの参照画素と、レベル i+1 のディテールサブバンドから1つの参照画素を用いる。
• 3つの参照点に基づく重み付き空間補間により、欠落したディテールサブバンド画素を推定し、構造的一致性を確保する。
• ヒストグラム解析により、Ro3が欠落した高周波成分の統計的プロファイルを効果的に回復していることが確認された。
• 本手法は圧縮の前処理として適用され、ディテールサブバンド係数の除去に伴う知覚的損失を最小限に抑えることができる。
• 標準圧縮アルゴリズムの効率を向上させるための促進要因として機能し、エンコード論理を変更せずに圧縮レートを向上させる。

実験結果

リサーチクエスチョン

• RQ1 学習を必要としないルールベースの手法が、ウェーブレットサブバンドの関係を用いて、静止画像における欠落した高周波ディテールを効果的に再構築できるか。
• RQ2 Threeの法則（Ro3）は、従来のノイズ除去および圧縮手法と比較して、画像品質をどの程度維持できるか。
• RQ3 Ro3がディテールサブバンド係数の除去をより積極的に行えるようにすることで、どの程度高い圧縮レートを達成できるか。
• RQ4 JPEG や JPEG2000 などの標準画像コーデックが、Ro3 を前処理として用いることで、性能がどの程度向上するか。
• RQ5 スケール間のウェーブレットサブバンドの構造的一致性は、学習データがなくても、正確なスーパーレゾリューションを導くのに十分か。

主な発見

• Threeの法則（Ro3）は、自然画像の統計的特徴に一致するヒストограмプロファイルにより、欠落したディテールサブバンド画素を高い忠実度で回復した。
• Ro3により、ディテールサブバンド係数の除去をより積極的に行えるようになり、圧縮レートが著しく向上した。
• 実験結果から、Ro3は画像品質指標の観点で、通常のノイズ除去および圧縮手法を上回り、特に繊細なテクスチャーやエッジの維持において優れた性能を示した。
• 本手法は、JPEG や JPEG2000 に対して効果的な促進要因となり、内部アルゴリズムを変更せずに圧縮効率を向上させた。
• 本手法はさまざまな画像タイプにわたり、構造的一致性を維持し、再構築画像におけるアーチファクトを低減するという観点で、強固な性能を示した。