[论文解读] A Novel Approach for Compression of Images Captured using Bayer Color Filter Arrays

Sang-Yong Lee, Antonio Ortega|ArXiv.org|Mar 13, 2009

Advanced Data Compression Techniques参考文献 27被引用 4

一句话总结

本文提出了一种新型图像压缩框架——解码后插值（IAD），该方法逆转了基于拜耳CFA的数码相机中插值与压缩的传统顺序。通过在插值前对原始CFA数据进行压缩，该方法减少了冗余并降低了编码复杂度——在高比特率压缩比下，相较于传统方法，PSNR最高可提升1.5 dB，且失真更低，尤其在使用SPIHT和先进插值方法时表现更优。

ABSTRACT

We propose a new approach for image compression in digital cameras, where the goal is to achieve better quality at a given rate by using the characteristics of a Bayer color filter array. Most digital cameras produce color images by using a single CCD plate, so that each pixel in an image has only one color component and therefore an interpolation method is needed to produce a full color image. After the image processing stage, in order to reduce the memory requirements of the camera, a lossless or lossy compression stage often follows. But in this scheme, before decreasing redundancy through compression, redundancy is increased in an interpolation stage. In order to avoid increasing the redundancy before compression, we propose algorithms for image compression in which the order of the compression and interpolation stages is reversed. We introduce image transform algorithms, since non interpolated images cannot be directly compressed with general image coders. The simulation results show that our algorithm outperforms conventional methods with various color interpolation methods in a wide range of compression ratios. Our proposed algorithm provides not only better quality but also lower encoding complexity because the amount of luminance data used is only half of that in conventional methods.

研究动机与目标

• 解决数码相机中传统图像压缩效率低下的问题，即在压缩前因插值导致冗余增加。
• 通过反转插值与压缩阶段的顺序，降低编码复杂度并提升压缩效率。
• 通过将插值与压缩过程解耦，实现与任意插值方法的兼容性。
• 最小化压缩图像中的视觉失真和块效应，尤其是在高比特率压缩比下。
• 开发针对原始CFA数据的高效变换与格式转换技术，以在不进行插值的情况下利用空间冗余。

提出的方法

• 反转标准处理流程：在颜色插值前执行压缩，实现对原始拜耳CFA数据的直接编码。
• 引入颜色格式转换算法（如YCbCr、RGB）和空间变换（平移、旋转），以优化CFA数据的组织方式，提升压缩效率。
• 使用一维DPCM和方向性变换来建模CFA图案中的空间相关性，尤其利用拜耳滤波器的2×2重复结构特性。
• 对变换后的CFA数据应用标准编码器（如JPEG、SPIHT），在编码过程中避免插值，从而保持编码效率。
• 通过仅在解码后执行插值，将插值与压缩过程解耦，使任何插值方法均可使用，且不影响编码器复杂度。
• 设计保留能量集中特性的变换，减少编码伪影，尤其在亮度和色度分量中表现更优。

实验结果

研究问题

• RQ1 在插值前对原始拜耳CFA数据进行压缩，是否能获得优于传统插值后压缩的率失真性能？
• RQ2 所提出的IAD框架在不同压缩比和插值方法下，对编码复杂度和视觉质量的影响如何？
• RQ3 格式转换与空间变换在非插值CFA数据上的压缩效率提升程度如何？
• RQ4 为何IAD的PSNR增益在低压缩比下更高？这与编码误差分布有何关联？
• RQ5 IAD方法是否能在不增加编码器复杂度的前提下支持自适应或高质量插值方法？

主要发现

• 在高比特率压缩比下，IAD方法的亮度PSNR相比传统方法最高可提升1.5 dB，尤其在使用SPIHT编码时表现显著。
• 对于双线性插值，IAD在所有压缩比下均优于传统方法，尤其在35:1压缩比下增益超过1 dB。
• 在使用SPIHT编码时，采用基于梯度和中值的插值方法，IAD在20:1或40:1压缩比下仍保持优越性能。
• 在所有测试压缩比下，IAD在CIELAB空间中的平均ΔE值更低，表明其颜色保真度更优，尤其在高比特率压缩下表现更佳。
• 由于直接对单分量CFA数据进行压缩，IAD将亮度数据量减少至传统方法的一半，从而显著降低编码复杂度。
• 视觉对比显示，IAD压缩图像中的块效应显著减少，IAD能更好地保留细节，优于传统方法。