[论文解读] New Clustering Algorithm for Vector Quantization using Rotation of Error Vector

H. B. Kekre, Tanuja Sarode|arXiv (Cornell University)|Apr 10, 2010

Advanced Data Compression Techniques参考文献 20被引用 29

一句话总结

该论文提出了一种用于向量量化的新型聚类算法，通过在聚类分裂过程中旋转误差向量，避免了方向性偏差，从而在 LBG 和 KPE 方法的基础上实现了改进。通过动态调整聚类方向，该方法降低了失真，在代码本大小从 128 到 1024 的范围内，与 LBG 相比，PSNR 提升了 2–5 dB。

ABSTRACT

The paper presents new clustering algorithm. The proposed algorithm gives less distortion as compared to well known Linde Buzo Gray (LBG) algorithm and Kekre's Proportionate Error (KPE) Algorithm. Constant error is added every time to split the clusters in LBG, resulting in formation of cluster in one direction which is 1350 in 2-dimensional case. Because of this reason clustering is inefficient resulting in high MSE in LBG. To overcome this drawback of LBG proportionate error is added to change the cluster orientation in KPE. Though the cluster orientation in KPE is changed its variation is limited to +/- 450 over 1350. The proposed algorithm takes care of this problem by introducing new orientation every time to split the clusters. The proposed method reduces PSNR by 2db to 5db for codebook size 128 to 1024 with respect to LBG.

研究动机与目标

• 为解决 LBG 算法中聚类分裂时存在的方向性偏差问题。
• 克服 KPE 算法中方向变化受限的问题，其方向变化被限制在固定方向的 ±45° 范围内。
• 开发一种能够动态旋转误差向量的聚类方法，以实现更高效且均衡的聚类形成。
• 降低均方误差（MSE），并提升图像和信号压缩中向量量化的 PSNR。
• 为向量量化系统中的代码本设计提供一种更具鲁棒性和自适应性的聚类策略。

提出的方法

• 该算法在每次聚类分裂步骤中引入误差向量的旋转，以避免固定的方向性偏差。
• 与 LBG 中添加恒定向量不同，所提出的方法对误差向量进行旋转，以探索新的空间方向。
• 旋转确保聚类在多样化方向上分裂，从而改善覆盖范围并减少失真。
• 该方法通过使用旋转后的误差向量来分裂聚类，以保持聚类结构的平衡与紧凑。
• 该算法基于旋转后的误差向量，采用改进的分裂准则，以指导新码矢量的放置。
• 该过程通过在每次分裂中旋转误差向量，迭代优化代码本，从而提升整体向量量化的效率。

实验结果

研究问题

• RQ1 聚类分裂中的方向性偏差在多大程度上影响了传统 LBG 和 KPE 算法的性能？
• RQ2 在聚类分裂过程中动态旋转误差向量是否能够提升代码本质量并减少失真？
• RQ3 误差向量旋转在多大程度上提升了不同代码本大小下的 PSNR 并降低了 MSE？
• RQ4 与 LBG 和 KPE 相比，该方法在聚类效率和收敛性方面表现如何？
• RQ5 为实现均衡且低失真的聚类，误差向量旋转的最佳策略是什么？

主要发现

• 所提出的算法在代码本大小从 128 到 1024 的范围内，与 LBG 算法相比，PSNR 提升了 2 dB 至 5 dB。
• 该方法通过避免 LBG 和 KPE 中固有的方向性聚类偏差，显著降低了均方误差（MSE）。
• 使用旋转误差向量进行聚类分裂，使得向量空间中的聚类分布更加均匀和紧凑。
• 在失真降低方面，该算法优于 LBG 和 KPE，尤其在较大的代码本尺寸下表现更优。
• 旋转机制有效缓解了 KPE 的局限性，即其方向变化被限制在固定方向的 ±45° 范围内。
• 所提出的方法在多个代码本大小下均表现出一致的性能提升，表明其具有鲁棒性和可扩展性。