[论文解读] Visible Light-Based Human Visual System Conceptual Model

Lee Prangnell|arXiv (Cornell University)|Sep 15, 2016

Visual perception and processing mechanisms参考文献 11被引用 3

一句话总结

本文提出了一种基于可见光的人类视觉系统（VL-HVS）概念模型，通过整合可见光的物理特性、视网膜光感受器生理学以及皮层处理机制，重新定义数字成像中的色彩感知。该模型挑战了以往仅关注亮度（luma）的传统做法，主张在图像与视频处理中更均衡地利用luma与chroma，从而基于更准确的人类色彩感知模型，实现改进的量化方法与伪影抑制技术。

ABSTRACT

There exists a widely accepted set of assertions in the digital image and video coding literature, which are as follows: the Human Visual System (HVS) is more sensitive to luminance (often confused with brightness) than photon energies (often confused with chromaticity and chrominance). Passages similar to the following occur with high frequency in the peer reviewed literature and academic text books: "the HVS is much more sensitive to brightness than colour" and/or "the HVS is much more sensitive to luma than chroma". In this discussion paper, a Visible Light-Based Human Visual System (VL-HVS) conceptual model is discussed. The objectives of VL-HVS are as follows: 1. To provide a deeper theoretical reflection of the fundamental relationship between visible light, the manifestation of colour perception derived from visible light and the physiology of the perception of colour. That is, in terms of the physics of visible light, photobiology and the human subjective interpretation of visible light, it is appropriate to provide comprehensive background information in relation to the natural interactions between visible light, the retinal photoreceptors and the subsequent cortical processing of such. 2. To provide a more wholesome account with respect to colour information in digital image and video processing applications. 3. To recontextualise colour data in the RGB and YCbCr colour spaces, such that novel techniques in digital image and video processing, including quantisation and artifact reduction techniques, may be developed based on both luma and chroma information (not luma data only).

研究动机与目标

• 为可见光、视网膜光感受器与皮层处理在人类色彩感知中的关联提供更深层次的理论基础。
• 为数字图像与视频处理应用中的色彩信息提供整体性理解。
• 通过更均衡地整合luma与chroma数据，重新定义RGB与YCbCr色彩空间，以改进处理技术。
• 基于luma与chroma的双重考量，实现新型量化与伪影抑制方法，突破以luma为中心的传统模型。

提出的方法

• 构建一个整合可见光物理特性、视网膜光感受器光生物学反应以及视觉皮层神经处理的概念模型。
• 分析亮度（luma）与光子能量（色度/色度）之间的区别，以澄清感知敏感度。
• 通过强调chroma与luma在感知建模中同等重要性，重新语境化RGB与YCbCr等色彩空间。
• 提出感知模型应考虑可见光与光感受器之间全光谱的相互作用，而不仅依赖于亮度指标。
• 利用理论与生理学证据，反对在编码标准中过度依赖luma，并建议在处理设计中实现范式转变。

实验结果

研究问题

• RQ1 可见光的物理特性与光感受器反应如何共同塑造人类色彩感知？
• RQ2 为何在图像与视频编码中过度强调luma而忽视chroma可能具有误导性？
• RQ3 哪些理论与生理学基础支持在数字色彩表示中对luma与chroma进行更均衡的处理？
• RQ4 如何通过修正的人类视觉系统概念模型，提升数字图像与视频处理中的量化与伪影抑制效果？

主要发现

• 人类视觉系统（HVS）的敏感度本质上源于可见光、光感受器与皮层处理之间的相互作用，而不仅仅是亮度或明暗。
• 传统认为HVS对luma比chroma更敏感的假设过于简化，且当将亮度与色度等术语混淆时，可能产生误导。
• 更准确的人类色彩感知模型需要整合光感受器反应（特别是S-视锥细胞）与光源的光谱功率分布。
• 通过将luma与chroma视为同等重要来重构色彩空间，可带来更符合感知的图像与视频压缩技术。