[论文解读] Universal Communication over Modulo-additive Channels with an Individual Noise Sequence

Yuval Lomnitz, Meir Feder|arXiv (Cornell University)|Dec 13, 2010

Wireless Communication Security Techniques参考文献 10被引用 12

一句话总结

本文提出了一种在任意个体噪声序列下的通用通信方案，适用于模加性信道，其中信道输出为输入加上时变噪声序列再对字母表大小取模。研究证明，可实现速率受限于1减去噪声序列的有限状态压缩性，再乘以字母表大小的对数，同时提出一种基于反馈的方案，无需事先知晓噪声信息即可普遍实现该速率。

ABSTRACT

Which communication rates can be attained over an unknown channel where the relation between the input and output can be arbitrary? A channel where the output is any arbitrary (possibly stochastic) function of the input that may vary arbitrarily in time with no a-priori model? In this paper we provide an operational definition of a “capacity” (the maximal possible rate) for such an arbitrary infinite vector channel, which is similar in spirit to the finite-state compressibility of a sequence defined by Lempel and Ziv. This capacity is the highest rate achieved by a designer that knows the particular relation that indeed exists between input and output for all times, yet is constrained to use a fixed finite-length block communication scheme (i.e., use the same scheme over each block). In the case where the relation between input and output is constrained to be “modulo additive” that is the channel generates the output sequence by adding (modulo the channel alphabet) an arbitrary individual sequence to the input sequence, this capacity is upper bounded by 1 minus the finite state compressibilty of the noise sequence, multiplied by the logarithm of the alphabet size. We present a communication scheme with feedback that attains this rate universally without prior knowledge of the noise sequence.

研究动机与目标

• 为无统计模型的任意时变信道定义有意义的容量概念。
• 解决当输入输出关系未知且随时间任意变化时的可靠通信挑战。
• 设计一种无需事先知晓噪声序列信息的通用通信方案，以实现尽可能高的传输速率。
• 基于噪声序列的压缩性，建立模加性信道中可实现速率的紧致上界。

提出的方法

• 本文定义了一种类似于Lempel-Ziv压缩性的容量概念，专为具有任意时变关系的无限向量信道而设计。
• 将信道建模为模加性形式，其中输出 = 输入 + 噪声（模字母表），且噪声为任意个体序列。
• 关键洞见是：可实现速率受限于1减去噪声序列的有限状态压缩性，再乘以log(字母表大小)。
• 提出一种基于反馈的通信方案，可自适应学习噪声模式并普遍实现理论速率极限。
• 该方案利用反馈实时估计噪声序列并相应调整传输，确保在无先验知识下实现速率最优。
• 分析结合了算法信息论与有限状态压缩性工具，推导出速率上界并证明其可实现性。

实验结果

研究问题

• RQ1 对于具有任意、时变且未知的输入输出关系的信道，如何定义有意义的容量概念？
• RQ2 能否设计一种无需事先知晓噪声信息的通用通信方案，使其在该类信道上实现最高可能的传输速率？
• RQ3 噪声序列的有限状态压缩性与模加性信道中最大可实现通信速率之间有何关系？
• RQ4 在缺乏噪声统计信息的条件下，反馈在实现通用速率最优性中起到何种作用？
• RQ5 是否存在一个紧致的可实现速率上界，其仅依赖于噪声序列的压缩性和字母表大小？

主要发现

• 在具有任意个体噪声序列的模加性信道中，最大可实现速率被上界限制为(1 - C) × log|X|，其中C为噪声序列的有限状态压缩性，|X|为字母表大小。
• 所提出的基于反馈的通信方案无需事先知晓噪声序列信息，即可普遍实现该上界。
• 容量定义具有实际操作基础，且类似于Lempel-Ziv压缩性，适用于任意时变信道。
• 噪声序列的有限状态压缩性是决定可实现速率的关键度量，用以表征信道复杂度。
• 该方案具有通用性，即其可自适应应对任意噪声序列而无需显式知晓，从而在所有可能的噪声序列下实现最优速率。
• 该结果确立了在具有个体非随机噪声序列的信道上可靠通信的根本极限。