[论文解读] Coevolutionary intransitivity in games: A landscape analysis

Hendrik Richter|arXiv (Cornell University)|Jan 16, 2015

Evolutionary Game Theory and Cooperation参考文献 13被引用 4

一句话总结

本文提出了一种基于景观的框架，将基于评分和基于排名的非传递性度量与协同进化适应度动态相联系，证明集体排名差异（crd）在捕捉协同进化非传递性方面比时间错位（ptm）更具鲁棒性，尤其在可调随机博弈模型中随机性与玩家数量变化时表现更优。

ABSTRACT

Intransitivity is supposed to be a main reason for deficits in coevolutionary progress and inheritable superiority. Besides, coevolutionary dynamics is characterized by interactions yielding subjective fitness, but aiming at solutions that are superior with respect to an objective measurement. Such an approximation of objective fitness may be, for instance, generalization performance. In the paper a link between rating-- and ranking--based measures of intransitivity and fitness landscapes that can address the dichotomy between subjective and objective fitness is explored. The approach is illustrated by numerical experiments involving a simple random game with continuously tunable degree of randomness.

研究动机与目标

• 解决协同进化算法中主观适应度（来自协同进化交互）与客观适应度（泛化性能）之间的二元对立问题。
• 研究非传递性（循环优势关系）如何尽管主观适应度看似提升，仍阻碍协同进化进展。
• 开发并验证能够捕捉跨代际适应度排名时间不一致性的动态非传递性度量。
• 评估不同非传递性度量（如itx、kld、ptm、crd）在静态与动态适应度演化中的有效性。
• 建立一个可扩展的实验框架，使用具有可调随机性的随机博弈，系统性地研究非传递性影响。

提出的方法

• 提出一种协同动力适应度景观框架，将客观适应度（f_obj）与主观适应度（f_sub）整合于共享搜索空间S上，并具有邻域结构n(s)。
• 引入一种简单的随机博弈模型，其中结果取决于玩家评分和一个可调随机性参数p_rand，从而实现对非传递性的连续控制。
• 采用基于评分的非传递性度量（如itx、kld）和基于排名的动态度量（如crd、ptm）来量化静态与动态非传递性。
• 使用时间平均度量（如⟨itx⟩、⟨crd⟩）评估跨代际的非传递性，按玩家数量进行归一化。
• 应用统计分析比较非传递性度量与适应度演化（如最高得分、最大泛化性能）之间的关系。
• 通过在不同N（玩家数）和p_rand（随机性水平）下比较crd与ptm，验证度量的可互换性与鲁棒性。

实验结果

研究问题

• RQ1 静态非传递性度量（如itx、kld）与协同进化博弈中随机性程度的相关性如何？
• RQ2 静态非传递性在多大程度上影响协同进化动态中的主观或客观适应度？
• RQ3 动态非传递性度量（如ptm、crd）如何反映跨代际适应度排名的时间不一致性？
• RQ4 在与适应度演化的关联中，crd或ptm哪一个更能捕捉真实的协同进化非传递性？
• RQ5 基于排名的度量如crd能否作为协同进化非传递性的更可靠代理，优于基于评分或时间错位的度量？

主要发现

• 静态非传递性（以itx度量）随随机性参数p_rand单调增加，而主观与客观适应度（得分、泛化性能）基本保持不变。
• 基于评分的非传递性度量itx与概率度量kld之间存在成比例关系，证实了在所研究的博弈模型中二者可互换。
• 集体排名差异（crd）与最大观测得分（max sc）和泛化性能（max gp）呈线性关系，尤其在低p_rand时，表明其能有效追踪适应度演化。
• 时间错位（ptm）度量的关联性弱于crd，尤其在小N和高p_rand时，表明crd对动态非传递性更敏感。
• 基于评分和泛化性能作为客观适应度的crd度量表现出分段线性缩放，证实了在不同客观适应度定义下的一致性。
• 与ptm相比，crd度量展现出更优的鲁棒性与可解释性，表明其是动态环境中协同进化非传递性更可靠的指标。