[论文解读] Sharing a reward based on peer evaluations

Arthur Carvalho, Kate Larson|arXiv (Cornell University)|May 10, 2010

Auction Theory and Applications参考文献 2被引用 6

一句话总结

本文提出了两种机制——同行评估与同行预测——以基于组内成员相互评价的方式公平分配固定奖励。同行评估机制具有策略无关性且预算平衡，但易受共谋影响；同行预测机制则具备抗共谋性与激励相容性，通过预测一致性检验确保报告的真实性。

ABSTRACT

We study a problem where a group of agents has to decide how some fixed value should be shared among them. We are interested in settings where the share that each agent receives is based on how that agent is evaluated by other members of the group, where highly regarded agents receive a greater share compared to agents that are not well regarded. We introduce two mechanisms for determining agents' shares: the peer-evaluation mechanism, where each agent gives a direct evaluation for every other member of the group, and the peer-prediction mechanism, where each agent is asked to report how they believe group members will evaluate a particular agent. The sharing is based on the provided information. While both mechanisms are individually rational, the first mechanism is strategy-proof and budget-balanced, but it can be collusion-prone. Further, the second mechanism is collusion-resistant and incentive-compatible.

研究动机与目标

• 设计基于同行评价的机制，以在参与者之间分配固定奖励。
• 解决基于群体的奖励分配中的公平性与策略行为问题。
• 从策略无关性、预算平衡与抗共谋性角度比较不同机制。
• 开发一种机制，激励真实报告，同时防止协同操纵。

提出的方法

• 同行评估机制收集每个参与者对组内其他成员的直接评价。
• 同行预测机制要求每个参与者预测他人对某一特定成员的评价，并据此确定奖励分配。
• 奖励根据同行预测机制中实际评价与预测评价之间的一致性进行分配。
• 该机制使用一种评分规则，通过奖励预测与实际评价的一致性，确保激励相容性。
• 两种机制均设计为个体理性且预算平衡。
• 理论分析证实，同行预测机制具备激励相容性且抗共谋。

实验结果

研究问题

• RQ1 如何基于同行评价公平分配固定奖励？
• RQ2 何种机制可确保基于同行评价的奖励分配中真实报告？
• RQ3 在奖励分配机制中，策略无关性与抗共谋性之间存在何种权衡？
• RQ4 能否设计一种既预算平衡又抗协同操纵的机制？

主要发现

• 同行评估机制具有策略无关性且预算平衡，确保任何参与者无法通过虚报评价获益。
• 该机制易受共谋影响，参与者可协调提高彼此评分。
• 同行预测机制具备激励相容性，即参与者通过真实报告预测可最大化自身收益。
• 该机制也具备抗共谋性，因为协同操纵无法持续为共谋者带来收益。
• 该机制依赖于预测与实际评价之间的一致性来验证报告的真实性。
• 两种机制均具备个体理性，即参与者参与不会使其境况更差。