[论文解读] National Bias of International Gymnastics Judges during the 2013-2016 Olympic Cycle

Sandro Heiniger, Hugues Mercier|arXiv (Cornell University)|Jul 26, 2018

Sports Analytics and Performance被引用 6

一句话总结

本研究通过建模打分误差的异方差性，识别出2013–2016年奥运会周期国际体操裁判中的国籍偏见，发现艺术体操、有氧体操和韵律体操中存在显著偏见，尤其在决赛中表现优异的运动员身上更为明显；而技巧体操和小轮跳马项目中未发现偏见。裁判对本国运动员的打分偏高，最高可达内在误差变异性的三分之二，但对本国运动员的直接竞争对手则保持无偏见。

ABSTRACT

National bias in sports judging is a well-known issue and has been observed in several sports: judges, in the aggregate, give higher marks to athletes of the same nationality. In this work, we study the national bias of international gymnastics judges during the 2013-2016 Olympic cycle. As opposed to prior work, our analysis leverages the intrinsic variance of the judging error based on the performance level of the gymnasts for each apparatus and discipline. The magnitude of the national bias varies across judges, nations and disciplines. While acrobatics and trampoline do not exhibit any bias, we observe considerable bias by aerobics, artistics and rhythmics judges. In aerobic and artistic gymnastics this bias further increases for the best athletes competing in the finals. On the positive side, we show that judges are unbiased against direct competitors of their own gymnasts. Our approach could easily be applied to other sports that incorporate a judging panel and objective judging guidelines. It could help sports federations and the public at large understand the extent of national bias and identify particularly prone judges or nations.

研究动机与目标

• 调查2013–2016年奥运会周期国际体操裁判中是否存在国籍偏见及其程度。
• 通过引入随表现质量变化的内在打分误差变异性的方法，弥补以往基于回归分析方法的局限性。
• 确定国籍偏见是否在决赛中表现优异的运动员身上更为显著，以及裁判是否对本国运动员的直接竞争对手表现出偏见。
• 为体育联合会提供可操作的建议，以减少打分系统中的国籍偏见。
• 开发一种可应用于其他采用评分小组、具备客观评分标准的体育项目的检测方法。

提出的方法

• 利用来自各大洲及国际赛事的数据，基于表现水平的依赖性标准差，对打分误差的异方差性进行建模。
• 将此内在误差变异性作为基准，以标准差为单位量化国籍偏见，而不仅依赖名义分差。
• 应用一种统计模型，比较预期误差变异性和裁判对本国运动员实际打分偏差的差异。
• 通过控制表现质量，比较裁判对同国籍运动员与非同国籍运动员的打分，评估偏见程度。
• 评估偏见在不同比赛阶段（如决赛与预赛）及裁判角色（如主裁判）中的差异。
• 提出并评估政策干预措施，如更激进的分数剔除、裁判小组结构调整以及长期裁判监控。

实验结果

研究问题

• RQ1 体操打分中的国籍偏见是否因项目而异？若有，哪些项目中的偏见最为严重？
• RQ2 国籍偏见的大小如何与打分误差的内在变异程度相关，特别是在高水平运动员身上？
• RQ3 是否存在裁判对本国运动员直接竞争对手表现出国籍偏见的证据？
• RQ4 在决赛中，尤其是艺术体操和有氧体操项目中，精英运动员的偏见是否更为严重？
• RQ5 与传统回归模型相比，本研究提出的异方差误差变异建模方法是否能更有效地检测和量化国籍偏见？

主要发现

• 技巧体操和小轮跳马裁判未表现出显著的国籍偏见，而有氧体操、艺术体操和韵律体操裁判则存在显著的国籍偏见。
• 艺术体操裁判对本国运动员的打分平均高出内在打分误差变异性的二分之一，对决赛中顶尖运动员的打分则高出三分之二。
• 裁判对本国运动员的直接竞争对手始终保持无偏见，表明其偏见具有针对性，而非普遍性宽松。
• 国籍偏见对高成就运动员最为严重，由于打分范围狭窄，即使微小的分差也可能改变奖牌归属。
• 该方法成功以内在误差的标准差为单位量化偏见，相比名义分差，能提供更细致、更公平的评估。
• 国际体操联合会（FIG）已采纳建议，包括剔除极端分数、将主裁判与执行裁判合并为单一、权力均等的裁判小组，以减少偏见。