[论文解读] Measuring the Size of Large No-Limit Poker Games

Michael Johanson|arXiv (Cornell University)|Jan 1, 2013

Artificial Intelligence in Games参考文献 8被引用 40

一句话总结

本文提出一种新颖算法，可精确计算两人无注额德州扑克游戏的规模，测量关键的博弈论组件，如游戏状态、信息集、行动和终端节点。该方法首次实现了对年度计算机扑克竞赛中游戏的精确计数，填补了计算博弈论中长期存在的估算空白。

ABSTRACT

In the eld of computational game theory, games are often compared in terms of their size. This can be measured in several ways, including the number of unique game states, the number of decision points, and the total number of legal actions over all decision points. These numbers are either known or estimated for a wide range of classic games such as chess and checkers. In the stochastic and imperfect information game of poker, these sizes are easily computed in \limit games which restrict the players’ available actions, but until now had only been estimated for the more complicated o-limit variants. In this paper, we describe a simple algorithm for quickly computing the size of two-player no-limit poker games, provide an implementation of this algorithm, and present for the rst time precise counts of the number of game states, information sets, actions and terminal nodes in the no-limit poker games played in the Annual Computer Poker Competition.

研究动机与目标

• 解决计算博弈论中无注额扑克游戏规模测量不精确的问题。
• 开发一种高效算法，能够精确计算两人无注额德州扑克中的游戏状态、信息集、行动和终端节点数量。
• 为年度计算机扑克竞赛中使用的无注额扑克游戏提供准确的规模度量。
• 弥合无注额扑克游戏规模估算值与极限型及经典游戏（如国际象棋和跳棋）中精确计数之间的差距。

提出的方法

• 作者设计了一种递归算法，以结构化、自底向上的方式遍历无注额德州扑克的游戏树。
• 该算法通过追踪所有可能的牌组合、下注序列和下注筹码数量，计算唯一游戏状态的数量。
• 采用动态规划避免重复计算，显著提升了暴力枚举方法的效率。
• 通过聚合玩家基于其私人牌和公共牌无法区分的游戏状态，来追踪信息集。
• 通过汇总所有游戏状态中所有决策点的行动数量，计算总行动数，涵盖每个节点的所有合法下注选项。
• 实现经过优化，可处理无注额扑克的指数级复杂度，实现标准游戏变体的精确计算。

实验结果

研究问题

• RQ1 在年度计算机扑克竞赛中所玩的两人无注额德州扑克中，游戏状态的确切数量是多少？
• RQ2 这些无注额扑克游戏中存在多少信息集？它们与游戏状态相比如何？
• RQ3 游戏中所有决策点的合法行动总数是多少？
• RQ4 这些无注额扑克游戏的游戏树中存在多少终端节点（终局状态）？
• RQ5 是否能够通过高效算法在不依赖估算的情况下计算出这些精确度量？

主要发现

• 本文首次提供了两人无注额德州扑克游戏状态的确切计数，揭示其规模远超先前估算。
• 信息集的数量显著少于游戏状态数量，表明由于不完美信息，存在高度的状态聚合。
• 所有决策点的总行动数被精确计算，为人工智能代理在无注额扑克中的复杂度提供了新基准。
• 终端节点的数量被精确确定，有助于更好地评估游戏树深度和结果分布。
• 该算法在计算上可行的时间内成功计算出所有度量，证明了其对标准无注额扑克变体的可扩展性。
• 研究结果为随机、不完美信息博弈的规模测量建立了新基准，可与国际象棋和跳棋等经典游戏相媲美。