[论文解读] Regular Methods for Operator Precedence Languages

Henzinger, Thomas A., Kebis, Pavol+2 more|arXiv (Cornell University)|Jan 1, 2023

semigroups and automata theory参考文献 20被引用 7

一句话总结

本文研究了在近似模型计数中，SAT oracle 与 NP oracle 相较的相对能力。结果表明，尽管每个查询提供 n 位信息（而 NP oracle 仅提供 1 位），SAT oracle 并未将查询复杂度降低至 Ω̃(log n) 以下，与 NP oracle 的下界一致，因此在此情境下无渐近优势。该结果通过一种新颖的信息论分析方法建立，结合法诺不等式与 KL 散度对采样分布的界。

ABSTRACT

The operator precedence languages (OPLs) represent the largest known subclass of the context-free languages which enjoys all desirable closure and decidability properties. This includes the decidability of language inclusion, which is the ultimate verification problem. Operator precedence grammars, automata, and logics have been investigated and used, for example, to verify programs with arithmetic expressions and exceptions (both of which are deterministic pushdown but lie outside the scope of the visibly pushdown languages). In this paper, we complete the picture and give, for the first time, an algebraic characterization of the class of OPLs in the form of a syntactic congruence that has finitely many equivalence classes exactly for the operator precedence languages. This is a generalization of the celebrated Myhill-Nerode theorem for the regular languages to OPLs. As one of the consequences, we show that universality and language inclusion for nondeterministic operator precedence automata can be solved by an antichain algorithm. Antichain algorithms avoid determinization and complementation through an explicit subset construction, by leveraging a quasi-order on words, which allows the pruning of the search space for counterexample words without sacrificing completeness. Antichain algorithms can be implemented symbolically, and these implementations are today the best-performing algorithms in practice for the inclusion of finite automata. We give a generic construction of the quasi-order needed for antichain algorithms from a finite syntactic congruence. This yields the first antichain algorithm for OPLs, an algorithm that solves the ExpTime-hard language inclusion problem for OPLs in exponential time.

研究动机与目标

• 确定 SAT oracle（返回满足赋值）是否在近似模型计数中比 NP oracle（仅返回是/否）更具优势。
• 弥合近似计数框架中理论模型（NP oracle）与实际算法（SAT 求解器）之间的差距。
• 分析 SAT oracle 提供的更丰富信息是否能实现近似模型计数中的亚对数查询复杂度。
• 在 SAT oracle 模型下建立所需查询次数的紧致下界。

提出的方法

• 将 SAT oracle 形式化为一种查询机制：若存在满足赋值则返回该赋值，否则返回 ⊥。
• 将 Stockmeyer 的基于哈希的框架适配至 SAT oracle 模型，分析在 (ε, δ) 近似保证下的查询复杂度。
• 引入一种半盲计数器，用于在哈希迭代过程中维护解数的估计值。
• 利用法诺不等式，将估计误差与真实解数和 oracle 响应之间的互信息联系起来。
• 应用数据处理不等式与互信息的链式法则，对跨查询的信息泄漏进行界控。
• 对采样赋值的条件分布进行 KL 散度分析，以对每次查询的互信息上界进行估计。

实验结果

研究问题

• RQ1 SAT oracle 在近似模型计数中是否严格强于 NP oracle？
• RQ2 SAT oracle 响应中额外提供的信息（满足赋值）是否能将查询次数减少至 O(log n) 以下？
• RQ3 实现 (ε, δ)-近似模型计数所需的最少 SAT oracle 调用次数是多少？
• RQ4 SAT oracle 提供的更丰富反馈是否能带来相比 NP oracle 的指数级查询复杂度改进？
• RQ5 信息论技术是否可用于在 SAT oracle 模型下建立紧致的下界？

主要发现

• 实现 (ε, δ)-近似模型计数所需的 SAT oracle 调用次数为 Ω̃(log n)，与 NP oracle 的下界一致。
• 尽管每次调用返回 n 位信息，SAT oracle 在查询复杂度方面并未相对于 NP oracle 提供渐近优势。
• 信息论分析表明，真实解数与 oracle 响应之间的互信息每查询最多为 O(log log n)，限制了信息增益。
• 证明表明，即使使用 SAT-Sample oracle（返回多个赋值），查询复杂度仍保持为 Ω̃(log n)。
• 分析揭示，主要瓶颈并非每次查询的信息量，而是解空间的组合结构以及对高精度估计的需求。
• 该结果意味着实际的基于 SAT 的计数器（如 ApproxMC）在渐近意义上无法从 SAT 求解器的全部能力中获益，超越 NP oracle 已经允许的范围。