[论文解读] Fine-Grained Hardness for Edit Distance to a Fixed Sequence

Amir Abboud, Karl Bringmann|arXiv (Cornell University)|Jan 1, 2018

Algorithms and Data Compression参考文献 65被引用 5

一句话总结

该论文建立了在基本字符串与几何问题中去除对数因子的困难性——如最长公共子序列（LCS）、正则表达式匹配和Fréchet距离——与公式SAT复杂度之间的紧密联系。通过设计从大小为s的公式SAT实例（在n个变量上）到长度为N = 2^{n/2} · s^{1+o(1)}的LCS实例的近乎最优归约，作者证明：若LCS存在O(n² / log^{7+ε} n)的算法，则将意味着公式SAT算法的突破性进展，从而证明去除七个额外的对数因子的难度等价于比穷举搜索更快地解决公式SAT问题。

ABSTRACT

A noticeable fraction of Algorithms papers in the last few decades improve the running time of well-known algorithms for fundamental problems by logarithmic factors. For example, the {O}(n^2) dynamic programming solution to the Longest Common Subsequence problem (LCS) was improved to O(n^2/log^{2}n) in several ways and using a variety of ingenious tricks. This line of research, also known as the art of shaving log factors, lacks a tool for proving negative results. Specifically, how can we show that it is unlikely that LCS can be solved in time O(n^2/log^3n)? Perhaps the only approach for such results was suggested in a recent paper of Abboud, Hansen, Vassilevska W. and Williams (STOC'16). The authors blame the hardness of shaving logs on the hardness of solving satisfiability on boolean formulas (Formula-SAT) faster than exhaustive search. They show that an O(n^2/log^{1000} n) algorithm for LCS would imply a major advance in circuit lower bounds. Whether this approach can lead to tighter barriers was unclear. In this paper, we push this approach to its limit and, in particular, prove that a well-known barrier from complexity theory stands in the way for shaving five additional log factors for fundamental combinatorial problems. For LCS, regular expression pattern matching, as well as the Fréchet distance problem from Computational Geometry, we show that an O(n^2/log^{7+epsilon}{n}) runtime would imply new Formula-SAT algorithms. Our main result is a reduction from SAT on formulas of size s over n variables to LCS on sequences of length N=2^{n/2} * s^{1+o(1)}. Our reduction is essentially as efficient as possible, and it greatly improves the previously known reduction for LCS with N=2^{n/2} * s^c, for some c >= 100.

研究动机与目标

• 为理解为何在基础算法中实现对数因子的改进如此困难，填补现有认知的空白。
• 建立LCS、正则表达式匹配和Fréchet距离中去除七个额外对数因子的难度，等价于比穷举搜索更快地解决公式SAT问题。
• 设计一种近乎最优的从公式SAT到LCS的归约，以揭示当前对数因子去除技术的极限。
• 提供一个形式化的障碍结果，表明除非能更快地解决公式SAT，否则现有方法无法排除LCS存在O(n² / log³ n)算法的可能性。
• 证明对数因子去除的困难性本质上与公式SAT的困难性相关，而非与3SUM或APSP等较弱的猜想相关。

提出的方法

• 设计一种新颖的、近乎最优的归约，将大小为s的n变量公式SAT实例归约为长度为N = 2^{n/2} · s^{1+o(1)}的LCS实例。
• 通过平面内曲线的递归构造来模拟布尔公式，使用Fréchet距离作为公式求值的代理。
• 通过几何曲线嵌入实现与门和或门的构造，其中距离≤1对应于真值评估。
• 引入一个关键技巧：使用辅助比较[ℓ ≤ ℓ]和[−ℓ ≤ −ℓ]，以强制结构一致性并防止跨门匹配。
• 在Word-RAM模型下应用鲁棒性设计，支持大小为Θ(log n)的字操作，确保在标准计算假设下归约保持高效。
• 利用与门和或门构造的正确性，确保最终曲线之间的Fréchet距离≤1当且仅当输入布尔公式求值为真。

实验结果

研究问题

• RQ1 我们能否证明：若LCS存在O(n² / log^{7+ε} n)的算法，将意味着公式SAT运行时间的显著改进？
• RQ2 LCS中去除对数因子的困难性是否本质上与比穷举搜索更快地解决公式SAT问题的困难性相关？
• RQ3 我们能否建立一个紧致的障碍，使得在合理复杂度假设下，排除LCS存在O(n² / log³ n)算法的可能性？
• RQ4 在这些归约中，公式SAT实例的大小与LCS实例长度之间的最优权衡是什么？
• RQ5 使用几何曲线构造（通过Fréchet距离）是否能为证明对数因子去除障碍提供更稳健的框架？

主要发现

• 若LCS存在O(n² / log^{7+ε} n)的算法，将意味着公式SAT运行时间的非平凡改进，即比穷举搜索快一个多项式因子。
• 该从公式SAT到LCS的归约实现了近乎最优的效率，LCS实例长度为N = 2^{n/2} · s^{1+o(1)}，优于先前构造中N = 2^{n/2} · s^c（c ≥ 100）的形式。
• 本文证明：LCS、正则表达式匹配和Fréchet距离中去除七个额外对数因子的难度，等价于比穷举搜索更快地解决公式SAT问题。
• 该归约在Word-RAM模型下具有鲁棒性，且在字操作耗时为(log n)^{1+o(1)}时仍保持高效。
• 该构造确保：最终曲线之间的Fréchet距离≤1当且仅当输入布尔公式求值为真，从而确立了模拟的正确性。
• 作者表明，现有猜想如3SUM或APSP不足以排除对数因子改进的可能性，因为这些问题的超对数改进早已被证明，而公式SAT则不然。