[论文解读] Mastering Concurrent Computing Through Sequential Thinking: A Half-century Evolution

Sergio Rajsbaum, Michel Raynal|arXiv (Cornell University)|Dec 14, 2018

Distributed systems and fault tolerance参考文献 59被引用 4

一句话总结

本文追溯了过去50年来并发计算的发展历程，认为将并发问题简化为顺序推理的主导范式，推动了分布式系统、账本和容错计算的进步。尽管该方法取得了成功，但在性能、一致性和表达能力方面仍面临根本性限制，尤其是在固有并发问题以及对高可用性或可扩展性有要求的系统中。

ABSTRACT

Concurrency, the art of doing many things at the same time is slowly becoming a science. It is very difficult to master, yet it arises all over modern computing systems, both when the communication medium is shared memory and when it is by message passing. Concurrent programming is hard because it requires to cope with many possible, unpredictable behaviors of communicating processes interacting with each other. Right from the start in the 1960s, the main way of dealing with concurrency has been by reduction to sequential reasoning. We trace this history, and illustrate it through several examples, from early ideas based on mutual exclusion, passing through consensus and concurrent objects, until today ledgers and blockchains. We conclude with a discussion on the limits that this approach encounters, related to fault-tolerance, performance, and inherently concurrent problems.

研究动机与目标

• 通过顺序推理作为统一范式的视角，追溯过去50年并发计算的历史演变。
• 识别支撑成功并发系统的核心概念工具——顺序规范、一致性条件、共识和同步。
• 分析顺序推理方法在现代分布式系统中的局限性，尤其在容错性、性能和固有并发问题方面的表现。
• 研究现代系统（如区块链和分布式账本）如何挑战或扩展经典顺序抽象。
• 探讨一致性、可用性和性能之间的权衡，特别是在CAP定理和最终一致性背景下的影响。

提出的方法

• 分析从共享内存中的互斥到共识和状态机复制的并发系统的历史演进。
• 以顺序规范为基础来指定并发对象，通过线性化和一致性条件确保正确性。
• 应用通用构造（universal constructions）技术，从基本原语（如共识和全序广播）构建复制状态机。
• 将区块链系统视为顺序推理的现代应用，其中临时分叉和最终一致性通过放松严格线性化来换取可扩展性。
• 通过比较有序账本（如比特币）与部分有序账本（如IOTA、Hashgraph），评估分布式账本中的性能权衡，后者通过减少通信开销实现更高效率。
• 应用形式化模型（如ABD算法和CAP定理）分析并发系统中一致性和可用性的极限。

实验结果

研究问题

• RQ1 过去50年中，将并发编程简化为顺序推理的范式如何塑造了分布式系统的架构设计与正确性？
• RQ2 在固有并发或高可用系统中，使用顺序规范和线性化是否存在根本性限制？
• RQ3 在最终一致性与区块链系统中，通过放松一致性保证，性能与可扩展性能在多大程度上得到提升？
• RQ4 为何像区块链这样的系统能容忍临时不一致（如分叉），尽管其目标是强一致性？
• RQ5 是否存在无法通过顺序规范表达的固有并发问题？若存在，有哪些替代方案？

主要发现

• 顺序推理范式在并发系统的发展中起到了核心作用，通过顺序规范和一致性条件实现了形式化规格说明与验证。
• 线性化虽提供强正确性保证，但在实践中成本高昂，通常在真实系统中被放松以提升性能和可用性。
• 比特币等区块链引入了权衡：临时分叉违反了强一致性，但经过足够深度后，最终收敛可确保高概率的一致性。
• 基于有向无环图（如IOTA、Hashgraph）的分布式账本通过避免全局排序和减少通信开销，实现了更高的可扩展性。
• CAP定理限制了同时实现一致性、可用性和分区容错性，解释了为何在许多分布式系统中临时不一致是不可避免的。
• 并非所有并发问题都能被顺序规范捕获，表明顺序推理方法存在根本性边界，尤其在动态或高度并发的环境中。