[论文解读] A Framework for Consistency Models in Distributed Systems

Paulo Sérgio Almeida|arXiv (Cornell University)|Nov 25, 2024

Distributed systems and fault tolerance被引用 4

一句话总结

本文提出了一套统一的、公理化的分布式系统一致性模型框架，通过结合每进程序列化与全局可见性，将现有模型泛化，从而支持无需时间依赖的、物理可实现的模型，同时支持顺序与并发规格说明。核心贡献是CLAM定理，该定理揭示了封闭过去（Closed past）、仲裁（Arbitration）与本地可见性（Local visibility）之间的根本性三难困境（CAL），揭示了在设计无等待、高可用分布式抽象时的内在权衡。

ABSTRACT

We define am axiomatic timeless framework for asynchronous distributed systems, together with well-formedness and consistency axioms, which unifies and generalizes the expressive power of current approaches. 1) It combines classic serialization per-process with a global visibility. 2) It defines a physical realizability well-formedness axiom to prevent physically impossible causality cycles, while allowing possible and useful visibility cycles, to allow synchronization-oriented abstractions. 3) Allows adding time-based constraints, from a logical or physical clock, either partially or totally ordered, in an optional and orthogonal way, while keeping models themselves timeless. 4) It simultaneously generalizes from memory to general abstractions, from sequential to concurrent specifications, either total or partial, and beyond serial executions. 5) Defines basic consistency axioms: monotonic visibility, local visibility, and closed past. These are satisfied by what we call serial consistency, but can be used as building blocks for novel consistency models with histories not explainable by any serial execution. 6) Revisits classic pipelined and causal consistency, revealing weaknesses in previous axiomatic models for PRAM and causal memory. 7) Introduces convergence and arbitration as safety properties for consistency models, departing from the use of eventual consistency, which conflates safety and liveness. 8) Formulates and proves the CLAM theorem for asynchronous distributed systems: any wait-free implementation of practically all data abstractions cannot simultaneously satisfy Closed past, Local visibility, Arbitration, and Monotonic visibility. While technically incomparable, the CLAM theorem is practically stronger than the CAP theorem, as it allows reasoning about the design space and possible tradeoffs in highly available partition tolerant systems.

研究动机与目标

• 解决现有一致性模型的局限性，这些模型要么禁止有用的可见性环，要么依赖于临时的公理，尤其在面向同步的抽象中。
• 以模块化、正交的方式，将无时间依赖的一致性模型与基于时间的约束（逻辑时钟或物理时钟）统一起来。
• 定义一个通用的公理化框架，支持顺序与并发规格说明，包括CRDT和同步对象。
• 将安全性属性（如收敛性和仲裁）独立于活性性质形式化，超越最终一致性。
• 通过一项新的理论定理，识别并表征设计无等待、分区容错分布式系统的基本权衡。

提出的方法

• 基于抽象执行与语义函数，提出一个通用的公理化框架，结合每进程序列化与全局可见性。
• 定义三个核心公理——单调可见性、本地可见性与封闭过去——作为一致性模型的构建模块。
• 引入物理可实现性良好性公理，以禁止物理上不可能的因果环，同时允许有用的可见性环。
• 允许可选的、正交的时间约束（逻辑时钟或物理时钟），而不使模型依赖于时间。
• 使用语义函数的概念，定义超越内存的一致性模型，适用于任意数据抽象。
• 证明CLAM定理，表明无等待实现无法同时满足封闭过去、本地可见性、仲裁与单调可见性。

实验结果

研究问题

• RQ1 如何统一一致性模型，以同时支持顺序与并发规格说明，包括屏障等同步抽象？
• RQ2 哪些公理是表征物理可实现的一致性模型所必需且充分的，且能避免不可能的因果环？
• RQ3 如何将收敛性与仲裁性形式化为独立于活性性质的安全性属性，特别是在有限历史的情况下？
• RQ4 设计无等待、高可用分布式系统的基本权衡是什么？如何对其进行形式化表征？
• RQ5 所提出的框架如何通过解决PRAM与因果内存等现有模型的公理性缺陷，优于这些模型？

主要发现

• 该框架通过统一每进程序列化与全局可见性，泛化了经典模型，实现了对内存与通用抽象的一致建模。
• 物理可实现性公理禁止了物理上不可能的因果环，同时允许有用的可见性环，例如屏障同步中的环。
• CLAM定理证明，无等待实现无法同时满足封闭过去、本地可见性、仲裁与单调可见性，从而导致CAL三难困境。
• 单调可见性被识别为根本性且不可妥协的要求，使得CAL三难困境成为比CAP定理更实际、更强的约束。
• 收敛性被形式化为对所有执行的全称量化，与存在性的最终一致性相区别，从而支持在有限历史上的安全性推理。
• 该框架支持一种新的一致性模型分类法，清晰地展示了由CAL三难困境引发的权衡，支持一致性模型的系统性设计与比较。