[论文解读] Concurrent self-adjusting distributed tree networks

Bruna Soares Peres|arXiv (Cornell University)|May 24, 2017

Peer-to-Peer Network Technologies参考文献 1被引用 4

一句话总结

本文提出了首个分布式且并发的SplayNets实现——一种通过根据请求模式重新配置拓扑来优化通信的自适应分布式树状网络。该算法被证明是无环路且无死锁的，与串行情况相比，并发导致的摊销成本仅增加O(log m)，其中m为并发splay操作的数量。

ABSTRACT

SplayNets are a distributed generalization of the classic splay tree data structures. Given a set of communication requests and a network comprised of n nodes, such that any pair of nodes is capable of establishing a direct connection, the goal is to dynamically find a (locally routable) binary tree topology, which connects all nodes and optimizes the routing cost for that communication pattern, making local topology transformations (rotations) before each request is served. In this work we present a distributed and concurrent implementation of SplayNets. Analytical results show that our proposed algorithm prevents loops and deadlocks from occurring between concurrent rotations. We compute the total amortized average cost of a splay request in number of rounds and number of time-slots and as a function of the empirical entropies of source and destination nodes of the splay requests.

研究动机与目标

• 设计并实现一种基于通信模式自适应拓扑的分布式、并发SplayNets算法。
• 分析并发对SplayNets性能的影响，特别是安全性、活性及成本开销方面。
• 使用数据中心的真实流量轨迹，评估SplayNets在真实工作负载下的行为。
• 将并发SplayNets的性能与互斥方法进行比较，并分析其中的权衡。
• 通过探索动态最优性猜想在分布式SplayNets中的适应性，扩展理论分析。

提出的方法

• 使用消息传递机制设计一种并发、分布式SplayNets算法，并通过本地协调机制维护一致性。
• 在Sinalgo中实现该算法以进行初步验证，并在Omnet++中实现以模拟数据中心场景的真实性能。
• 使用来自Facebook数据中心（集群A、B、C）的真实流量轨迹以及CTU-13僵尸网络数据集，以模拟多样化的通信模式。
• 应用锁机制以确保安全性和活性，同时分析其性能开销。
• 测量通信延迟、splay操作次数和消息交换等关键指标，以评估性能。
• 扩展理论分析，以考虑不同splay触发策略及其对网络行为的影响。

实验结果

研究问题

• RQ1 并发如何影响SplayNet的安全性和活性？能否使其无死锁且无环路？
• RQ2 与串行情况相比，并发在SplayNet中引入的摊销成本开销是多少？
• RQ3 在真实世界通信工作负载下，不同的splay触发策略如何影响SplayNet性能？
• RQ4 动态最优性猜想是否可适应并验证于分布式SplayNets场景中？
• RQ5 在延迟和消息开销方面，并发SplayNet与基于互斥的SplayNet相比性能如何？

主要发现

• 所提出的并发SplayNets算法被证明是无环路且无死锁的，确保了在并发访问下的正确网络运行。
• 与串行情况相比，并发算法的摊销成本仅增加O(log m)，其中m为并发splay操作的数量。
• 在Sinalgo中的实现成功验证了算法的正确性，而Omnet++仿真则使在真实数据中心工作负载下评估性能成为可能。
• 使用来自Facebook数据中心的高保真通信模式真实流量轨迹（60%跨机架通信）验证了该方法的相关性。
• 研究发现，尽管并发引入了对数级的成本因子，但考虑到其在可扩展性和动态重构方面的优势，该开销可被接受。
• 未来工作建议分析锁机制的影响，并与互斥方法进行比较，以进一步揭示性能权衡的洞见。