[论文解读] On Scheduling and Redundancy for P2P Backup

László Toka, Dell'Amico, Matteo+1 more|arXiv (Cornell University)|Sep 7, 2010

Peer-to-Peer Network Technologies参考文献 19被引用 4

一句话总结

本文提出了一种适用于P2P备份系统的自适应冗余与随机调度方案，旨在最小化备份和恢复时间，同时保持较低的数据丢失风险。研究结果表明，在大规模系统中，随机调度几乎达到最优性能，并引入了一种动态冗余策略，相比固定速率方案将存储开销降低了2.5%，显著提升了效率而不影响持久性。

ABSTRACT

An online backup system should be quick and reliable in both saving and restoring users' data. To do so in a peer-to-peer implementation, data transfer scheduling and the amount of redundancy must be chosen wisely. We formalize the problem of exchanging multiple pieces of data with intermittently available peers, and we show that random scheduling completes transfers nearly optimally in terms of duration as long as the system is sufficiently large. Moreover, we propose an adaptive redundancy scheme that improves performance and decreases resource usage while keeping the risks of data loss low. Extensive simulations show that our techniques are effective in a realistic trace-driven scenario with heterogeneous bandwidth.

研究动机与目标

• 在确保数据持久性的前提下，减少P2P备份系统中的备份和恢复时间。
• 解决去中心化存储中冗余成本与系统性能之间的权衡问题。
• 设计一种调度策略，在无需掌握未来节点可用性全部信息的情况下，实现近乎最优性能。
• 开发一种冗余方案，在保持可接受恢复时间的同时最小化存储开销。
• 评估延迟数据修复的影响，并提出一种辅助维护机制以降低数据丢失概率。

提出的方法

• 将调度问题形式化为在完全掌握节点可用性情况下的最大流问题，可在多项式时间内求解。
• 提出一种随机调度策略，在系统规模较大时性能接近最优，基于即时通讯应用的真实可用性轨迹进行验证。
• 引入一种自适应冗余策略，根据预期恢复时间动态调整冗余度，从而降低整体存储使用量。
• 采用基于实际带宽和可用性轨迹的仿真方法，在异构条件下评估系统性能。
• 提出一种基于云服务的辅助数据修复机制，以降低延迟恢复场景下的数据丢失概率。
• 使用擦除编码（如Reed-Solomon）将备份对象编码为n个片段，由k个原始块生成，冗余率r = n/k。

实验结果

研究问题

• RQ1 在大规模P2P系统中，随机调度与最优调度相比，备份时长有何差异？
• RQ2 自适应冗余策略是否能在保持可接受恢复时间的同时降低存储开销？
• RQ3 延迟数据修复对数据丢失概率有何影响，如何有效缓解？
• RQ4 与纯P2P修复相比，混合式辅助修复机制在降低数据丢失方面的有效性如何？
• RQ5 带宽和可用性方面的系统异质性在多大程度上影响调度与冗余性能？

主要发现

• 在大规模系统中，随机调度可实现接近最优的备份时长，且与最优调度的性能差距随系统规模增大而迅速缩小。
• 与固定速率冗余方案相比，自适应冗余策略将存储使用量降低了约2.5%，显著减轻了客户端的存储负担。
• 大多数数据丢失事件是由用户端限制导致的备份不完整，而非P2P系统故障所致，凸显了缩短备份时间的重要性。
• 通过基于云服务的辅助数据修复机制，可在极低代价下显著降低数据丢失概率，仅需约2.5%的节点同时获得协助。
• 基于轨迹的仿真结果证实，所提技术在真实、异构带宽环境下的有效性。
• 本研究表明，短备份时间比系统可靠性更为关键，因此调度优化是P2P备份成功的关键。