[论文解读] Towards Transactional Load over XtreemFS

Roman Talyansky, Bernd Scheuermann+2 more|arXiv (Cornell University)|Jan 17, 2010

Advanced Data Storage Technologies参考文献 9被引用 3

一句话总结

本文提出了一种基于追踪的性能评估方法，用于在企业事务处理工作负载下评估分布式文件系统（DFS），使用来自SAP应用的真实IO追踪来评估XtreemFS和Ceph。结果表明，XtreemFS在低TCO下展现出优异的读取性能和可扩展性，但写入延迟仍是关键瓶颈，需通过持久化存储增强进行优化。

ABSTRACT

We propose using trace-based assessment of the performance of distributed file systems (DFS) under transactional IO load. The assessment includes simulations and experiments using the IO traces. Our experiments suggest that DFS, and specifically XtreemFS have a good potential to support transactional IO load in distributed environments: they demonstrate good performance, high availability and scalability, while at the same time opening the way to TCO reduction.

研究动机与目标

• 通过避免完整应用部署，降低在真实企业环境中评估分布式文件系统（DFS）的高开销。
• 评估基于对象的DFS（如XtreemFS和Ceph）在支持企业事务处理工作负载方面的适用性。
• 评估DFS在真实企业IO追踪下的性能特征，特别是延迟和吞吐量。
• 识别性能瓶颈，尤其是同步写入操作中的瓶颈，并为未来优化提供指导。
• 验证基于追踪的仿真方法在实现可重复、可扩展的DFS评估方面的有效性。

提出的方法

• 从运行在生产文件系统上的SAP企业应用中捕获真实IO追踪，以模拟事务处理工作负载。
• 在多个目标DFS（XtreemFS、Ceph）上重放相同的IO追踪，以评估性能，而无需部署完整应用。
• 模拟DFS的分布功能，以分析对象存储设备（OSD）之间的负载均衡情况。
• 测量关键性能指标：读取/写入延迟、吞吐量，以及在不同IO负载和OSD数量下的可扩展性。
• 使用受控的仿真环境，将文件系统行为与应用特定的调优和配置开销隔离。
• 评估配置参数（如条带宽度和条带大小）对性能和资源利用率的影响。

实验结果

研究问题

• RQ1 在不部署完整应用的情况下，基于追踪的方法是否能有效评估DFS在真实企业事务处理工作负载下的性能？
• RQ2 XtreemFS在事务IO工作负载下表现如何，特别是在读取延迟、写入延迟和吞吐量可扩展性方面？
• RQ3 在IO负载和并发客户端流不断增加的情况下，XtreemFS与Ceph之间的性能差异是什么？
• RQ4 DFS参数（如条带宽度和大小）在多大程度上可被调优，以实现性能与资源利用率的平衡？
• RQ5 XtreemFS在事务处理工作负载下存在哪些关键性能瓶颈，尤其是在同步写入操作中？

主要发现

• XtreemFS实现了低读取延迟和高吞吐量，表现出对读取密集型事务处理工作负载的优异性能。
• XtreemFS中的写入延迟仍然显著偏高，尤其是在同步写入操作中，表明存在重大性能瓶颈。
• XtreemFS在OSD数量增加时表现出良好可扩展性，能有效分配IO负载，并在不断增长的写入工作负载下维持低延迟。
• CEPH在小IO流中表现优异，但随着负载增加，其延迟和吞吐量的下降速度比XtreemFS更快。
• 基于追踪的方法实现了可重复、可扩展且高效的DFS性能评估，无需完整应用部署或调优。
• XtreemFS和Ceph在通过商品硬件横向扩展并实现近线性性能扩展方面，展现出显著降低TCO的潜力。