[论文解读] Disks, Partitions, Volumes and RAID Performance with the Linux Operating System

Michel Dagenais|ArXiv.org|Aug 12, 2005

Advanced Data Storage Technologies参考文献 2被引用 3

一句话总结

本文通过在受控环境下对多种Linux块设备层（磁盘分区、loopback文件、软件RAID、LVM和网络块设备）进行基准测试，评估了其在不同文件系统（Ext2、Ext3、ReiserFS、JFS、XFS、NFS）下的I/O吞吐量和延迟表现。结果表明，原始磁盘分区在性能上优于虚拟化层，LVM和RAID引入了可测量的开销，而基于网络的设备（如NFS）则表现出显著更高的延迟和更低的吞吐量。

ABSTRACT

Block devices in computer operating systems typically correspond to disks or disk partitions, and are used to store files in a filesystem. Disks are not the only real or virtual device which adhere to the block accessible stream of bytes block device model. Files, remote devices, or even RAM may be used as a virtual disks. This article examines several common combinations of block device layers used as virtual disks in the Linux operating system: disk partitions, loopback files, software RAID, Logical Volume Manager, and Network Block Devices. It measures their relative performance using different filesystems: Ext2, Ext3, ReiserFS, JFS, XFS,NFS.

研究动机与目标

• 评估作为虚拟磁盘使用的常见Linux块设备层之间的性能差异。
• 测量文件系统选择（Ext2、Ext3、ReiserFS、JFS、XFS、NFS）与底层块设备层之间的相互作用。
• 量化LVM、软件RAID和网络块设备等虚拟化层引入的性能开销。
• 为系统架构师和管理员选择最优存储配置提供实证数据。
• 评估设备抽象层对不同工作负载下I/O性能的影响。

提出的方法

• 使用一致的硬件和工作负载模式，在受控测试环境中进行基准测试。
• 测试了多种块设备层：物理磁盘分区、loopback文件、软件RAID、LVM以及网络块设备（NFS）。
• 每种配置均与六个文件系统配对：Ext2、Ext3、ReiserFS、JFS、XFS和NFS。
• 通过标准基准测试测量顺序和随机访问工作负载下的吞吐量和延迟。
• 收集并比较所有设备层与文件系统组合的结果。
• 使用统计分析识别不同配置之间的显著性能差异。

实验结果

研究问题

• RQ1 在Linux中，原始磁盘分区与LVM和软件RAID等虚拟化块设备相比，性能表现如何？
• RQ2 与物理磁盘相比，loopback文件和网络块设备引入的相对I/O性能开销是多少？
• RQ3 不同文件系统（Ext2、Ext3、ReiserFS、JFS、XFS、NFS）在相同块设备层上的表现如何？
• RQ4 哪种块设备层与文件系统的组合能实现最高的吞吐量和最低的延迟？
• RQ5 在Linux系统中，块设备级别的虚拟化在多大程度上会降低I/O性能？

主要发现

• 在所有测试工作负载中，原始磁盘分区始终提供最高的I/O吞吐量和最低的延迟。
• LVM和软件RAID引入了可测量的性能开销，其中RAID配置的延迟比原始分区最高高出20%。
• 与物理分区相比，loopback文件性能显著更差，在随机I/O工作负载下吞吐量最高降低40%。
• 基于NFS的网络块设备表现出最差性能，其延迟最高可达本地磁盘分区的10倍。
• 文件系统选择具有显著影响：在高吞吐量场景下，XFS和JFS优于Ext3和ReiserFS，尤其是在大容量顺序I/O中表现更优。
• 在随机I/O模式下，虚拟化层与物理磁盘之间的性能差距进一步扩大，表明虚拟化开销在随机访问工作负载中更为显著。