文件系统测试套件

Question

我想询问可用于测试 Linux 文件系统的测试套件。我正在寻找更多的压力和负载测试套件，它们可以对系统施加压力，通过验证它写入的数据来发现损坏等等。

是否有这样的工具可用于 ext* 等本地 FS 和 NFS/CIFS 等网络协议？

提前致谢。

Answer 1

让我们专注于您问题的具体部分。将为以下 Linux 文件系统提供工具和套件：ext4、CIFS、NFS。

 通用测试套件（为了正确性和稳健性）

• xfstests - http://git.kernel.org/cgit/fs/xfs/xfstests-dev.git/tree/
• Linux 测试项目 (LTP) https://github.com/linux-test-project/ltp/tree/master/testcases/kernel/io, https://github.com/linux-test-project/ltp/tree/master/testcases/kernel/fs （xfstests 有时在此文件夹中有更新的测试副本）
• pjdfstest（POSIX 文件系统测试套件）-http://sourceforge.net/p/ntfs-3g/pjd-fstest/ci/master/tree/（原作者版本另见https://github.com/pjd/pjdfstest）

“压力和负载测试套件”

• fsx - https://git.kernel.org/pub/scm/fs/xfs/xfstests-dev.git/tree/ltp/fsx.c 是 fsx 的现代 Linux 版本（也可以参见 Dave Jones 的迷人 fsx history（archive.org 链接）页面了解此工具的背景）
• dbench - http://dbench.samba.org/
• crefi - https://github.com/vijaykumar-koppad/Crefi
• xdd - https://github.com/bws/xdd
• mtd-utils（包含功率损耗测试）-http://git.infradead.org/mtd-utils.git/tree/HEAD:/tests
• fsync 功率损耗测试 - https://gist.github.com/bradfitz/3172656
• 请参阅下面的 I/O 练习器（dt、fio、vdbench）

“通过验证数据发现损坏”

• dt（I/O 练习器和验证器）-https://github.com/RobinTMiller/dt
• fio（I/O 练习器和验证器）-https://github.com/axboe/fio
• vdbench（I/O 练习器和验证器）-https://www.oracle.com/downloads/server-storage/vdbench-downloads.html

 CIFS

• smbtorture（仅限后端）-https://git.samba.org/?p=samba.git;a=tree;f=source4/torture;hb=HEAD
• 请参阅下面的连接马拉松

NFS

• 连接马拉松 - http://git.linux-nfs.org/?p=steved/cthon04.git;a=tree
• Pynfs - http://git.linux-nfs.org/?p=bfields/pynfs.git;a=tree
• NFS 测试套件 - http://git.linux-nfs.org/?p=mora/nfstest.git;a=tree
• SGI NFS 测试工具 - https://web.archive.org/web/20090514072259/http://oss.sgi.com/projects/nfs/testtools/（archive.org 链接，因为 HP 很久以前就关闭了 oss.sgi.com）
• Linux 测试项目 (LTP) NFS 测试 https://github.com/linux-test-project/ltp/tree/master/testcases/network/nfs, https://github.com/linux-test-project/ltp/tree/master/testcases/network/nfsv4

来源

• http://sg.danny.cz/sg/tools.html
• http://wiki.linux-nfs.org/wiki/index.php/Testing_tools
• http://ftp.samba.org/pub/samba/slides/samba4_testing_tutorial.pdf
• http://www.magiksys.net/ddumbfs/regression_suite.html
• Ted T'so (ext4 lead developer) recommending xfstests 在堆栈溢出答案中

Answer 2

取决于你要去兔子洞多远。对于初学者，这里是 Linux 测试实用程序的列表，它们对 Linux 文件系统进行基本的基准测试。 http://ltp.sourceforge.net/tooltable.php

如果您要进行认真的性能评估，我建议您使用 filebench 或 iozone 之类的东西，这两种工具都是非常灵活的基准测试工具。它们适用于本地或网络文件系统，但它们只是将文件写入已安装的文件系统，它们不直接使用 NFS 或 CIFS 驱动程序。

还可以查看file system benchmarking portal（截至 2017 年的原始链接已断开，archived version available），其中有很长的可用测试工具及其应用程序列表。它还提供了大量有关如何正确设置基准以纠正缓存效果等问题的信息，以便您的数字反映真实的性能。

您可以在 iozone 中启用诊断模式来检查损坏情况，我相信 filebench 也有类似的东西。或者只是校验您的数据并在最后验证它，但开箱即用的方法略少。