主页 / server / 问题 / 1062991
Accepted
Maxim
Asked: 2021-05-09 14:37:50 +0800 CST

使用 fio 或其他工具模拟一些进程 IO

  • 772

有什么方法可以跟踪特定进程并获取磁盘 IO 的统计信息，例如队列深度、读/写线程总数、读/写百分比等？

主要目标是使用所有这些信息通过 fio 工具模拟 IO 活动。
或者可能有任何其他方式（工具）来估计哪些硬件可以更好地满足特定负载？

当然测试是最好的选择，但对我来说并不完全可用，我无法购买所有可能的硬件。
因此，我必须与购买前已经做出一些假设的产品进行比较。

performance hard-drive linux io fio

1 个回答

  1. Best Answer

    您可以使用它pidstat -d来获取每个进程的 IO 统计信息。-p如果您想获取特定进程的统计信息，请使用 - 例如，每秒获取 java 进程的磁盘统计信息：

    pidstat 1 -d -p $(pgrep java)

    用于iostat -x扩展磁盘统计信息，例如“平均队列大小”等。

    iostat -xmdz 1
...
Device            r/s     rMB/s   rrqm/s  %rrqm r_await rareq-sz     w/s     wMB/s   wrqm/s  %wrqm w_await wareq-sz     d/s     dMB/s   drqm/s  %drqm d_await dareq-sz  aqu-sz  %util
sda              0.00      0.00     0.00   0.00    0.00     0.00    2.00      0.01     1.00  33.33    0.50     6.00    0.00      0.00     0.00   0.00    0.00     0.00    0.00   0.40

    另请参阅https://medium.com/netflix-techblog/linux-performance-analysis-in-60-000-milliseconds-accc10403c55

    请注意，除非您正在执行“原始磁盘 IO”，否则文件系统操作系统层可能会对您的应用程序的性能产生巨大影响 - 例如，Linux 中的页面缓存会将文件的最新内容缓存在内存中，因此读取速度可能会远高于可能的速度仅通过磁盘。要监控文件系统操作，您可以使用 BPF 工具，如、vfsstat、biolatency等。您还可以测量原始磁盘 IO 速度和“缓存 IO”速度 - 例如ext4slowerext4disthdparm

    root@ubuntu-18:~# hdparm -tT /dev/sda

/dev/sda:
 Timing cached reads:   11568 MB in  1.99 seconds = 5807.23 MB/sec
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0a 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
 Timing buffered disk reads: 1682 MB in  3.00 seconds = 560.58 MB/sec

    请注意，与“缓冲磁盘读取”相比，“缓存读取”的吞吐量要大得多，接近 6GBs/秒。如果您使用中等大小的云/AWS 实例，可能会有更大的差异。

    • 1

相关问题