AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

    • 主页
    • 系统&网络
    • Ubuntu
    • Unix
    • DBA
    • Computer
    • Coding
    • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-594272

Klun's questions

Martin Hope
Klun
Asked: 2024-06-11 16:40:42 +0800 CST

vSphere:虚拟机本地 SSD 上的 Linux dd 命令触发虚拟机磁盘延迟严重警报

  • 5

我有一台运行 VMware ESX 的戴尔服务器,配备 12TB 本地 SSD 驱动器、1TB 内存、Xeon Gold 处理器和一个 Debian VM。

在该虚拟机上,当我同时在磁盘上执行写入操作时,甚至只是执行以下命令:

dd if=/dev/urandom of=/local/ssd/drive/path/largefile bs=1M count=1024

我在 VSphere 上针对该虚拟机发出了严重的磁盘延迟警报。

dd 命令在 10 分钟后成功完成。

为什么 vSphere 会触发并不严重的严重警报?

如何仅用一个 dd 命令就能压垮高端 SSD 驱动器?

编辑:

  • 如果延迟在五分钟内超过 75 毫秒,则会触发严重警报。

  • 实际上,该虚拟机的磁盘延迟似乎约为 200-250 毫秒:

图像

编辑2:

  • 配置:厚延迟置零(不幸的是,没有紧急置零)

编辑3:

我尝试在 VM 级别定义该磁盘的 IOPS 限制(如下图所示)。

我尝试过,1000 IOPS,然后是 800、600、400、200、100。即使只有 100 IOPS,也会触发严重磁盘延迟警报。

奇怪的是(如您在图表中看到的),降低限制(从 1000 IOPS 到 100 IOPS)往往会增加 vSphere 报告的磁盘延迟。在 100 IOPS 限制下,延迟为 16,000 毫秒。

图像

编辑4:

在软件方面,我尝试将最大同时文件写入数量从 24 个减少到 4 个。延迟从 200 毫秒变为 100 毫秒,但写入带宽从 100MB/秒变为 50MB/秒。

编辑5:

从厚惰性零配置切换到厚急切零配置,延迟没有任何变化,始终为 200 毫秒

vmware-esx
  • 1 个回答
  • 49 Views
Martin Hope
Klun
Asked: 2020-10-05 06:02:33 +0800 CST

IBM GPFS:递归删除文件非常慢

  • 8

要在我们的 IBM GPFS 集群中递归删除文件,我们使用简单的 unix 命令,例如:

rm /my/directories -fr

然而,删除的时间很长。

问题是我们的分布式应用程序(基于 Spark)one hour需要完成。但是,它也会took about an other hour删除由 Spark 等分布式应用程序生成的临时文件。

因此,全局工作负载非常低效。可能是因为该rm命令必须列出每个子目录..

无论如何,您知道使用 GPFS 有效删除整个目录(和子目录)的方法吗?

可能是 IBM 给出了一个特殊的命令来做到这一点?

ibm parallel-computing
  • 2 个回答
  • 719 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助
subwaysurfers
my femboy roommate

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve