AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 995234
Accepted
Halfgaar
Halfgaar
Asked: 2019-12-12 10:14:34 +0800 CST2019-12-12 10:14:34 +0800 CST 2019-12-12 10:14:34 +0800 CST

重启后服务器突然有很高的softirq cpu使用率

  • 772

一个 48 GB RAM 的虚拟服务器维持大约 25k 的 TCP 连接(现场设备登录以建立 SSH 隧道)用完 RAM 并开始交换,速度变慢等。我们升级并重新启动。即使在 25k 连接恢复并处理了最初的 DDOS 风暴之后,服务器现在也显示出大量的软中断使用。我如何找到原因?

在这里你可以看到事件:

穆宁 CPU 图

令人惊讶的是,过去没有很多软中断。现在,有 8 个内核线程在处理大约 60% 的 CPU(ksoftirqd线程)。

查看 Munin 图表,我看到 的中断PCI-MSI 49153-edge virtio0-input.0增加了很多(注意 log y 标度):

穆宁中断图表

机器必须处理的网络流量并没有真正改变。

我写了一个快速的 python 脚本,它显示每秒的中断,从/proc/interruptsfrom 开始PCI-MSI 49153-edge virtio0-input.0,它主要是每秒 50-100 次,但每隔一段时间,就会有 5000 到 10000 次爆发。

因为在升级过程中,VM主机的控制面板提示需要将VM迁移到另一台服务器。我推测该服务器具有不同的以太网控制器,不同的模拟中断控制器或其他任何东西,但他们甚至将虚拟机迁移回来,并且没有区别。

另一个区别是 VM 从vmlinuz-4.15.0-45-generic到/boot/vmlinuz-4.15.0-72-generic. 随着最近所有的英特尔 CPU 补丁,我可以想象有什么东西偷偷溜进去了。

最大的问题是,我如何找到根本原因,或者获取更多信息这些中断来自何处?将服务器重新启动到旧内核是可能的,但不可取。

linux
  • 1 1 个回答
  • 1958 Views

1 个回答

  • Voted
  1. Best Answer
    Halfgaar
    2020-01-18T15:55:13+08:002020-01-18T15:55:13+08:00

    原来有人安装在上面,它有一个收集进程会计信息的 systemd 服务。删除它修复它。

    • 1

相关问题

  • Linux 主机到主机迁移

  • 如何在 Linux 机器上找到有关硬件的详细信息?

  • 如何在 Linux 下监控每个进程的网络 I/O 使用情况?

  • 在 RHEL4 上修改 CUPS 中的现有打印机设置

  • 为本地网络中的名称解析添加自定义 dns 条目

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve