AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 963363
Accepted
shalom
shalom
Asked: 2019-04-17 11:20:35 +0800 CST2019-04-17 11:20:35 +0800 CST 2019-04-17 11:20:35 +0800 CST

如何调整 linux 机器以提高 CPU 平均负载和 CPU 利用率

  • 772

我们正在使用巨大的 hadoop 集群。

我们有 736 台数据节点机器,每个节点有 16 核 X 2 线程。

在某些机器上,我们看到 CPU 平均负载(98-128 持续 5 分钟)。

经过深入调查,我们确定:

no HW problem
no Disk proble
no network problem
no infra problem

我们仍然没有检查的是关于调整 linux 参数和调整内核参数。

有哪些参数或任何内核参数可以帮助机器在大多数 CPU 低负载平均情况下获得良好的 CPU 工作。

http://linuxrealtime.org/index.php/Improving_the_Real-Time_Properties

linux
  • 2 2 个回答
  • 689 Views

2 个回答

  • Voted
  1. asktyagi
    2019-04-30T20:40:46+08:002019-04-30T20:40:46+08:00

    如果是这样,我认为您在 CPU 峰值时正在运行 hadoop 作业,资源消耗取决于作业的作业复杂性和定义的参数。我希望你也在上面运行纱线?yarn 是资源密集型应用。请使用资源队列来调节资源消耗。

    • 0
  2. Best Answer
    hargut
    2019-04-30T21:35:47+08:002019-04-30T21:35:47+08:00

    性能调优是一个复杂而庞大的领域。硬件、内核参数、软件设置、设置架构甚至更多因素都需要考虑。

    当您运行大型设置时,深入该领域是有意义的,因此我建议您从阅读 RHEL 性能调优指南开始。这应该为该主题提供一个很好的指南,并提供各种建议和想法。

    https://access.redhat.com/documentation/en-us/red_hat_enterprise_linux/7/html/performance_tuning_guide/index

    您的问题包含的信息和细节太少,无法在内核参数调整的方向上提供合理的建议。

    • 0

相关问题

  • Linux 主机到主机迁移

  • 如何在 Linux 机器上找到有关硬件的详细信息?

  • 如何在 Linux 下监控每个进程的网络 I/O 使用情况?

  • 在 RHEL4 上修改 CUPS 中的现有打印机设置

  • 为本地网络中的名称解析添加自定义 dns 条目

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve