主页 / computer / 问题 / 1718366
Accepted
King David
Asked: 2022-04-28 15:36:32 +0800 CST

内核参数 - net.core.netdev_max_backlog ，当它太低时会发生什么

  • 772

我们想了解net.core.netdev_max_backlog 内核值非常低且不推荐的方面是什么

在我们的 Linux RHEL 机器上，此参数的值为1000

因为我们的机器是 HADOOP 机器（BIGDATA 集群）

我们看到最佳实践是将价值增加到65536

如上所述：

https://datasayans.wordpress.com/2015/11/04/performance-kernel-tuning-for-hadoop-environment/

背景：

内核参数“netdev_max_backlog”是接收队列的最大大小。收到的帧从网卡上的环形缓冲区中取出后，将存储在此队列中。对高速卡使用高价值以防止丢失数据包。在 SIP 路由器等实时应用中，长队列必须分配高速 CPU，否则队列中的数据将过期（旧）。

那么 - 当这个内核参数的值不足时，可能是什么方面？

其他 - 参考 - https://gist.github.com/leosouzadias/e37cd189794bb78de502ac25cb605576

https://community.cloudera.com/t5/Community-Articles/OS-Configurations-for-Better-Hadoop-Performance/ta-p/247300

https://www.senia.org/2016/02/28/hadoop-and-redhat-system-tuning-etcsysctl-conf/

https://mapredit.blogspot.com/2014/11/hadoop-server-performance-tuning.html

https://gist.github.com/phaneesh/38b3d80b38cc76abb1d010f598fbc90a

https://docs.datastax.com/en/dse/5.1/dse-dev/datastax_enterprise/config/configRecommendedSettings.html

PDF - https://www.cisco.com/c/dam/en/us/solutions/collat​​eral /data-center-virtualization/big-data/cloudera-intel-cisco-hadoop-benchmark.pdf

linux redhat-enterprise-linux

1 个回答

  1. Best Answer

    当这个内核参数值不足时会产生什么影响

    运行以下命令：

    for i in {1..30}; do date; cat /proc/net/softnet_stat; sleep 1; done

    以下将是输出：

    001c1216 000000b0 00000040 00000000 00000000 00000000 00000000 00000000 00000000 00000000
02fdffa5 000000aa 00000032 00000000 00000000 00000000 00000000 00000000 00000000 00000000

    02fdffa5是数据包计数 000000aa是已丢弃的数据包数

    运行命令并通过将值转换为十进制来查看已丢弃的数据包数量是否增加。如果数据包的数量增加了，则增加到net.core.netdev_max_backlog适当的值。

    您可以通过运行以下命令临时增加该值：

    sysctl -w net.core.netdev_max_backlog=2000

    您可以通过运行以下命令使该值永久化：

    echo "net.core.netdev_max_backlog = X" >> /etc/sysctl.conf

    此外，65536 的值对于正常的系统性能来说是多余的并且是不必要的。 您显然应该更改X为您希望使用的值。

    如果 softnet_stat 的第二和第三列没有增长，那么有必要增加net.core.netdev_max_backlog

    资料来源：如何调整net.core.netdev_max_backlog和net.core.netdev_budgetsysctl 内核可调参数？

    • 1

相关问题