AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 678806
Accepted
Philip Couling
Philip Couling
Asked: 2021-11-24 14:11:20 +0800 CST2021-11-24 14:11:20 +0800 CST 2021-11-24 14:11:20 +0800 CST

内核如何在磁盘缓存和交换之间做出决定?

  • 772

继其他问题中提出的主题之后,我相信当 Linux 内核试图释放物理 RAM 时,它会在从磁盘缓存中丢弃页面或将其他页面刷新到交换中做出某种决定。 我不确定这一点,也许我完全误解了机制。

无论如何,两者之间存在协同作用:

  • 内核保持它自己的内部磁盘缓存
  • 程序内存映射文件
  • “常规”应用程序内存被放置在交换文件中

这三个都可以用来释放物理 RAM,这三个都依赖于将“脏”页面写入磁盘,或者只是知道这些页面已经在磁盘上完全复制并从物理 RAM 分配中丢弃它们。


使用交换空间,可以为各个交换分区和文件赋予优先级,以便在使用较慢设备之前使用较快的设备。我不知道其他非交换设备的任何此类配置。

我的问题是:内核如何决定要释放哪些 RAM?

  • 它纯粹基于最后一次访问吗?
  • 内核是否平等地使用上述所有三个?
    • 它们(和单个磁盘)之间是否有任何优先级
    • 它是可配置的吗?

这个问题由与此类似的经验驱动,但我希望这个问题关注底层机制而不是解决特定问题。

linux memory
  • 1 1 个回答
  • 428 Views

1 个回答

  • Voted
  1. Best Answer
    Stephen Kitt
    2021-12-11T05:35:54+08:002021-12-11T05:35:54+08:00

    释放物理内存页的整个任务的名称是回收,它涵盖了许多任务。回收主要由页面分配驱动,具有不同程度的紧迫性。在卸载的系统上,页面分配可以毫不费力地得到满足,并且不会触发任何回收。在中等负载的系统上,仍然可以立即满足页面分配,但它们也会导致kswapd被唤醒以执行后台回收。在无法立即满足页面分配的已加载系统上,同步执行回收。

    可回收页面是存储可以在其他地方找到或可用的内容的页面。这就是典型的平衡行为发挥作用的地方:内容也在文件中(或应该以文件结尾)的内存,v. 内容不在的内存(并且需要换出)。前者存储在页面缓存中,后者不存储,这就是为什么平衡解释通常谈论页面缓存与交换。

    在内核中的一个位置确定优先于另一个的决定,get_scan_count由 中的设置控制struct scan_control。该函数的目的描述如下:

    确定扫描匿名和文件 LRU 列表的积极程度。每组 LRU 列表的相对值是通过查看我们确实旋转回活动列表而不是驱逐的扫描页面的比例来确定的。

    对于名为 的函数get_...,这可能令人惊讶,它不使用返回值;相反,它填充unsigned long *nr指针指向的数组,其中四个条目对应于匿名非活动页面(未支持,最近未使用的页面),匿名活动页面(未支持,最近使用的页面),文件不活动页面(页面缓存中最近未使用的页面)和文件活动页面(页面缓存中最近使用的页面)。

    get_scan_count首先从 检索适当的“swappiness”值mem_cgroup_swappiness。如果当前内存 cgroup 是已启用的非 root v1 cgroup,则使用其 swappiness 设置;否则,就是臭名昭著的/proc/sys/vm/swappiness。两种设置的目的相同;他们告诉内核

    带回换出的匿名页面与重新加载文件系统页面的相对 IO 成本

    在它实际使用这个值之前,get_scan_count确定它应该应用的整体策略:

    • 如果没有交换,或者在当前上下文中无法回收匿名页面,它将只处理文件支持的页面;
    • 如果内存 cgroup 完全禁用交换,它将只处理文件支持的页面;
    • 如果没有禁用swappiness(设置为0),并且系统几乎没有内存,它将平等地处理所有页面;
    • 如果系统几乎没有文件页面,它将只查找匿名页面;
    • 如果有足够的非活动页面缓存,它将只处理文件支持的页面;
    • 在所有其他情况下,它会根据相应的 I/O 成本调整赋予各种 LRU 的“权重”。

    一旦确定了策略,它就会遍历所有可驱逐的 LRU(按顺序为非活动匿名、活动匿名、非活动文件支持、活动文件支持)以确定应该扫描每个 LRU 的多少页;我将忽略 v1 cgroups:

    • 如果策略是“平等地追踪所有页面”,则所有 LRU 中的所有页面都可能被扫描,直到由scan_control的priority移位因子确定的大小;
    • 如果策略是“仅查找文件支持的页面”或“仅查找匿名页面”,则相应 LRU 中的所有页面都是候选页面(再次,移位priority),其他 LRU 中没有;
    • 否则,这些值会根据 swappiness 进行调整。

    实际的页面扫描由 驱动shrink_lruvec,它使用上面确定的扫描长度,并反复收缩LRU,直到达到目标(以各种方式调整目标)。完成此操作后,将重新平衡活动/非活动 LRU。

    回到你的问题:

    • 页面缓存和内存映射文件被同等对待;
    • 页面回收并非纯粹基于上次访问(我没有解释 LRU 是如何使用的,或者重新平衡是如何工作的;请阅读Mel Gorman 的了解 Linux 虚拟内存管理器中的相应章节了解详细信息);
    • 内核没有平等地使用它们;根据情况,它们的优先级不同,并且可以通过许多控件(swappiness、cgroups、低水位阈值...)进行配置。

    交换优先级仅确定页面在决定将其换出后的去向。(顺便说一下,swappiness上面的文档和解释应该清楚地表明,I/O 成本没有足够的粒度来很好地处理混合 ZRAM/磁盘交换设置......)

    还有很多要解释的,包括如何scan_control设置,但我怀疑这已经太长了!如果您想跟踪回收成本,您可以在任务延迟会计中看到它(另请参阅struct taskstats)。

    • 4

相关问题

  • 使用键盘快捷键启动/停止 systemd 服务 [关闭]

  • 需要一些系统调用

  • 进程是否可以分配高速缓存,以便内核在必要时可以占用它?

  • astyle 不会更改源文件格式

  • 通过标签将根文件系统传递给linux内核

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve