AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 494360
Accepted
Cyker
Cyker
Asked: 2019-01-14 22:44:53 +0800 CST2019-01-14 22:44:53 +0800 CST 2019-01-14 22:44:53 +0800 CST

Linux 上文件缓存的最佳块大小是多少?

  • 772

设备块大小通常为 512 字节,而文件系统块大小通常为 4096 字节。为什么它们不同?为什么 512B 和 4KB 是设备和文件系统块大小的好选择?什么块大小最适合在用户空间库中缓存磁盘读取?

filesystems cache
  • 1 1 个回答
  • 2379 Views

1 个回答

  • Voted
  1. Best Answer
    peterh
    2019-01-14T23:06:39+08:002019-01-14T23:06:39+08:00

    设备块大小是系统与 HDD 控制器通信的块大小。如果你想读/写硬盘,它会发生这样的事情:

    1. 读:

      1. CPU -> 硬盘控制器:“请将块 43623626 的数据发送给我”
      2. 硬盘控制器 -> CPU:“完成,这里是:0xfce2c0deebed...”
    2. 写:

      1. CPU -> 硬盘控制器:“请将此数据写入块 3452345:0xfce2c0deebed...”
      2. 硬盘控制器-> CPU:“完成”

    这里的块号表示第 2354242 个 512 字节块的名称。

    理论上,可以使用任何块大小。大多数设备使用 512 字节块,其中一些,特别是大型 HDD 使用 4096 字节块。一些光学介质使用 2304 字节块。

    重要的是:块设备控制器不知道它上面的文件系统的任何内容。它只能在其块大小中读取和写入块到他的介质。这就是块设备驱动程序用来为内核提供块设备的东西:本质上是一个单一的大字节数组。没关系,它是如何分区的或哪个 fs 正在使用它。

    文件系统块大小是文件系统数据结构在文件系统中组织的块大小。它是文件系统的内部特性,甚至不需要使用面向块的数据结构,有些文件系统甚至不这样做。

    Ext4 使用最典型的 4096 字节块。

    此外,磁盘 IO 数据通常不是由进程直接处理,而是由操作系统的虚拟内存处理。它广泛使用分页。VM 页面大小通常为 4096 字节(在非 x86 CPU 上可能不同),由 CPU 架构决定。(例如,较新的 amd64 CPU 可以处理 2MB 页面,或 dec alpha 使用 8192 字节页面)。

    优化数据IO,最好都是相乘,相等更好。这通常意味着:使用 4096 字节的 fs 块。

    这也很重要:如果您的块设备已分区,则分区应该以精确的页面大小开始/结束。如果您不这样做,例如您的 sda1 从 sda 的 17. 块开始,CPU 将不得不为所有页面读/写操作发出两个读/写命令,因为物理块和文件系统块将重叠.

    在最常见的情况下,这意味着:所有分区都应从可被 8 整除的扇区开始或开始(4096 / 512 = 8)。

    请注意,通常低级块 IO 不会发生在单个块读/写操作中,而是在单个命令中发送/接收多个块。并且重新组织数据通常不是很大的开销,因为内存 IO 通常比块设备 IO 快得多。因此,不遵循这些不会是一个很大的开销。

    • 8

相关问题

  • 如何提前知道 .zip 内部是否有父目录

  • Virtualbox 动态分配磁盘 *.vdi 不断增长

  • du/df 和 ls 报告不同的磁盘使用情况

  • 进程是否可以分配高速缓存,以便内核在必要时可以占用它?

  • Linux 内核开发人员如何处理数百万行代码的工作?他们是一种方法吗?[关闭]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve