AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 40202
Accepted
womble
womble
Asked: 2009-07-14 15:41:46 +0800 CST2009-07-14 15:41:46 +0800 CST 2009-07-14 15:41:46 +0800 CST

ext3 fsck 时间与分区大小

  • 772

我正在为大型存储场进行设置,为了避免需要长达一个月的 fscks,我的计划是将存储拆分为许多较小的文件系统(这很好,因为我有一个存储良好的文件树, 所以我可以很容易地在1/, 2/, 3/,等上安装单独的文件系统4/)。

我的困难在于找到文件系统的“合理”大小的任何枚举,以保持 fsck 时间同样“合理”。虽然我完全意识到给定大小的绝对时间在很大程度上取决于硬件,但我似乎找不到任何关于具有不同文件系统大小的 ext3 fsck 时间的曲线形状的描述,以及其他变量是什么(单个目录中的文件系统是否比一个目录中的文件系统花费更长的时间,树中数千个目录中的每个目录中有 10 个文件;大文件与小文件;完整文件系统与空文件系统;等等)。

有没有人提到任何经过充分研究的数字?如果做不到这一点,关于这些问题的任何轶事至少应该有助于指导我自己的实验,如果需要的话。

编辑:澄清:无论文件系统如何,如果元数据出现问题,都需要检查。是否启用或需要基于时间或挂载的 re-fscks 都不是问题,我要求专门针对 ext3 的数字的唯一原因是因为这是最有可能选择的文件系统。如果您知道具有特别快的 fsck 进程的文件系统,我愿意接受建议,但它确实需要是一个强大的选项(声称“文件系统 X 永远不需要 fscking!”将被嘲笑和嘲笑) . 我也意识到备份的必要性,并且 fsck 的愿望不能替代备份,但是只是丢弃文件系统并在出现故障时从备份中恢复,而不是 fscking 似乎真的,

ext3 fsck
  • 4 4 个回答
  • 6194 Views

4 个回答

  • Voted
  1. Best Answer
    towo
    2009-07-15T04:13:23+08:002009-07-15T04:13:23+08:00

    根据Mathur 等人的论文。(第 29 页),e2fsck 时间在某个点之后随着文件系统上的 inode 数量线性增长。如果图表是可以参考的,那么使用多达 1000 万个 inode 的文件系统会更有效。

    切换到 ext4 会有所帮助 - 在您的文件系统未加载到边缘的情况下,性能提升(由于未检查标记为未使用的 inode)没有明显的影响。

    • 6
  2. pgs
    2009-07-14T17:14:04+08:002009-07-14T17:14:04+08:00

    我认为您将不得不进行自己的基准测试。谷歌上的快速搜索没有发现任何东西,除了 ext4 fscks 比 ext3 快很多。

    因此,创建一些 ext3 分区,100GB、200GB 等,直至您将使用的磁盘大小。然后用数据填充它们。如果您可以使用类似于您的生产数据的数据(每个目录的文件、文件大小分布等),那将是最好的。请注意,简单地从另一个分区或备份设备复制文件会将它们放置在完美布局和碎片整理的磁盘上,因此您的测试将缺少大量来自大量写入/修改/删除的磁盘磁头寻道时间。

    您还需要考虑并行 fscks。查看 /etc/fstab 中的最后几个字段。同一物理磁盘上的分区应按顺序进行;同一控制器上的多个磁盘可以并行完成,但请注意不要使控制器过载并减慢它们的速度。

    • 2
  3. cas
    2009-07-14T17:15:47+08:002009-07-14T17:15:47+08:00

    http://lmgtfy.com/?q=fsck+benchmark

    看起来 ext4 文件系统上的 fsck 明显快于 ext3,一些报告称 ext4 fsck 比 ext3 快 10 倍甚至更多倍。

    该搜索中的两篇非常有趣的文章是:

    http://thunk.org/tytso/blog/2008/08/08/fast-ext4-fsck-times/和http://thunk.org/tytso/blog/2009/02/26/fast-ext4-fsck-times-revisited/

    • 0
  4. cas
    2009-07-14T15:51:10+08:002009-07-14T15:51:10+08:00

    重新启动时,您是否有任何理由不能使用不强制时间或基于挂载计数的 fscks 的文件系统?

    (基于时间的 fsck 真的让我很烦——对于一个运行时间较长的服务器,它几乎可以保证每次升级内核时都必须执行完整的 fsck)。

    无论如何,XFS 是不强制执行 fsck 的日志文件系统之一。值得一看。

    • -1

相关问题

  • 调整分区大小通常会扩展文件系统上已用空间的现有大小吗?[关闭]

  • lvm+ext3 vs ext3 恢复

  • 在使用磁盘时重新分区?

  • 我应该使用什么 Windows ext3 驱动程序?[关闭]

  • ext3 文件系统性能调优:监控哪些指标

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve