AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 755655
Accepted
bodqhrohro
bodqhrohro
Asked: 2023-09-04 05:02:33 +0800 CST2023-09-04 05:02:33 +0800 CST 2023-09-04 05:02:33 +0800 CST

是否有通过校验和进行内置数据修复的文件系统?

  • 772

我读到 ZFS/BtrFS 有校验和检查,但它们不将其用于数据恢复,仅用于从完整本地副本或镜像副本恢复数据。

另一方面,RAR 存档支持长期数据冗余,且数量可配置。金额越多,成功恢复的可能性就越高。Dvdisaster 也是如此,它能够创建包含恢复数据的 .ecc 文件,但位于单独的介质上。

许多高级介质(例如光盘或硬盘)在驱动器控制器中实现了低级 ECC 检查,因此在更高的抽象级别上不需要它。但其他卡,比如廉价的 microSD 卡,可能缺乏它并且明显不可靠。

那么,硬件级别和应用程序级别都有 ECC 检查,但是有 ECC 支持的文件系统吗?

filesystems
  • 2 2 个回答
  • 45 Views

2 个回答

  • Voted
  1. Marcus Müller
    2023-09-04T23:46:55+08:002023-09-04T23:46:55+08:00

    Linux 具有 dm-integrity 层,您可以使用它向任何块设备添加纠错。

    遗憾的是,它在实际解决不可靠的 SD 卡带来的问题方面相对较差:

    最典型的故障模式是……不再工作了。当物理可用内存能够维持的磨损均衡量耗尽时,通常会发生这种情况。对此你无能为力,只能少写和少读。与直觉相反,添加错误编码信息会造成伤害,因为您会放大写入和读取的数据量。但这只是 1/r 的放大,r 是代码的速率。

    SD 卡应用其内置纠错后,您读取的数据要么是正确的,要么错误是块本地的且相关的。如果您需要纠正这些问题,则必须使用其块跨越 SD 卡的多个逻辑块的代码。这又意味着读取和写入放大,但这次至少是两倍的整数倍。所以,这实际上要糟糕得多。

    因此,老实说,如果您的问题是不可靠的闪存存储,那么适当的响应是处理物理闪存和存储系统中的内存块之间的问题。换句话说,在SD卡内的闪存翻译层;这还允许您应用软解码来获得额外的编码增益,并且可以使用为闪存代表的非对称通道(通常是 Z 通道!!)设计的代码,在最低级别 - 这些是通过解码丢失的属性/决策和解交错发生在 FTL 本身中。这种损失很难用从 SD 卡获取的数据来弥补。

    您可以直接选择满足您的可靠性要求的代码。问题在于,物理闪存越差,并且您希望存储表现得越可靠,代码速率就越低,这意味着您需要更多的闪存单元来存储一些数据。这正是使任何基于闪存的存储设备要么便宜但不太可靠,要么昂贵但更可靠的权衡。

    因此,如果使用不可靠的 SD 卡,您基本上就已经失败了。可能会有一个窗口,您的 PC 中的一些编码可以纠正错误,而不会比防止错误的可能性更大,但您确实需要进行一项大型研究,了解您的 SD 卡发生故障需要多长时间,然后才能修复错误。确定一个价格。这不值得麻烦——您不会从同一家工厂购买 100000 张卡,只是为了弄清楚如何使它们的可靠性提高 0.1%。您只需购买或订购更可靠的卡即可。

    对不起。

    您可以做的是,当然可以通过在相当数据平衡的镜像或奇偶校验方案中使用独立卡来添加真正的冗余,但适用于任何类型 RAID 的常见警告:您需要确保在需要恢复底层之一时从其他卷中读取数据,现在还不算太晚,大量的恢复读取负载会发现甚至导致进一步的、不幸的是不可纠正的错误。同样,廉价的 SD 卡是最差的商业选择,因为可靠性信息的质量较低,其单个设备的可靠性也较低。

    最后,我并没有真正看到您希望用不可靠的 SD 卡进行可靠存储的实际场景。

    • 2
  2. Best Answer
    Richard T
    2023-09-04T08:40:39+08:002023-09-04T08:40:39+08:00

    是的,它们统称为“RAID”:独立磁盘冗余阵列。

    最好的非 RAID 配置包括 Linux 上的 EXT4。我相信还有其他人。但我相信,这些并不能解决这些问题,而是可以在编写时捕获错误。

    • 1

相关问题

  • 我应该在 NAS 的 SD 卡中使用哪个文件系统?

  • 如何提前知道 .zip 内部是否有父目录

  • Virtualbox 动态分配磁盘 *.vdi 不断增长

  • du/df 和 ls 报告不同的磁盘使用情况

  • Linux 内核开发人员如何处理数百万行代码的工作?他们是一种方法吗?[关闭]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve