AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 432437
Accepted
Reinstate Monica
Reinstate Monica
Asked: 2018-03-21 13:57:58 +0800 CST2018-03-21 13:57:58 +0800 CST 2018-03-21 13:57:58 +0800 CST

将文件系统与数据分开维护

  • 772

这可能是一个边缘情况,但这里有......

我正在从 2TB 硬盘恢复数据。仅当我使用它时才可挂载mount -r,并且我正在使用rsync --files-from它来复制重要目录。

每隔一段时间它就会失败,需要重新启动(电源循环)。我希望有一种方法可以缓存整个目录树,并使用跨越多个挂载的缓存:换句话说,当我需要重新挂载磁盘时,我会提供用于文件查找的缓存,而不是做更多的寻找磁盘。

假设由于备份空间不足,磁盘无法完整映像(使用dd或)。ddrescue

filesystems mount
  • 1 1 个回答
  • 83 Views

1 个回答

  • Voted
  1. Best Answer
    Hauke Laging
    2018-03-24T00:56:30+08:002018-03-24T00:56:30+08:00

    我看到的(同时)唯一的方法是独立于使用的文件系统,因为它作用于块层。

    人们想要的是一种 lvmcache:为设备设置它,然后读取文件系统元数据 ( find /path/to/mountpoint -perm 700 -printf ""),以便将其复制到缓存设备,然后冻结缓存设备。

    不幸的是,lvmcache 似乎没有这样的冻结功能。

    但是你可以做类似的事情:你可以设置一个快照。您必须手动执行此操作,因为 LVM 仅在卷组内支持它。在 VG 中创建快照,dmsetup ls并dmsetup table查看相关设备的详细信息。dmsetup不关心所涉及的设备是否属于卷组(或根本是 LVM 设备)。

    通常您会创建一个快照并继续使用主设备。主设备之前的状态可以通过恢复快照来恢复,因为原始数据在原始设备上被更改之前被写入快照。这不是你想要的。您希望最小化对源设备的访问。因此,您不挂载(新)源设备,而是挂载快照设备。

    然后修改所有包含元数据的扇区,以便将它们写入快照设备。即使你写了两次(因为你改变了数据,然后又把它改回原来的状态),这样数据本身就完全没有改变,扇区保留了快照设备的一部分。这意味着它总是从快照设备中读取。如果发生崩溃,您只需恢复dmsetup配置,就不会再访问源设备以获取元数据。

    不过,您可能需要一个具有较小集群大小的相当大的快照。但是您不必一次缓存整个文件系统元数据。您可以设置快照,缓存目录树的元数据,从那里复制所有文件,删除快照,创建新快照并缓存下一个子树的元数据。您可以看到(IIRC with dmsetup status)有多少快照空间正在使用中。

    为了编写 inode,您可以更改时间戳 ( touch /path/to/file),尤其是在您不需要原始值的情况下。或者您(可能在某处写入原始值之后)执行 eg chmod o=rwx /path/to/file ; chmod o= /path/to/file。为了写入属于目录条目的所有扇区,您可以重命名所有文件(使用一些未使用的名称并返回):

    unique_suffix=4itxIIq5kyGhMVPJ
    mv "$file" "${file}${unique_suffix}"
    mv "${file}${unique_suffix}" "$file"
    

    我不确定页面缓存是否足够聪明,可以检测到没有更改,因此您可以检查快照是否真的被写入。

    应该对所有文件进行这些操作(可能仅针对子目录)

    find /path/to/mountpoint -type f -exec ... + # for chmod and mv
    find /path/to/mountpoint -type d -exec ... + # for mv
    
    • 2

相关问题

  • 我应该在 NAS 的 SD 卡中使用哪个文件系统?

  • 如何提前知道 .zip 内部是否有父目录

  • Virtualbox 动态分配磁盘 *.vdi 不断增长

  • du/df 和 ls 报告不同的磁盘使用情况

  • Linux 内核开发人员如何处理数百万行代码的工作?他们是一种方法吗?[关闭]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    ssh 无法协商:“找不到匹配的密码”,正在拒绝 cbc

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    如何卸载内核模块“nvidia-drm”?

    • 13 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Wong Jia Hau ssh-add 返回:“连接代理时出错:没有这样的文件或目录” 2018-08-24 23:28:13 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST
  • Martin Hope
    Bagas Sanjaya 为什么 Linux 使用 LF 作为换行符? 2017-12-20 05:48:21 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve