AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题 / 542295
Accepted
tobiasBora
tobiasBora
Asked: 2019-09-18 09:27:06 +0800 CST2019-09-18 09:27:06 +0800 CST 2019-09-18 09:27:06 +0800 CST

文件更改时“拆分”的硬链接

  • 772

是否有可能(在经典的 ext4 和/或任何其他文件系统中)创建两个指向相同内容的文件,这样如果一个文件被修改,内容被复制并且两个文件变得不同?节省硬盘空间非常实用。

背景:我在自己的云服务器上分享了一些重要的视频,可以被很多人修改,因此可能有些人修改/删除这些文件......我真的很想确保我有备份这些文件,因此我现在需要维护两个目录,一个正常的 nextcloud 一个,一个“备份”目录,它(至少)是存储它所需大小的两倍。

我想在 nextcloud 目录上创建一个很棒的 git repo,当添加新视频时,它使备份过程变得更加容易(只是git add .),但git仍然是 blob 和工作目录之间的空间的两倍。

理想情况下,可以与 git 结合使用的解决方案会很棒(即,它允许我创建视频更改的历史记录,包括提交、签出......而不会使磁盘空间增加一倍。

此外,我很好奇有各种文件系统的解决方案(特别是如果你有不实现快照的文件系统的技巧)。请注意,LVM 快照并不是真正的解决方案,因为我不想备份我的完整卷,只备份一些特定的文件/文件夹。

谢谢!

filesystems
  • 3 3 个回答
  • 720 Views

3 个回答

  • Voted
  1. Best Answer
    user1133275
    2019-09-18T09:33:34+08:002019-09-18T09:33:34+08:00

    在写时复制文件系统(Btrfs、ZFS)上是。git-annex与您在 ext4 上可能获得的一样接近。请注意,您可以mount --bind在另一个文件系统中的文件夹上使用 LVM 支持的卷或 Btrfs 文件系统。

    • 6
  2. ilkkachu
    2019-09-19T03:26:07+08:002019-09-19T03:26:07+08:00

    是否有可能(在经典的 ext4 和/或任何其他文件系统中)创建两个指向相同内容的文件,这样如果一个文件被修改,内容被复制并且两个文件变得不同?节省硬盘空间非常实用。

    硬链接可以做到这一点,前提是任何编辑文件的人都通过创建一个新文件并在原始文件之上重命名它来完成它。这会破坏链接,因为新文件只链接到一个名称,而另一个链接会被重写覆盖。

    问题是,通常很难知道程序是否会覆盖同一个 inode 中的数据,或者是否会在保存时创建一个新文件。

    将“备份副本”设为只读可能会有所帮助,因为它们无法修改,但仍可以删除链接并重新创建相同的名称。但是当程序无法写入该 inode 时,这可能会导致很多错误。

    因此,在我看来,通过硬链接进行文件级重复数据删除是可能的,但前提是您控制写入链接的程序。

    • 2
  3. endolith
    2021-01-14T08:12:04+08:002021-01-14T08:12:04+08:00

    我猜其他答案没有明确说明这一点,所以是的,在 btrfs 上可以使用reflinks而不是硬链接。

    • 硬链接是同一个文件的两个不同的名称,它占用同一个磁盘块。
    • Reflinks 是两个不同的文件,它们恰好指向同一个磁盘块。

    当硬链接被修改时,另一个文件名也会显示修改,因为两者都引用同一个文件。

    当一个 reflink 被修改时,另一个文件不会被修改。编辑被写入一个新的磁盘块,而两个文件的未更改部分仍然引用相同的磁盘块,从而节省空间。

    与两个目录条目引用同一个 inode 条目的硬链接不同,reflink 有两个 inode 条目,并且共享的是数据块。

    https://hackernoon.com/reflinks-vs-symlinks-vs-hard-links-and-how-they-can-help-machine-learning-projects-wz2ej3xa7

    在此处输入图像描述

    • 2

相关问题

  • 我应该在 NAS 的 SD 卡中使用哪个文件系统?

  • 如何提前知道 .zip 内部是否有父目录

  • Virtualbox 动态分配磁盘 *.vdi 不断增长

  • du/df 和 ls 报告不同的磁盘使用情况

  • Linux 内核开发人员如何处理数百万行代码的工作?他们是一种方法吗?[关闭]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve