主页 / unix / 问题 / 427215
Accepted
fadedbee
Asked: 2018-03-01 05:53:28 +0800 CST

将相同的数据写入 ZFS 下的文件块会占用快照中的空间吗？

  • 772

我有一个 16M 的文件。

我拍摄了包含它的 ZFS 文件系统的快照。

如果我用相同的数据覆盖文件，ZFS 是否需要存储文件所有块的两个副本？

zfs snapshot

1 个回答

  1. Best Answer

    是的，如果从文件集中获取快照，ZFS 将为同一文件分配额外空间。

    首先让我们创建一个空文件集并准备一个要从中复制的文件。为简单起见，关闭了压缩，并在没有任何raidz或mirror的单个磁盘上创建了池。

    [root@localhost ~]# dd if=/dev/urandom of=/tmp/testfile bs=16M count=1
1+0 records in
1+0 records out
16777216 bytes (17 MB) copied, 0.113345 s, 148 MB/s    


[root@localhost ~]# zpool create tank sdd
[root@localhost ~]# zfs create tank/test

    可以使用 来查看磁盘上使用的空间zpool list。

    [root@localhost]# zpool list tank
NAME     SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
tank    9.94G   182K  9.94G         -     0%     0%  1.00x  ONLINE  -

    现在将文件复制到 ZFS 文件集，创建快照并查看使用的空间。

    [root@localhost ~]# /bin/cp /tmp/testfile /tank/test/

[root@localhost ~]# zfs list -t all -r tank/test
NAME        USED  AVAIL  REFER  MOUNTPOINT
tank/test  16.0M  9.61G  16.0M  /tank/test

[root@localhost ~]# zfs snapshot tank/test@1
[root@localhost ~]# zfs list -t all -r tank/test
NAME          USED  AVAIL  REFER  MOUNTPOINT
tank/test    16.0M  9.61G  16.0M  /tank/test
tank/test@1     0B      -  16.0M  -

    好的，再次将相同的文件复制到 ZFS 文件集中的相同位置，并再次查看使用的空间。

    [root@localhost ~]# /bin/cp -f /tmp/testfile /tank/test/
[root@localhost ~]# zfs list -t all -r tank/test
NAME          USED  AVAIL  REFER  MOUNTPOINT
tank/test    32.0M  9.60G  16.0M  /tank/test
tank/test@1  16.0M      -  16.0M  -

    池中使用的磁盘空间也增长到 32MB。

    [root@localhost tank]# zpool list tank
NAME     SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
tank    9.94G  32.2M  9.91G         -     0%     0%  1.00x  ONLINE  -

    如您所见，tank/test文件集现在总共占 32MB，分为文件集中的 16MBtank/test和tank/test@1快照中的 16MB。的输出还zpool list显示了磁盘上的 32MB 分配。
    如果您重复复制并拍摄快照，则tank/testUSED 总量会进一步增长。

    更新

    感谢@Andrew Henle 的提问。必须更新我上面的答案，并将继续下面的重复数据删除内容。

    让我们使用启用了重复数据删除的文件集再次执行此操作。

    [root@localhost]# zfs destroy -r tank/test
[root@localhost]# zfs create tank/test-dedup
[root@localhost]# zfs set dedup=on tank/test-dedup

    我将跳过这里的单个步骤，只添加已用空间概述的输出。

    [root@localhost ~]# zfs list -t all -r tank/test-dedup
NAME                  USED  AVAIL  REFER  MOUNTPOINT
tank                 32.3M  9.61G    24K  /tank
tank/test-dedup      32.1M  9.61G  16.0M  /tank/test-dedup
tank/test-dedup@1    16.0M      -  16.0M  -
[root@localhost ~]# zpool list tank
NAME     SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
tank    9.94G  16.3M  9.92G         -     0%     0%  2.00x  ONLINE  -

    启用重复数据删除后，仍报告快照使用额外大小，但正如您所见，zpool list重复数据删除节省了磁盘空间，并提供了 2 的重复数据删除率。

    IIRC 通常不建议使用重复数据删除，因为内存使用量很大并且会影响性​​能。我认为正在改进 ZFS 中的重复数据删除功能。

    • 4

相关问题