主页 / server / 问题 / 938780
Accepted
IMTheNachoMan
Asked: 2018-11-06 18:58:02 +0800 CST

rsync-ing 后 ZFS 池大小差异

  • 772

我正在尝试将rsyncZFS 池中的一个卷数据传输到 exfat 格式的驱动器。该卷只有 1.3 TB，但rsync可以同步 3+ TB 的数据。我杀了那个，rsync所以我可以弄清楚什么是错的。

ZFS 池：

ubuntu@ubuntu:~$ zpool list
NAME     SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
backup  7.25T  3.59T  3.66T         -     0%    49%  1.00x  ONLINE  -

卷及其挂载点：

ubuntu@ubuntu:~$ zfs list
NAME                                                      USED  AVAIL  REFER  MOUNTPOINT
backup                                                   2.61T  2.49T  35.4M  /backup
backup/.system                                           1.97M  2.49T   140K  legacy
backup/.system/configs-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx   593K  2.49T   593K  legacy
backup/.system/cores                                      692K  2.49T   692K  legacy
backup/.system/rrd-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx       128K  2.49T   128K  legacy
backup/.system/samba4                                     337K  2.49T   337K  legacy
backup/.system/syslog-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx    128K  2.49T   128K  legacy
backup/vol1                                              1.26T  2.49T  1.26T  /backup/vol1
backup/vol2                                               128K  2.49T   128K  /backup/vol2
backup/vol3                                              1.78G  2.49T  1.78G  /backup/vol3
backup/vol4                                              1.34T  2.49T  1.34T  /backup/vol4
backup/vol5                                              4.51G  2.49T  4.51G  /backup/vol5

磁盘上的大小/backup/vol1：

ubuntu@ubuntu:~$ du -sh /backup/vol1
1.3T    /backup/vol1

rsync做了几天后复制了多少数据：

ubuntu@ubuntu:~$ rsync -avzh --progress --no-o --no-g /backup/vol1 /media/ubuntu/external_drive/freenas/
...
...
ubuntu@ubuntu:~$ du -sh /media/ubuntu/external_drive/freenas/vol1
3.2T    /media/ubuntu/external_drive/freenas/vol1

在看到转移了多少后，我将其杀死。

rsync

1 个回答

  1. Best Answer

    只是为了扩展我上面的评论，这将在我能想到的两种情况下发生：

    • 您发送的文件/卷正在使用块保存技术（压缩、重复数据删除或快照/克隆）。ZFS 在内部为您节省了一些空间，因此 ZFS 属性used很小，但rsync仍然必须读取所有逻辑（未压缩、未重复数据、未快照共享）数据，因为它不知道这些功能。zfs list -o logicalused您可以通过运行（或者logicalreferenced如果您有快照）来计算出有多少逻辑数据。
    • 您尝试发送的文件/卷很少。从您上面的评论中，我相信您就是这种情况。rsync正在发送您卷中所有未写入的块，即使它们都已清零（因为它们从未被写入）。尝试使用--sparseto 的参数rsync（如本答案中所述）来解决此问题，然后--in-place用于后续同步以避免重新同步整个文件，而不仅仅是重新同步已更改的部分。
    • 0

相关问题