AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / unix / 问题

问题[sparse-files](unix)

Martin Hope
peterh
Asked: 2025-04-11 23:40:20 +0800 CST

如何获取稀疏文件的实际使用大小?

  • 8

我想知道稀疏文件在磁盘上实际使用了多少空间。

ls和stat类似的命令似乎都显示了它的虚拟大小,即带有孔洞的大小。

我想要知道文件的真实磁盘使用情况,没有漏洞。

我怎样才能做到这一点?

sparse-files
  • 1 个回答
  • 146 Views
Martin Hope
humanityANDpeace
Asked: 2019-07-13 05:39:05 +0800 CST

/var/log/lastlog 是一个巨大的稀疏文件(1.1TB)有什么原因吗?

  • 12

我读过一些问题,询问如何rsync有效地稀疏文件,提到文件/var/log/lastlog和/var/log/faillog. 事实上,我自己也发现这些文件是一个“问题”,因为它们通过 rsync 进行备份会使它们变得“不稀疏”。

因此,我想知道的是,将这些文件设为稀疏、巨大的文件(在我的情况下是 1.1TB)的需求/背景动机是什么?

同样与此相关的是:由于我假设它们是日志文件,所以我不太关心我截断了这些文件,我是否因为截断这些文件而损坏了任何东西?

logs sparse-files
  • 4 个回答
  • 24078 Views
Martin Hope
Tiago Pimenta
Asked: 2019-03-06 06:45:11 +0800 CST

如何更改 zram 扇区大小?

  • 2

我已经将一个磁盘克隆成一个大约 80G 但确实只需要大约 12G 的稀疏文件,即使没有压缩它也适合我的内存,但是为了节省一些资源,我想使用zram:

sudo modprobe zram num_devices=1
echo 79999997952 | sudo tee /sys/block/zram0/disksize
sudo fdisk -c=dos --sector-size 512 /dev/zram0

但是,当我创建分区时,它使用 4096 扇区大小,即使我告诉fdisk使用 512。

它不允许我根据 512 扇区大小键入分​​区的大小,它不是一个确切的数字,我可以除以 8 以获得基于 4096 的分区,所以我在稀疏mbr上做了:

truncate -s79999997952 /tmp/block
fdisk -c=dos --sector-size 512 /tmp/block
# o, n, p, 1, 63, 156232124, t, 7, a, w
sudo dd if=/tmp/block of=/dev/zram0 count=1 bs=512

似乎对于常规文件,fdisk认为使用 512 扇区大小没有问题!但是zram还是很奇怪,不知道能不能用,因为在512模式下会显示不同的磁盘大小:

$ sudo fdisk -lu /dev/zram0
Disk /dev/zram0: 74.5 GiB, 80000000000 bytes, 19531250 sectors
Units: sectors of 1 * 4096 = 4096 bytes
Sector size (logical/physical): 4096 bytes / 4096 bytes
I/O size (minimum/optimal): 4096 bytes / 4096 bytes
Disklabel type: dos
Disk identifier: 0x5f8b6465

Device       Boot Start       End   Sectors  Size Id Type
/dev/zram0p1 *       63 156232124 156232062  596G  7 HPFS/NTFS/exFAT


$ sudo fdisk -lu --sector-size 512 /dev/zram0
Disk /dev/zram0: 9.3 GiB, 10000000000 bytes, 19531250 sectors
Units: sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 4096 bytes
Disklabel type: dos
Disk identifier: 0x5f8b6465

Device       Boot Start       End   Sectors  Size Id Type
/dev/zram0p1 *       63 156232124 156232062 74.5G  7 HPFS/NTFS/exFAT

理解,一旦156232062 / 8 = 19529007.75它无法适应 4096 扇区大小。

如何强制fdisk或zram本身使用 512 扇区大小?

fdisk sparse-files
  • 1 个回答
  • 436 Views
Martin Hope
Daffy
Asked: 2018-08-23 16:43:29 +0800 CST

稀疏文件可以提高losetup的效率吗?

  • 2

所以我的设置是这样的。

$ truncate -s 1T volume
$ losetup -f --show volume
/dev/loop0
$ mkfs.ext4 /dev/loop0
$ ls -sh volume
1.1G volume
$ mount /dev/loop0 /mnt/loop

正如预期的那样,现在我有一个 1.1TB 的卷。ext4 的开销将稀疏文件扩展为 1.1G,但这很好。现在添加一个文件。

$ dd if=/dev/urandom of=/mnt/loop/file bs=1M count=10240
$ ls -sh volume
12G volume

酷,现在我不想要这个文件了。

$ rm /mnt/loop/file
$ ls -sh volume
12G volume

正如预期的那样,可用空间仍在占用空间,并$ fallocate -d volume释放了 1gb。

我的问题是,如何在不将卷扩展到完整大小的情况下将此处的可用空间归零?$ dd if=/dev/zero会将其扩展为完整大小,并conv=sparse使其在卷内创建一个无用的稀疏文件。

TL;DR:有没有办法losetup忽略将空块写入空扇区,同时允许其他所有内容?

loop-device sparse-files
  • 2 个回答
  • 1411 Views
Martin Hope
elbarna
Asked: 2018-04-16 11:07:50 +0800 CST

rsync:是否可以仅复制 qcow2 或原始图像的已用空间?

  • 2

简单的问题。我有一个 200G 的 qcow2 或原始磁盘映像,但 200G 只使用了 30G。如果我做

rsync -avP 

将所有 200G 复制到 U 盘或网络上,浪费时间、空间和网络带宽。是不是可以只复制30G?

rsync sparse-files
  • 1 个回答
  • 3913 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    模块 i915 可能缺少固件 /lib/firmware/i915/*

    • 3 个回答
  • Marko Smith

    无法获取 jessie backports 存储库

    • 4 个回答
  • Marko Smith

    如何将 GPG 私钥和公钥导出到文件

    • 4 个回答
  • Marko Smith

    我们如何运行存储在变量中的命令?

    • 5 个回答
  • Marko Smith

    如何配置 systemd-resolved 和 systemd-networkd 以使用本地 DNS 服务器来解析本地域和远程 DNS 服务器来解析远程域?

    • 3 个回答
  • Marko Smith

    dist-upgrade 后 Kali Linux 中的 apt-get update 错误 [重复]

    • 2 个回答
  • Marko Smith

    如何从 systemctl 服务日志中查看最新的 x 行

    • 5 个回答
  • Marko Smith

    Nano - 跳转到文件末尾

    • 8 个回答
  • Marko Smith

    grub 错误:你需要先加载内核

    • 4 个回答
  • Marko Smith

    如何下载软件包而不是使用 apt-get 命令安装它?

    • 7 个回答
  • Martin Hope
    user12345 无法获取 jessie backports 存储库 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl 为什么大多数 systemd 示例都包含 WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky 如何将 GPG 私钥和公钥导出到文件 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll systemctl 状态显示:“状态:降级” 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim 我们如何运行存储在变量中的命令? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S 为什么 /dev/null 是一个文件?为什么它的功能不作为一个简单的程序来实现? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 如何从 systemctl 服务日志中查看最新的 x 行 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - 跳转到文件末尾 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla 为什么真假这么大? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis 在一个巨大的(70GB)、一行、文本文件中替换字符串 2017-12-30 06:58:33 +0800 CST

热门标签

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve