AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 8577
Accepted
joeforker
joeforker
Asked: 2009-05-16 03:48:52 +0800 CST2009-05-16 03:48:52 +0800 CST 2009-05-16 03:48:52 +0800 CST

为什么“tar -cSf file.tar source”内存不足?

  • 772

我正在尝试通过制作 tarball 将 66 GB 备份到 NAS,但是在 62 GB 之后“tar -cSf ...”退出并出现“内存耗尽”错误。我的 Linux 机器有 1 GB 的 RAM 和 1 GB交换空间。

(编辑)我再次尝试了 tar 放弃的地方,并且 tar 很快又放弃了,所以看起来它可能无法处理特殊文件。

这些数据令人惊讶地难以备份。rsync 比 tar 慢 4 倍,因为 NAS 不是很快,并且它在中间退出并显示“对等方重置连接”;'cp' 在 cifs 共享上不能很好地工作,因为它不能创建特殊文件。有没有更好的办法?

backup linux tar
  • 3 3 个回答
  • 2157 Views

3 个回答

  • Voted
  1. Vinko Vrsalovic
    2009-05-16T04:26:24+08:002009-05-16T04:26:24+08:00

    我不知道为什么,但我可以建议你尝试类似

    tar -L 32212254720 -f piece1.tar -f piece2.tar -f piece3.tar <path>
    

    这将每 30 GB 创建一个文件。如果您达到 120 GB 标记,则需要添加第四个文件 (-f piece4.tar)

    如果这仍然失败,您可以尝试使用较小的部分并编写脚本来生成命令行(因为带有 80 -f 参数的命令行编写起来会很痛苦:-))

    • 5
  2. bdonlan
    2009-05-16T09:49:55+08:002009-05-16T09:49:55+08:00

    尝试传递 --hard-dereference 选项。这将禁用硬链接跟踪,这需要与正在备份的 inode 数量成比例的内存。在尝试备份问题文件时尝试跟踪 tar 进程也可能很有趣。

    • 3
  3. Best Answer
    ConcernedOfTunbridgeWells
    2009-05-16T09:59:49+08:002009-05-16T09:59:49+08:00

    -S正在检查稀疏文件(并非所有文件范围实际上都物理分配在磁盘上的文件)。这可能是内存不足。尝试在没有 -S 的情况下运行它(如果你真的想要压缩它),看看这是否能解决问题。

    tar cf foo.tar *
    

    或者

    tar czf foo.tar.gz *
    
    • 3

相关问题

  • IIS 6.0 (Windows Server 2003) 备份的最佳实践?

  • 10TB数据和3台服务器的备份解决方案

  • (软)Ubuntu 7.10 上的 RAID 6,我应该迁移到 8.10 吗?

  • 最佳混合环境(OS X + Windows)备份?[关闭]

  • 如何从 SQL Server 2008 中的备份中排除索引

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve