AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 73971
Accepted
DennyHalim.com
DennyHalim.com
Asked: 2009-10-14 00:29:36 +0800 CST2009-10-14 00:29:36 +0800 CST 2009-10-14 00:29:36 +0800 CST

大文件的最快备份

  • 772

复制文件夹包含几百兆大小的几个文件和其他几个兆小文件的最快方法是什么?(例如,/var/lib/mysql)cp 或 tar 或 rsync 或...??

backup
  • 7 7 个回答
  • 2993 Views

7 个回答

  • Voted
  1. Best Answer
    warp
    2009-10-14T00:38:00+08:002009-10-14T00:38:00+08:00

    rsync 通常会比 cp 或 tar 快,因为 rsync 只传输那些已更改的文件,而使用 --partial 它只会传输文件中已更改的部分。

    话虽如此,如果您知道要备份什么并且可以安排事情,那么 rsync 会更好地工作,这样 rsync 就不必做太多的工作。例如,如果您将 /var/log 中的旋转日志文件旋转为包含日期的文件名,而不是 .0、.1、.2 等,则它们的工作效果会更好。

    还有一点需要注意:在您的问题中,您提到了 /var/lib/mysql。使用 rsync 备份是一个非常糟糕的主意,使用 mysqldump 来获得可靠的备份。如果该备份太大而无法频繁传输,请使用 mysql 复制和从从站备份。(您仍然应该定期在主服务器上进行完整备份,复制也可能失败)。

    • 4
  2. leonm
    2009-10-14T00:38:48+08:002009-10-14T00:38:48+08:00

    取决于几个因素。对于大量小文件,通常最好执行 tar。如果是少量的大文件,大部分情况下 cp 是可以的。

    如果您有一个文件列表但只有一小部分更改,则 rsync 更有效。

    • 1
  3. Nikolas Sakic
    2009-10-14T04:56:31+08:002009-10-14T04:56:31+08:00

    这取决于您要备份的内容。你不能只用 rsync 备份实时数据库,你会得到一个损坏的文件。对于数据库,如 mysql,您需要设置 cron,例如,运行 'mysqldump' 然后 rsync 该文件。此外,请确保在文件名后附加“日期”,以便知道该文件何时备份,并有多个备份副本以防万一。

    • 1
  4. pavium
    2009-10-14T00:36:25+08:002009-10-14T00:36:25+08:00

    啊,神奇的词backup

    关于您提到的方法的相对速度,我不能说太多,但我认为rsync仅备份已更改文件的能力使其成为最佳方法。

    特别是如果大多数文件不需要复制。

    • 0
  5. Blindy
    2009-10-14T00:36:50+08:002009-10-14T00:36:50+08:00

    如果您有很多小文件,tar在它们上运行将大大提高传输速度。

    如果文件主要是文本(不是 mysql 二进制文件或数据库的情况),请考虑压缩 tar (bzip2等)。否则你不会从压缩中得到任何东西,所以不要管焦油。

    • 0
  6. simplr
    2009-10-14T03:45:40+08:002009-10-14T03:45:40+08:00

    假设您已经有文件的旧副本并且您只需要刷新副本,那么 rsync 比 cp 或 tar 快得多,因为它只传输已更改的字节。一个 100MB 的文件包含一些更改的记录将在几秒钟内更新。我发现它非常适合数据库文件,但我对二进制文件的成功率较低。

    但是如果复制的目的是为了异地备份,那么 rdiff-backup 就没有什么可比的了。rdiff-backup 与 rsync 一样,仅传输文件内的更改,但它也维护增量更改,以便您可以从任何较早的备份日期恢复任何文件。

    而且,对于 SQL 数据库,rdiff-backup 检查备份期间所做的更改并自动修复它们,所以恕我直言,它应该是安全的。当然,除非 SQL 服务器将数据保存在内存中而不将其写入磁盘——否则它将不安全。

    • 0
  7. kmarsh
    2009-10-14T04:24:46+08:002009-10-14T04:24:46+08:00

    SAN 快照是最快的方法,但可能不是您要寻找的答案。

    • 0

相关问题

  • 总大小(磁盘)与总大小(媒体)

  • 社区对备份解决方案的意见

  • 无法读取不同 LTO-3 驱动器上的 LTO-3 磁带

  • 使用 TSM 备份时跳过硬链接

  • 使用 rsync 维护名称更改的目录的副本

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve