AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 9742
Accepted
kestes
kestes
Asked: 2009-05-19 20:17:18 +0800 CST2009-05-19 20:17:18 +0800 CST 2009-05-19 20:17:18 +0800 CST

哪个更快,为什么:传输几个小文件或几个大文件?

  • 772

我很快就会拥有一个包含数千个文件的文件夹,每个文件大约为几 KB。我需要通过 Windows 网络将这些从一个 UNC 共享传输到另一个。一般来说,简单地批量复制文件会更快,还是将它们压缩(例如,在最快模式下使用 7zip)并发送一个或几个大文件会更快?还是在实践中没有区别?

windows filesystems copying
  • 6 6 个回答
  • 42167 Views

6 个回答

  • Voted
  1. Best Answer
    Jon Cahill
    2009-05-19T20:27:35+08:002009-05-19T20:27:35+08:00

    由于协商传输的开销,传输单个大文件而不是大量小文件更快。协商是针对每个文件进行的,因此传输单个文件需要执行一次,传输 n 个文件意味着需要执行 n 次。

    如果您在传输之前先压缩,您将节省大量时间。

    • 41
  2. Glenn Slaven
    2009-05-19T22:31:59+08:002009-05-19T22:31:59+08:00

    Jon Cahill 非常正确,单个文件会更快。但是值得记住的是,如果连接不稳定,单个文件(或 zip 文件中的中型组)可能会更好,因为如果传输失败,您将不得不重新开始,而多个文件,您只需要重新执行上次启动的文件

    • 7
  3. Luke Quinane
    2009-05-19T21:57:02+08:002009-05-19T21:57:02+08:00

    将大量小文件写入文件系统也将比单个大文件更昂贵。它需要执行以下操作:

    • 检查文件名是否唯一
    • 写出文件表项

    随着您在目录中获得越来越多的文件,这可能会变得非常昂贵。这些步骤中的每一个都会增加复制过程的延迟并减慢整个过程。

    • 2
  4. jldugger
    2009-05-19T21:12:50+08:002009-05-19T21:12:50+08:00

    相对于平均文件大小的平均数据包大小在这里可能很关键。对于大量小文件,您可能会发现自己发送了许多小数据包。微小的数据包仍然会产生 TCP 开销;结果,您可能会使流量增加一倍。

    现代系统甚至相对古老的系统都可以通过单个 TCP 连接发送多个文件,从而避免了握手的成本。

    • 0
  5. Tubs
    2009-05-19T23:12:21+08:002009-05-19T23:12:21+08:00

    正是我发现的,但如果您想要更快的传输,请从本地计算机启动传输,然后复制到本地驱动器。

    即复制\computer1\myshare 到c:\files\myshare,不要使用第三台计算机并从\computer1\myshare 复制到\computer2\mynewshare。

    • 0
  6. Rowland Shaw
    2009-05-20T04:11:50+08:002009-05-20T04:11:50+08:00

    还值得记住的是,协议的选择会影响完成的总时间——例如,从一台主机到另一台主机的 FTP 文件,可能比使用 Windows 文件共享要快得多(当然,域权限之类的东西也是丢失,但在某些情况下,这可能是一个可以接受的折衷——毕竟,这些也会因压缩/解压缩而丢失)

    • 0

相关问题

  • 您最喜欢的云计算提供商是什么?[关闭]

  • Vanilla Powershell 是否足以成为 Windows 和 DB 服务器管理员的语言?

  • 为什么添加新驱动器后我的磁盘驱动器访问速度如此之慢?

  • 在 Windows Server 2003 下使用 wscipt 从 .asp 文件运行 .exe

  • 最佳混合环境(OS X + Windows)备份?[关闭]

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve