AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 38669
In Process
Mei
Mei
Asked: 2009-07-10 14:44:09 +0800 CST2009-07-10 14:44:09 +0800 CST 2009-07-10 14:44:09 +0800 CST

网络磁带恢复比磁盘到磁盘复制更快

  • 772

怎么会这样?

对于 93Gb,运行 cp 或 rsync(使用 -W --inplace)需要两个小时;通过专用备份网络进行磁带恢复需要 41 分钟。磁带恢复为 50 Mb/s;磁盘到磁盘被测量并计算为最高 16 Mb/s - 如果 CPU 繁忙,则为 2 Mb/s。

还原软件是 Veritas NetBackup;磁盘位于光纤上的 EMC Symmetrix 阵列上。该盒子是一个运行 HP-UX 11i v2 的 16 Gb 的 HP rx6600 (Itanium)。所有磁盘都在一张光纤卡上,如下所示:

HP AD194-60001 PCI/PCI-X Fibre Channel 2-port 4Gb FC/2-port 1000B-T Combo Adapter (FC Port 1)

这些磁盘也都使用 Veritas Volume Manager(而不是 HP LVM)。


更新:我突然想到这不仅仅是一个直接的磁盘到磁盘复制;实际上,它是磁盘副本的快照。读取快照会减慢速度吗?快照是 HP VxFS 快照(不是 vxsnap);也许快照和 VxVM 之间的交互导致速度下降?


更新:使用 fstyp -v,块大小(f_bsize)似乎是 8192;默认的 UNIX 块大小为 512(或 8192/16)。使用 dd 进行测试时,我使用了 1024k(或 1048576,或 8192*128)的块大小。

我真的想知道它是否是块大小。我在 PerlMonks 上读到 Perl 模块 File::Copy 比 cp 快;这很有趣:我想知道。

如果 NetBackup 使用 tar,那么它没有使用 cp: 这也可以解释速度的提高。


更新:似乎从快照读取几乎是从实际设备读取的两倍。运行 cp 很慢,就像 tar 写入命令行一样。使用 tar 稍微好一点(使用文件时),但仅限于 8Gb 文件(有问题的文件是 96Gb 左右)。将 perl 的 File::Copy 与非快照卷一起使用似乎是最快的方法之一。

我将尝试这样做,并将在这里报告我得到的结果。

performance hard-drive bandwidth tape veritas
  • 5 5 个回答
  • 1175 Views

5 个回答

  • Voted
  1. LapTop006
    2009-07-11T03:52:55+08:002009-07-11T03:52:55+08:00

    另一个问题是您是否在 FC 网络中绑定了 IO,请 SAN 人员演示(图表很好)实际可用的备用带宽(哦,如果 FC 交换机是 Cisco 交换机,他们如何确保避免交换机内部的带宽问题)

    • 2
  2. crb
    2009-07-10T15:16:23+08:002009-07-10T15:16:23+08:00

    您是否受到阵列中同一个磁盘的读取和写入的限制?

    • 1
  3. pjz
    2009-07-11T05:46:16+08:002009-07-11T05:46:16+08:00

    如果您的磁带也在 SAN 上,那么 xfer 可能会被移交并直接从磁带传输到磁盘,而副本需要通过执行复制的主机传递,因此速度较慢。

    • 1
  4. cjs
    2009-07-15T19:32:47+08:002009-07-15T19:32:47+08:00

    为确保您的测试完全一致,请尝试通过 tar 进行磁盘复制(NetBackup 使用 tar 从磁带读取):

    $ tar cf - oldstuff | (cd newdir; 焦油 xf -)

    如果你所有的磁盘都在同一张光纤卡上,理论上你可以在一张卡上绑定 IO,但我对此表示怀疑。

    VxFS 快照可能会增加开销,尤其是在原始源文件系统当时正忙于写入的情况下。VxFS 确实在写入时复制,因此如果原始磁盘正在接收写入,快照磁盘将忙于接收原始磁盘数据。

    如果原始文件系统空闲,则可以排除 VxFS 是一个因素。

    • 1
  5. Jeff Leonard
    2009-07-17T17:34:16+08:002009-07-17T17:34:16+08:00

    如果磁盘连接到主板上的不同总线,则数据可能会通过 3 个或更多内部总线进行复制,并且延迟会扼杀磁盘到磁盘复制的 IO。在这种情况下,与源磁盘相比,网络磁带驱动器完全有可能具有到目标磁盘的固有更高带宽路径。

    • -1

相关问题

  • 通过 SNMP 导出性能计数器

  • 知道解析速度测试结果的方法吗?

  • 加快 MSSQL 快照复制到 SQLExpress 副本的速度

  • 聚集索引与非聚集索引?

  • 使用大量 javascript 的页面上的鱿鱼速度很慢

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    从 IP 地址解析主机名

    • 8 个回答
  • Marko Smith

    如何按大小对 du -h 输出进行排序

    • 30 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    Windows 中执行反向 DNS 查找的命令行实用程序是什么?

    • 14 个回答
  • Marko Smith

    如何检查 Windows 机器上的端口是否被阻塞?

    • 4 个回答
  • Marko Smith

    我应该打开哪个端口以允许远程桌面?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    MikeN 在 Nginx 中,如何在维护子域的同时将所有 http 请求重写为 https? 2009-09-22 06:04:43 +0800 CST
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    0x89 bash中的双方括号和单方括号有什么区别? 2009-08-10 13:11:51 +0800 CST
  • Martin Hope
    kch 如何更改我的私钥密码? 2009-08-06 21:37:57 +0800 CST
  • Martin Hope
    Kyle Brandt IPv4 子网如何工作? 2009-08-05 06:05:31 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve