AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 800153
Accepted
jdog
jdog
Asked: 2016-09-01 00:24:50 +0800 CST2016-09-01 00:24:50 +0800 CST 2016-09-01 00:24:50 +0800 CST

scp 9.2GB 文件始终锁定 AWS EC2 t2.small 实例

  • 772

我有一个 9.2GB 的文件,我想将它传输到我的 AWS t2.small 实例中以进行备份。当我启动 scp 时,它以大约每秒 3.4MB 的速度复制文件,这导致大约 45 分钟的预期传输时间。

一段时间后,实例总是锁定。我不能再在终端窗口中输入任何内容,网站停止(它是一个网络服务器)并且我无法连接到它。重启实例即可解决问题。

我调查了 EBS 限制:我连接了 2 个 RAID10 200GB gp2 磁盘。从这个文档中我看不到我超过了磁盘的 IOPS 或吞吐量。我还检查了bandwidth,但在其中看不到有关 t2 实例的任何信息。最后我查看了CPU credits,但大概它不应该完全停止?

这是一次性转移,所以我想知道我必须减慢转移多少才能使其安全发生。同时,我想了解管理此 Web 服务器的限制。

amazon-ec2 amazon-web-services amazon-ebs
  • 2 2 个回答
  • 316 Views

2 个回答

  • Voted
  1. Best Answer
    user9517
    2016-09-01T21:52:33+08:002016-09-01T21:52:33+08:00

    如果您想找出问题所在,那么您应该安装一些监控,或者您也可以与系统建立多个连接并运行诸如top、vmstat、等实用程序(如果需要iostat,请free使用watch(1))以查看什么是发生在系统资源上。收集数据,然后应用科学方法——这是唯一确定的方法。

    如果您只想传输文件,请尝试使用split将文件分块并分别传输每个块。然后,您可以使用 cat 再次将块组装回整个文件。

    • 4
  2. Prakash Manden
    2016-09-01T20:48:38+08:002016-09-01T20:48:38+08:00

    一种可能性是文件系统缓存。通常在进行大量数据复制时,文件系统缓存会耗尽所有可用内存(t2.small 只有 2GB),从而导致交换,这可能会导致系统无响应。不确定是否有办法使用 scp 绕过文件系统缓存。

    • -3

相关问题

  • 权限被拒绝(公钥)。从本地 Ubuntu 到 Amazon EC2 服务器的 SSH

  • 管理员如何管理他们的 EC2 EBS 和快照?

  • 云有多大?[关闭]

  • EC2 映像启动

  • 如何将安全组添加到正在运行的 EC2 实例?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve