AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 783773
Accepted
Borealis
Borealis
Asked: 2016-06-14 21:13:00 +0800 CST2016-06-14 21:13:00 +0800 CST 2016-06-14 21:13:00 +0800 CST

将文件从 AWS S3 传输到 S3 的最有效方法是什么?

  • 772

我有大量文件存储在 AWS S3 存储桶中。我需要将这些文件放到另一个用户拥有的另一个 S3 存储桶中,并且位于不同的区域。这些文件存储在我的 S3 存储桶中的不同位置——这些密钥(例如location1& location2)也需要传输过来。两个 S3 存储桶都与 AWS EC2 Ubuntu 服务器相关联。这是我的 S3 存储桶的结构示例:

s3://mybucket/location1/some_file
s3://mybucket/location1/some_file2
s3://mybucket/location2/some_file
etc...

考虑到这些限制,哪种方法将文件从 S3 传输到 S3 最有效?

ubuntu file-transfer amazon-s3 copy amazon-web-services
  • 2 2 个回答
  • 779 Views

2 个回答

  • Voted
  1. Best Answer
    ceejayoz
    2016-06-15T04:11:19+08:002016-06-15T04:11:19+08:00

    https://aws.amazon.com/premiumsupport/knowledge-center/account-transfer-s3/

    您可以使用 S3 COPY 操作将 Amazon S3 对象从一个 AWS 账户复制到另一个账户。您必须使用 Amazon S3 访问控制列表 (ACL) 或存储桶策略授予目标 AWS 账户对源 AWS 账户资源的访问权限。

    设置跨账户 IAM 权限后,就像aws s3 sync s3://sourcebucket s3://destinationbucket通过 CLI 一样简单。不需要中间人服务器 - 一切都直接发生在 S3 上(因此会大大加快)。

    (如果您不想要整个存储桶,CLI 可以很容易地复制单个对象)

    • 4
  2. Vladimir Mukhin
    2016-06-15T03:05:27+08:002016-06-15T03:05:27+08:00

    您可以实现以下场景:

    1. 在源区域或目标区域部署临时 EC2 实例。您选择更大的实例,获得更好的性能。
    2. 在此实例上安装 S3 客户端并传输您的文件。
    3. 操作完成后,终止您的 EC2 实例。
    • -4

相关问题

  • 无法通过 Ubuntu VPN 访问外部网络

  • ubuntu apt-get upgrade - 如何在 shell 中单击确定?

  • VirtualBox 上 Ubuntu 的访客优化技巧 [关闭]

  • 外部硬盘上的 virtualbox 虚拟硬盘驱动器(Vista 主机上的 ubuntu 客户机)

  • 如何在 Ubuntu 上挂载 LVM 分区?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve