主页 / server / 问题 / 715553
Accepted
Ashish Karpe
Asked: 2015-08-21 06:21:38 +0800 CST

如何使用命令行在不同 aws 帐户的 s3 存储桶之间传输数据

  • 772

如何使用 s3cmd 在不同 aws 帐户的 s3 存储桶之间传输数据？

command will be like this: s3cmd rsync s3://acc1_bucket/folder/ s3://acc2_bucket/folder --recursive

但是那么它将如何识别第二个存储桶环境呢？这样做的正确方法是什么？

amazon-web-services

3 个回答

  1. 您可以使用Minio 客户端（又名 mc），它的开源并与 AWS S3 兼容。

    在 Linux 上安装 Minio 客户端

    $ wget https://dl.minio.io/client/mc/release/linux-amd64/mc
$ chmod 755 mc
$ ./mc --help

    添加 AWS S3 凭证

    $ ./mc config host add mys3one https://s3.amazonaws.com BKIKJAA5BMMU2RHO6Izz V7f1CwQqAcwo80UEIJEjc5gVQUSSx5ohQ9GSrr12

$ ./mc config host add mys3two https://s3.amazonaws.com BKIKJAA5BMMU2RHO6IBB V7f1CwQqAcwo80UEIJEjc5gVQUSSx5ohQ9GSaa64

    使用 mc mirror 将对象/存储桶从一个帐户转移到另一个帐户。

    $ ./mc mirror mys3one/photos mys3two/photos2

    在此示例中，别名为“mys3one”且存储桶名称为“photos”的 s3 账户被镜像到别名为“mys3two”且存储桶名称为 photo2 的 s3 账户。

    您可以通过将其添加到 cron 来自动执行相同的操作，因此可以在需要时定期同步内容。

    希望能帮助到你。免责声明：我为Minio工作

    • 6
  2. Best Answer

    您只需在 S3 存储桶策略中授权您的 IAM 用户访问 buvket，如下所示：

    {
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "whatever",
            "Effect": "Allow",
            "Principal": {
                "AWS": [
                    "<ARN OF YOUR IAM USER>"
                ]
            },
            "Action": [
                "s3:ListBucket",
                "s3:GetBucketLocation",
                "s3:GetObject"
            ],
            "Resource": [
                "arn:aws:s3:::<YOUR BUCKET NAME>", 
                "arn:aws:s3:::<YOUR BUCKET NAME>/*"
            ]
        }
    ]
}

    然后，由于这是跨账户，您还必须允许您的 IAM 用户执行 S3 调用，方法是将策略附加到您的 IAM 用户，如下所示：

    {
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "whateveryoulike",
            "Effect": "Allow",
            "Action": [
                "s3:*"
            ],
            "Resource": [
                "arn:aws:s3:::<BUCKET_NAME>",
                "arn:aws:s3:::<BUCKET_NAME>/*"
            ]
        }
    ]
}

    只需配置您的 cli，您就可以访问您的存储桶跨帐户。

    • 3

  3. 帐户使用不同的凭据。无法从一个帐户同步到另一个帐户并提供单独的凭据。这样做的唯一方法是允许使用临时帐户公开访问第二个存储桶。

    如果这不是一个选项，那么您最好的选择是：

    s3 sync s3://acct1/bucket . --profile acct1 s3 sync . s3://acct2/bucket --profile acct2

    • 1

相关问题