AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 805363
Accepted
Thibault Dory
Thibault Dory
Asked: 2016-09-27 05:04:02 +0800 CST2016-09-27 05:04:02 +0800 CST 2016-09-27 05:04:02 +0800 CST

将大文件存储在 Google Cloud Storage 中,无需本地副本

  • 772

我想通过 gcsfuse 将大型二进制文件(mongodump bson 文件)存储在安装在 Google Compute 实例上的 Google Cloud Storage 存储桶中。一切都运行良好,除了每次我写文件时保险丝都会将每个文件复制到一个临时文件夹中。我的用例是在 GCS 上存储高达 4TB 的文件以降低我们的存储成本,但是如果我必须为临时文件保留足够大的磁盘,GCS 不会降低我的成本,因为我必须保留两种存储(磁盘和 GCS)。

有没有办法将大文件写入已安装的 GCS 存储桶,而无需在 GC 实例上使用所有临时空间?

google-cloud-platform google-compute-engine google-cloud-storage gcsfuse
  • 1 1 个回答
  • 1061 Views

1 个回答

  • Voted
  1. Best Answer
    Thibault Dory
    2016-10-04T04:27:20+08:002016-10-04T04:27:20+08:00

    这是一种无需安装 GCS 存储桶即可获得相同结果的方法。只需使用 gsutil 的流式上传功能将 mongodump 的输出直接通过管道传输到存储桶中:

    mongodump -d DBNAME -c COLLECTIONNAME --out - | gsutil cp - gs://cold-backups/daily/COLLECTIONNAME.bson
    

    有关其他信息,请参阅https://cloud.google.com/storage/docs/streaming。

    • 0

相关问题

  • 带有 OpenVPN 的 Google Compute Engine 上的 VPN 服务器

  • 如果您失去了 Google Apps 的管理员权限,如何恢复?

  • 云有多大?[关闭]

  • 谷歌应用引擎中的 joomla

  • 无需短信即可注册 Google AppEngine?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve