AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-106001

ECII's questions

Martin Hope
ECII
Asked: 2020-08-13 09:10:38 +0800 CST

哪个 EC2 实例散列大量 25gb 文件

  • 1

我在 AWS 上有一个带有大量 25GB 文件(1000 个)的 EBS(弹性块存储)。我想为每个文件计算一个 SHA256 和。

哪个 EC2 实例最适合此类任务(cpu 优化?许多内核?存储优化?)。我可以以某种方式并行散列文件吗?如何优化性能?

ubuntu hash amazon-ec2 amazon-web-services amazon-ebs
  • 1 个回答
  • 153 Views
Martin Hope
ECII
Asked: 2020-08-10 03:57:07 +0800 CST

aws s3 同步作业的 VM ram 要求

  • 0

我有一个虚拟机设置,可以使用最新的 awscli v.2 将 25GB 卷中拆分的 15TB 数据同步到 S3。我有 100Mbps 的上传能力,这项工作可能需要 16 天。直到现在我还没有这方面的经验,我正试图限制我可能遇到的问题。

  1. 有没有人猜测虚拟机需要多少 RAM 才能完成这个过程?
  2. 2核VM可以吗?
  3. 在继续之前我可能需要检查其他东西吗?

谢谢

virtualbox amazon-s3 aws-cli
  • 1 个回答
  • 51 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve