AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题

问题[big-data](server)

Martin Hope
Franz Kafka
Asked: 2016-10-29 05:32:03 +0800 CST

您在什么时候考虑从云迁移到托管?

  • 0

我目前在 AWS 上的运营成本约为每月 25,000 美元至 40,000 美元。我在 Elasticsearch 中索引了大约 30TB 的数据,运行一个 4 节点生产集群和另一个 4 节点暂存集群。集群中的每个系统都是一个 m4.2xlarge,具有 10TB 的预置 IOPS SSD。我有一个固定的 EMR 工作需要运行,而且我还广泛使用 Elasticache。

我目前在 S3 中有一堆数据尚未编入索引,这将使我的 30TB 数据超过 150TB,我开始担心我的运营成本。我只在云中运行过基础设施,所以我对托管不是很熟悉。但是,无论如何,对于我的用例,从长远来看,托管成本将比 AWS 便宜得多。

同样,我的团队中有基础设施工程师可以处理数据中心任务等。所以,我已经为这方面的劳动力付出了代价。我的问题:像这样的举动需要考虑哪些因素?各自的优缺点是什么?从 AWS 等云提供商迁移到 colo 是否有意义?

colocation amazon-web-services big-data
  • 2 个回答
  • 147 Views
Martin Hope
poige
Asked: 2016-06-27 02:59:43 +0800 CST

如果散列受 CPU 限制,如何检查大文件的身份?

  • 10

对于小文件,散列是可以的,但是对于大文件,你可以很容易地发现md5sum它是 CPU 限制的。是否有任何散列算法能够在多核上横向扩展?任何解决方法?想法?任何事物?:)

hash multi-core big-data
  • 7 个回答
  • 8429 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve