AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 6038
Accepted
Rick James
Rick James
Asked: 2011-09-22 12:38:31 +0800 CST2011-09-22 12:38:31 +0800 CST 2011-09-22 12:38:31 +0800 CST

极端存储野兽

  • 772

介绍 我从我之前的问题单驱动器与多驱动器中得出这个问题

在从一位非常有帮助的成员RolandoMySQLDBA那里得到非常详细的答案并了解到多驱动器在某些情况下可以提供很大帮助的事实之后。我开始为我的设置研究多驱动器,这与我发现的相比只是一点点。

更多信息 我发现了相当大的存储空间,比如

http://www.newegg.com/Product/Product.aspx?Item=N82E16811152212

虽然有些视频显示了此类设备的写入速度甚至达到 GB

  • http://www.youtube.com/watch?v=Xjgw2ENYF6w
  • http://www.youtube.com/watch?v=PniGlSI900k
  • http://www.youtube.com/watch?v=I8ToJ4Blw74

真正的问题 如果有足够的 RAM 来保存索引,MySQL 或其他开源 RDBMS(不是像 Oracle 这样的企业级 RDBMS,因为它在 SAN 上运行很常见)可以轻松地在这些野兽上运行吗?

因为它们包含真正的多驱动器设置,并且有数十个磁头可用。

我相信它不会那么简单,因为如果它那么简单,那么为什么大多数企业设置都使用商用服务器。那么,使用这些极端存储解决方案会面临哪些问题呢?

mysql storage
  • 1 1 个回答
  • 179 Views

1 个回答

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2011-09-22T13:28:10+08:002011-09-22T13:28:10+08:00

    所要做的就是运行这些查询:

    MyISAM

    SELECT CONCAT(ROUND(KBS/POWER(1024,
    IF(PowerOf1024<0,0,IF(PowerOf1024>3,0,PowerOf1024)))+0.4999),
    SUBSTR(' KMG',IF(PowerOf1024<0,0,
    IF(PowerOf1024>3,0,PowerOf1024))+1,1))
    recommended_key_buffer_size FROM
    (SELECT LEAST(POWER(2,32),KBS1) KBS
    FROM (SELECT SUM(index_length) KBS1
    FROM information_schema.tables
    WHERE engine='MyISAM' AND
    table_schema NOT IN ('information_schema','mysql')) AA ) A,
    (SELECT 2 PowerOf1024) B;
    

    InnoDB

    SELECT CONCAT(ROUND(KBS/POWER(1024,
    IF(PowerOf1024<0,0,IF(PowerOf1024>3,0,PowerOf1024)))+0.49999),
    SUBSTR(' KMG',IF(PowerOf1024<0,0,
    IF(PowerOf1024>3,0,PowerOf1024))+1,1)) recommended_innodb_buffer_pool_size
    FROM (SELECT SUM(data_length+index_length) KBS FROM information_schema.tables
    WHERE engine='InnoDB') A,
    (SELECT 2 PowerOf1024) B;
    

    这些将为现有 MyISAM 的 MyISAM 密钥缓存和 InnoDB 数据和索引的 InnoDB 缓冲池推荐正确的大小。

    在运行这些 SQL 查询建议缓冲区大小时,人为因素仍然必须发挥作用。我们必须根据硬件和经常访问的数据来规划数据使用。我们还必须问:在建议的缓冲区数量中,我的工作集有多少实际驻留在内存中?

    如果将 MySQL 配置为将 75% 的 RAM 用于 InnoDB,即使在专用的 MySQL 服务器上,操作系统也会忙于分页到磁盘。仅仅因为 MySQL 可以使用大量的缓冲区大小并不意味着可以突破限制。两个有两个基本的存储引擎需要考虑。

    商品硬件的使用仅仅展示了 MySQL 的可配置性并具有显着的结果。除非你正在使用 32 位 RHEL(如果你是,请立即停止使用它,喝点咖啡,去升级),提高存储野兽的缓冲区大小是值得信赖的。

    例如,我的雇主有一个客户端,其中有 3 个数据库服务器专用于 MySQL。每个都有 192GB 的 RAM,其中 162GB 是 InnoDB 缓冲池。工作集实际上是 170GB。虽然进行了一些交换和分页,但数据库性能令人震惊。操作系统本身有大约 30GB 的 RAM(16GB 的 RAM 磁盘用于临时表)。我敢肯定,与那里的科莫多龙大小的数据库服务器相比,这些服务器只是小蜥蜴。如果配置得当,MySQL 可以胜任这项任务。

    请记住,InnoDB 有自己的制衡机制,因为当前源代码将 InnoDB 日志文件限制为 4GB。之所以如此,是因为 InnoDB 最初是为商用硬件设计的。鉴于此,无论存储野兽的硬件设置和您选择运行的 MySQL 版本如何,ACID 事务吞吐量都可能成为瓶颈。

    结论

    可以对 Big Beefy DB 服务器施加限制。您应该始终在内存、交换空间、工作数据集和预期事务数方面考虑操作系统。

    • 5

相关问题

  • 是否有任何 MySQL 基准测试工具?[关闭]

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    您如何显示在 Oracle 数据库上执行的 SQL?

    • 2 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    我可以查看在 SQL Server 数据库上运行的历史查询吗?

    • 6 个回答
  • Marko Smith

    如何在 PostgreSQL 中使用 currval() 来获取最后插入的 id?

    • 10 个回答
  • Marko Smith

    如何在 Mac OS X 上运行 psql?

    • 11 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Marko Smith

    将数组参数传递给存储过程

    • 12 个回答
  • Martin Hope
    Manuel Leduc PostgreSQL 多列唯一约束和 NULL 值 2011-12-28 01:10:21 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Stuart Blackler 什么时候应该将主键声明为非聚集的? 2011-11-11 13:31:59 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    BrunoLM Guid vs INT - 哪个更好作为主键? 2011-01-05 23:46:34 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST
  • Martin Hope
    Patrick 如何优化大型数据库的 mysqldump? 2011-01-04 13:13:48 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve