AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 150962
Accepted
dr_
dr_
Asked: 2016-09-29 22:14:59 +0800 CST2016-09-29 22:14:59 +0800 CST 2016-09-29 22:14:59 +0800 CST

MySQL 设置对加速 mysqldump 导入很有用

  • 772

最近我不得不将一个 7 Gb MySQL 转储文件导入 MySQL 5.6 服务器。在具有 1 Gb RAM 的单核 CPU 上导入大约需要 7 个小时。

其他人在具有以下设置的 MySQL 服务器上测试了导入:

innodb_buffer_pool_size = 8G
query_cache_size = 300M

我对这些设置的相关性有点怀疑(是的,我什至认为设置这么大的查询缓存是不好的)。那会有什么不同吗?这些设置不是仅在查询数据库时使用,因此与导入无关吗?

如果是,应该设置哪些设置来加快大型转储文件的导入?

根据官方文档,这些值应该临时设置:

unique_checks = 0
foreign_key_checks = 0

我在这里读到它也应该设置

innodb_flush_log_at_trx_commit = 2

但我认为这不会有帮助,因为自动提交模式(每次插入都将日志刷新到磁盘)在 mysqldump 命令(--opt选项)中已经默认禁用。

mysql innodb
  • 1 1 个回答
  • 17823 Views

1 个回答

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2016-09-30T13:56:57+08:002016-09-30T13:56:57+08:00

    建议 #1

    无需运行unique_checks = 0和foreign_key_checks = 0. 请参阅我 3 年前的文章Speeding up mysqldump / reload(ASPECT #2 显示了 mysqldump 的标准标头。第 13 行和第 14 行为您处理禁用这些检查)

    建议 #2

    请注意 InnoDB 架构(图片来自 Percona CTO Vadim Tkachenko)

    InnoDB 管道

    如果你想重新加载一个 MySQL 实例,你应该暂时禁用双写缓冲区。

    步骤1

    登录到目标服务器并运行

    SET GLOBAL innodb_fast_shutdown = 0;
    

    第2步

    通过将innodb_doublewrite 设置为 OFF来重新启动 mysqld

    service mysql restart --innodb-doublewrite=OFF --innodb-fast-shutdown=0
    

    第 3 步

    将 mysqldump 加载到目标服务器

    第4步

    正常重启mysqld(将再次启用双写缓冲区)

    service mysql restart
    

    由于名称“双写缓冲区”意味着两次写入,因此 InnoDB 只会将数据和索引直接写入表文件,并绕过写入ibdata1. 也许这会使导入时间加倍(双关语)

    建议#3

    默认的innodb_log_buffer_size 是 8M。您需要更大的日志缓冲区。

    请将此行添加到[mysqld]组标题下的 my.cnf

    [mysqld]
    innodb_log_buffer_size = 128M
    

    然后,在重新加载 mysqldump 之前重新启动 mysqld。

    试试看 !!!

    • 9

相关问题

  • 是否有任何 MySQL 基准测试工具?[关闭]

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve