AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 157755
Accepted
Ruchit Rami
Ruchit Rami
Asked: 2016-12-11 03:39:31 +0800 CST2016-12-11 03:39:31 +0800 CST 2016-12-11 03:39:31 +0800 CST

MySQL 从站无法执行长时间运行的更新查询

  • 772

我正在运行 MySQL 的主从复制服务器。作为清理旧数据的一部分,我运行了一个删除查询,该查询从数据库中删除了大量记录。它在主服务器上运行良好,但在从服务器上,它给了我以下错误:

从 SQL 线程徒劳地重试了事务 10 次,放弃了。考虑提高 slave_transaction_retries 变量的值。

从服务器机器不如主服务器机器强大。我怎样才能克服这个?

该查询是单行删除查询。我正在运行 MySQL 5.6。

mysql replication
  • 2 2 个回答
  • 5461 Views

2 个回答

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2016-12-11T08:00:16+08:002016-12-11T08:00:16+08:00

    您需要停止复制,使 Slave 具有与 Master 相同的规格,然后开始复制。

    确保从站没有传入连接。否则,这将使 Slave 上的 SQL 线程与SELECT对您正在运行的同一个表运行查询的传入连接竞争DELETE。

    如果您无法重新路由传入的连接,则必须DELETE在本地重新运行 Slave 上的 in 块(一次可能 5000 行)。

    作为最后的手段,重建奴隶(在扩大奴隶的硬件和配置之后)。

    • 3
  2. Rick James
    2017-01-04T12:03:39+08:002017-01-04T12:03:39+08:00

    有多个问题;我将尝试涵盖其中的大部分内容。

    直到最近,复制还是单线程的。(即使是现在,它在多线程方面也有限制。)所以,Master 很容易并行地做很多事情,但是一旦发送到 Slave 并串行运行,Slave 就会落后。如果 Slave 的硬件比 Master 慢,情况会更糟。

    根据您的配置,可以使用 SBR 或 RBR 运行删除一百万行的单行删除。细节明显不同:

    SBR(Statement Based Replication):Master 完成删除后,快速复制语句。复制(假设为单线程)挂起,直到从站可以删除所有百万行。这需要时间。所有后续的复制命令都将坐等;奴隶“落后”。

    RBR(Row Based Replication):Master 完成删除后,通过网络将一百万条单行记录泵送到 Slave。这增加了开销。但是由于流的简单性,从属可以(可能)更快地执行删除。尽管如此,复制将被捆绑一段不平凡的时间,在此期间,从站将“落后”。

    再多的硬件也无法阻止“落后”。

    同时,任何SELECTs击中该表的 Slave 都会受到一定程度的影响,反之亦然。也就是说,SELECTs可能会减慢删除速度。

    大删除是一个常见问题。 我的博客描述了几种解决方案。它包括有关如何进行 Rolando 建议的“分块”的详细信息。

    如果您“分块”并使每个块成为自己的事务,那么对主服务器和从服务器的影响都较小。缺点是崩溃可能会使表中的一些块被删除,有些则不会。(重新运行分块删除可能既简单又安全。)

    我假设删除的大小(因此,时间长度)会导致错误消息。

    请注意,我的博客中的建议之一是……如果要删除表的“大部分”,请复制要保留的行,然后重命名以交换表。快很多等等。

    • 1

相关问题

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • PostgreSQL 9.0 Replication 和 Slony-I 有什么区别?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目

    • 12 个回答
  • Marko Smith

    如何让sqlplus的输出出现在一行中?

    • 3 个回答
  • Marko Smith

    选择具有最大日期或最晚日期的日期

    • 3 个回答
  • Marko Smith

    如何列出 PostgreSQL 中的所有模式?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Jin 连接到 PostgreSQL 服务器:致命:主机没有 pg_hba.conf 条目 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane 如何列出 PostgreSQL 中的所有模式? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve