主页 / dba / 问题 / 45665
Accepted
CodeMonkey
Asked: 2013-07-04 08:35:33 +0800 CST

什么 max_allowed_pa​​cket 足够大，为什么我需要改变它？

  • 772

我在主从设置中有 MySQL (5.5) 并创建了另一个从服务器。

我停止了原来的奴隶，转储数据，复制并重新导入，它工作正常。我记下了原始从站的 master_log 位置，并使用这些命令将其设置在新从站上

CHANGE MASTER TO MASTER_HOST='<ipaddress>', 
MASTER_USER='<username>', MASTER_PASSWORD='<password>', 
MASTER_PORT=3306, MASTER_LOG_FILE='mysql-bin.000851', 
MASTER_LOG_POS=15824150, 
MASTER_CONNECT_RETRY=10;

当我开始新的奴隶时，我得到了

Last_IO_Error：从二进制日志中读取数据时，从 master 收到致命错误 1236：'日志事件条目超出 max_allowed_pa​​cket；增加 master 上的 max_allowed_pa​​cket'

但是，当我启动原始从属设备时，它赶上了就好了，现在已经同步了。

所以问题：

  • 当前值为16M，我怎么知道要走多大？（我宁愿避免在生产服务器上反复试验）。

  • 当原来的奴隶应付得很好时，为什么我需要增加主人的价值，问题真的出在新奴隶身上吗？

更新

我将 max_allowed_pa​​cket 增加到 1073741824，正如 Rolando 在 master、old slave 和 new slave 上建议的那样，然后重新启动它们（SET GLOBAL max_allowed_packet = 1073741824;由于某种原因似乎没有接受）

现在最后一个 IO 错误和以前一样，但现在我明白了

Last_SQL_Error：中继日志读取失败：无法解析中继日志事件条目。可能的原因是：主服务器的二进制日志已损坏（您可以通过在二进制日志上运行“mysqlbinlog”来检查），从服务器的中继日志已损坏（您可以通过在中继日志上运行“mysqlbinlog”来检查），a网络问题，或者主从的 MySQL 代码中的错误。如果你想检查主服务器的二进制日志或从服务器的中继日志，你可以通过在这个从服务器上发出“SHOW SLAVE STATUS”来知道它们的名字。

如果我在主文件上执行 mysqlbinlog，它会很高兴地滚动过去很长时间 - 该文件是 722M - 如果我对从属中继日志执行此操作，我会得到

错误：Log_event::read_log_event() 中的错误：“完整性检查失败”，data_len：38916267，event_type：69

错误：无法读取偏移量 253 处的条目：日志格式错误或读取错误。

我检查了变量并且更改有效

mysql> 显示变量 LIKE '%max_allowed_pa​​cket%';

在新的奴隶上显示max_allowed_packetANDslave_max_allowed_packet在哪里只有在主人身上max_allowed_packet

所以我对master进行了版本检查：

mysql> show variables LIKE '%version%';
+-------------------------+--------------------------------------+
| Variable_name           | Value                                |
+-------------------------+--------------------------------------+
| innodb_version          | 1.1.6                                |
| protocol_version        | 10                                   |
| slave_type_conversions  |                                      |
| version                 | 5.5.11-log                           |
| version_comment         | MySQL Community Server (GPL) by Remi |
| version_compile_machine | x86_64                               |
| version_compile_os      | Linux                                |
+-------------------------+--------------------------------------+

和新的奴隶

mysql> show variables LIKE '%version%';
+-------------------------+--------------------------------------+
| Variable_name           | Value                                |
+-------------------------+--------------------------------------+
| innodb_version          | 5.5.32                               |
| protocol_version        | 10                                   |
| slave_type_conversions  |                                      |
| version                 | 5.5.32-log                           |
| version_comment         | MySQL Community Server (GPL) by Remi |
| version_compile_machine | x86_64                               |
| version_compile_os      | Linux                                |
+-------------------------+--------------------------------------+

这两个版本相差太远了吗？

mysql replication

3 个回答

  1. 充max_allowed_packet到1G就可以了。每当构造一个 MySQL Packet 时，它不会从一开始就跳到 1G。为什么？

    首先你需要知道什么是 MySQL Packet。本书第 99 页

    了解 MySQL 内部结构

    在第 1-3 段中解释如下：

    MySQL 网络通信代码是在查询总是相当短的假设下编写的，因此可以以一个块的形式发送到服务器并由服务器处理，在 MySQL 术语中称为数据包。服务器为临时缓冲区分配内存来存储数据包，并请求足够的内存以完全容纳它。这种架构需要采取预防措施来避免服务器内存不足——这个选项可以实现数据包大小的上限。

    与此选项相关的代码可在 sql/net_serv.cc中找到。查看my_net_read()，然后按照对my_real_read()的调用并特别注意 net_realloc()。

    此变量还限制了许多字符串函数的结果的长度。有关详细信息，请参阅sql/field.cc和 sql/intem_strfunc.cc。

    将其与 MySQL 文档进行比较max_allowed_packet：

    一个数据包或任何生成/中间字符串的最大大小，或 mysql_stmt_send_long_data() C API 函数发送的任何参数。MySQL 5.6.6 的默认值为 4MB，之前为 1MB。

    数据包消息缓冲区初始化为 net_buffer_length 字节，但在需要时可以增长到 max_allowed_pa​​cket 字节。默认情况下，此值很小，以捕获较大的（可能不正确的）数据包。

    如果您使用大型 BLOB 列或长字符串，则必须增加此值。它应该与您要使用的最大 BLOB 一样大。max_allowed_pa​​cket 的协议限制为 1GB。该值应为 1024 的倍数；非倍数向下舍入到最接近的倍数。

    当您通过更改 max_allowed_pa​​cket 变量的值来更改消息缓冲区大小时，如果您的客户端程序允许，您还应该在客户端更改缓冲区大小。在客户端，max_allowed_pa​​cket 默认为 1GB。某些程序（例如 mysql 和 mysqldump）使您能够通过在命令行或选项文件中设置 max_allowed_pa​​cket 来更改客户端值。

    鉴于此信息，您应该很高兴 MySQL 将根据需要扩展和收缩 MySQL 数据包。因此，继续前进

    Master 和 Slave 在传输数据，尤其是 BLOB 数据方面应该匹配。

    更新 2013-07-04 07:03 EDT

    从您关于中继日志的消息来看，您似乎有以下内容

    • 损坏的中继日志
    • 一个好的主日志

    建议

    SHOW SLAVE STATUS\G
STOP SLAVE;
CHANGE MASTER TO
MASTER_LOG_FILE='(Relay_Master_Log_File from SHOW SLAVE STATUS\G)',
MASTER_LOG_POS=(Exec_Master_Log_Pos from SHOW SLAVE STATUS\G);
START SLAVE;

    运行CHANGE MASTER TO会清除所有中继日志并从新日志开始。您将从在 Slave 上执行的 Last Master BinLog 事件 (BinLog,Position) 进行复制。

    试试看 ！！！

    • 24
  2. Best Answer

    相当尴尬的是，问题是日志文件名不正确，导致奇怪的结果，使用正确的文件名重新导入，一切都很好，令人羞愧

    • 13

  3. 如果您在 master 上看到 binlog，则表明 binlog 位置是错误的。有时错误并非看起来那样。不要更改最大数据包值。我们需要在这里做一些工作。因此，我的建议是，您可能需要重置从属复制坐标。在 master 上使用 mysqlbinlog 来识别事务开始的位置，并查找相邻事务。如下所述重置。

    STOP SLAVE;
RESET SLAVE;
CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000851', MASTER_LOG_POS=15824150, MASTER_HOST='master-server', MASTER_USER='master-user', MASTER_PASSWORD='master-password';

    您可以在这篇mysql 故障排除文章中找到有关具体操作的更多详细信息。希望这会有所帮助。

    • 1

相关问题