AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 220274
Accepted
IGGt
IGGt
Asked: 2018-10-17 08:07:19 +0800 CST2018-10-17 08:07:19 +0800 CST 2018-10-17 08:07:19 +0800 CST

Replicação do MySQL muito mais lenta no MySQL 5.7 em comparação com o MySQL 5.5

  • 772

Eu tenho dois bancos de dados configurados para teste (portanto, não há dados ou conexões ao vivo).

O primeiro é um banco de dados MySQL 5.5.57atuando como mestre. O segundo é um banco de dados MySQL 5.7.23atuando como escravo. Ele está sendo executado Statement Based Replicationno MySQL 5.5 e Row Based Replicationno MySQL 5.7.

Por alguma razão, consultas maiores parecem levar muito mais tempo no MySQL 5.7. Por exemplo, tenho a seguinte tabela:

CREATE TABLE `test1` (
  `col0` int(11) DEFAULT NULL,
  `col1` int(11) DEFAULT NULL,
  `col2` datetime DEFAULT NULL,
  `col3 datetime DEFAULT NULL,
  `col4` int(11) DEFAULT NULL,
  `col5` int(11) DEFAULT NULL,
  `col6` int(11) DEFAULT NULL,
  `col7` int(4) DEFAULT NULL,
  `col8` int(11) DEFAULT NULL,
  `col9` datetime DEFAULT NULL,
  `col10` datetime DEFAULT NULL,
  `UniqRef` int(10) unsigned NOT NULL AUTO_INCREMENT,
  `col11` tinyint(1) unsigned NOT NULL DEFAULT '0',
  `col12` tinyint(1) unsigned zerofill DEFAULT NULL,
  `col13` tinyint(1) unsigned DEFAULT NULL,
  PRIMARY KEY (`UniqRef`),
  KEY `col0` (`col0`),
  KEY `col3` (`col3`),
  KEY `col4` (`col4`),
  KEY `col8` (`col8`),
  KEY `col5` (`col5`),
  KEY `col10` (`Deleted`),
  KEY `col2` (`col2`),
  KEY `col12` (`col12`) USING BTREE,
  KEY `col13` (`col13`)
) ENGINE=InnoDB AUTO_INCREMENT=400046649 DEFAULT CHARSET=latin1;

A tabela tem 21 GB de tamanho e contém 83261829 linhas (usando count(*)).

Se eu executar a consulta: UPDATE test.test1 SET col9 = NOW() WHERE UniqRef IN ('397958600','397940686','397940704','397940678','397. . . . .

A consulta contém 6945 entradas uniqref. Ele é executado quase instantaneamente no MySQL 5.5, mas depois é replicado no MySQL 5.7 e leva 90 segundos para ser executado.

Alterei várias configurações, mas até agora não fizeram diferença:

SET @@global.slave_compressed_protocol = 0;

SET @@global.sync_binlog = 0;

set @@global.range_optimizer_max_mem_size = 0;

Também tentei alterar read_io_threadse write_io_threadspara vários valores, além de alterar o número de buffer pool instancese desabilitar os logs binários.

Existem outras variáveis ​​que podem fazer a diferença para tentar acelerar isso que eu perdi?

ATUALIZAÇÃO 2018-10-17

Consegui acelerar as consultas quando executadas localmente (diretamente no MySQL 5.7) configurando SET @@global.range_optimizer_max_mem_size = 16777216;. Após isso, as consultas passaram de 90+ segundos para 0 segundos.

No entanto, quando a mesma consulta foi executada no MySQL 5.5 e replicada no MySQL 5.7, ela ainda leva mais de 90 segundos para ser executada.

mysql mysql-5.5
  • 1 1 respostas
  • 322 Views

1 respostas

  • Voted
  1. Best Answer
    IGGt
    2018-10-18T05:26:15+08:002018-10-18T05:26:15+08:00

    Parece que encontrei a solução. Simplificando, configurei o MySQL 5.5 para também usar a Replicação baseada em ROW, usando o seguinte processo:

    SELECT @@GLOBAL.binlog_format;
    STOP SLAVE;
    FLUSH TABLES WITH READ LOCK;
    FLUSH LOGS;
    SET GLOBAL binlog_format = 'row';
    SET SESSION binlog_format = 'row';
    FLUSH LOGS;
    UNLOCK TABLES;  
    START SLAVE;
    SELECT @@GLOBAL.binlog_format;
    

    Depois disso, executei a consulta grande no MySQL 5.5 (executou instantaneamente) e, quando replicou para o MySQL 5.7, também foi executada instantaneamente.

    Portanto, parece haver algum problema com as consultas de replicação baseadas em instruções de processamento do MySQL 5.7 de um servidor MySQL 5.5.

    . . . Mas a trama se complica. Embora o banco de dados MySQL 5.5 alegasse estar usando a replicação baseada em ROW:

    SELECT @@GLOBAL.binlog_format;=ROW

    e o fato de que isso parece ter ajudado na replicação para o MySQL 5.7, quando peguei os logs binários mais recentes (uma hora depois ou cerca de 10 logs binários depois) e corri mysqlbinlogcontra eles, fiquei surpreso ao ver que eles ainda estavam preenchidos com STATEMENTs. Foi somente após uma reinicialização completa do banco de dados que os logs binários começaram a produzir o novo ROWformato baseado! ! !

    • 0

relate perguntas

  • Existem ferramentas de benchmarking do MySQL? [fechado]

  • Onde posso encontrar o log lento do mysql?

  • Como posso otimizar um mysqldump de um banco de dados grande?

  • Quando é o momento certo para usar o MariaDB em vez do MySQL e por quê?

  • Como um grupo pode rastrear alterações no esquema do banco de dados?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve