Início / dba / Perguntas / 21146
Accepted
quanta
Asked: 2012-07-20 03:48:26 +0800 CST

MySQL: InnoDB continua travando - como recuperar?

  • 772
# free -m
             total       used       free     shared    buffers     cached
Mem:         48289      35288      13000          0        347      30399
-/+ buffers/cache:       4541      43747
Swap:         8189         51       8137

O MySQL não pode iniciar com os erros abaixo em /var/log/mysqld.log: http://fpaste.org/4VMB/

Só pode ser iniciado ao adicionar innodb_force_recovery = 1a my.cnf, mas recebo outro erro ao iniciar o servidor: http://fpaste.org/6azJ/

Este servidor costumava ser o mestre, mas consegui promover um escravo como o novo mestre. No momento, estou tentando configurar esse mestre com falha como um novo escravo, mas não consigo iniciá-lo.

O que eu deveria fazer agora?

ATUALIZAÇÃO Qui 19 de julho 23:50:17 ICT 2012:

Foi iniciado com sucesso com innodb_force_recovery=2, mas o MySQL desaparece ao fazer um DROP TABLE:

mysql> drop table reportingdb.bigdata_banner_scheduler;
ERROR 2013 (HY000): Lost connection to MySQL server during query

Aqui estão os logs: http://fpaste.org/M82a

ATUALIZAÇÃO Sex 20 de julho 08:02:57 ICT 2012:

Estou tentando reconstruir a replicação usando o Percona Xtrabackup . Na primeira vez, recebo esse bug ao copiar com innobackupex. Obrigado a @DTest que sugere aumentar innodb_log_file_sizepara 1 GB e está tudo bem.

Observe que: você deve copiar innodb_*as configurações do mestre para o escravo e executar innobackupex --apply-log /path/to/datadirno escravo se não quiser obter os erros abaixo:

120720  6:18:50  InnoDB: Error: page 3670052 log sequence number 8078993744933
InnoDB: is in the future! Current system log sequence number 8078561559052.
InnoDB: Your database may be corrupt or you may have copied the InnoDB
InnoDB: tablespace but not the InnoDB log files. See
InnoDB: http://dev.mysql.com/doc/refman/5.5/en/forcing-innodb-recovery.html
InnoDB: for more information.
InnoDB: Error: trying to access page number 2175909760 in space 0,
InnoDB: space name ./ibdata1,
InnoDB: which is outside the tablespace bounds.
InnoDB: Byte offset 0, len 16384, i/o type 10.
InnoDB: If you get this error at mysqld startup, please check that
InnoDB: your my.cnf matches the ibdata files that you have in the
InnoDB: MySQL server.
120720  6:18:50  InnoDB: Assertion failure in thread 47633462918272 in file fil0fil.c line 4434
InnoDB: We intentionally generate a memory trap.
InnoDB: Submit a detailed bug report to http://bugs.mysql.com.
InnoDB: If you get repeated assertion failures or crashes, even
InnoDB: immediately after the mysqld startup, there may be
InnoDB: corruption in the InnoDB tablespace. Please refer to
InnoDB: http://dev.mysql.com/doc/refman/5.5/en/forcing-innodb-recovery.html
InnoDB: about forcing recovery.
23:18:50 UTC - mysqld got signal 6 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed, 
something is definitely wrong and this may fail.

Mas o jogo NÃO acabou: o escravo continua travando depois de alguns minutos:

120720  7:58:28 [Warning] Slave SQL: Could not execute Write_rows event on table reportingdb.ox_banners; Duplicate entry '14
5928' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql-bin.000999, end
_log_pos 337836040, Error_code: 1062
120720  7:58:28 [Warning] Slave SQL: Could not execute Write_rows event on table reportingdb.selfserving_img_signatures; Dup
licate entry '145928' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql
-bin.000999, end_log_pos 337843612, Error_code: 1062
120720  7:58:28 [Warning] Slave SQL: Could not execute Write_rows event on table reportingdb.selfserving_email_log; Duplicat
e entry '173213' for key 'PRIMARY', Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the event's master log mysql-bin.
000999, end_log_pos 337844062, Error_code: 1062
00:58:29 UTC - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help
diagnose the problem, but since we have already crashed, 
something is definitely wrong and this may fail.

key_buffer_size=1048576
read_buffer_size=1048576
max_used_connections=4
max_threads=2000
thread_count=2
connection_count=2
It is possible that mysqld could use up to 
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_threads = 4119820 K  bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

Thread pointer: 0x11cc5f20
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
stack_bottom = 40c73a78 thread_stack 0x40000
/usr/libexec/mysqld(my_print_stacktrace+0x2e)[0x7af52e]
/usr/libexec/mysqld(handle_fatal_signal+0x3e2)[0x67c242]
/lib64/libpthread.so.0[0x3fed00ebe0]
/usr/libexec/mysqld(_ZN13st_select_lex17mark_as_dependentEPS_+0x4d)[0x568a3d]
/usr/libexec/mysqld[0x68cc02]
/usr/libexec/mysqld(_ZN10Item_field15fix_outer_fieldEP3THDPP5FieldPP4Item+0x670)[0x690c90]
/usr/libexec/mysqld(_ZN10Item_field10fix_fieldsEP3THDPP4Item+0x351)[0x691361]
/usr/libexec/mysqld(_ZN9Item_func10fix_fieldsEP3THDPP4Item+0x1d3)[0x6cb433]
/usr/libexec/mysqld(_Z11setup_condsP3THDP10TABLE_LISTS2_PP4Item+0x1a5)[0x53aae5]
/usr/libexec/mysqld(_Z20mysql_prepare_updateP3THDP10TABLE_LISTPP4ItemjP8st_order+0x118)[0x5df3e8]
/usr/libexec/mysqld(_Z12mysql_updateP3THDP10TABLE_LISTR4ListI4ItemES6_PS4_jP8st_ordery15enum_duplicatesbPySB_+0x2b4)[0x5e0134]
/usr/libexec/mysqld(_Z21mysql_execute_commandP3THD+0x239b)[0x575c5b]
/usr/libexec/mysqld(_Z11mysql_parseP3THDPcjP12Parser_state+0x10a)[0x57994a]
/usr/libexec/mysqld(_ZN15Query_log_event14do_apply_eventEPK14Relay_log_infoPKcj+0xc57)[0x734757]
/usr/libexec/mysqld(_Z26apply_event_and_update_posP9Log_eventP3THDP14Relay_log_info+0x16e)[0x516fce]
/usr/libexec/mysqld[0x51e631]
/usr/libexec/mysqld(handle_slave_sql+0xc46)[0x51f946]
/lib64/libpthread.so.0[0x3fed00677d]
/lib64/libc.so.6(clone+0x6d)[0x3fec8d325d]

Trying to get some variables.
Some pointers may be invalid and cause the dump to abort.
Query (128380d7): UPDATE `ox_banners` A
        SET A.locationAd=@locCP 
        WHERE A.zoneId = NAME_CONST('_zoneid',2452)
Connection ID (thread ID): 2061
Status: NOT_KILLED

slave-skip-errors = 1062parece não funcionar.

Vou tirar um instantâneo do Mestre usando mysqldump, espero que resolva o problema de travamento.

mysql replication

1 respostas

  1. Best Answer

    Em uma discussão de bate-papo, o primeiro erro é porque o arquivo ./reportingdb/bigdata_banner_scheduler.ibdestá ausente. Apenas copiar este arquivo do mestre não funcionará, no entanto. Você precisará soltar a tabela no escravo e, em seguida, despejar a tabela do mestre.

    Mas esse erro de assert é uma questão diferente. Você pode iniciar no modo force_recovery 1, mas algo está matando o mysqldprocesso e não parece ser memória (configuração incorreta).

    Como você está tentando configurar isso como um escravo do mestre recém-promovido, eu realmente limparia os dados, reinstalaria o MySQL e começaria com uma nova cópia do mestre.

    Se, por qualquer motivo, você quiser tentar fazê-lo funcionar sem despejar todo o master (não recomendado), minhas etapas seriam as seguintes:

    • Coloque skip-slave-starto my.cnf para desabilitar o slave de iniciar automaticamente
    • Retirar innodb-force-recoverydo my.cnf
    • Copie todos os arquivos do datadirpara um local separado em seu servidor escravo
    • Reinstale o mysql (as etapas para isso dependem do seu sistema operacional)
    • Copie os diretórios mysqle da instalação antiga de volta para a instalação recém-instalada .performance_schemadatadir
    • Inicie o servidor mysql para garantir que o servidor seja iniciado normalmente e sem problemas.
    • Em caso afirmativo, pare o servidor novamente e continue estas etapas
    • Coloque innodb-force-recoveryem 1 no my.cnf
    • Copie todos os outros arquivos do seu backup de volta para odatadir
    • Inicie o servidor. Isso deve colocá-lo em um estado em que você pode encontrar a tabela DROPausente ../reportingdb/bigdata_banner_scheduler.ibd
    • DROP TABLE reportingdb.bigdata_banner_scheduler
    • Pare o servidor
    • Remova o innodb-force-recoveryde my.cnf
    • Inicie o servidor.

    Neste ponto, se tudo correr bem, você deve ter um servidor 'slave' funcionando sem a reportingdb.bigdata_banner_schedulertabela, e o slave ainda deve estar desabilitado (sem ler o log binário do master).

    As etapas que eu faria para colocar a mesa de volta no escravo são:

    • Do mestre, faça um dump da estrutura e dos dados da tabela:mysqldump -u.. -p reportingdb bigdata_banner_scheduler > reportingBigData.sql
    • Copie o dump para o escravo
    • Importe o dump de volta para o slave:mysql -u... -p reportingdb < reportingBigData.sql
    • Em seguida, inicie o escravo para que ele comece a recuperar os eventos binlog ausentes
    • 5

relate perguntas