Início / dba / Perguntas / 342369
Accepted
sanjihan
Asked: 2024-09-14 19:40:00 +0800 CST

Adicionar texto à saída do mysqldump no momento da criação do dump

  • 772

Estou sofrendo com lentidão no mysqldump/mariadb-dump.

Descobri que desabilitar autocommit, unique_checks and foreign_key_checksaumenta o desempenho da importação.

Eu faço isso adicionando dump.sqlantes

SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;

e anexando

COMMIT;SET unique_checks=1;SET foreign_key_checks=1;

até o fim disso.

Acrescentar é trivial, mas ao acrescentar preciso fazer um acordo entre tempo ou espaço consumido.

Prependendo com

sed -i '0,/^/s//SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;/' dump.sql

pode levar muito tempo para despejos grandes, mas cria um único arquivo.

cat <(echo "SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;") dump.sql <(echo "COMMIT;SET unique_checks=1;SET foreign_key_checks=1;") > new-dump.sql"

É rápido, mas cria outro arquivo de despejo e, portanto, usa muito espaço (mesmo que seja apenas temporário)

É possível instruir mysqldump/maridb-dumppara acrescentar e acrescentar um texto personalizado ao dump quando ele estiver sendo criado?

mysql

2 respostas

  1. Best Answer

    Usar echoantes e depois do mariadb-dumpcomando e então redirecionar a saída para um arquivo deve funcionar pelo menos com o bash:

    (echo "SET autocommit=0;SET unique_checks=0;SET foreign_key_checks=0;" && \
 mariadb-dump <options...> && \
 echo "COMMIT;SET unique_checks=1;SET foreign_key_checks=1;") > dump.sql

    Isso também funciona quando você canaliza a saída para um servidor remoto ou outro programa como gzip.

    • 3

  2. Prefiro usar um script bash para importação grande. É simples e muito útil, especialmente em réplicas quando você pode executar start slave/replicaapós a restauração ser concluída.

    Outros comandos podem ser adicionados, como net_buffer_lengthou max_allowed_packetetc.

    Ele exibe no terminal o horário em que a restauração começou e terminou.

    Script Bash

    #!/bin/sh

# store start date to a variable
imeron=`date`

echo "Import started: OK"
dumpfile="/root/asterisk.sql" ### File to be restored
#ddl="set names utf8; "
ddl="$ddl SET foreign_key_checks = 0; "
ddl="$ddl SET UNIQUE_CHECKS = 0; "
ddl="$ddl SET AUTOCOMMIT = 0; "
# if your dump file does not create a database, select one
ddl="$ddl USE asterisk; "
ddl="$ddl source $dumpfile; "
ddl="$ddl SET foreign_key_checks = 1; "
ddl="$ddl SET UNIQUE_CHECKS = 1; "
ddl="$ddl SET AUTOCOMMIT = 1; "
ddl="$ddl COMMIT ; "
echo "Import started: OK"

time sudo mysql -u root -p1234  asterisk -e "$ddl" ### Restore command , user, password , database 

# store end date to a variable
imeron2=`date`

echo "Start import:$imeron"
echo "End import:$imeron2"

    Editar A questão era sobre criar um dump de banco de dados, não carregar um em um banco de dados

    Eu ainda prefiro usar um script que seja mais eficaz, ele pode ser facilmente adaptado com base nas necessidades

    #!/bin/sh

# store start date to a variable
start_date=`date`

echo "Backup started: OK"

# Define variables
backupfile="/root/asterisk_backup.sql"  # Backup file location and name
database="asterisk"                     # Database to be backed up
user="cron"                             # MySQL username
password="1234"                         # MySQL password

# Disable foreign key checks and unique checks before the dump
mysql -u $user -p$password -e "SET foreign_key_checks = 0; SET UNIQUE_CHECKS = 0; SET AUTOCOMMIT = 0;" $database

# Create the backup using mysqldump
time mysqldump -u $user -p$password --comments --hex-blob -R -B --databases $database > $backupfile

# Check if the backup was successful
if [ $? -eq 0 ]; then
    echo "Backup completed successfully."

    # Enable foreign key checks , unique checks and autocommit after the backup has finished
    mysql -u $user -p$password -e "SET foreign_key_checks = 1; SET UNIQUE_CHECKS = 1; SET AUTOCOMMIT = 1;" $database
else
    echo "Backup failed."

    # Enable foreign key checks , unique checks and autocommit if the backup fails
    mysql -u $user -p$password -e "SET foreign_key_checks = 1; SET UNIQUE_CHECKS = 1; SET AUTOCOMMIT = 1;" $database
fi

# store end date to a variable
end_date=`date`

echo "Start backup: $start_date"
echo "End backup: $end_date"

    Ele exibirá algo como

    astdbtemplate:~ # bash backupMySQL.sh
Backup started: OK

real    0m2.766s
user    0m0.131s
sys     0m0.086s
Backup completed successfully.
Start backup: Mon Sep 16 09:44:38 CEST 2024
End backup: Mon Sep 16 09:44:41 CEST 2024
    • 0

relate perguntas