Início / dba / Perguntas / 1326
Accepted
servermanfail
Asked: 2011-02-19 10:07:56 +0800 CST

Por que a importação de um arquivo .sql de 12 GB leva mais de 36 horas?

  • 772

Estou esperando há 36 horas para que um arquivo .sql de 12 GB seja importado com um type site.sql | mysqlcomando simples. Eu posso ver ibdata1que ainda está crescendo, atualmente quase 40 GB.

Considerando que os gatilhos e os procedimentos armazenados estão no final do .sql, acho que o MySQL deveria adicionar dados e índices de chave.

O site.sql foi gerado usando este comando de outro servidor:

mysqldump -R -e --databases site --add-drop-database --add-create-database --add-drop-table -C --single-transaction --triggers

O que está demorando tanto?

mysql mysql-5

3 respostas

  1. Best Answer

    Tente isto:

    $ ps -ef|grep [m]ysql

    Identifique o id do processo então

    $ strace -cp <pid>

    Deixe 10 segundos ou um minuto então ^C. Isso lhe dirá onde o processo está gastando seu tempo, por exemplo, pode estar apenas esperando pelo disco se você o vir reade writedominar.

    • 24

  2. Você tem alguma tabela InnoDB com uma chave primária

    1. contendo várias colunas?
    2. tendo um amplo VARCHAR?
    3. e muitos índices não exclusivos?
    4. um ou mais índices não exclusivos que tenham uma chave ampla?

    Qualquer uma dessas condições provavelmente pode fazer com que grandes nós BTREE em seus índices tenham muito poucas folhas em cada nó BTREE. A chave de cluster na chave primária também é anexada a cada entrada de chave não exclusiva em chaves não clusterizadas.

    Outra consideração: a soma das páginas de dados do InnoDB é significativamente menor do que as páginas de índice do InnoDB?

    Você pode descobrir isso com esta consulta (em MB):

    SELECT SUM(data_length)/POWER(1024,2) InnoDBData,
SUM(index_length)/POWER(1024,2) InnoDBIndexes
FROM information_schema.tables WHERE engine='InnoDB';

    Consideração adicional: você tem log binário ativado no servidor de banco de dados que está carregando? Se estiver, faça isso no servidor que está carregando:

    mysql -h... -u... -p... -A -e"SET sql_log_bin=0; source site.sql"

    Eu espero que isso ajude !!!

    • 8

  3. Tem certeza de que as tabelas em que você está lendo não possuem gatilhos, índices e restrições? Em qual hardware e sistema operacional você está executando? Como está configurado o seu armazenamento?

    Estou mais familiarizado com o oracle, mas a importação de 12G em tabelas sem gatilhos, índices e restrições deve ir facilmente com 200 GB/h. Um único gatilho pode transformar o processo em um caracol, dependendo do que esse gatilho faz...

    Eu espero que isso ajude

    • 6

relate perguntas