Início / dba / Perguntas / 3071
Accepted
IAbstract
Asked: 2011-06-01 07:43:48 +0800 CST

Como você copia uma tabela de MySqlServer_A para MySqlServer_B?

  • 772

Eu tenho uma tarefa diária que coleta dados de 3 servidores MySql e, em seguida, envia esses dados agregados de volta para cada um dos servidores, excluindo os dados dos dias anteriores. Todos os servidores são MySql. Eu gostaria de colocar isso em um procedimento armazenado.

Eu tenho procurado uma maneira de conectar de um servidor MySql para outro, executar uma consulta, próximo servidor - enxaguar e repetir. Além de não encontrar nenhum exemplo de procedimento armazenado que se conecte a outro servidor MySql, minha impressão imediata é que isso não é realmente aceitável, nem intencional.

Posso selecionar um arquivo de saída que cria um CSV. Existe alguma maneira de forçar um documento Xml? Não quero ter que ler em uma tabela de dados apenas para obter Xml. Obviamente, Xml não funcionará com o método Bulkload, funcionará?

Quais são minhas opções realistas? Uma preocupação sobre a seleção em um arquivo de saída é o uso de caracteres estranhos: ' , \ \\ & @ `` / //etc... como esses caracteres afetarão o processo de carregamento em massa?

mysql stored-procedures

2 respostas

  1. Best Answer

    Costumo evitar o mecanismo de armazenamento FEDERATED por três (3) razões:

    1. Suporta apenas MyISAM
    2. O DDL executado na tabela de origem requer a alteração manual do design da tabela FEDERATED em serviços externos.
    3. Operações em massa contra uma tabela FEDERATED podem se tornar um pesadelo instantâneo !!!

    O que fazer ???

    Uma possibilidade é usar mysqldump e mesclá-los

    EXEMPLO
    Assumindo que todas as tabelas têm estruturas idênticas
    Assumindo que todas as tabelas não estão usando IDs auto_increment
    Assumindo que todas as tabelas são InnoDB

    No servidor que combinará as três tabelas, crie quatro (4) bancos de dados de importação (operação única):

    CREATE DATABASE ImportDB1;
CREATE DATABASE ImportDB2;
CREATE DATABASE ImportDB3;
CREATE DATABASE ImportCombined;

    O processo de importação é mais ou menos assim

    mysqldump as três (3) tabelas

    mysqldump -hHOSTIP1 -Pportnumber1 -u... -p... dbname tbname > /root/ImportTable1.sql &
mysqldump -hHOSTIP2 -Pportnumber2 -u... -p... dbname tbname > /root/ImportTable2.sql &
mysqldump -hHOSTIP3 -Pportnumber3 -u... -p... dbname tbname > /root/ImportTable3.sql &
wait

    Carregue os mysqldumps nos bancos de dados de importação separados em paralelo:

    mysql -hHOSTIP4 -u... -p... -A -DImportDB1 < /root/ImportTable1.sql &
mysql -hHOSTIP4 -u... -p... -A -DImportDB2 < /root/ImportTable2.sql &
mysql -hHOSTIP4 -u... -p... -A -DImportDB3 < /root/ImportTable3.sql &
wait
rm -f /root/ImportTable1.sql &
rm -f /root/ImportTable2.sql &
rm -f /root/ImportTable3.sql &
wait

    Em seguida, combine os dados.

    DROP TABLE IF EXISTS ImportCombined.tbname;
CREATE TABLE ImportCombined.tbname LIKE ImportDB1.tbname;
ALTER TABLE ImportCombined.tbname DISABLE KEYS;
INSERT INTO ImportCombined.tbname SELECT * FROM ImportDB1.tbname;
INSERT INTO ImportCombined.tbname SELECT * FROM ImportDB2.tbname;
INSERT INTO ImportCombined.tbname SELECT * FROM ImportDB3.tbname;
ALTER TABLE ImportCombined.tbname ENABLE KEYS;
ALTER TABLE ImportCombined.tbname ENABLE KEYS;

    Agora, execute a tarefa que você já possui na tabela ImportCombined.tbname.

    "Você preenche estas etapas"

    Então, quando a tabela estiver pronta para ser exportada, mysqldump e copie 2 vezes:

    mysqldump -hHOSTIP4 -Pportnumber4 -u... -p... ImportCombined tbname > /root/ExportTable1.sql
cp /root/ExportTable1.sql /root/ExportTable2.sql &
cp /root/ExportTable1.sql /root/ExportTable3.sql &
mysql -hHOSTIP1 -Pportnumber1 -u... -p... -A -Ddbname < /root/ExportTable1.sql &
mysql -hHOSTIP2 -Pportnumber2 -u... -p... -A -Ddbname < /root/ExportTable2.sql &
mysql -hHOSTIP3 -Pportnumber3 -u... -p... -A -Ddbname < /root/ExportTable3.sql &
wait
rm -f /root/ExportTable[123].sql &

    Como mostrado a partir dessas etapas, essas coisas devem ser shell script e talvez crontab'd.

    Aqui está outra manobra: Se as tabelas são MyISAM, você pode copiar as tabelas MyISAM (arquivos .frm, .MYD e .MYI para cada tabela) em outras pastas (bancos de dados aos olhos do mysqld) em vez de fazer mysqldumps e executar operações semelhantes às mencionadas anteriormente. Certifique-se de que nenhuma gravação nas tabelas ocorra durante a cópia.

    • 1

  2. Você já pensou em usar uma ferramenta ETL como http://www.pentaho.com/ para isso?

    Parece ideal..

    • 1

relate perguntas