AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 15587
Accepted
Turgut
Turgut
Asked: 2012-03-27 09:07:55 +0800 CST2012-03-27 09:07:55 +0800 CST 2012-03-27 09:07:55 +0800 CST

Verificar vários registros duplicados

  • 772

Eu tenho dados que devo inserir na tabela. Mas antes de inserir, preciso verificar os registros duplicados e relatar a lista desses registros.

Mesa:

CREATE TABLE `test` (
  `A` varchar(19) NOT NULL,
  `B` varchar(9) NOT NULL,
  KEY `A` (`A`),
  KEY `B` (`B`)
) ENGINE=InnoDB;

Preciso verificar as duas colunas:

Número de registros a inserir: ~1000

Linhas na tabela: ~1.000.000

Qual é a maneira eficiente de fazer isso.

Desde já, obrigado.

mysql duplication
  • 1 1 respostas
  • 467 Views

1 respostas

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2012-03-27T10:16:22+08:002012-03-27T10:16:22+08:00

    Isso dependeria do layout da tabela.

    Suponha que você tenha a seguinte tabela

    CREATE TABLE `mydata` ( 
        `A` varchar(19) NOT NULL, 
        `B` varchar(9) NOT NULL, 
        KEY `A` (`A`), 
        KEY `B` (`B`) 
    ) ENGINE=InnoDB; 
    

    Antes de inserir 1.000 linhas em mydata, você pode pré-carregá-las em outra tabela chamada mynewdata assim:

    CREATE TABLE mynewdata LIKE mydata;
    CREATE TABLE mynewdups LIKE mydata;
    INSERT INTO mynewdata ... ;
    INSERT INTO mynewdups SELECT * FROM mynewdata;
    

    Em seguida, exclua todas as linhas em mynewdata que correspondam a A ou B em mydata

    DELETE T1.* FROM mynewdata T1 INNER JOIN mydata T2 ON T1.A=T2.A OR T1.B=T2.B;
    

    O que resta em mydata são linhas que não têm correspondência A ou B

    E as linhas correspondentes? Rode isto

    DELETE T1.* FROM mynewdups T1 LEFT JOIN mydata T2
    ON T1.A=T2.A OR T1.B=T2.B
    WHERE T2.A IS NOT NULL;
    

    O que resta em mynewdata são dados para importar

    O que resta em mynewdups são os dados que tinham uma chave dup em mydata

    De uma chance !!!

    • 1

relate perguntas

  • Existem ferramentas de benchmarking do MySQL? [fechado]

  • Onde posso encontrar o log lento do mysql?

  • Como posso otimizar um mysqldump de um banco de dados grande?

  • Quando é o momento certo para usar o MariaDB em vez do MySQL e por quê?

  • Como um grupo pode rastrear alterações no esquema do banco de dados?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Como ver a lista de bancos de dados no Oracle?

    • 8 respostas
  • Marko Smith

    Quão grande deve ser o mysql innodb_buffer_pool_size?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    restaurar a tabela do arquivo .frm e .ibd?

    • 10 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Como selecionar a primeira linha de cada grupo?

    • 6 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    pedrosanta Listar os privilégios do banco de dados usando o psql 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    bernd_k Quando devo usar uma restrição exclusiva em vez de um índice exclusivo? 2011-01-05 02:32:27 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve