AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / dba / 问题 / 15587
Accepted
Turgut
Turgut
Asked: 2012-03-27 09:07:55 +0800 CST2012-03-27 09:07:55 +0800 CST 2012-03-27 09:07:55 +0800 CST

检查多个重复记录

  • 772

我有应该插入表中的数据。但在插入之前,我需要检查重复记录和这些记录的报告列表。

桌子:

CREATE TABLE `test` (
  `A` varchar(19) NOT NULL,
  `B` varchar(9) NOT NULL,
  KEY `A` (`A`),
  KEY `B` (`B`)
) ENGINE=InnoDB;

我需要检查两列:

要插入的记录数:~1000

表中的行:~1.000.000

这样做的有效方法是什么。

提前致谢。

mysql duplication
  • 1 1 个回答
  • 467 Views

1 个回答

  • Voted
  1. Best Answer
    RolandoMySQLDBA
    2012-03-27T10:16:22+08:002012-03-27T10:16:22+08:00

    这将取决于表格的布局。

    假设你有下表

    CREATE TABLE `mydata` ( 
        `A` varchar(19) NOT NULL, 
        `B` varchar(9) NOT NULL, 
        KEY `A` (`A`), 
        KEY `B` (`B`) 
    ) ENGINE=InnoDB; 
    

    在将 1000 行插入 mydata 之前,您可以将它们预加载到另一个名为 mynewdata 的表中,如下所示:

    CREATE TABLE mynewdata LIKE mydata;
    CREATE TABLE mynewdups LIKE mydata;
    INSERT INTO mynewdata ... ;
    INSERT INTO mynewdups SELECT * FROM mynewdata;
    

    接下来删除 mynewdata 中与 mydata 中的 A 或 B 匹配的所有行

    DELETE T1.* FROM mynewdata T1 INNER JOIN mydata T2 ON T1.A=T2.A OR T1.B=T2.B;
    

    mydata 中剩下的是没有 A 或 B 匹配的行

    匹配的行呢?运行这个

    DELETE T1.* FROM mynewdups T1 LEFT JOIN mydata T2
    ON T1.A=T2.A OR T1.B=T2.B
    WHERE T2.A IS NOT NULL;
    

    mynewdata 中剩下的是要导入的数据

    mynewdups 中剩下的是在 mydata 中有 dup 键的数据

    试试看 !!!

    • 1

相关问题

  • 是否有任何 MySQL 基准测试工具?[关闭]

  • 我在哪里可以找到mysql慢日志?

  • 如何优化大型数据库的 mysqldump?

  • 什么时候是使用 MariaDB 而不是 MySQL 的合适时机,为什么?

  • 组如何跟踪数据库架构更改?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    如何查看 Oracle 中的数据库列表?

    • 8 个回答
  • Marko Smith

    mysql innodb_buffer_pool_size 应该有多大?

    • 4 个回答
  • Marko Smith

    列出指定表的所有列

    • 5 个回答
  • Marko Smith

    从 .frm 和 .ibd 文件恢复表?

    • 10 个回答
  • Marko Smith

    如何在不修改我自己的 tnsnames.ora 的情况下使用 sqlplus 连接到位于另一台主机上的 Oracle 数据库

    • 4 个回答
  • Marko Smith

    你如何mysqldump特定的表?

    • 4 个回答
  • Marko Smith

    如何选择每组的第一行?

    • 6 个回答
  • Marko Smith

    使用 psql 列出数据库权限

    • 10 个回答
  • Marko Smith

    如何从 PostgreSQL 中的选择查询中将值插入表中?

    • 4 个回答
  • Marko Smith

    如何使用 psql 列出所有数据库和表?

    • 7 个回答
  • Martin Hope
    Mike Walsh 为什么事务日志不断增长或空间不足? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland 列出指定表的所有列 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney MySQL 能否合理地对数十亿行执行查询? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx 如何监控大型 .sql 文件的导入进度? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison 你如何mysqldump特定的表? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    pedrosanta 使用 psql 列出数据库权限 2011-08-04 11:01:21 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 对 SQL 查询进行计时? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas 如何从 PostgreSQL 中的选择查询中将值插入表中? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas 如何使用 psql 列出所有数据库和表? 2011-02-18 00:45:49 +0800 CST
  • Martin Hope
    bernd_k 什么时候应该使用唯一约束而不是唯一索引? 2011-01-05 02:32:27 +0800 CST

热门标签

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve