避免 SQL Server 中 INSERT INTO SELECT 查询中的重复

Question

我有以下两个表：

Table1
----------
ID   Name
1    A
2    B
3    C

Table2
----------
ID   Name
1    Z

我需要将数据从 Table1 插入到 Table2。我可以使用以下语法：

INSERT INTO Table2(Id, Name) SELECT Id, Name FROM Table1

但是，就我而言，Table2 中可能存在重复的 ID（在我的情况下，它只是“1”），我不希望再次复制它，因为这会引发错误。

我可以写这样的东西：

IF NOT EXISTS(SELECT 1 FROM Table2 WHERE Id=1)
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1 
ELSE
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1 WHERE Table1.Id<>1

有没有更好的方法来做到这一点而不使用 IF - ELSE？我想避免基于某些条件的两个 INSERT INTO-SELECT 语句。

Answer 1

使用NOT EXISTS：

INSERT INTO TABLE_2
  (id, name)
SELECT t1.id,
       t1.name
  FROM TABLE_1 t1
 WHERE NOT EXISTS(SELECT id
                    FROM TABLE_2 t2
                   WHERE t2.id = t1.id)

使用NOT IN：

INSERT INTO TABLE_2
  (id, name)
SELECT t1.id,
       t1.name
  FROM TABLE_1 t1
 WHERE t1.id NOT IN (SELECT id
                       FROM TABLE_2)

使用LEFT JOIN/IS NULL：

INSERT INTO TABLE_2
  (id, name)
   SELECT t1.id,
          t1.name
     FROM TABLE_1 t1
LEFT JOIN TABLE_2 t2 ON t2.id = t1.id
    WHERE t2.id IS NULL

在三个选项中，LEFT JOIN/IS NULL效率较低。请参阅此链接了解更多详细信息。

Answer 2

在 MySQL 中你可以这样做：

INSERT IGNORE INTO Table2(Id, Name) SELECT Id, Name FROM Table1

SQL Server 有类似的东西吗？

Answer 3

我刚刚遇到了类似的问题，DISTINCT 关键字很神奇：

INSERT INTO Table2(Id, Name) SELECT DISTINCT Id, Name FROM Table1

Answer 4

在唯一索引上使用ignore Duplicates 正如 IanC 这里所建议的是我针对类似问题的解决方案，使用选项WITH IGNORE_DUP_KEY创建索引

In backward compatible syntax
, WITH IGNORE_DUP_KEY is equivalent to WITH IGNORE_DUP_KEY = ON.

参考：index_option

Answer 5

我最近遇到了同样的问题......
这是在 MS SQL Server 2017 中对我有用的东西......
主键应设置在表 2 中的 ID 上...
当然，两个表之间的列和列属性应该相同。这将在您第一次运行以下脚本时起作用。表1中重复的ID，不会插入...

如果你第二次运行它，你会得到一个

违反主键约束错误

这是代码：

Insert into Table_2
Select distinct *
from Table_1
where table_1.ID >1

Answer 6

在 SQL Server 中，您可以在表上为（需要唯一的列）

唯一键索引"nofollow noreferrer">

Answer 7

有点偏离主题，但是如果你想将数据迁移到新表，并且可能的重复项在原始表中，并且可能重复的列不是 id，而是GROUP BY 会做：

INSERT INTO TABLE_2
(name)
  SELECT t1.name
  FROM TABLE_1 t1
  GROUP BY t1.name

Answer 8

就我而言，源表中有重复的 ID，因此所有建议都不起作用。我不关心性能，只完成一次。
为了解决这个问题，我用光标逐一获取记录以忽略重复项。

这是代码示例：

DECLARE @c1 AS VARCHAR(12);
DECLARE @c2 AS VARCHAR(250);
DECLARE @c3 AS VARCHAR(250);


DECLARE MY_cursor CURSOR STATIC FOR
Select
c1,
c2,
c3
from T2
where ....;

OPEN MY_cursor
FETCH NEXT FROM MY_cursor INTO @c1, @c2, @c3

WHILE @@FETCH_STATUS = 0
BEGIN
    if (select count(1) 
        from T1
        where a1 = @c1
        and a2 = @c2
        ) = 0 
            INSERT INTO T1
            values (@c1, @c2, @c3)

    FETCH NEXT FROM MY_cursor INTO @c1, @c2, @c3
END
CLOSE MY_cursor
DEALLOCATE MY_cursor

Answer 9

我使用 MERGE 查询来填充表而不重复。
我遇到的问题是表中的双键（代码，值），
并且存在查询非常慢
MERGE 执行速度非常快（超过 X100）

MERGE 示例查询

Answer 10

对于一张表来说，从多个字段创建一个唯一索引时它可以完美地工作。如果 7 个字段（在本例中）全部具有相同的值，则简单的“INSERT IGNORE”将忽略重复项。

在PMA结构视图中选择字段并单击唯一，将创建新的组合索引。

Answer 11

在 INSERT 之前执行一个简单的 DELETE 就足够了：

DELETE FROM Table2 WHERE Id = (SELECT Id FROM Table1)
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1

根据哪个表的 Id< 将 Table1 切换为 Table2 /code> 和 name 您想要保留的配对。