避免在 SQL Server 中的 INSERT INTO SELECT 查询中重复

Question

我有以下两张表：

Table1
----------
ID   Name
1    A
2    B
3    C

Table2
----------
ID   Name
1    Z

我需要将数据从Table1 插入到Table2。我可以使用以下语法：

INSERT INTO Table2(Id, Name) SELECT Id, Name FROM Table1

但是，在我的情况下，Table2 中可能存在重复的 ID（在我的情况下，它只是“1”），我不想再次复制它，因为这会引发错误。

我可以这样写：

IF NOT EXISTS(SELECT 1 FROM Table2 WHERE Id=1)
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1 
ELSE
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1 WHERE Table1.Id<>1

在不使用IF - ELSE 的情况下，有没有更好的方法来做到这一点？我想避免基于某些条件的两个INSERT INTO-SELECT 语句。

Answer 1

使用NOT EXISTS：

INSERT INTO TABLE_2
  (id, name)
SELECT t1.id,
       t1.name
  FROM TABLE_1 t1
 WHERE NOT EXISTS(SELECT id
                    FROM TABLE_2 t2
                   WHERE t2.id = t1.id)

使用NOT IN：

INSERT INTO TABLE_2
  (id, name)
SELECT t1.id,
       t1.name
  FROM TABLE_1 t1
 WHERE t1.id NOT IN (SELECT id
                       FROM TABLE_2)

使用LEFT JOIN/IS NULL：

INSERT INTO TABLE_2
  (id, name)
   SELECT t1.id,
          t1.name
     FROM TABLE_1 t1
LEFT JOIN TABLE_2 t2 ON t2.id = t1.id
    WHERE t2.id IS NULL

在三个选项中，LEFT JOIN/IS NULL 的效率较低。见this link for more details。

Answer 2

在 MySQL 中你可以这样做：

INSERT IGNORE INTO Table2(Id, Name) SELECT Id, Name FROM Table1

SQL Server 有类似的吗？

Answer 3

我刚遇到类似的问题，DISTINCT 关键字很神奇：

INSERT INTO Table2(Id, Name) SELECT DISTINCT Id, Name FROM Table1

Answer 4

我最近也遇到了同样的问题...
继承人在 MS SQL Server 2017 中对我有用...
主键应设置在表 2 中的 ID 上...
两个表之间的列和列属性当然应该相同。这将在您第一次运行以下脚本时起作用。表1中重复的ID，不会插入...

如果你第二次运行它，你会得到一个

违反PRIMARY KEY约束错误

这是代码：

Insert into Table_2
Select distinct *
from Table_1
where table_1.ID >1

Answer 5

在唯一索引as suggested by IanC here 上使用ignore Duplicates 是我针对类似问题的解决方案，使用选项WITH IGNORE_DUP_KEY 创建索引

In backward compatible syntax
, WITH IGNORE_DUP_KEY is equivalent to WITH IGNORE_DUP_KEY = ON.

参考：index_option

Answer 6

从 SQL Server 中，您可以在表上为（需要唯一的列）设置一个唯一键索引

Answer 7

有点跑题了，但是如果你想将数据迁移到一个新的表中，并且可能的重复在原始表中，并且可能重复的列不是一个id，一个@ 987654321@会做：

INSERT INTO TABLE_2
(name)
  SELECT t1.name
  FROM TABLE_1 t1
  GROUP BY t1.name

Answer 8

在我的例子中，我在源表中有重复的 ID，所以没有一个提议有效。我不在乎性能，它只完成一次。 为了解决这个问题，我用光标逐一记录记录以忽略重复项。

下面是代码示例：

DECLARE @c1 AS VARCHAR(12);
DECLARE @c2 AS VARCHAR(250);
DECLARE @c3 AS VARCHAR(250);


DECLARE MY_cursor CURSOR STATIC FOR
Select
c1,
c2,
c3
from T2
where ....;

OPEN MY_cursor
FETCH NEXT FROM MY_cursor INTO @c1, @c2, @c3

WHILE @@FETCH_STATUS = 0
BEGIN
    if (select count(1) 
        from T1
        where a1 = @c1
        and a2 = @c2
        ) = 0 
            INSERT INTO T1
            values (@c1, @c2, @c3)

    FETCH NEXT FROM MY_cursor INTO @c1, @c2, @c3
END
CLOSE MY_cursor
DEALLOCATE MY_cursor

Answer 9

我使用 MERGE 查询来填充没有重复的表。 我遇到的问题是表中的双键（代码，值）， 并且存在查询非常慢 MERGE 执行得非常快（超过 X100）

examples for MERGE query

Answer 10

INSERT 之前的一个简单的DELETE 就足够了：

DELETE FROM Table2 WHERE Id = (SELECT Id FROM Table1)
INSERT INTO Table2 (Id, name) SELECT Id, name FROM Table1

根据您要保留的表的Id 和name 配对，将Table1 切换为Table2。