基于连接拆分表的 SQL 语句答案

【问题标题】：SQL statement to split a table based on a join基于连接拆分表的 SQL 语句
【发布时间】：2010-03-20 18:02:57
【问题描述】：

我有一个文章主表，它通过连接表 Info 链接到只有少量条目的表 Tags。我想拆分 Articles 表，方法是删除行或创建一个仅包含我想要的条目的新表，基于缺少指向某个标签的链接。有几百万篇文章。我该怎么做？

并不是所有的文章都有任何标签，有些文章有很多标签。

例子：

table Articles
  primary_key id
table Info
  foreign_key article_id
  foreign_key tag_id
table Tags
  primary_key id

对我来说，一开始就可以很容易地分离出匹配的文章，所以我想也许我可以这样做，然后使用 NOT IN 语句，但运行速度太慢了，不清楚它是否会结束。我用这些命令做到了：

INSERT INTO matched_articles SELECT * FROM articles a LEFT JOIN info i ON a.id = i.article_id WHERE i.tag_id = 5;
INSERT INTO unmatched_articles SELECT * FROM articles a WHERE a.id NOT IN (SELECT m.id FROM matched_articles m);

如果有什么不同，我在 Postgres 上。

【问题讨论】：

标签： sql postgresql join sql-insert sql-delete

【解决方案1】：

INSERT INTO matched_articles 
SELECT * FROM articles a LEFT JOIN info i ON a.id = i.article_id WHERE i.tag_id = 5; 

INSERT INTO unmatched_articles 
SELECT * FROM articles a WHERE a.id NOT IN (SELECT m.id FROM matched_articles m);

这里有很多错误，我不知道从哪里开始。好的，在您的第一次插入中，您不需要左连接，实际上您实际上没有左连接。应该是

INSERT INTO matched_articles 
SELECT * FROM articles a INNER JOIN info i ON a.id = i.article_id WHERE i.tag_id = 5;

如果你需要一个左连接，你会拥有

INSERT INTO matched_articles 
SELECT * FROM articles a LEFT JOIN info i ON a.id = i.article_id AND i.tag_id = 5;

当您将左连接右侧的某些内容放入 where 子句（而不是搜索空值）时，您会将其转换为内连接，因为它必须满足该条件，因此不满足该条件的记录右表中的匹配项被排除。

现在第二个语句可以用左连接的特殊情况来完成，尽管你所拥有的会起作用。

INSERT INTO matched_articles 
SELECT * FROM articles a 
LEFT JOIN info i ON a.id = i.article_id AND i.tag_id = 5
WHERE i.tag_id is null

这将为您提供 info 表中的所有记录，但与 article 表匹配的记录除外。

接下来，您不应该在未指定要插入的字段的情况下编写插入语句。您也不应该使用 select * 编写选择语句，尤其是在您有联接的情况下。这通常是草率、懒惰的编码，应该修复。如果有人更改了其中一张表的结构但未更改另一张表的结构怎么办？这种事情不利于维护，并且在带有连接的 select 语句的情况下，它会返回一个列两次（连接列），这是对服务器和网络资源的浪费。懒得指定你需要什么并且只指定你需要什么只是糟糕的编码。所以要改掉这个习惯，不要再为任何生产代码这样做了。

如果您当前的状态太慢，您也可以使用正确的索引来修复它。 id 字段是否在两个表上都有索引？另一方面，如果有数百万篇文章，插入它们需要时间。通常最好一次分批进行 50000 个（如果这需要太长时间，则更少）。只需在循环中插入选择前 XXX 条记录，然后循环直到受影响的行数为零。

【讨论】：

非常感谢您的帮助。我真的才刚刚开始使用数据库，您的反馈非常有帮助。您的匹配插入语句效果很好，在几秒钟内完成了我以前的方法已经运行了几个小时的工作。

【解决方案2】：

您的查询看起来没问题，除了第一个应该是内连接，而不是左连接。如果您想尝试其他方法，请考虑以下几点：

INSERT INTO matched_articles 
SELECT * 
FROM articles a 
INNER JOIN info i ON a.id = i.article_id 
WHERE i.tag_id = 5;

INSERT INTO unmatched_articles 
SELECT * 
FROM articles a 
LEFT JOIN info i ON a.id = i.article_id AND a.id <> 5
WHERE a.id IS NULL

这可能会更快，但实际上，如果您只需执行一次，您所拥有的可能就可以了。

【讨论】：

【解决方案3】：

不确定，Postgres 是否有临时表的概念。
这也是如何做到的。

CREATE Table #temp
AS SELECT A.ID, COUNT(i.*) AS Total
FROM Articles A
LEFT JOIN info i
ON A.id = i.Article_ID AND i.Tag_ID = 5
GROUP BY A.ID

INSERT INTO Matched_Articles
SELECT A.*
FROM Articles A INNER JOIN #temp t
ON A.ID = t.Article_ID AND T.Total = 0

DELETE FROM #Temp
WHERE Total = 0

INSERT INTO UnMatched_Articles
SELECT A.*
FROM Articles AINNER JOIN #temp t
ON A.ID = t.Article_ID

请注意，我没有使用任何编辑器来尝试此操作。
我希望这能给你提示我将如何处理这个问题。

【讨论】：