连接具有共同重复键的字段并删除那些重复的重复项

Question

这在上周一直困扰着我，凭借基本知识，我根本无法找到将我们带到需要的地方的解决方案。我搜索了更新、group_concat、concat、joins，但我无法得到我们需要的结果。

问题如下：

我们使用 2 个列来获得我们需要的一个结果：

我们正在开发的数据库：

+------------------------------------+-------------+  
| id                                 | value       |  
+------------------------------------+-------------+  
|  D44172cb5c086c19a4c0286270916bc52 | A           |  
|  D44172cb5c086c19a4c0286270916bc52 | C           |  
|  D44172cb5c086c19a4c0286270916bc52 | B           |  
|  D87d93570cbc9a3edc18601e0aff6e261 | D           |  
|  D87d93570cbc9a3edc18601e0aff6e261 | A           |
|  D87d93570cbc9a3edc18601e0aff6e261 | F           |
+------------------------------------+-------------+ 

我们期望得到的：

 +-------------------------------------+-------------+  
 | id                                  | value       |  
 +-------------------------------------+-------------+  
 |  D44172cb5c086c19a4c0286270916bc52  | A|C|B       |  
 |  D87d93570cbc9a3edc18601e0aff6e261  | D|A|F       |  
 +-------------------------------------+-------------+ 

我们目前正在使用一个 SELECT 命令，该命令有效，并且在名为 valuenew 的临时（因为我们只选择）列中按预期提供数据：

SELECT * GROUP_CONCAT(value SEPARATOR '|') AS valuenew FROM db.table GROUP BY id ;

在连接所需值后，我们如何进行（UPDATE 或 DELETE）查询以删除重复项？因为，使用GROUP_CONCAT 返回的行数将少于实际存在的行数。

我们需要在稍后阶段将连接的值与其他列组合，因此行需要等于返回的行。

解决方案

CREATE TABLE IF NOT EXISTS `temp` 
SELECT *, GROUP_CONCAT(`value` SEPARATOR '|') AS `values`
FROM `db`.`table` 
GROUP BY `id`;

TRUNCATE TABLE `db`.`table`;

UPDATE `temp` SET value = values;
ALTER TABLE `temp` DROP COLUMN values;

INSERT INTO `db`.`table`([all column titles here])
SELECT * 
FROM `db`.`temp`
;

DROP TABLE `db`.`temp`;

Answer 1

如果你真的必须这样做，这可能是最直接的方法。

CREATE TABLE `db`.`temp`
SELECT `id`, GROUP_CONCAT(`value` SEPARATOR '|') AS `value`
FROM `db`.`table` 
GROUP BY `id`;

TRUNCATE TABLE db.table;

INSERT INTO `db`.`table`(`id`, `value`)
SELECT `id`, `value` 
FROM `db`.`temp`
;

DROP TABLE `db`.`temp`

当然，如果还有其他字段，您必须适当考虑它们以防止数据丢失。 您也可以将temp 表设为真正的TEMPORARY 表，但如果您在截断和重新插入之间失去连接，您将丢失所有数据。

编辑：还要确保value 字段可以保存最长的 GROUP_CONCAT() 结果。

Answer 2

创建一个生成连接值的视图，而不是更新表。

CREATE VIEW yourtable_view
SELECT id, GROUP_CONCAT(value ORDER BY value SEPARATOR '|') AS values
FROM yourtable
GROUP BY id;

然后在需要使用非规范化值的查询中使用此视图。

如果你真的需要按照自己的方式来做，你的表需要在每个组中的另一列可以用来区分行，所以我们可以更新组中的第一行并删除剩余的行；如果您有 auto_increment 列，则可以使用它。我会在下面调用这个unique_id。

-- First add the concatenated values to the first row in each group
UPDATE yourTable AS t1
JOIN (SELECT id, MIN(unique_id) AS first_id, GROUP_CONCAT(value ORDER BY value SEPARATOR '|') AS newvalues
      FROM yourTable
      GROUP BY id
      HAVING COUNT(*) > 1) AS t2
ON t1.id = t2.id AND t1.unique_id = t2.first_id
SET t1.value = t2.values;

-- Then delete all the remaining rows in each group
DELETE t1.*
FROM yourTable AS t1
JOIN (SELECT id, MIN(unique_id) AS first_id
      FROM yourTable
      GROUP BY id
      HAVING COUNT(*) > 1) AS t2
ON t1.id = t2.id AND t1.unique_id > t2.first_id;

DEMO