如何对重复的mysql数据进行非规范化？

Question

您好，我需要对包含重复数据的 MySQL 表进行一些非规范化处理。

我的“出版物”表目前是这种格式：

Publications Source Table   

|  title                   |       author
--------------------------------------------
|  my paper                |       michael
|  my paper                |       bill
|  my paper                |       jill
|  other paper             |       tom
|  other paper             |       amy
|  third paper             |       ben
|  third paper             |       sophie

我需要把它改成这种格式：

Publications Destination Table

|  title                   |    author   |  author2   |  author 3
|-----------------------------------------------------------------
|  my paper                |    michael  |  bill      |  jill
|  other paper             |    tom      |  amy       |
|  third paper             |    ben      |  sophie    |

现在，为了您的信息，我需要这样做，以便最终获得 CSV 文件，以便可以将数据从旧系统导出到需要这种格式的 CSV 文件的新系统。

表中还有许多其他字段，源表中有大约 60,000 行，但只有大约 15,000 个唯一标题。在源表中，每个作者有一行。在目的地中，title 将是一个唯一标识符。每个唯一的出版物标题我需要一行。此外，我还可以提前计算出任何一份出版物上最多的作者数量，如果这会使问题变得更容易的话。

如何在 MySQL 中做到这一点？谢谢

Answer 1

如果您实际上并不想改变表的结构，而只是想取出数据以便将其导入新系统，您可以尝试 mysql 中的 GROUP_CONCAT() 函数：

SELECT title, GROUP_CONCAT(author SEPARATOR "|") AS authors FROM publications GROUP BY title;

我使用竖线作为分隔符，因为您的标题很可能包含逗号。如果您希望它最终成为 csv 文件，您可以对管道字符执行查找和替换，以将其转换为所需的任何内容（例如，", "）。

Answer 2

我的建议是您实际上对表格进行规范化，而不是为补充作者添加新列。所以你的新表结构看起来像这样：

Publications Source Table   

|  title_id         |       title
--------------------------------------------
|  1                |       my paper
|  2                |       other paper
|  3                |       third paper


|  title_id      |       author
--------------------------------------------
|  1             |       michael
|  1             |       bill
|  1             |       jill
|  2             |       tom
|  2             |       amy
|  3             |       ben
|  3             |       sophie