AWS ATHENA 将列转置为行

Question

我有一个 csv 文件上传到一个 S3 存储桶，我使用 AWS Glue 获取该存储桶，然后使用 Athena 进行查询。 CSV 表格式如下：

Item	Country	Category	2017	2018	2019	2020
Item1	CA	Network	128	129	130	129
Item2	CA	Desktop	128	129	130	129
Item3	CA	Apps	128	129	130	129

我想将该格式转换为：

Item	Country	Category	Year	Value
Item1	CA	Network	2017	128
Item1	CA	Network	2018	129
Item1	CA	Network	2019	130
Item1	CA	Network	2020	129
Item2	CA	Desktop	2017	128
Item2	CA	Desktop	2018	129
Item2	CA	Desktop	2019	130
Item2	CA	Desktop	2020	129
Item3	CA	Apps	2017	128
Item3	CA	Apps	2018	129
Item3	CA	Apps	2019	130
Item3	CA	Apps	2020	129

如何在 Athena 中使用 SQL 来实现这一点？

我试过了，但它对我不起作用： Simple way to transpose columns and rows in SQL?

感谢任何帮助。谢谢！

Answer 1

Union all 在这里提供了一个选项：

SELECT Item, Country, Category, 2017 AS Year, "2017" AS Value FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2018, "2018" FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2019, "2019" FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2020, "2020" FROM yourTable
ORDER BY Item, Country, Category, Year, Value;

这种方法不具有动态年数列的稳健性。但是话又说回来，无论如何你都不应该使用那个设计，因为它没有标准化。因此，希望您可以使用上面的查询，或者它的一个轻微变体，让您的数据在预期输出中出现规范化。

Answer 2

您可以通过创建一个数组然后取消嵌套数组来进行一次扫描：

select t.item, t.country, t.category, r.year, r.value
from t cross join
     unnest( array[ cast(row(2017, t."2017") as row(year int, value int)),
                    cast(row(2018, t."2018") as row(year int, value int)),
                    cast(row(2019, t."2019") as row(year int, value int)),
                    cast(row(2020, t."2020") as row(year int, value int))
                  ]
           ) u(r);

如果您的表确实是视图或复杂查询，则性能提升可能非常显着。