AWS ATHENA 将列转置为行

Question

我有一个 csv 文件上传到一个 S3 存储桶，我使用 AWS Glue 获取该存储桶，然后使用 Athena 进行查询。 CSV 表格式如下：

物品	国家	类别	2017	2018	2019	2020
项目1	加州	网络	128	129	130	129
项目2	加州	桌面	128	129	130	129
第 3 项	加州	应用	128	129	130	129

我想将该格式转换为：

物品	国家	类别	年	价值
项目1	加州	网络	2017	128
项目1	加州	网络	2018	129
项目1	加州	网络	2019	130
项目1	加州	网络	2020	129
项目2	加州	桌面	2017	128
项目2	加州	桌面	2018	129
项目2	加州	桌面	2019	130
项目2	加州	桌面	2020	129
第 3 项	加州	应用	2017	128
第 3 项	加州	应用	2018	129
第 3 项	加州	应用	2019	130
第 3 项	加州	应用	2020	129

如何在 Athena 中使用 SQL 来实现这一点？

我试过了，但对我不起作用： Simple way to transpose columns and rows in SQL?

任何帮助表示赞赏。 谢谢！

Answer 1

Union all 在这里提供了一种选择：

SELECT Item, Country, Category, 2017 AS Year, "2017" AS Value FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2018, "2018" FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2019, "2019" FROM yourTable
UNION ALL
SELECT Item, Country, Category, 2020, "2020" FROM yourTable
ORDER BY Item, Country, Category, Year, Value;

这种方法对于具有动态数量的年份列并不稳健。 但是话又说回来，无论如何你都不应该使用那个设计，因为它没有标准化。 所以，希望你可以使用上面的查询，或者它的一个小变种，让你的数据标准化，因为它出现在预期的 output 中。

Answer 2

您可以通过创建一个数组然后取消嵌套数组来进行一次扫描：

select t.item, t.country, t.category, r.year, r.value
from t cross join
     unnest( array[ cast(row(2017, t."2017") as row(year int, value int)),
                    cast(row(2018, t."2018") as row(year int, value int)),
                    cast(row(2019, t."2019") as row(year int, value int)),
                    cast(row(2020, t."2020") as row(year int, value int))
                  ]
           ) u(r);

如果您的表确实是一个视图或复杂查询，则性能提升可能非常显着。