在 athena 中选择和计算数组键

Question

我有很多行数据代表我的数据库中的事件。每行都有一个包含键和值数组的“有效负载”列。我可以通过使用轻松解析一个值

Select
payload.keyname
from Database

但我正在尝试获取给定日期出现的所有键的列表和计数。

|                   payload                               |    
|{id=a, gameid=x, gametype=1, sponserid=null}             |
|{id=b, gameid=y, gametype=2, action=jump, sponserid=null}|
|{id=c, gameid=z, action=jump, sponserid=null}            |

期望的输出

|    Key  |Count|
|id       |  3  |
|game     |  3  |
|gametype |  2  |
|action   |  2  |
|sponserid|  2  |

是否有一些方法可以轻松地查询数组中的键？比如

Select
payload.*, count(*)
from Database
group by payload.*

Answer 1

您可以使用map_keys 函数从payload 中提取密钥并在其上取消嵌套。

select key, count(1) as count
from database.table, unnest(map_keys(payload)) as X(key)
group by 1

Answer 2

您可以使用cross join unnest。 unnest 将“展开”地图并为每个地图条目返回一行，其中包含键、值列。如果要计算每个键的出现次数，可以按键分组。例如

select key, count(*)
from mydb cross join unnest(payload) A(key, value)
group by 1

请参阅the docs 了解更多信息。

----- 编辑----

如果您的列已经是行格式，您可以改为：

select payload.keyname, count(*)
from mydb cross join payload
group by 1