在 Bigquery 中有效地取消嵌套值？ （选择/案例/其他？）

Question

我目前正在 BigQuery 中处理 Google 分析数据。目前，我必须在命中级别解压缩很多自定义维度。到目前为止，我遇到了两种方法：

  SELECT 
  (CASE WHEN hitcd.index=1 AND hitcd.value is not null THEN hitcd.value ELSE NULL END) as case_example,
  (SELECT x.value FROM UNNEST(h.customDimensions) x WHERE x.index =1) as select_example
  FROM 
  `dataset.ga_sessions_20200401` as t,
  UNNEST(customDimensions) as sess_cd,
  UNNEST(t.hits) as h,
  UNNEST(h.customDimensions) as hitcd

这两个看起来……都不够优雅。理想情况下，我会尝试从数组中选择特定的索引/值并返回一个扁平的数据结构，以便更便于报告。

有没有更好更有效的方法来实现这一点？目标是生成一个查询，以平整过去 2 年的数百万条记录。

Answer 1

首先：要非常小心！

当您执行以下操作时：

 `dataset.ga_sessions_20200401` as t,
  UNNEST(customDimensions) as sess_cd,
  UNNEST(t.hits) as h,
  UNNEST(h.customDimensions) as hitcd

您正在产生爆炸性数量的记录。假设在一行中 customDimensions 有 10 个元素，t.hits 有 20 个，h.customDimensions 有 5 个。那么您将从一个行中创建 1000 行！

这可能不是您想要的 - 数据被嵌套以防止这种情况发生。

在展平之前，您需要决定：您希望展平数据的外观如何？