【问题标题】:Bucketizing record counts by the hour of this day only and showing hours in axis even without record仅按当天的小时对记录计数进行分桶,即使没有记录也可以在轴上显示小时数
【发布时间】:2019-12-31 02:34:34
【问题描述】:

我从 Google 数据洞察入手。因此,对于来自 BigQuery(原始数据源是 Firebase)的每条记录,我都有 event_date(YYYYMMDD)和 event_timestamp(Unix 纪元,以微秒为单位)列。我创建了一个时间序列/条形图(我都尝试了),将 x 轴显示为当天的小时(我在 event_date 上过滤),y 轴显示为记录数。

我这样做的方法是使用 Data Studio 函数 HOUR(event_timestamp) 创建一个计算字段,然后显示为 HH。这里的问题是某些小时我们没有任何相应的记录,x 轴没有条目。我想要的是即使没有特定时间的记录,它仍然会显示。所以基本上,x 轴的数字看起来像这样:

00, 01, 02, ..., 22, 23

附带问题:我注意到时间序列图表从最近到最旧排序。如何反转排序?

【问题讨论】:

    标签: google-bigquery google-data-studio


    【解决方案1】:

    我可以想到几种方法来做到这一点,基本上依赖于具有所有可能维度值 (0-23h) 的 OUTER JOIN。

    为了解决问题,我将使用 BigQuery 公共数据集:bigquery-public-data.london_bicycles.cycle_hire 其中start_date 是一个包含每次骑行开始时间的TIMESTAMP 字段。我将使用以下查询过滤掉早上 7 点之前开始的所有行程:

    SELECT
      *
    FROM
      `bigquery-public-data.london_bicycles.cycle_hire`
    WHERE
      EXTRACT(HOUR FROM start_date) > 6
    

    因此,我在使用之前的自定义查询创建数据源时遇到了同样的问题(不显示没有数据的小时数):


    与范围数据混合

    第一个也是快速的解决方法是创建一个包含所有可能维度值的数据源。这可以在电子表格中完成,或者,例如,使用额外的 0 B 自定义查询:

    SELECT
      *
    FROM
      UNNEST(GENERATE_ARRAY(0, 23)) AS hour
    

    现在我们混合数据,使小时数组位于左侧(Data Studio 使用LEFT OUTER JOIN)并与cycle_hire 表中的HOUR(start_date) 连接:

    然后我们得到所需的直方图(请务必在STYLE 选项卡中将柱的数量更改为最多24 个,并在DATA 一个中按hour 升序排序):


    BigQuery 中的聚合

    另一种选择是运行自定义查询中已经存在的每小时存储桶的计算。例如,在这种情况下,我们将生成小时数组,将其与聚合数据左外连接,并用NULL 替换 0:

    WITH
    hours AS (
      SELECT
        *
      FROM
        UNNEST(GENERATE_ARRAY(0, 23)) AS hour),
    bike_rides AS (
      SELECT
        EXTRACT(HOUR FROM start_date) AS hour,
        COUNT(*) AS total
      FROM
        `bigquery-public-data.london_bicycles.cycle_hire`
      WHERE
        EXTRACT(HOUR FROM start_date) > 6
      GROUP BY
        hour )
    
    SELECT
      hour,
      IF(total IS NULL,0,total) AS total
    FROM
      bike_rides
    RIGHT OUTER JOIN
      hours
    USING
      (hour)
    

    给出相同的结果。

    【讨论】:

      猜你喜欢
      • 2021-09-14
      • 2014-03-17
      • 2015-03-27
      • 2019-06-19
      • 2013-11-17
      • 2020-10-12
      • 2012-09-02
      • 1970-01-01
      • 2021-04-01
      相关资源
      最近更新 更多