窗口函数并允许大结果

Question

窗口函数文档指出不能使用窗口函数生成大查询结果：

https://developers.google.com/bigquery/query-reference#windowfunctions

对于大型查询结果，该语句在文档中重复：

https://developers.google.com/bigquery/querying-data#largequeryresults

我创建了一个使用窗口函数并创建大量结果的查询。感兴趣的查询可以在下面找到，它运行在标准的 Google Analytics 数据提取到 BigQuery 中。

当我运行此查询时，它会返回“响应太大而无法返回”消息。指定“允许大结果”似乎可以解决问题。所以我在这个查询中同时使用窗口函数和大结果。

这似乎与窗口函数不能用于生成大查询结果的说法不一致。有人可以帮我理解这句话的意思吗？

SELECT 
CONCAT(fullVisitorId, STRING(visitId)) AS fullVisitID,
hits.hitNumber as Sequence,
hits.page.pagePath as PagePath,
LAG(Pagepath, 1) OVER 
  (PARTITION BY fullVisitID ORDER BY Sequence Asc) AS PrePage,
LEAD(Pagepath, 1) OVER 
  (PARTITION BY fullVisitID ORDER BY Sequence Asc) AS PostPage
FROM [<<TABLE NAME>>]
WHERE hits.type= 'PAGE'

Answer 1

这是以比文档更快的速度改进的产品。

最初窗口函数不可并行化，因此与“允许大结果”（通过并行输出工作）不兼容。然而，BigQuery 现在能够在使用 PARTITION 关键字时并行化窗口函数查询 - 因此该查询现在可以工作。

请注意，每个分区不能太大而无法正常工作。