【发布时间】:2017-02-03 08:47:42
【问题描述】:
我们希望在 GCP 上构建一个用于广告系列/广告分析的解决方案(将 doubleclik 和其他广告服务器数据提取到 DW 中)。数据以批量方式摄取,采用星型模式,但更新会持续长达一周,需要对多个客户(广告商)进行趋势分析和报告。我无法在支持更新和时间序列分析的 Google Big table 与非常适合星型模式和临时分析的 Big Query 之间做出决定。
有什么建议吗?性能和灵活性很重要。
【问题讨论】:
-
过去的帖子可能会有所帮助:stackoverflow.com/questions/34437572/…。请注意,BigQuery 也允许更新;除了追加数据,如果需要,还可以使用 DML 修改现有数据:code.google.com/p/google-bigquery/issues/detail?id=657.
-
我相信他们有一个云连接器(可能仍处于测试阶段),可以自动将 DFP 日志转储到 BigQuery,其方式类似于将 GA 数据转储到 GA 高级订阅者的每日表格中。如果可以的话,我会联系 Google Cloud 中的某个人。
-
还有一些托管服务方法可以解决这个问题
-
P.s 我会使用 Google 数据流 (apache Beam) + 大查询
标签: google-bigquery google-cloud-bigtable