【问题标题】:Analyze Firebase data分析 Firebase 数据
【发布时间】:2016-08-17 20:29:17
【问题描述】:

我有一个使用 Firebase 存储数据的移动应用。 我正在存储所有用户数据、不同的业务对象和关系。

我正在寻找一种方法来分析我的数据。我想对数据执行查询和聚合,并生成报告。 Firebase 网站提到使用来自 Google 的 BigQuery,但似乎没有简单的方法可以将数据从 Firebase 导入到该网站。

实现这一目标的最佳方法是什么?我知道我可以创建每日备份,但是在我拥有原始 JSON 数据之后,我该如何查询呢?

8/5 更新:

为了清楚起见,这里是来自 Firebase 的示例 JSON 数据:

{
  "lambeosaurus": {
    "height" : 2.1,
    "length" : 12.5,
    "weight": 5000
  },
  "stegosaurus": {
    "height" : 4,
    "length" : 9,
    "weight" : 2500
  }
}

此 JSON 不是换行符。

【问题讨论】:

  • 如果您想使用 BigQuery 进行查询,您必须先import that JSON into BigQuery,然后再write the SQL。
  • 谢谢,但似乎我必须做很多工作才能将我从 Firebase 获得的 JSON 转换为 BigQuery 能够使用的东西......我担心这会很成问题在大型数据文件上..
  • 您不必将数据加载到 BigQuery 中。您可以使用联合源直接查询 GCS。我已经发布了一个答案来反映这一点。

标签: firebase google-bigquery analysis firebase-realtime-database


【解决方案1】:
  1. Create firebase backup
  2. 使用 BigQuery federated sources 直接从 BigQuery 查询该备份(支持 JSON)

【讨论】:

  • 感谢@polleyg,但据我所知,我需要使用逗号分隔的 JSON 才能进行导入。 Firebase 是否备份为逗号分隔的 JSON?如果没有,我将不得不转换数据,这在大型数据集上可能非常困难......
  • 实际上是换行符 - cloud.google.com/bigquery/federated-data-sources - "JSON 文件是换行符"
  • 你说得对。我的意思是写换行符。但这实际上是我要解决的问题..如何从 firebase 获取这个以换行符分隔的 JSON
  • 不是 firebase 用户,你能发给我一小部分数据吗?虚拟数据很好,但我想看看 JSON firebase 导出的格式。
  • 抱歉回复晚了,我刚刚从 Firebase 添加了一个数据示例。
猜你喜欢
  • 1970-01-01
  • 2016-10-07
  • 2018-08-14
  • 1970-01-01
  • 2019-06-24
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多