BigQuery 和 Jupyter Notebook 之间的区别

Question

我是 StackOverflow 的新手，我到处研究了为什么选择 Google BigQuery 与 Jupyter Notebooks 来为机器学习项目创建新变量和准备数据。到目前为止，我在使用 Jupyter Notebooks 进行数据科学项目方面拥有丰富的经验（喜欢 python！），但现在我们在办公室使用 GCP，没有人能够回答为什么（或何时）选择一个更好。另一个。

Datalab 在 Jupyter Notebooks 上做得很好，我们现在拥有的数据一部分存储在 GCS 中，一部分存储在 Cloud SQL 中（我只从那里检索数据并开始使用变量）。

非常感谢！

Answer 1

BigQuery 是一个数据湖，一个大型数据库。对于您的问题，需要使用 Cloud SQL/GCS 等数据源。您需要在 BQ 中存储行并在您的工具中使用来编写图表/算法。

BigQuery 无法与 Jupyter Notebook 相提并论，因为它只是两种不同的产品。