使用 Cloud Datapreb 与使用 DBT 在层之间转换数据有什么区别？答案

【问题标题】：What are the differences between using Cloud Datapreb vs using DBT for transforming data between layers?使用 Cloud Datapreb 与使用 DBT 在层之间转换数据有什么区别？
【发布时间】：2022-12-01 06:12:14
【问题描述】：

我从事过两个项目，其中 DBT 用于在青铜（原始）银（精制）和金（服务）层之间转换数据。我知道 Cloud Dataprep 也可用于在层之间转换数据并为可视化和 ML/AI 做好准备。

那么，在技能、预算、易用性和设置方面使用这两者之间有什么区别，哪些用例不能用另一个替代？

【问题讨论】：

标签： google-cloud-platform dbt google-cloud-dataprep

【解决方案1】：

与 DBT 所做的更直接的类比是名为 Dataform 的不同 GCP 服务。这两种服务都可用于执行版本控制的模板化 SQL 查询，以分阶段转换数据。要使用它们，您需要对数据有很好的了解，以便知道哪些转换是合适的。

我的理解是 DataPrep 是一个完全成熟的数据探索和操作；它更适合处理数据别理解并改造它以供使用。

【讨论】：