【问题标题】:How to deal with historicization data in a data lake vs data warehouse?如何处理数据湖与数据仓库中的历史化数据?
【发布时间】:2020-12-01 07:21:55
【问题描述】:

在经典数据仓库中历史化数据是可能的(甚至是核心功能)。数据将随着时间的推移添加到数据仓库中,并且可以在数据上及时移动。

如果我只想使用数据湖并为业务用户提供数据历史记录,这可能吗?如果是,可能的方法是什么样的?

【问题讨论】:

    标签: data-warehouse data-lake


    【解决方案1】:

    是的 - 你可以做到。如果您只是插入数据,那么默认情况下,您将拥有所有数据的完整历史记录。

    可能的方法将完全取决于您为支持数据湖而运行的技术、您在数据湖中构建数据的方式、您的业务用户用于访问数据的工具等。因此,无需太多您提供的更多信息无法为您提供答案 - 除了通用的“是的,可以在数据湖中保存历史数据”

    【讨论】:

      【解决方案2】:

      您的经典数据仓库会将数据汇集在一起​​,并以时间序列为中心建模。

      数据湖以原始格式保存原始数据,通常不会考虑时间序列来存储这些数据。您可以存储数据以便计算出时间序列和历史变化,但数据湖将缺少数据仓库的预建模、易于访问的时间序列方面。

      【讨论】:

        猜你喜欢
        • 1970-01-01
        • 2018-03-12
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        • 2019-05-12
        • 2012-12-04
        • 1970-01-01
        相关资源
        最近更新 更多