【问题标题】:Data Flow process in ETL architectureETL架构中的数据流流程
【发布时间】:2020-05-07 13:15:18
【问题描述】:

我需要弄清楚在典型的 ETL 数据仓库架构中数据如何从源系统流向目标系统。 例如源系统、目标系统和 ETL 服务器位于三个不同的网络中,在 ETL 中应用了一些转换和逻辑。在这种情况下,数据是从源->ETL 服务器->目标服务器还是源->目标在它们之间动态应用转换而数据不流经 ETL 服务器?

【问题讨论】:

  • source->ETL 服务器->目标服务器:转换逻辑被应用到 ETL 服务器上

标签: etl data-warehouse


【解决方案1】:

在大多数情况下(我想不出例外,但肯定有一些),数据从源系统移动到 ETL 服务器,然后再到目标服务器。转换发生在 ETL 服务器上,如果该机器功率不足或内存不足,这通常会导致瓶颈。如果情况确实如此,则可能需要采用 ELT 方法。不过,大多数 ETL 工具都可以轻松适应这种方法。

更具体的内容取决于您使用的特定 ETL 产品和您的服务器架构。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2019-07-23
    • 2018-05-24
    • 2017-11-05
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2023-03-06
    相关资源
    最近更新 更多