【发布时间】:2014-02-03 00:17:08
【问题描述】:
AFAIK,ETL 集成来自固定数量的源/表的数据。考虑到这些表可能属于不同类型(客户、运输、员工、会计等),ETL 是否有可能整合未来可能添加的未知数量的表中的数据?
编辑 -
让 A,B,C 成为表格。我们可以有以下 ETL 场景 - A + B + C = 1 行或 A + B + C = 3 行
我有第一个。稍后,我们可以添加表 D、E、F、G...等,所有这些表在它们包含的数据方面都可能彼此不同。
【问题讨论】:
-
太宽泛了——您是在询问具体的 ETL 工具吗?
-
@DStanley - 这是一个一般原则。但是,为了缩小范围,我会说 SSIS。
-
我不知道这是否可能,但转换过程通常是为每个数据流或从表中提取定制的。我认为“未知数量的表”的想法没有意义,因为您必须知道它们才能清理和转换数据。
-
@carexcer - 我必须使转换逻辑也是动态的。我正在考虑将该逻辑存储在表格中。不知道这个方法好不好。
-
“总校长”?你是在看教科书还是什么?