【问题标题】:Azure data factory end time triggerAzure 数据工厂结束时间触发器
【发布时间】:2021-07-02 02:58:00
【问题描述】:

我有一个场景,假设我有一个 ADF 实例名称 XYZ 包含一个管道,该管道计划触发器在晚上 12:00 AM 开始。触发有的时间在 1 小时后结束,有的时候因为数据加载需要超过 2 小时。

我还有一个 ADF 实例 ABC 在我还有一个管道中,现在我的要求是我必须在 xyz 实例触发完成时安排 ABC 实例管道。

请帮助解决此要求。两个 ADF 都有不同的实例,并且触发结束时间也可能因负载而异。

【问题讨论】:

  • 似乎您需要在 ABC 实例的管道上使用 Tumbling 窗口触发器,并为 XYZ 实例创建依赖关系。这样一旦 xyz 完成,abc 就会开始运行,即使 xyz 的结束时间不同,这也会有所帮助。
  • acb 和 xyz 都在不同的实例中,翻滚窗口不起作用

标签: azure azure-sql-database azure-data-factory azure-data-factory-2 azure-data-factory-pipeline


【解决方案1】:

最简单的方法是使用Logic app。在逻辑应用设计器中,我们可以创建两个流水线运行步骤来触发不同数据工厂中的两个流水线运行。

  1. 创建一个Recurrence触发器以循环运行此逻辑应用。

  2. Azure 数据工厂 操作中:

  3. 选择创建管道运行操作。

  4. 总结在这里:

所以我们可以触发ADF实例名称XYZ的流水线运行,完成后会触发ADF实例ABC的流水线运行。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2021-05-06
    • 2021-05-24
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多