【问题标题】:How to create a trigger in Azure Data Factory which triggers once file available in ADLS如何在 Azure 数据工厂中创建一个触发器,该触发器一旦在 ADLS 中可用就触发文件
【发布时间】:2020-09-22 17:44:52
【问题描述】:

我有一个 web 应用程序,其中运行了一些 python 代码,它生成 csv 文件并将其存储在 ADLS 中,我希望 ADF 管道在文件到达 ADLS 并将数据加载到 DB 时触发。 我想知道 ADF 中是否有任何可用的自动触发工具,因为我的文件将基于来自前端工具的用户输入,我们不知道用户何时会生成文件,这可能是非常随机的。我经历了基于事件触发选项,但它说每个存储帐户只允许 500 个触发器,但在我们的例子中,一天内可能有超过 500 个触发器。有什么方法可以实现触发器,还是我将 500 个触发器理解为有问题。任何建议

【问题讨论】:

    标签: azure azure-data-factory azure-data-lake


    【解决方案1】:
    • Azure 数据工厂仅支持每个存储帐户最多 500 个事件触发器,这意味着每个存储帐户最多只能创建 500 个事件触发器。
    • 当您为管道创建事件触发器时,触发器的时间取决于您创建的文件数量,并且不受限制。

    我在这里做了一个测试,显示一个管道一天可以触发超过 500 次:

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-05-24
      • 2019-12-12
      • 2021-05-24
      • 2013-12-03
      • 1970-01-01
      相关资源
      最近更新 更多