【问题标题】:HDFS - insert new file triggerHDFS - 插入新文件触发器
【发布时间】:2015-05-07 01:55:31
【问题描述】:

当新文件或文件版本添加到 HDFS 时,是否会触发事件、挂钩或触发器之类的东西?我正在开发一个我们想将 JSON 文件写入 HDFS 的系统。写入 HDFS 的客户端应该不知道触发了触发下游处理 JSON 文件的事实。

如果我使用的语言不符合正确的 Hadoop 术语,请随时调整我的问题。

【问题讨论】:

    标签: json hadoop event-handling hdfs


    【解决方案1】:

    我认为您可以为此使用oozie。检查input events

    【讨论】:

    • 那么 Oozie 是不是在幕后在后台进行池化?
    • Oozie 更像是 crontab。但它允许设置输入事件。检查我的答案中的链接。
    猜你喜欢
    • 2016-10-13
    • 2021-03-08
    • 2013-06-11
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2012-02-06
    • 1970-01-01
    • 2015-11-06
    相关资源
    最近更新 更多