【问题标题】:Flume Distribution水槽分布
【发布时间】:2016-07-27 03:36:35
【问题描述】:

从 Apache Flume 1.6 Official website ,我发现flume是分布式的。但是主从架构在 Flume 1.x 之后已经被弃用了。 Flume 如何分配工作?我通过 Hortonworks 在两台主机上安装了水槽。我想在两台不同的机器上运行 2 个单独的水槽。有人可以帮我了解它的分布。如果我在主机 A 和主机 B 上有一个配置相同源和接收器的 HttpAgent 怎么办?是否会复制输入数据或水槽坐标?请纠正我的理解。

【问题讨论】:

    标签: apache flume-ng bigdata


    【解决方案1】:

    Flume 有一种“自己动手”的分发类型。查看documentation 了解一些详细信息和示例。

    如果我在主机 A 和主机 B 上配置了相同的源和接收器的 HttpAgent 怎么办?

    它将复制数据,除非您的源没有“恰好一次”传递语义

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2018-11-20
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多