【问题标题】:hadoop: Reducer output to another Reducerhadoop:Reducer 输出到另一个 Reducer
【发布时间】:2012-09-21 14:20:21
【问题描述】:

如果我们想按相同的键分组(第一个reducer的输出),是否可以将reducer的输出直接发送到另一个reducer

有时在链接时我观察到我使用映射器只是从输入中读取并将其复制到输出。因此想知道 idf 是否可以将输出直接馈送到减速器

【问题讨论】:

    标签: hadoop mapreduce


    【解决方案1】:

    尽管您可以将 map-reduce 作业(甚至是映射器)链接在一起;据我所知,您不能直接链接减速器。

    在内部,您可以将映射器 beforeChainMapper 链接,并将映射器 afterChainReducer 链接。

    【讨论】:

      猜你喜欢
      • 2016-03-04
      • 2012-05-03
      • 2019-04-01
      • 2017-03-07
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2016-12-01
      • 1970-01-01
      相关资源
      最近更新 更多