【问题标题】:hadoop word count example where does reducer output go?hadoop 字数统计示例 reducer 输出到哪里去了?
【发布时间】:2013-09-17 03:11:41
【问题描述】:

我在 cassandra 上查看了一个 map/reduce,它在 reducer 中有这条线

context.write(key, new IntWritable(sum));

我想查看键的完整列表及其总数。我去哪里获取这些信息。

例如,我看到了字数统计示例,但没有看到将内容输出到屏幕的代码,但它确实将内容输出到了屏幕。那我的 map/reduce 的输出在哪里?

http://hadoop.apache.org/docs/stable/mapred_tutorial.html#Example%3A+WordCount+v2.0

谢谢, 院长

【问题讨论】:

  • ... 它“将内容输出到屏幕”,因为它通过 HDFS 运行 cat。该文件位于您定义 HDFS 的任何位置。

标签: hadoop


【解决方案1】:

您的 Map/Reduce 输出将转到您在代码中或作为运行时参数或在作业配置文件中定义的 HDFS 中的输出目录。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2012-12-12
    • 2011-05-29
    • 2013-09-20
    • 1970-01-01
    • 2023-01-10
    相关资源
    最近更新 更多