初学mr时,觉得没什么,但是学了一段时间,重新复习时发现程序中mr程序中一般都会有

hadoop中的job.setOutputKeyClass(theClass)与job.setOutputValueClass(theClass),

但是有的程序处理以上两个外还有job.setMapOutputKeyClass(theClass)与job.setMapOu

tputValueClass(Text.class),一直没弄懂是怎么回事,网上查了下,原来当mapper与reducer

的输出类型一致时可以用 job.setOutputKeyClass(theClass)与job.setOutputValueClass

(theClass)这两个进行配置就行,但是当mapper用于reducer两个的输出类型不一致的时候就需

要分别进行配置了。

相关文章:

  • 2022-12-23
  • 2021-10-08
  • 2021-10-02
  • 2022-12-23
  • 2021-10-29
  • 2021-12-18
  • 2021-09-07
猜你喜欢
  • 2021-07-09
  • 2022-12-23
  • 2021-05-13
  • 2021-06-18
  • 2022-12-23
  • 2022-12-23
相关资源
相似解决方案