hadoop之mapreduce程序分析

这个Mapper类是一个泛型类型,它有四个形参类型,分别指定map函数的输入键、输入值、输出键和输出值的类型。

 Hadoop本身提供了一套可优化网络序列化传输的基本类型,而不是直接使用java内嵌的类型。这些类型都在org.apache.hadoop.io包中,这里使用LongWritable类型(相当于java的Long类型)、Text类型(相当于java中的String类型)和IntWritable类型(相当于java的Integer类型)。

 

 

hadoop之mapreduce程序分析

     reduce函数也有四个形式参数类型用于指定输入和输出类型。reduce函数的输入类型必须匹配map函数的输出类型,即Text类型和IntWritable类型,在这种情况下,reduce函数的输出类型也必须Text和IntWritable类型。

 

 

hadoop之mapreduce程序分析

相关文章: