braveym

Spark 编程模型(下)

 

                                                                                                                                     创建Pair RDD

什么是Pair RDD

 

创建Pair RDD

 

                                                                                   

 

                                                                               Pair RDD的转化操作

 Pair RDD的转化操作1

 

在xshell启动

 

 

 

 

 

 

reduceByKey的意思是把相同的key的value的值相加起来

 

 

Pair RDD转换操作2

 

 

                                             

 

                                                                                                   Pair RDD的action操作

Pair RDD转换操作1

 

 

                                                                                              Pair RDD的分区控制

 

 

自定义分区方式

 

分类:

技术点:

相关文章: