宽依赖和窄依赖的区别
参考:
https://blog.csdn.net/u013384984/article/details/80963455
总结一下:

窄依赖:父RDD中,每个分区内的数据,都只会被子RDD中特定的分区所消费,为窄依赖:

**宽依赖:**父RDD中,分区内的数据,会被子RDD内多个分区消费,则为宽依赖: 会产生shuffle,遇到宽依赖,则划分为多个stage
宽依赖和窄依赖的区别

相关文章:

  • 2022-01-08
  • 2021-11-26
  • 2022-12-23
  • 2021-11-16
  • 2022-01-15
  • 2021-07-23
  • 2022-03-05
猜你喜欢
  • 2022-01-11
  • 2021-09-25
  • 2022-01-21
相关资源
相似解决方案