话不多说,直接看源码!
ctrl+左键
Spark对集合的切片原理
Spark对集合的切片原理
这里就是讲怎么计算分区的
Spark对集合的切片原理
接下来就举个例子吧!
(30,40,50,60,70,10,20,60,90,10) 数组有10个,切片为3

start end
0*10/3=0 (0+1)/10*3=3
1*10/3=3 (1+1)*10/3=6
2*10/3=6 (2+1)*10/3=10

那么1分区有3个 2分区有3个 3分区有4个
Spark对集合的切片原理

相关文章:

  • 2022-12-23
  • 2021-12-09
  • 2021-08-21
  • 2022-12-23
  • 2021-06-01
  • 2021-10-21
  • 2021-11-24
  • 2022-02-24
猜你喜欢
  • 2022-12-23
  • 2021-09-01
  • 2021-08-26
  • 2022-12-23
  • 2021-07-08
  • 2022-12-23
  • 2021-07-21
相关资源
相似解决方案