简单写下提交sql-map-shuffle-reduce的过程

 

 

 

 

 参考了很多资料写的结果,更多是学习(照搬前人成果)和了解map-shuffle-reduce过程种,到底做了什么事情。

 

 

 

1.map shuffle reduce
  a. shuffle过程
  b. map到shuffle的过程
  c. shuffle到reduce的过程
  d. 文件提交到map的过程
  e. reduce 完成到输出的过程
2.map join
3.reduce join
4.sql执行
5.mysql,orcle,hive计算引擎

相关文章:

  • 2021-09-25
  • 2021-09-25
  • 2021-11-22
  • 2021-07-30
  • 2022-12-23
  • 2021-06-17
  • 2022-12-23
  • 2021-10-18
猜你喜欢
  • 2021-08-26
  • 2021-10-29
  • 2021-04-17
  • 2022-01-04
  • 2021-07-17
  • 2021-10-01
相关资源
相似解决方案