1.MR Job 输入非常多,启动map 非常多,如何提高MapTask 启动速度(附加条件:集群很空闲,资源多多):

 参考答案:

       a.重写调度器算法,降低时间复杂度

   b.Out-of-bound heartbeat提高调度的效率

      c.一次心跳分配多个Task

      d.Job History改造成异步写

相关文章:

  • 2022-03-06
  • 2021-12-19
  • 2021-09-22
  • 2021-10-19
  • 2021-06-15
  • 2021-11-15
猜你喜欢
  • 2021-12-16
  • 2021-11-28
  • 2021-05-21
  • 2021-04-13
  • 2021-11-03
  • 2021-09-12
相关资源
相似解决方案