Design

官网Hive设计图

【20200320分享】-Hive源码之SQL编译执行流程

Compiler

  • 解析器(Parser)–将查询字符串转换为解析树表示形式。
  • 语义分析器(Semantic Analyser)-将解析树转换为内部查询表示形式,该表示形式基于块。
  • 逻辑计划生成器(Logical Plan Generator)将内部查询表示形式转换为逻辑计划,该逻辑计划由运算符树组成。但是reduceSink等运算符是Hive专用的,将该计划转换为一系列map-reduce作业。
  • 查询计划生成器(Query Plan Generator)将逻辑计划转换为一系列的map-reduce任务。 查询计划计划被序列化并写入文件。

SQL转化为MapReduce的流程对应源码解读:

【20200320分享】-Hive源码之SQL编译执行流程

相关文章:

  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-05-01
  • 2022-01-17
  • 2021-10-21
  • 2021-11-02
  • 2021-04-15
猜你喜欢
  • 2021-08-12
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-04-06
相关资源
相似解决方案