1 flink standalone

1.1 集群节点规划

  • master(JobManager)
  • node1 (TaskManager)
  • node2
    Flink入门及实战(4)- flink standalone + yarn 集群安装部署

1.2 基础环境

  • jdk1.8
  • ssh 免密登录
  • 主机名
  • /etc/hosts 文件
  • 防火墙关闭

1.3 集群重要参数

Flink入门及实战(4)- flink standalone + yarn 集群安装部署

1.4 集群节点重启和扩容

Flink入门及实战(4)- flink standalone + yarn 集群安装部署

1.5 flink standalone 集群 job 的容错

Flink入门及实战(4)- flink standalone + yarn 集群安装部署

1.6 flink standalone 集群的 HA

Flink入门及实战(4)- flink standalone + yarn 集群安装部署
Flink入门及实战(4)- flink standalone + yarn 集群安装部署

1.7 集群启动失败

去查看 log

2 flink on YARN

2.1 两种模式

Flink入门及实战(4)- flink standalone + yarn 集群安装部署
Flink入门及实战(4)- flink standalone + yarn 集群安装部署

2.2 分布

Flink入门及实战(4)- flink standalone + yarn 集群安装部署

2.3 内部实现

Flink入门及实战(4)- flink standalone + yarn 集群安装部署

相关文章:

  • 2021-05-24
  • 2021-09-19
  • 2021-07-24
  • 2021-07-27
  • 2021-03-28
  • 2021-05-06
猜你喜欢
  • 2022-02-25
  • 2021-07-07
  • 2021-11-13
  • 2022-12-23
  • 2021-07-30
  • 2021-10-15
  • 2022-12-23
相关资源
相似解决方案