Sam's Notes | Sam Blog

梦想还是要有的,万一实现了呢

0%

flink 集群架构原理

主要内容

  • flink 集群架构原理
  • flink 集群架构原理

集群架构

  • JobManager
    管理节点,每个集群至少一个,管理整个集群计算资源,Job 管理与调度执行,以及 Checkpoint 协调。
  • TaskManager
    每个集群有多个TM,负责计算资源提供。
  • Client
    本地执行应用main()方法解析JobGraph 对象,并最终将JobGraph 提交到 JobManager 运行,同时监控Job 执行的状态。

JobManager

内存管理机制

JobManager 内存管理机制介绍与调优

TaskManager

内存管理机制

TaskManager 内存管理机制介绍与调优总结

集群部署模式