Flink分布式运行环境

Flink的基本架构

Flink是基于Master-Slave风格的架构

Flink集群启动时,会启动一个JobManager进程,至少一个TaskManager进程

Flink架构示意图

JobManager

Flink系统的协调者,负责接收FlinkJob,调度组成Job的多个Task的执行

收集Job的状态信息,并管理Flink集群中从结点TaskManager

TaskManager

实际负责执行计算的Worker,在其上执行FlinkJob的一组Task

TaskManager负责管理其所在节点上的资源信息,如内存、磁盘、网络,在启动的时候将资源状态向JobManager汇报。

Client

用户在提交一个Flink程序时,会首先创建一个Client,该Client首先会对用户提交的Flink程序进行预处理,并提交到Flink集群

Client会将用户提交的Flink程序组装一个JobGraph,并且是以JobGraph的形式提交的

已标记关键词 清除标记
相关推荐
©️2020 CSDN 皮肤主题: 程序猿惹谁了 设计师:白松林 返回首页