Flink1.19深入源码解析-JobMaster生成

码界探索 2024-03-23 10:26:37

课时名称课时知识点
Flink1.19深入源码解析-JobMaster生成本课程旨在带领大家深入Flink的底层源码，从源码的角度剖析其工作原理、架构设计以及性能优化等方面的知识。通过本课程的学习， 你将能够全面理解Flink的运行机制，掌握其核心组件的实现原理，从而在实际应用中更加熟练地运用Flink解决复杂的大数据问题。
...全文
39 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
Flink1.19 JobSubmitHandler源码解析
JobGraph在客户端生成后，需要发送到服务端，首先会被JobSubmitHandler（WebMonitor内处理http请求的处理类）接收处理，然后会发送到Dispatcher进一步处理
Flink-1.19.0源码详解1-Flink各级调度核心原理与源码解析(2.5W字)
本文内容的Flink每级计算调度与任务执行的源码解析，从头到尾梳理了Flink如何从DataStreamAPI经过Transformation、StreamGraph、JobGraph、ExecutionGraph、物理执行图等多级计算拓扑构建与计算调度，最终在TaskManager分布式执行的过程，并对各级调度的核心源码进行记录与解读。
Flink-1.19.0源码详解7-Flink集群端调度
本文从Flink集群接收Flink客户端请求开始解析Flink集群端的调度。解析Flink集群Dispatcher接收了CliFrontend客户端发送的Request，从hdfs拉取JobGraph文件、Jar包和Artifacts依赖  ，创建并启动JobMaster开始Flink集群端的调度。
Flink-1.19.0源码详解-番外补充1-Flink on Yarn的三种部署模式解析
Flink on Yarn的三种部署模式解析
Flink-1.19.0源码详解5-JobGraph生成-前篇
本文从Flink执行StreamExecutionEnvironmentd.execute()方法方法,进行JobGraph生成开始，解析Flink JobGraph生成的源码，解析Flink遍历StreamGraph每个StreamNode节点，逐步生成JobVertex节点、JobEdge边和记录节点结果输出的IntermediateDataSet，逐步构建JobGraph图的完整源码。
齐宁的课程社区_NO_1

3

社区成员

65

社区内容

发帖
与我相关
我的任务
社区描述
大数据工程师
社区管理员
  • 码界探索
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章