Flink提交作业运行的模式有哪些

这篇文章主要介绍“Flink提交作业运行的模式有哪些”,在日常操作中,相信很多人在Flink提交作业运行的模式有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Flink提交作业运行的模式有哪些”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

成都创新互联长期为近1000家客户提供的网站建设服务,团队从业经验10年,关注不同地域、不同群体,并针对不同对象提供差异化的产品和服务;打造开放共赢平台,与合作伙伴共同营造健康的互联网生态环境。为祁连企业提供专业的成都做网站、成都网站制作,祁连网站改版等技术服务。拥有十年丰富建站经验和众多成功案例,为您定制开发。

0.背景

基于 Flink-1.12.x

1.Session Mode

这个不用多说,也就是起一个 session,然后会有多个程序提交到这一个 session 中。
好处:集群资源仅分配一次,充分利用资源,程序App 启动较快
坏处:可能会连锁式的重启,jobManager 负载大

2.Per-Job Mode

使用的比较多,一个 application 一个 flink cluster
好处: 资源隔离,粒度更细,方便管理单个 job
坏处:当某个机器上有多个 client 时,会有较高的网络负载( 下载 jar 、传输 jar )以及消费大量的 CPU 来执行 main方法

3.Application Mode

Application Mode 与 Per-Job Mode 类似,主要是为了解决 Per-Job Mode 的不足,通过 yarn.provided.lib.dirs
另外 client 是在 JobManager 上执行的,可以避免 带宽、CPU 的热点问题。
并且相比于 Per-Job Mode 来说,更强大,可以提交多个 job

到此,关于“Flink提交作业运行的模式有哪些”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注创新互联网站,小编会继续努力为大家带来更多实用的文章!


名称栏目:Flink提交作业运行的模式有哪些
浏览路径:http://bzwzjz.com/article/ggcdis.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都网站建设 成都商城网站制作 定制网站设计 企业网站建设 成都响应式网站建设 成都企业网站制作 成都网站建设公司 网站设计 成都网站设计 网站设计公司 古蔺网站建设 重庆企业网站建设 成都网站设计 手机网站建设 网站制作 网站建设 网站建设推广 重庆网站制作 成都网站设计 企业网站建设公司 重庆外贸网站建设 成都企业网站设计