当前位置: 首页 > news >正文

Flink中三种模式:YARN Session 模式、YARN Per-Job 模式和 YARN Application 模式提交任务命令

在 Apache Flink 中,YARN 提供了多种模式来提交和管理作业,每种模式都有其独特的特点和适用场景。主要有以下三种模式:YARN Session 模式、YARN Per-Job 模式和 YARN Application 模式。

1. YARN Session 模式

在 YARN Session 模式中,一个长时间运行的 Flink 会话(Session Cluster)会在 YARN 上启动。可以向这个会话集群提交多个作业。

优点

  • 可以复用同一个集群来运行多个作业,减少启动和销毁集群的开销。
  • 适合开发和调试阶段。

缺点

  • 如果一个作业出现问题,可能会影响到其他作业。
  • 资源调度较复杂,可能会出现资源竞争问题。

启动 YARN Session 集群

flink-yarn-session.sh \-n <number_of_taskmanagers> \-s <slots_

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • XML 和 SimpleXML 入门教程
  • 某视频平台关键 so vm 解释器还原
  • 解析大数据分析行业的现状与前景:全球视角下的中国力量
  • Windows 环境 batch 脚本实现 PG 数据库恢复功能
  • 从代码层面熟悉UniAD,开始学习了解端到端整体架构
  • 【软件测试】--接口测试
  • WordPress主题追格企业官网主题免费开源版V1.1.6
  • 【剑指offer】
  • Swift学习入门,新手小白看过来
  • package:mine android studio新过滤规则及其用法 Filter使用技巧
  • 【AI大模型】-- 应用部署
  • 经典文献阅读之--World Models for Autonomous Driving(自动驾驶的世界模型:综述)
  • 贪心算法总结(2)
  • 排序算法:冒泡排序,golang实现
  • 20.rabbitmq插件实现延迟队列
  • [译]前端离线指南(上)
  • 【Redis学习笔记】2018-06-28 redis命令源码学习1
  • 【刷算法】求1+2+3+...+n
  • Android系统模拟器绘制实现概述
  • angular组件开发
  • CentOS7简单部署NFS
  • cookie和session
  • Git初体验
  • iOS仿今日头条、壁纸应用、筛选分类、三方微博、颜色填充等源码
  • java8-模拟hadoop
  • NLPIR语义挖掘平台推动行业大数据应用服务
  • Octave 入门
  • python 学习笔记 - Queue Pipes,进程间通讯
  • react-core-image-upload 一款轻量级图片上传裁剪插件
  • SQLServer之索引简介
  • storm drpc实例
  • vue数据传递--我有特殊的实现技巧
  • 从地狱到天堂,Node 回调向 async/await 转变
  • 大型网站性能监测、分析与优化常见问题QA
  • 互联网大裁员:Java程序员失工作,焉知不能进ali?
  • 来,膜拜下android roadmap,强大的执行力
  • 力扣(LeetCode)965
  • 聊一聊前端的监控
  • CMake 入门1/5:基于阿里云 ECS搭建体验环境
  • 阿里云IoT边缘计算助力企业零改造实现远程运维 ...
  • ​【C语言】长篇详解,字符系列篇3-----strstr,strtok,strerror字符串函数的使用【图文详解​】
  • ​2020 年大前端技术趋势解读
  • ‌前端列表展示1000条大量数据时,后端通常需要进行一定的处理。‌
  • # 利刃出鞘_Tomcat 核心原理解析(八)-- Tomcat 集群
  • ## 基础知识
  • #Lua:Lua调用C++生成的DLL库
  • (3)nginx 配置(nginx.conf)
  • (C语言)球球大作战
  • (Redis使用系列) Springboot 整合Redisson 实现分布式锁 七
  • (附源码)springboot 房产中介系统 毕业设计 312341
  • (回溯) LeetCode 77. 组合
  • (机器学习-深度学习快速入门)第一章第一节:Python环境和数据分析
  • (教学思路 C#之类三)方法参数类型(ref、out、parmas)
  • (五十)第 7 章 图(有向图的十字链表存储)
  • (转)C语言家族扩展收藏 (转)C语言家族扩展