全国旗舰校区

不同学习城市 同样授课品质

北京

深圳

上海

广州

郑州

大连

武汉

成都

西安

杭州

青岛

重庆

长沙

哈尔滨

南京

太原

沈阳

合肥

贵阳

济南

下一个校区
就在你家门口
+
当前位置:首页  >  技术干货

yarn有哪些调度及常用命令?

发布时间:2022-06-29 16:57:51
发布人:syq

  1.yarn有哪些调度

  FIFO:单队列 先进先出 小任务易阻塞

  CAPACITY:多队列 各队列资源固定 小任务可同时运行,可弹性使用资源

yarn有哪些调度及常用命令

  每个队列都可以设置最大值,不设置的话可用到整个父队列的资源最大值(正好有空闲时);

  FAIR:多队列 各队列资源\动态抢占** 小任务可同时运行

  队列创建时:除非队列被准确的定义,否则会以用户名为队列名创建队列

  抢占就是允许调度器杀掉占用超过其应占份额资源队列的containers,这些containers资源便可被分配到应该享有这些份额资源的队列中。

  默认调度器

  Apache 开源:CAPACITY

  CDH版本:FAIR

  2.常用命令

  yarn logs -applicationId application15391986545221073695 |more

  2.1查看 Job 信息:

  hadoop job -list

  2.2杀掉 Job:

  hadoop job –kill job_id

  hadoop job –status job_id

  更多关于大数据培训的问题,欢迎咨询千锋教育在线名师。千锋教育拥有多年IT培训服务经验,采用全程面授高品质、高体验培养模式,拥有国内一体化教学管理及学员服务,助力更多学员实现高薪梦想。

相关文章

互联网公司的敏捷开发流程是怎么样?

互联网公司的敏捷开发流程是怎么样?

2023-10-14
max和maya有什么区别?

max和maya有什么区别?

2023-10-14
IT系统为什么需要可观测性?

IT系统为什么需要可观测性?

2023-10-14
C语言中的初始化是什么意思?

C语言中的初始化是什么意思?

2023-10-14

最新文章

常见网络安全面试题:Windows常用的命令有哪些?

常见网络安全面试题:Windows常用的命令有哪些?

2023-10-09
常见网络安全面试题:根据设备告警如何展开排查?

常见网络安全面试题:根据设备告警如何展开排查?

2023-10-09
常见网络安全面试题:mysql加固呢?(数据库加固)

常见网络安全面试题:mysql加固呢?(数据库加固)

2023-10-09
常见网络安全面试题:windows和linux加固?(操作系统加固)

常见网络安全面试题:windows和linux加固?(操作系统加固)

2023-10-09
在线咨询 免费试学 教程领取