51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

YARN资源队列规划

YARN资源队列规划

1.案例
yz-4m1-01 集群上的队列分为生产型和非生产型。在 2019 年 4 月 12 日凌晨0 点--早上 9 点,非生产型队列占用资源较多,导致集群压力过大,影响了当日早上 9 点的 dwa 下发。生产侧提出了队列资源的优化方案,如下

2.备份当前队列的配置文件

在 CM 首页点击 yarn

在 yarn 的【配置】页面,搜索"容量调度",调出右侧的【值】

将【值】中的数据全部复制出来备份到本地。建议粘贴到写字板上,粘贴到 txt里排版会出现混乱。

3.修改当前队列的配置信息

以 qc 队列为例:

4.保存更改

5.刷新动态资源池
在 CM 首页,点击集群右边的倒三角,再点击【刷新动态资源池】

6.核实已经修改成功

在 Applications 页面的 Scheduler,调出 qc 队列的信息

赞(0)
未经允许不得转载:工具盒子 » YARN资源队列规划