51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

不足

hadoop集群YARN作业资源不足排查实战

hadoop集群YARN作业资源不足排查实战

厉飞雨 阅读(6) 评论(0) 赞(1)

hadoop集群YARN作业资源不足排查实战 #### 1.现象 目前 CC 集群出现大量任务积压,运行缓慢的情况,怀疑是集群的资源分配出现了问题。 CC 集群总共有 569 个 NodeManager,总共 VCore 数是 27704 ,内存171T,资源比较丰富。理论上,应该足够任务的执行。 经过现场的分析,发现如下现象。 **集群总体的资源使用高,少量剩余**...