弹性 MapReduce YARN 任务队列管理

可以以登录 YARN 自带的 YARN WebUI,登录方式为通过 EMR 提供的快捷入口,查看快捷入口请参考 软件 WebUI 入口。登录后单击下图所示左侧列表中 Scheduler ,即可看到任务队列信息。
。

相关产品
弹性 MapReduce 产品页,含版本规格、价格与购买入口。

从图中可以看到整个集群的一些监控信息:

·应用信息:9个等待,7个执行,51个完成,总计67个;其中有15个 container 正在执行。

·内存信息:总共36G,使用了30G,保留10G。

·虚拟核信息:总共20个,使用了15个,保留5个。

·节点信息:可用节点5个,退服0个,丢失节点0个,不健康节点0个,重启节点0个。

·调度器信息:使用 Fair Scheduler(公平调度器),最大最小的内存和 CPU 分配信息。

其中 Application Queues 栏包含了集群的任务队列信息(以 root.hadoop 队列为例):

·使用的资源:内存30720M(30G),虚拟核15个。

·正在执行的应用7个。

·等待的应用9个。

·占用最小资源:0M,0核。

·占用最大资源:36860M,20核。

·队列资源的稳定的公共共享。

·队列的瞬时公平共享资源。

·该队列占用资源的比例为83.3%。

赞 (0)
上一篇 4天前
下一篇 4天前