Hadoop YARN - 作业消耗的资源超过用户限制因素

Question

我在 YARN 中有一个默认队列，配置如下：

Capacity:   70%
Max Capacity:   90%
User Limit Factor   0.08
Minimum User Limit  8%
Maximum Applications    Inherited
Maximum AM Resource Inherited
Priority    0
Ordering Policy Fair
Maximum Application Lifetime    -1
Default Application Lifetime    -1
Enable Size Based Weight Ordering   Disabled
Maximum Allocation Vcores   Inherited
Maximum Allocation Mb   Inherited

但即使用户限制因子为 0.08，最小用户限制为 8%，也有作业使用队列资源的 8% 以上运行，如下所示：

这怎么可能？用户限制因子/最低用户限制不起作用吗？还有其他我应该注意的配置吗？

Answer 1

最低 8% 的用户限制意味着如果 12 个用户同时到达 - 他们将分别获得 8% 的资源，以便给他们平等的份额。 但是，在您的情况下，作业开始的时间表明首先提交的任务将有更多可用的集群资源，因为它们不会到来 同时在。 here 和 here 可以很好地理解这些参数