GCE (Google Compute Engine) GPU Quota >= 1 但启动 VM 失败答案

【问题标题】：GCE (Google Compute Engine) GPU Quota >= 1 but starting VM failsGCE (Google Compute Engine) GPU Quota >= 1 但启动 VM 失败
【发布时间】：2020-02-11 10:35:00
【问题描述】：

我在 GCE 项目中使用 GPU 并决定请求将配额增加到 2。我的 VM 实例 1 在 us-east1-c 中，因此我导航到 IAM & Admin > Quotas 并选择以下内容：服务 - 仅选择 Compute Engine API 指标 - 选定的 NVIDIA P100 GPU 和选定的 NVIDIA p100 虚拟工作站 GPU 地点 - 仅选择 us-east1 在收到通知说我增加了 2 个 GPU 的配额已获批准后，我开始启动我的 VM 实例并收到错误代码：

我仔细检查了我的配额页面并确认增加到 2 个 GPU。 Support@google 告诉我请求增加 GPU 的 Globaly，所以我提交了一个新请求，选择了所有，包括 Global 选项：

现在，当我尝试启动 VM instance-1 时，我得到：

所以错误消息说我的配额是 0.0，但是，在 IAM 和管理页面下查看我的配额，我在每个位置都有 2 个配额，包括 us-east1（由于某种原因，除了 europe-west3）：

为了排除故障，我尝试在同一项目的不同位置使用 GPU 启动新的 VM 实例，也尝试在新项目中启动新的 VM 实例，但每次都收到类似的错误消息。我已经使用此链接验证了我选择的位置有 GPU 更令人困惑的是，在我作为试验场开始的新项目中，没有人玩过任何设置；配额都默认为 1，但我仍然收到错误消息。我做错了什么？

【问题讨论】：

标签： gpu google-compute-engine quota

【解决方案1】：

除了请求增加区域配额之外，您还需要请求增加全局配额。

与虚拟 CPU 配额类似，GPU 配额是指一个区域内所有 VM 实例中虚拟 GPU 的总数。检查配额页面以确保您的项目中有足够的 GPU 可用，并请求增加配额。 此外，新帐户和项目具有适用于所有区域的全球 GPU 配额。

当您申请 GPU 配额时，您必须为要在每个区域创建的 GPU 模型申请配额，并为所有区域中所有类型的 GPU 总数申请额外的全局配额。

这个过程记录在HERE

您可以使用过滤器 Location = Global 来查找它

现在对于区域没有足够资源的第二个错误，如果您看到“ZONE_RESOURCE_POOL_EXHAUSTED”错误，这意味着您在该特定区域遇到临时资源缺货问题。您应该尝试在不同的地方部署区域

我建议您从该线程中删除您的第二张图片，因为您的项目 ID 可见

【讨论】：

感谢@Ernesto U；如果我正确理解了文档，那么我必须输入一个全局 GPU 的 TTL 数量，该数量必须等于我在每个位置的 GPU 数量的总和，但是，我没有看到可以输入全局数量的地方。但如果是这样，那为什么google不自动设置全局变量呢？
Google 确实只为 CPU 自动设置了一个全局变量，但不为 GPU 设置全局变量，我只能假设这样做是为了保护他们的客户不会意外部署更多他们想要的 GPU，这可能会导致高额发票：/ 抱歉对于之前的错误，正确的配额是 "Compute Engine API , GPUs (all region) , location = global
那么 SOP 是否要在“请求描述”中键入一个附加请求，以确保全局计数等于所有区域的总和？他们不会自动这样做是没有意义的。所以实际上，他们是故意给我造成问题的？
如果您需要 Google 澄清他们的系统为何以这种方式工作，我建议您在“计算引擎问题”@987654323 类别中打开一个公开问题（您无需支付支持费用） @ 就我而言，由于我与许多云提供商合作的经验，我只能做出假设
谢谢@Ernesto U，在与批准配额的谷歌云支持团队进行了几次电子邮件交流后，我设法获得了更多有用的细节。我计划在整理完所有内容后立即在此处提供更多详细信息。感谢您的时间和帮助！

【解决方案2】：

您的 GPU（所有区域） 计数必须等于您请求增加配额的每个区域中的 GPU 总和。使用 ctrl & f 的搜索对我不起作用 - 导航到 IAM & admin > 单击提供的搜索栏中的 Metric 下拉菜单 >，输入“GPU（所有区域） em>"

【讨论】：