【问题标题】:Apache Beam Dataflow Jobs started failing with: Workflow failedApache Beam 数据流作业开始失败:工作流失败
【发布时间】:2018-02-07 05:26:50
【问题描述】:

我已经使用 DataflowRunner 运行批处理作业一个多星期了,但没有出现任何问题,但从今天开始,这些作业突然开始失败,并出现以下错误消息。工人似乎没有开始,根本没有登录堆栈驱动程序。

我在这里遗漏了什么?

Dataflow SDK version: 2.0.0
Submitted job: 2017-08-29_09_43_20-9537473353894635176
2017-08-29 16:44:24 ERROR MonitoringUtil$LoggingHandler:101 - 2017-08-29T16:44:22.277Z: (54a5da9d57fd266d): Workflow failed.

编辑: 如果我从批处理运行中删除 --zone=europe-west2-b 它可以工作,这表明该区域可能有问题。

【问题讨论】:

  • 我认为您的标签有错字,这不是 spring-cloud-dataflow 问题
  • 干杯,改变它。

标签: google-cloud-dataflow apache-beam


【解决方案1】:

我看了你的工作。它失败了,因为它无法获得配额来培养工人。您可能在该区域没有配额。此错误未正确处理,但应在下一个版本中修复。

【讨论】:

  • 谢谢,我想那我得看看配额了。
猜你喜欢
  • 2020-08-05
  • 2021-06-16
  • 1970-01-01
  • 2023-02-12
  • 1970-01-01
  • 1970-01-01
  • 2021-12-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多