【问题标题】:Google cloud dataflow job hangs谷歌云数据流作业挂起
【发布时间】:2015-06-22 16:59:01
【问题描述】:

最近我有一些数据流作业挂起案例,当在控制台上检查时,作业正在运行,但当单击该作业时,它实际上成功了。经过数小时和数天后,它一直保持这种状态并且永远不会退出,我不得不在后端终止提交作业,以便我剩下的大工作可以继续。

一些细节:

项目:smart-altar-543;

credential:项目/VM的默认服务帐号 请注意,我怀疑挂起的问题是由于服务帐户,因为我在使用个人帐户时从未遇到过此问题;

job_ID:2015-06-21_09_22_15-13235319036709578079; 2015-06-20_23_10_28-1533493207141169764

【问题讨论】:

  • 您似乎遇到了 Dataflow 服务中的错误。我们正在调查,并将向您提供最新结果。
  • 请注意,这应该是一个非常罕见的问题,它不应该与使用服务帐户有关,并且它已经关闭了工作人员,因此不会导致任何计费问题。所以我认为你可以同时提交其他工作。
  • 是的,是否注意到当作业仍然挂起时工作人员会关闭,因为作业仍在运行对数据流服务有任何成本影响?
  • 没有。定价目前基于 Compute Engine 定价(请参阅cloud.google.com/dataflow/pricing),并且所有 Compute Engine 资源都已被此作业释放。

标签: google-cloud-dataflow


【解决方案1】:

此问题现已修复。服务中的元数据传播存在问题,已修复。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多