【问题标题】:grpc epoll fd: 4 error in cloud ml jobgrpc epoll fd:云机器学习作业中出现 4 个错误
【发布时间】:2017-11-28 17:05:46
【问题描述】:

我正在尝试在云 ML 中运行工作。这是第一个,所以我没有做任何花哨的事情(或者我不知道)。我在当地尝试过这项工作,效果很好。我正在提交这样的工作:

gcloud ml-engine jobs submit training $JOB_NAME --job-dir $OUTPUT --module-name trainer.task --package-path trainer/ --runtime-version 1.2 -- --train-files $TRAIN_DATA --eval-files $EVAL_DATA --verbosity DEBUG

我有一个 setup.py 文件,因为我需要 tf 1.4。

我在云端机器学习作业中遇到以下错误:

17:37:18.590 master-replica-0 grpc epoll fd: 4
{
 insertId:  "3bz8czg6uycja0"   
 jsonPayload: {
  created:  1511887038.59055    
  levelname:  "ERROR"    
  lineno:  1051    
  message:  "    grpc epoll fd: 4"    
  pathname:  "ev_epoll1_linux.c"    
  thread:  228    
 }
 labels: {
  compute.googleapis.com/resource_id:  "56570433820965707"    
  compute.googleapis.com/resource_name:  "cmle-training-master-93c1f629dc-0-1sbpv"    
  compute.googleapis.com/zone:  "europe-west1-c"    
  ml.googleapis.com/job_id:  "XXXXX"    
  ml.googleapis.com/job_id/log_area:  "root"    
  ml.googleapis.com/task_name:  "master-replica-0"    
  ml.googleapis.com/trial_id:  ""    
 }
 logName:  "projects/fibi-tech/logs/master-replica-0"   
 receiveTimestamp:  "2017-11-28T16:37:27.139888642Z"   
 resource: {
  labels: {…}   
  type:  "ml_job"    
 }
 severity:  "ERROR"   
 timestamp:  "2017-11-28T16:37:18.590551137Z"   
}

错误发生后没有其他反应(至少十分钟内没有),我必须手动停止工作。

谢谢!

【问题讨论】:

  • 此处类似,但收到错误消息grpc epoll fd: 3
  • 嗯,这个标签应该是由 cloud-ml 工程师审查的,但看起来不是。我想这又是另一个谷歌云服务,在纸上看起来很棒,但它是一个黑匣子,如果你有问题,就不可能找出问题所在。去过那里,我想我从来没有学过......
  • 我在groups.google.com/a/tensorflow.org/forum/m/#!topic/discuss/… 上提出了同样的问题,其中一位工程师让我在此处发布问题,但带有标签google-cloud-ml-engine。尝试将该标签添加到您的问题中。
  • @rodrigo-silveira 我在 ml 引擎文档中看到了您提到的标签,但由于某种原因堆栈溢出不允许我使用它。无论如何,查看您的答案和相关帖子,我已经设法使其发挥作用。谢谢!

标签: google-cloud-ml


【解决方案1】:

我在使用带有 ml-engine 的 Estimator API 时遇到了类似的问题。解决方案是使用tf.estimator.train_and_eval()。见我的另一篇帖子ml-engine vague error: "grpc epoll fd: 3"

【讨论】:

    猜你喜欢
    • 2018-06-01
    • 1970-01-01
    • 2019-10-27
    • 1970-01-01
    • 1970-01-01
    • 2016-01-14
    • 1970-01-01
    • 1970-01-01
    • 2018-06-18
    相关资源
    最近更新 更多