【问题标题】:distribute tensorflow demos分发张量流演示
【发布时间】:2016-08-09 12:34:13
【问题描述】:

最近tensorflow增加了distribute training模块,distribute的前置要求是什么?我的意思是这样的环境,

tensorflow >= 0.8 kubernates shared file system, gcloud? 

并且已经发布了示例代码:

有没有办法运行tensorflow集群示例,当只有hdfs并且没有任何共享文件系统时,模型文件存储在哪里?

【问题讨论】:

标签: tensorflow tensorflow-serving


【解决方案1】:

每台计算机都需要安装 tensorflow,(根据我的经验,它们都应该是相同的版本。我在混合版本 8 和 9 时遇到了一些问题)。 设置完成后,每台计算机都需要访问要运行的代码(例如 main.py)。我们使用 NFS 来共享它,但您可以在每台机器上轻松地 git pull 以获取您的代码的最新副本。 然后你只需要启动它们。在我们最基本的设置中,我们只会 ssh 到每台机器,但如果你有一个像 kubernates 这样的集群,那么它可能对你来说会有所不同。

至于检查点,我相信只有首席工作人员才会写入检查点文件,如果这是您的最后一个问题。

如果您还有其他问题,请告诉我。

【讨论】:

  • 如果您需要一个开箱即用的完整演示,我可以在本周晚些时候/下周初在 SO 的文档页面上发布一个。
猜你喜欢
  • 2018-04-18
  • 2018-07-31
  • 1970-01-01
  • 2017-11-05
  • 2018-11-05
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多