【发布时间】:2021-03-17 15:20:34
【问题描述】:
我正在本地构建一个 tensorflow_object_detection_api 设置,希望将所有设置转移到我可以通过我的学校访问的计算机集群,并在那里训练模型。很难在集群上的共享 linux 系统上设置环境,所以我试图在本地做尽可能多的事情,并希望将所有内容都发送到那里并运行训练命令。我的问题是,我可以在本地生成 tfrecord 并将它们传输到集群吗?我问这个是因为我不知道这些记录是如何工作的,它们是否包含指向实际本地目录的链接?还是其中包含所有必要的信息?
附:我试图在集群上生成它们,但环境设置起来很棘手:tensorflow 和 opencv 安装在一个奇点中,需要调用它才能使用 tf 或 opencv 运行任何脚本,但该奇点没有必要的要求运行从 csv 注释生成 tfrecord 的脚本。
我对这方面的大部分内容都很陌生,因此感谢您提供任何帮助。
【问题讨论】:
标签: tensorflow cluster-computing tfrecord