错误:无法匹配检查点gs://obj-检测/列车/ match .train的文件

Question

我在google上运行检测模型，在运行评估脚本时得到了这个错误。我找到了提到这个问题的this link，但是这个问题似乎还没有解决。有人知道怎么解决吗？任何帮助都将不胜感激。谢谢。

错误2018-02-04 12:53:10 -0600主副本-0无法匹配检查点gs://obj-检测/train/ files .0600 0的文件 信息2018-02-04 12:53:10-0600主-副本-0没有模型发现gs://obj-检测/列车。将在300秒内再试 信息2018-02-04 12:58:10 -0600主-副本-0 2018-02-04-18:58:10 错误2018-02-04 12:58:10 -0600主副本-0无法匹配检查点gs://obj-检测/train/ files .0600 0的文件 信息2018-02-04 12:58:10 -0600主-副本-0没有发现在gs://obj-检测/列车模型。将在300秒内再试 ..。

培训日志如下所示：

..。在大约14个小时的时间 信息2018-02-04 05:09:05 -0600工人-复制-3全球步骤185874:损失= 0.7012 (0.764秒/步) 信息2018-02-04 05:09:05 -0600工人-复制-4全球步骤185873:损失= 0.7749 (0.797秒/步) 信息2018-02-04 05:09:05 -0600工人-复制-2全球步骤185875:损失= 0.4939 (0.775秒/步) 信息2018-02-04 05:09:05 -0600主复制-0全球步骤185877:损失= 1.1430 (0.850秒/步) 信息2018-02-04 05:09:05 -0600工人-复制-1全球步骤185878:损失= 0.8231 (0.777秒/步) 信息2018-02-04 05:09:05 -0600工人-复制-0全球步骤185881:损失= 0.6470 (0.779秒/步)

Answer 1

有几件事要检查：

1. 培训代码设置是否实际导出检查点？如果您使用的是Estimator，这通常是可行的，假设您使用的是运行Estimator的标准方法(例如，在TF >=1.4中，Estimator.train_and_evaluate中)。
2. 是否将正确的输出目录传递给保存检查点的代码？例如，培训代码是否可以将检查点输出到本地(临时)？目录而不是GCS？会不会是将检查点保存到GCS上的另一个目录？快速扫描代码+一些位置良好的打印/日志语句在这里很有用。
3. 培训代码输出检查点的频率有多高？例如，如果它只节省10分钟，那么对于每一次成功的评估，您都会期望大约1-2个“没有发现模型”的消息。