Cloud ML培训作业找不到匹配的文件

Question

我的培训作业失败，错误提示： NotFoundError：不成功TensorSliceReader构造函数：无法找到任何与gs：//my_file_name/train/model.ckpt-2- ????? - 00001 [[Node：save/RestoreV2_29 = RestoreV2 [dtypes = [DT_FLOAT]，_device =“/ job：localhost/replica：0/task：0/cpu：0”]（_ recv_save/Const_0 ，save/RestoreV2_29/tensor_names，save/RestoreV2_29/shape_and_slices）]]由于op u'save/RestoreV2_29'，定义在...

我检查了Google Cloud Storage和该文件（gs：// my_file_name/train /model.ckpt-2*）确实存在。为什么它没有找到它？

Answer 1

尝试切换到单个区域Google Cloud Storage存储分区。

Tensorflow还原功能正在尝试列出您刚刚写入的Google云端存储分区中的文件。但是，如果您正在写入多区域存储桶，则在列出文件时，Google云端存储不是非常一致。单区域桶在这种情况下非常一致，不会有这个问题。他们也将给予更高的性能假设一个区域是你正在训练的同一区域

参见：

https://cloud.google.com/ml/docs/how-tos/getting-set-up#setting_up_your_cloud_storage_bucket https://cloud.google.com/ml/docs/concepts/environment-overview#cloud_storage_buckets