Cloud ML Training Job не может найти подходящие файлы

Question

Моя учебная работа терпит неудачу с сообщением об ошибке: NotFoundError: Неудачный конструктор TensorSliceReader: Не удалось найти подходящие файлы для gs://my_file_name/train/model.ckpt-2-?????-of-00001 [[Node: save/RestoreV2_29 = RestoreV2[dtypes=[DT_FLOAT], _device="/job:localhost/replica:0/task:0/cpu:0"](_recv_save/Const_0, save/RestoreV2_29/ тензор_имений, сохранение /RestoreV2_29/shape_and_s)]] Вызвано op u'save/RestoreV2_29', определено в...

Я проверил Google Cloud Storage и этот файл (gs://my_file_name/train/model.ckpt-2*) существует. Почему он не может его найти?

Answer 1

Попробуйте переключиться на отдельную область Google Cloud Storage.

Функция восстановления Tensorflow пытается вывести список файлов в вашем хранилище Google Cloud Storage, которые только что были записаны. Тем не менее, Google Cloud Storage не очень согласован при перечислении файлов, если вы пишете в многорегиональную корзину. В этом случае области с одним регионом строго согласованы и не будут иметь этой проблемы. Они также обеспечат более высокую производительность, если предположить, что один регион совпадает с регионом, в котором вы обучаетесь.

Смотрите также:

https://cloud.google.com/ml/docs/how-tos/getting-set-up https://cloud.google.com/ml/docs/concepts/environment-overview