есть ли способ обучить модель машинного обучения на нескольких ноутбуках?

Question

У меня два ноутбука, и я хочу использовать их для обучения модели DL. У меня нет опыта работы с распределенными системами, и я хочу знать, можно ли использовать вычислительную мощность двух ноутбуков вместе для обучения одной модели. Что оtf.distribute.experimental.ParameterServerStrategy? Будет ли это полезно?

Answer 1

Да, вы можете использовать несколько устройств для обучения своей модели, и вам необходимо настроить кластер и рабочую конфигурацию на обоих устройствах, как показано ниже.

tf_config = {
    'cluster': {
        'worker': ['localhost:12345', 'localhost:23456']
    },
    'task': {'type': 'worker', 'index': 0}
}

Это пособие от Tensorflow на нескольких рабочих тренировки с Keras покажет вам все подробности о конфигурации и подготовки вашей модели.

Надеюсь, что это ответ на ваш вопрос.