Месо: добавить нового раба в мастера, не останавливая мастер?
У меня есть работа на кластере искр мезос. Я хотел бы добавить нового подчиненного в кластер, не останавливая мастер, и выделить нового добавленного подчиненного для выполняющегося задания.
Как мне это сделать? Благодарю.
1 ответ
Решение
Если вы вызываете подчиненное устройство с установленным флагом --master для существующего мастера, оно должно автоматически добавляться в кластер. Любые задачи, которые уже выполняются на ведомом устройстве, не будут перепланированы на этом новом ведомом устройстве, но любые задачи, запущенные заданием spark, будут использовать ресурсы, предоставленные этим новым ведомым устройством.