Azkaban: сбой из-за слишком большого количества заблокированных заданий в режиме конвейера

Выполнение Azkaban в конвейерном режиме приводит к сбою заданий после накопления достаточного количества заданий в заделе. Это происходит, если выполнение потока занимает больше времени, чем его частота планирования: введите описание изображения здесь Есть ли способ заставить Azkaban запускать новый экземпляр только после того, как предыдущий закончился, при этом не пропуская ни одного экземпляра. Мы не можем пропустить экземпляры, потому что параметр времени, передаваемый каждому, помогает выбрать продолжительность данных, которые должны быть обработаны.

0 ответов

Другие вопросы по тегам