Журнал прерывистого воздушного потока пропал
Ожидаемое поведение
Журнал воздушного потока будет на месте, пока кто-нибудь его не удалит.
Фактическое поведение
Журнал задач Intermittent Airflow пропал.
Информация
Версия: 1.10.4
Исполнитель: Сельдерей Палач
Один экземпляр EC2 с веб-сервером Docker и планировщиком + несколько рабочих мест Celery, размещенных на разных EC2 + один EC2 для RabbitMQ + RDS
Я настроил несколько моих DAG для повторных попыток несколько раз, в данном случае - 4 раза. Как видно из рисунков, 3 попытки оказались неудачными, а 4-я успешная. Полагаю, я могу видеть все журналы для каждой попытки в веб-интерфейсе Airflow. Но журнал для второй и третьей попыток исчез и показывает ошибку ниже
Failed to fetch log file from worker. 404 Client Error: NOT FOUND for url: http://xx.xx.xx.xx:xxxx/log/xxx/xxx/2020-06-03T08:00:00+00:00/3.log
Я также заметил, что это не единственная группа DAG, которая имеет такое поведение, другая группа DAG также имеет такой же шаблон, только некоторые показывают журналы в секундах и четвертых попытках, а отсутствующие - это первая и третья попытки.
Шаги по воспроизведению поведения
Повторите попытку хотя бы 3 раза, и вы увидите, что один из журналов отсутствует.
Журнал существует
Отсутствующий журнал
Кто-нибудь знает?