Правила хранения Apache Falcon

Я хочу использовать Apache Falcon для очистки моего кластера в отношении некоторых основных правил хранения (например, "Я хочу удалить все данные старше XX дней в этом пути HDFS").

Я смог создать свой кластер и каналы: я создал 1 канал для каждого пути, связанного с политикой хранения.

В результате я вижу, что Oozie регулярно выполняет задания в кластере, но политика хранения, похоже, не применяется, так как она ничего не удаляет по заданному пути (фидам).

Тем не менее, рабочие места заканчиваются статусом "УСПЕШНО", что означает, что все работало хорошо...

Кто-нибудь сталкивался с такой проблемой? Я не знаю, что не так, может быть, я не очень хорошо понимал цель "удержания" в Apache Falcon.

0 ответов

Другие вопросы по тегам