Настройка политики истечения срока действия объекта AWS S3 для каталога контрольных точек Apache Spark Streaming

У кого-нибудь есть опыт работы с политиками истечения срока действия в корзинах S3, в которых размещаются каталоги контрольных точек спарк-потоков? Я настроил приложение, используя spark streaming + kafka, и я хочу использовать корзину S3 с 24-часовой политикой истечения, установленной для хранения каталога контрольных точек. Тем не менее, я хочу подтвердить, что это не будет мешать работе контрольных точек. Так кто-нибудь делал это раньше?

0 ответов

Другие вопросы по тегам