sql_alchemy_pool_size для исполнителя Kubernetes на воздушном потоке

airflow version = 1.10.3
executor = KubernetesExecutor
airflow metadataDB = postgresDB

Имеет ли какое-либо значение какие-либо параметры пула воздушного потока (sql_alchemy_pool_size, sql_alchemy_max_overflow, sql_alchemy_pool_recycle) с моей вышеупомянутой настройкой? (Обменивается ли каждая задача kubernetes воздушным потоком напрямую с БД метаданных?). Я добавил это в раздел [core] моего файла airflow.cfg, но не заметил никаких изменений в поведении.

Мы наблюдаем большое количество подключений (от 40 до 70) и высокую загрузку ЦП с БД postgres?

Любое решение здесь приветствуется.

0 ответов

Другие вопросы по тегам