Как выполнить CDC для кластера mysql percona и создать темы для всех dbs
Я искал решение для захвата всех изменений базы данных (создание, удаление, обновление) из 3-узлового кластера percona mysql и отправки обновлений в инструмент визуализации, такой как Kibana, для поиска событий. Многие предлагали mysql bin log-> Debezium/maxwell->Apache kafka-> Ekasticsearch(kibana). У меня есть следующие вопросы по этой настройке,
- Подобрал ли я правильное решение
- Как я могу фиксировать изменения для всех с сотнями баз данных и каждой БД со 100 таблицами? Я вижу, что тема может быть создана только для конкретной таблицы и конкретной базы данных с помощью debezium.
- С помощью maxwell я мог получить все изменения, но не смог возобновить работу с того места, где мы остановились, в случае остановки и запуска maxwell/ db.
Любая помощь приветствуется.