Способы получения дополнительных данных в Apache Kylin из улья?
Кто-нибудь знает о том, каковы различные способы получения инкрементальных данных из куста в таблицы фактов и измерений apache kylin? Пожалуйста, предложите мне.... Я много пробовал. Но моя команда curl не смогла получить дополнительные данные таблицы фактов улья в таблицу фактов kylin.
1 ответ
Apache Kylin предназначен для дополнительной загрузки данных с первого дня. Он прост и должен работать со всеми источниками данных, а не только с Hive. Ключевые моменты:
- Создать секционированную модель данных. Убедитесь, что "Столбец даты раздела" правильно установлен на вкладке "Настройки" модели.
- Построить куб, выбрав временной диапазон. При наличии секционированной модели вам будет предложено указать временной диапазон при построении куба. Убедитесь, что это появляется.
- Затем дальнейшая сборка того же куба предложит увеличить интервал времени.
- Инкрементная сборка также может запускаться из RestAPI, предоставляя непрерывные диапазоны времени.