Hive внешняя таблица (не секционированная) с различными файловыми структурами в одном месте

Моя внешняя таблица улья (не секционированная) содержит данные в сегменте S3. Это инкрементная таблица.

До сегодняшнего дня все файлы, которые попадают в это место с помощью процесса Informatica, имели одинаковую структуру, и все поля включали столбцы в мою структуру добавочной таблицы.

Теперь у меня есть требование, чтобы новый файл поступал в ту же корзину в дополнение к существующим, но с дополнительными столбцами.

Я заново создал таблицу с дополнительными столбцами.

Но когда я запрашиваю таблицу, я вижу, что новые добавленные столбцы остаются пустыми для тех конкретных позиций, где их не должно быть.

Могу ли я на самом деле иметь одну внешнюю таблицу, указывающую на местоположение S3, имеющее различные файловые структуры?

0 ответов

Другие вопросы по тегам