Хранит ли Azure Data Lake Data для Google Analytics только временно?
Я прохожу курс в MVA "Знакомство с озером данных Azure", и до модуля 2 в каждом видео он подчеркивает, что мы платим только за то время, которое уходит на выполнение работы.
Это сбивает меня с толку, если оно имеет тенденцию или предназначено для постоянного хранения данных всех наших данных истории транзакций, или оно предназначено только для временного анализа части транзакции в ней и после выполнения вычислений на нем с помощью любого аналитического языка, например, USQL, HIVE,PIG и отбросьте временный аналитический источник, как только это будет сделано
Другими словами:
Создает ли он временную или промежуточную таблицу, анализирует ли на ней данные и отбрасывает таблицу после получения статистики. Либо Data Lake имеет тенденцию или предназначена для хранения данных для будущего использования, таких как хранилище, и выполнения аналитических работ на них в соответствии с требованиями бизнеса, и для этого хранилища не стоит столько исторических затрат, сколько только для времени обработки для его анализа.
С уважением Харсимран
1 ответ
Данные, которые вы загружаете в учетную запись хранения ADL или записываете с помощью задания U-SQL или Hive (например, с помощью оператора OUTPUT или вставляете в таблицу), будут храниться в учетной записи хранения ADL и будут использовать пространство. Пространство в вашей учетной записи ADLS не ограничено размером кластера и будет расти по мере увеличения ваших потребностей.