Описание тега scd2

Описание тега Вопросы с тегом
Используйте это, чтобы отметить вопросы, связанные с ETL. SCD, т.е. медленно изменяющиеся данные - это данные, которые изменяются медленно, но непредсказуемо, а не по регулярному графику.
2 ответа

Синтаксис T-SQL для SCD типа 2

В настоящее время я пытаюсь завершить заключительную часть запроса, который загружает данные типа SCD 2 в измерение. На основании данных, приведенных ниже, я хотел бы создать вывод, который можно вставить в измерение в дополнение к устаревшим старым…
13 фев '12 в 23:52
2 ответа

Индекс Postgres

Я новичок в Postgres. Мы внедрили SCD типа 2 в нашем проекте, используя Postgres. Входной файл представляет собой файл полного обновления с примерно 30 миллионами записей в день. Номер счета является ключевым столбцом. Приблизительное количество нов…
18 окт '16 в 01:52
1 ответ

T-SQL Type 2 SCD с BINARY_CHECKSUM на лету

Я пытаюсь реализовать тип 2 SCD для моей работы в T-SQL. Я придерживаюсь замечательного подхода, приведенного в этой ссылке: https://www.mssqltips.com/sqlservertip/2883/using-the-sql-server-merge-statement-to-process-type-2-slowly-changing-dimension…
11 янв '19 в 06:17
1 ответ

Как избежать осиротевших записей после удаления SCD

Я удаляю некоторые SCD из DW, поскольку они не требуются и реализуются с помощью операторов SELECT EXCEPT, которые создают большое количество дубликатов. Я хочу перенаправить ссылки в таблицу фактов, чтобы у нас не было осиротевших записей. Мне удал…
30 июл '14 в 13:17
1 ответ

Реализация таблицы scd2 в Google BigQuery

Я пытаюсь создать таблицу типа 2 SCD (медленно изменяющееся измерение) в BigQuery без использования каких-либо DML тестовая схема: id | date | name | valid_from | valid_to | flag Мне нужно захватить изменения имени для конкретного id, Спасибо,
25 ноя '18 в 19:21
1 ответ

Нужна помощь в написании Teradata SQL для проверки нескольких диапазонов дат, объединенных из более чем одной таблицы SCD type2

Я хотел проверить представление, полученное из нескольких таблиц SCD type2. Итак, я должен создать диапазоны дат на основе комбинации дат, доступных в двух (или более) таблицах. см. пример ниже. Таблица 1: hid h1name h1_strt_dttm h1_end_dttm 5 value…
28 авг '15 в 16:08
1 ответ

Управление фильтрами PerformancePoint с медленно меняющимися размерами

Просто немного справочной информации: У меня есть таблица измерений, которая использует SCD2 для отслеживания пользовательских изменений в нашей компании (изменения команды, изменения должности и т. Д.). См. Пример ниже: Я построил куб служб Analysi…
04 дек '15 в 17:29
1 ответ

Как обновить и вставить новую запись в случае соответствия условию в SQL Server

Я написал хранимую процедуру в SQL Server. В основном это пытается обработать SCD2. Три вещи, которые я пытаюсь сделать: Если не соответствует цели, вставьте запись Если источник не соответствует, деактивируйте активную запись (обновление) При совпа…
10 фев '18 в 22:30
0 ответов

SCD2 в SSIS всегда видит все записи как новые

Вот моя проблема Я хочу просто построить процесс ETL, в котором в потоке данных я беру некоторые данные из своей промежуточной схемы и загружаю их в другое место. Также мне нужно реализовать SCD2 там. Так что в теории это звучит просто - но компонен…
21 июн '18 в 12:52
0 ответов

SCD в BIDS 2016 SSIS

Я пытаюсь достичь типа 2 SCD с помощью преобразования SCD. Когда я обновляю что-то в источнике, вместо обновления только этой строки, преобразование SCD обновляет и вставляет все строки. Например, у soruce есть 50 строк, и у места назначения есть те…
14 июл '17 в 05:08
1 ответ

Используйте SQL для удаления дубликатов из медленно меняющегося измерения типа 2

Я строю хранилище данных с несколькими слоями, хранящими одни и те же данные. Все данные в одном из промежуточных слоев имеют версии с начальной и конечной датами, как если бы это было медленно изменяющееся измерение типа 2. Проблема возникает, когд…
10 июл '14 в 06:35
1 ответ

Преобразование контрольной суммы служб SSIS с типом SCD 2

В SSIS SCD Type 2 Преобразование, мы можем сохранить старые исторические данные. Как мы можем сохранить исторические данные, используя преобразование контрольной суммы?
16 авг '17 в 08:20
1 ответ

Загрузка таблицы гибридных размеров с атрибутами SCD1 и SCD2 + SSIS

Я только в процессе запуска новой задачи, в которой мне нужно загрузить таблицу гибридных измерений со SCD1 и SCD2. Это должно быть достигнуто как пакет служб SSIS. Кто-нибудь может подсказать, как лучше всего справиться с этим в службах SSIS, следу…
18 апр '10 в 08:15
3 ответа

Ведение исторических изменений данных в родительско-дочерней таблице

1 Сотрудник имеет N Адрес. Здесь мне нужно сохранить историческую информацию об изменениях Сотрудника и Адреса, если какие-либо изменения были сделаны любыми пользователями в этих двух таблицах. Стол сотрудника: Employee( EmpID BIGINT PRIMARY KEY ID…
28 ноя '18 в 06:38
0 ответов

Лучшие практики использования компонента SCD в Talend

Я использую tPostgresqlSCD. Производительность действительно медленная. Он вставляет 1 строку в секунду или даже медленнее. Есть ли способ увеличить производительность? Я попробовал "Использовать режимы экономии памяти". Что делает его еще медленнее…
16 мар '17 в 12:04
2 ответа

Как создать отчет о ежедневных изменениях в таблице SCD 2

Мне нужно создать отчет, который будет показывать количество новых / измененных строк в день для таблицы SCD. Вот SQL для создания таблицы: create table #scd( code nvarchar not null , startdate date not null , enddate date ); alter table #scd add co…
16 июн '12 в 07:01
1 ответ

Однопроходное объединение SCD2 нарушает первичный ключ в Oracle 12

Через некоторое время я понял, что imho довольно быстрое однопроходное слияние для исторического описания медленно меняющегося типа измерения 2. Он отлично работает на таблицах без уникальных ограничений. В основном это работает и для таблиц с уника…
21 дек '16 в 15:31
2 ответа

SCD2 + оператор слияния + SQL Server

Я пытаюсь работать с MERGE-статистикой, чтобы вставить / обновить таблицу размеров типа SCD2 Мой источник - табличная переменная для объединения с таблицей измерений. Мой оператор MERGE выдает ошибку как: Целевая таблица DM.DATA_ERROR.ERROR_DIMENSIO…
15 апр '10 в 03:15
1 ответ

SQL Server - Как использовать оператор слияния для медленного изменения измерения с более чем двумя условиями?

Я пытаюсь реализовать медленно изменяющийся тип 2 с помощью T-SQL, но не могу понять, как заставить запрос работать. Столбцы таблицы: cpf, nome, telefone_update, endereco_insert В основном логика такова: если MATCH не бывает с помощью cpfзатем запис…
23 янв '17 в 14:01
1 ответ

Как создать столбец ValidTo в SQL (тип SCD 2)

У меня есть эта задача: Для этой задачи используйте следующие таблицы в предоставленном наборе данных:  [Employee] (содержит имя и дату начала работы для каждой должности всех сотрудников, бизнес-ключ однозначно идентифицирует каждого сотрудника) …
10 апр '18 в 08:46