Пакет DQS SSIS висит в VS2010
У меня есть пакет, который используется для чистки DQS. У меня более 650 000 записей для очистки, однако после обработки около 350 000 записей у меня появляется симптом, который приводит к зависанию моего проекта. Например, я закрою свой проект / решение для Visual Studio, но как только я попытаюсь вернуться, чтобы открыть свой проект, я получаю сообщение "Visual Studio ожидает внутренней операции" в правом нижнем углу. Как только это произойдет, я не смогу щелкнуть или прокрутить в любом месте моего проекта Я использую SQL 2012 для перемещения данных из одной таблицы в другую, но в другую базу данных на сервере / экземпляре SQL 2012. Кроме того, я использую клиент DQS для очистки и проверки данных для фамилии, штата и страны. Моя визуальная студия - версия 2010. Я запускаю все это на виртуальной машине, которая имеет 8 г оперативной памяти и 4 ядра. У меня установлен накопительный пакет обновления для SQL 2012. На этом этапе мне нужно убить VS2010 в диспетчере задач, но, похоже, я больше не могу работать с моим проектом SSIS. Я должен удалить все свои записи в моей целевой таблице, чтобы снова попасть в свой проект. Спасибо за любую помощь или идеи, Майкл
1 ответ
DQS Cleansing - ОЧЕНЬ ресурсоемкая задача. Согласно Руководству по рекомендациям по производительности для служб качества данных, даже при соблюдении рекомендаций и рекомендаций по аппаратному обеспечению очистка DQS на 1 млн. Строк может занять 2-3,5 часа.
Кроме того, я согласен с комментариями Pondlife о запуске в BIDS против DTEXEC. BIDS/SSDT является 32-битной (ограничение памяти до 2-3 ГБ), в то время как DTEXEC имеет 64-битную версию, которая может использовать гораздо больше памяти.