Описание тега sql-data-warehouse

1 ответ

Почему Polybase работает медленно для больших сжатых файлов, которые охватывают 1 миллиард записей?

Что может привести к снижению производительности Polybase при запросе больших наборов данных для вставки записей в хранилище данных Azure из хранилища BLOB-объектов? Например, несколько тысяч сжатых (.gz) CSV-файлов с заголовками, разделенными на не…
1 ответ

Паника во время массового копирования хранилища данных sql

Я записываю данные в Azure SQL Datawarehouse с помощью драйвера go-mssql. Я испытываю случайную панику (по крайней мере, я не смог надежно воспроизвести эту проблему) при использовании функции массового копирования для записи некоторых данных. Ошибк…
03 май '18 в 16:36
1 ответ

Отчет TFS Datawarehouse с "критериями принятия"

Мы используем TFS 2018, и мы хотели бы создать отчет SSRS по тестам, связанным с критериями приемлемости. Ниже приведены вопросы: 1) Поле критериев приемлемости недоступно в TFS_Datawarehouse. 2) Существуют ли рекомендуемые / передовые методы, предл…
14 авг '18 в 14:01
0 ответов

Конвертировать SQL-запрос в MDX - есть функции Group by & Count

У меня есть следующий запрос SQL, который я пытаюсь преобразовать в MDX: select avg(skucount) from ( SELECT count(distinct [SKUCode]) as skucount --,[SHOPCODE_WITHOUT_DIST] FROM [HFPL_DW].[dbo].[FactSecondarySales] where DISTCODE in ( SELECT [DISTRI…
02 окт '18 в 12:23
2 ответа

JOOQ с SQL DataWarehouse?

Поддерживает ли JOOQ диалект для " хранилища данных SQL "? Любые указатели.
23 мар '18 в 12:59
0 ответов

Почему оператор CTAS так быстро работает в Azure SQL DW?

Я заметил, что Create Table As Select (CTAS) в операторах хранилища данных SQL чрезвычайно быстр по сравнению с оператором Select into. Я хочу знать, что волшебная майкрософт сделала так быстро?
05 май '17 в 05:14
0 ответов

Получение контроля версий / управления конфигурацией и управления выпусками для таблиц, которые вручную импортируются в базу данных

Я опишу вам текущую ситуацию: У нас есть хранилище данных, где время от времени 50 таблиц обновляются вручную с помощью листов Excel пользователями этого хранилища данных. У нас есть собственный инструмент, с помощью которого мы можем загрузить эти …
31 май '18 в 09:42
1 ответ

Резервное копирование базы данных в хранилище данных SQL Azure

Есть ли способ сделать резервную копию базы данных, скажем "ABC", а затем восстановить ее с именем "ABC_Old" в хранилище данных SQL Azure? Любая помощь приветствуется. Спасибо!
1 ответ

Массовая обработка данных с использованием dapper и хранилища данных

Я использую dapper в переднем конце, чтобы обработать данные и вставить их в хранилище данных. У меня есть сценарий, в котором мне нужно отправить массовые данные из dapper в хранилище данных и выполнить несколько операций с ним. Я могу сделать это …
27 мар '18 в 12:10
2 ответа

Табличные переменные в хранилище данных Azure

В базе данных SQL Server можно использовать такие переменные таблицы, как это: declare @table as table (a int) В хранилище данных Azure это приводит к ошибке. Ошибка разбора в строке: 1, столбец: 19: неверный синтаксис рядом с таблицей В хранилище д…
17 янв '18 в 20:53
1 ответ

Ошибка при использовании метода записи объекта dataframe для блоков данных

Я пытаюсь записать некоторые данные в хранилище данных SQL Azure, используя Azure Databricks и Python. Код, который я использую, выглядит следующим образом: salesdf.write\ .format('com.databricks.spark.sqldw')\ .option('url', sqlDwUrlSmall)\ .option…
14 авг '18 в 16:59
1 ответ

Можно ли использовать системную временную таблицу в дизайне DWH фактического измерения?

Скажем, я хочу реализовать таблицу измерений истории SCD type2 (или я должен сказать таблицу с атрибутами SCD type2) в системе DWH, которую я сейчас внедряю как "обычную таблицу" с natural key + primary surrogate key + datefrom + dateto + iscurrent …
0 ответов

Динамическое усечение данных до 4000 символов при копировании в ADW с помощью фабрики данных Azure

При копировании данных из BLOB-объекта в хранилище данных Azure возникает следующая ошибка: "errorCode": "2200", "message": "ErrorCode = FailedDbOperation," Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message= Ошибка при загруз…
0 ответов

Вызов пакетного файла с использованием хранилища данных Azure

Я пытаюсь бежать EXEC master..xp_CMDShell 'c:\test.bat' в хранилище данных SQL Azure, но я обнаружил, что xp_CMDShell не поддерживается в Azure. Можете ли вы помочь с альтернативой для вызова exe из хранилища данных Azure? В командном файле я намере…
0 ответов

Фабрика данных - операция копирования только копирует 30 записей из выходных данных Cosmo dB Query в хранилище данных SQL Azure

Операция копирования данных фабрики данных Azure, использующая API-интерфейс Cosmo dB SQL в качестве источника с запросом для копирования данных в конечный объект Azure SQL DWH, копирует только 30 документов при запуске. В базе данных cosmo db более…
1 ответ

Вставка хранилища данных Azure в огромную таблицу

Согласованный шаблон для вставки новых данных в уже существующую таблицу в хранилище данных Azure выглядит следующим образом... create table dbo.MyTable_New with (distribution = round_robin) as select Col1 ,Col2 from dbo.MyTable union all select Col…
06 июл '17 в 16:22
1 ответ

Как добавить границу раздела, только если она не существует в хранилище данных SQL?

Я использую хранилище данных SQL Azure Gen 1 и создаю таблицу разделов, подобную этой CREATE TABLE [dbo].[StatsPerBin1]( [Bin1] [varchar](100) NOT NULL, [TimeWindow] [datetime] NOT NULL, [Count] [int] NOT NULL, [Timestamp] [datetime] NOT NULL) WITH …
14 сен '18 в 07:51
0 ответов

Как SSIS управляет трафиком соединения?

Недавно я начал использовать SSIS в своей практике, и я все еще учусь. У нас есть выделенный сервер SSIS, который выполняет все задания ETL и не содержит никаких других баз данных. У нас есть много SQL-серверов в качестве источника и назначения. Как…
1 ответ

Отладка сбоя учетных данных области базы данных SQL

Я создал учетные данные в базе данных Azure SQL Datawarehouse, чтобы создать внешнюю таблицу для некоторых файлов в хранилище озера данных Azure. Когда я пытаюсь создать внешнюю таблицу, я получаю сообщение. Сообщение 105061, уровень 16, состояние 1…
2 ответа

Озеро данных Azure - HDInsight и хранилище данных

Я нахожусь в состоянии, когда мы читаем из нашего озера данных Azure, используя внешние таблицы в хранилище данных Azure. Это позволяет нам читать из озера данных, используя хорошо известный SQL. Однако другой вариант - использование Data Lake Analy…