Описание тега snowflake-datawarehouse

Хранилище данных Snowflake Elastic, разработанное Snowflake Computing, представляет собой облачное хранилище данных, предоставляющее интерфейс SQL для структурированных и полуструктурированных данных на основе файлов и S3.
1 ответ

Как получить доступ к таблицам RDD с помощью Spark SQL как хранилища данных SnowFlake JDBC Distributed Query Engine?

Привет, я хочу запросить мою временную таблицу базы данных из снежной базы. Как, например, Как получить доступ к таблицам RDD через Spark SQL как механизм распределенных запросов JDBC? Есть ли способ сделать это из базы данных снежинок, работающих н…
1 ответ

Почему матиллион не загружает данные из S3?

У меня простая загрузка S3 со всей правильной информацией. Нет ошибок проверки, но пакет выполняется без проблем. Просто в таблице нет данных. Какие-нибудь подсказки от кого-то, кто знает о Матиллионе?
08 июн '18 в 18:01
2 ответа

Подключение django к снежинке и выполнение запросов ORM

Я рассчитываю перейти от Postgres к SnowFlake, так как некоторые из моих функций требуют анализа времени выполнения, который быстрее в Snowflake. Я мог получить только API-интерфейс соединителя Python для Snowflake, который потребовал бы от меня соз…
2 ответа

Что такое движок Amazon Snowflake?

Когда вы находитесь на Hadoop, вы можете заставить YARN управлять заданиями, ресурсами и т. Д. Hadoop... Какова эквивалентная форма для снежинки Амазонки? Hadoop (HDFS) для YARN, как снежинка для __________
30 янв '19 в 18:52
0 ответов

Снежинка - обновление с коррелированным подзапросом с использованием timediff

Я выполняю этот запрос в базе данных Snowflake: UPDATE "click" c SET "Registration_score" = (SELECT COUNT(*) FROM "trackingpoint" t WHERE 1=1 AND c."CookieID" = t."CookieID" AND t."page" ilike '%Registration complete' AND TIMEDIFF(minute,c."Timestam…
1 ответ

Ошибка Py2exe: пакеты пространств имен еще не поддерживаются: пропуск пакета "снежинка"

Я пытался сгенерировать.exe для следующего сценария, используя py2exe: import snowflake.connector import os import sys # Setting your account information ACCOUNT = '########' USER = '#######' PASSWORD = '#######' ROLES=[] DATABASE=[] ROLES.append(sy…
2 ответа

Python-коннектор Snowflake не работает с большим набором данных в AWS Lambda

Я использую Python-коннектор Snowflakes, чтобы попытаться получить набор данных из нашего хранилища данных для обработки. Это задание выполняется в лямбда-функции AWS и имеет проблемы, когда возвращаемые строки равны ~20 или около того. Когда я уста…
1 ответ

Оператор SQL IN с подзапросом возвращает false, но оно должно быть истинным

У меня есть некоторые данные в Snowflake, и я использую веб-интерфейс для выполнения некоторых запросов. У меня есть следующий запрос: select * from MY_TABLE where AIRPORT_CODE in (select IATA from AIRPORT_CODES_TABLE) Это возвращает пустой результа…
01 авг '18 в 19:02
1 ответ

Sqlalchemy Snowflake не закрывает соединение после успешного получения результатов

Я подключаюсь к хранилищу данных снежинок из Python, и у меня странное поведение. Программа Python успешно завершается, если я получаю меньшее количество строк из SnowFlake, но зависает там, если я пытаюсь получить более 200К строк. Я на 100% уверен…
0 ответов

Как получить доступ к метаданным для пользовательских записей NetSuite с помощью SuiteAnalytics Connect?

Я создаю пользовательский соединитель NetSuite для клиента. В конечном итоге данные окажутся в Snowflake. Я использую SuiteAnalytics Connect по причинам производительности, а не API, используя поставщика ADO.NET. Запрашивая OA_TABLES, теперь у меня …
08 авг '18 в 17:28
2 ответа

Кейс-запрос с группировками по сгенерированному столбцу

Это пример псевдо-SQL, над которым я работаю. select count(*) as "count", time2.iso_timestamp - time1.iso_timestamp as "time_to_active", case when ("time_to_active" >= 1day and "time_to_active" <= 5days) then '1' when ("time_to_active" >= 6…
1 ответ

Перенос хранимых процедур из Teradata BTEQ в Snowflake

Я пытаюсь перенести хранимые процедуры и связанные запросы из схемы Teradata BTEQ в схему Snowflake. Но так как снежинка не поддерживает хранимую процедуру, есть ли способ сделать это?
5 ответов

Выполните обновление через левое соединение в Снежинке

Обычно я создавал бы эту таблицу с одним оператором SELECT с коррелированными подзапросами, но я не могу в Snowflake? В любом случае, я хочу обновить все строки в таблице специальным значением (9999) для тех, которые не совпадают. В T-SQL я бы сдела…
04 дек '18 в 03:54
0 ответов

Как использовать формат файла для декодирования столбца CSV?

У меня есть некоторые данные в строковом столбце в странном формате CSV. Я могу написать формат файла, который правильно его интерпретирует. Как использовать мой формат файла для данных, которые уже были импортированы? create table test_table ( my_c…
10 янв '19 в 11:13
0 ответов

Снежинка - как распознать \r\n как разделитель строк, но не \ n

У меня очень неприятный формат CSV, где некоторые поля содержат \n, Конец строки всегда ограничен \r\n - Как мне настроить мой формат файла, чтобы совпадать только на обоих символах и игнорировать только экземпляры \n, Формат файла принимает RECORD_…
22 янв '19 в 17:02
1 ответ

Установка драйвера Snowflake JDBC

Я пытаюсь установить драйвер Snowflake JDBC в соответствии с инструкциями.Я скачал и установил Java отсюда, затем скачал отсюда файл снежинки-jdbc-3.6.9.jar. Когда я дважды щелкаю файл, ничего не происходит. Итак, я открыл CMD и попробовал это: java…
0 ответов

Как правильно получить Avro-файлы, содержащие JSON, в табличную структуру на Snowflake?

Я изо всех сил пытался перенести свои данные из Azure Event Hub в SQL-таблицу на платформе Snowflake. Я просто не могу понять, как это сделать правильно, если мне нужно преобразовать данные несколько раз. Мои данные находятся в теле Avro-файла. Я то…
19 фев '19 в 12:05
1 ответ

Суммирование значений из массива JSON в Snowflake

У меня есть исходные данные, которые содержат следующий тип массива JSON: [ [ "source 1", 250 ], [ "other source", 58 ], [ "more stuff", 42 ], ... ] Может быть 1..N пар строк и значений, подобных этому. Как я могу сложить все значения вместе из этог…
27 авг '18 в 07:00
2 ответа

Как разделить числовой и текст в SQL, когда весь столбец хранится как текст?

У меня есть столбец, который включает в себя как числовые, так и текстовые данные. Потому что число представляет одну группу, а текст представляет другую группу. Тем не менее, столбец хранится в виде текста в SQL. Можно ли как-нибудь разделить их на…
28 фев '19 в 01:19
1 ответ

Снежинка - пытается загрузить строку данных CSV в Variant - "Ошибка синтаксического анализа JSON:"

Я пытаюсь загрузить всю строку в CSV-файл в столбец варианта. мой copy into утверждение не соответствует нижеследующему Ошибка синтаксического анализа JSON: Что действительно странно, так как мои данные не в формате JSON, и я никогда не говорил, что…
09 янв '19 в 16:32