Описание тега snowflake-cloud-data-platform
Платформа Snowflake Cloud Data Platform имеет многокластерную общую архитектуру, которая обеспечивает единое расположение для структурированных и полуструктурированных данных, которые можно запрашивать с помощью ANSI SQL. Snowflake - это не зависящая от облака платформа с очень большим масштабом, которая поддерживает множество различных рабочих нагрузок: хранилище данных и аналитика, озеро данных, инженерия данных, безопасный обмен данными, приложения данных и наука о данных.
0
ответов
Как установить разные идентификаторы в распределенной системе для разных компьютеров
Как установить разные идентификаторы в распределенной системе для разных компьютеров? Арифметика снежинок Twitter может генерировать идентификатор в распределенной системе. У каждого отдельного компьютера есть идентификатор работника. Итак, как уста…
20 мар '18 в 16:35
2
ответа
Подключение django к снежинке и выполнение запросов ORM
Я рассчитываю перейти от Postgres к SnowFlake, так как некоторые из моих функций требуют анализа времени выполнения, который быстрее в Snowflake. Я мог получить только API-интерфейс соединителя Python для Snowflake, который потребовал бы от меня соз…
08 апр '18 в 07:08
1
ответ
Ошибка Py2exe: пакеты пространств имен еще не поддерживаются: пропуск пакета "снежинка"
Я пытался сгенерировать.exe для следующего сценария, используя py2exe: import snowflake.connector import os import sys # Setting your account information ACCOUNT = '########' USER = '#######' PASSWORD = '#######' ROLES=[] DATABASE=[] ROLES.append(sy…
24 мар '16 в 01:53
1
ответ
Sqlalchemy Snowflake не закрывает соединение после успешного получения результатов
Я подключаюсь к хранилищу данных снежинок из Python, и у меня странное поведение. Программа Python успешно завершается, если я получаю меньшее количество строк из SnowFlake, но зависает там, если я пытаюсь получить более 200К строк. Я на 100% уверен…
26 янв '18 в 15:24
1
ответ
Перенос хранимых процедур из Teradata BTEQ в Snowflake
Я пытаюсь перенести хранимые процедуры и связанные запросы из схемы Teradata BTEQ в схему Snowflake. Но так как снежинка не поддерживает хранимую процедуру, есть ли способ сделать это?
13 фев '17 в 10:18
0
ответов
Как обрабатывать не ascii символы в предложении where
Я сталкиваюсь с проблемой не-ascii символа в предложении where с использованием Oracle, MySQL, запроса снежинки. выберите * из таблицы, где col = 'Niño Pobre, Niño Rico'; Этот запрос не возвращает результата. Есть ли какое-либо решение для обработки…
24 май '18 в 12:42
0
ответов
Snowflake SQL, вставьте более 1 строки за раз, используя параметризованный SQL
Поэтому в настоящее время я просто пытаюсь перебрать цикл for и выполнить массовую вставку в снежинку значений, однако кажется, что они просто выполняют каждый запрос по одному вместо того, чтобы объединять их вместе. Я искал другие решения для испо…
25 сен '18 в 18:55
1
ответ
Установка драйвера Snowflake JDBC
Я пытаюсь установить драйвер Snowflake JDBC в соответствии с инструкциями.Я скачал и установил Java отсюда, затем скачал отсюда файл снежинки-jdbc-3.6.9.jar. Когда я дважды щелкаю файл, ничего не происходит. Итак, я открыл CMD и попробовал это: java…
03 фев '19 в 15:26
0
ответов
Может ли Snowflake DB UDF выполнять команды SQL?
У меня есть требование в Snowflake, где я должен сгенерировать немного SQL, а затем выполнить его для создания новой таблицы. Я успешно сгенерировал оператор create table, создав UDF (жестко запрограммированный в данный момент) CREATE OR REPLACE FUN…
02 ноя '18 в 15:15
1
ответ
Скопируйте таблицу транзакций Hadoop в снежинку
В настоящее время мы используем Hadoop и Snowflake для хранения наших данных. Процесс - Скопировать файлы Hadoop ORC в папку Snowflake s3, используя DISTCP, а затем запустить таблицу Копировать в Snowflake из S3. Это скопирует все, что есть в таблиц…
23 янв '19 в 12:15
7
ответов
generate_series() эквивалент в снежинке
Я пытаюсь найти эквивалент снежинки для функции generate_series() (синтаксис PostgreSQL). SELECT generate_series(timestamp '2017-11-01', CURRENT_DATE, '1 day')
24 янв '19 в 14:22
1
ответ
Снежинка достать много в питоне
Я пытаюсь создать фрейм данных pandas, используя пакеты Snowflake в python. Я запускаю какой-то запрос sf_cur = get_sf_connector() sf_cur.execute("USE WAREHOUSE Warehouse;") sf_cur.execute("""select Query""" ) print('done') Выход составляет примерно…
24 янв '19 в 17:56
0
ответов
Есть ли лучший способ обновить схему таблиц в хранилище данных Snowflake, не удаляя существующие таблицы?
Недавно мы начали использовать хранилище данных Snowflake в нашем проекте и столкнулись с проблемой. Скрипты создания таблиц и представлений были загружены в Git-репозиторий и выполнены через Jenkins. Для любого обновления (добавления или удаления с…
16 янв '19 в 22:18
6
ответов
Оптимальный способ хранения данных от панд до снежинки
Фрейм данных огромен (7-8 миллионов строк). Пробовал to_sql с chunksize = 5000, но он так и не закончился. С помощью, from sqlalchemy import create_engine from snowflake.sqlalchemy import URL df.to_sql(snowflake_table , engine, if_exists='replace', …
08 авг '18 в 11:31
1
ответ
Обновите все записи, кроме одной, в таблице в Snowflake Computing
Я использую эластичное хранилище данных Snowflake, предоставленное Snowflake Computing. У меня есть таблица, в которой нет столбца идентификатора или первичного ключа, но в таблице есть повторяющиеся строки. Моя проблема заключается в том, что в каж…
26 июл '17 в 20:54
0
ответов
Синхронизация таблицы Qubole HIve со снежинкой с полем Struct
У меня есть таблица, как следующий Qubole: use dm; CREATE EXTERNAL TABLE IF NOT EXISTS fact ( id string, fact_attr struct< attr1 : String, attr2 : String > ) STORED AS PARQUET LOCATION 's3://my-bucket/DM/fact' Я создал параллельную таблицу в S…
23 окт '18 в 08:15
6
ответов
Snowflake - как подключиться к Snowflake с помощью NodeJS
У кого-нибудь есть рабочий код для подключения NodeJS и Snowflake. Пробовал следующие инструкции для NodeJS: var snowflake = require('snowflake-sdk'); var connection = snowflake.createConnection({ account: 'account1', username: 'user1', password: 'p…
20 сен '18 в 16:34
1
ответ
Как запустить запрос с параметрами в DataGrip?
Как в DataGrip передать параметры в SQL-запрос? Скажи, у меня есть запрос: select * from table where date >= ? Тогда как я могу связать переменную здесь? Когда я открываю панель параметров, т.е. P Кнопка здесь. я вижу Нет параметров Или же: Где я…
18 фев '19 в 21:38
0
ответов
Интеграция Flyway с Git и подключение к Snowflake
У нас есть база данных с несколькими таблицами, и каждый раз, когда мы вносим какие-либо изменения в схему какой-либо таблицы, нам приходилось запускать некоторые ручные сценарии, чтобы избежать потери данных. мы ищем программное обеспечение, которо…
22 фев '19 в 20:12
1
ответ
Снежинка: REGEX_SUBSTR дает ноль?
Я использую регулярное выражение в Snowflake и получаю удивительный результат. В частности, я запускаю это: SELECT REGEXP_SUBSTR('https://example.com/a/b/c?name=me', 'https://example.com/a/b/c\?name=\\w+') и я вернусь NULL, Я ожидал получить полный …
17 авг '18 в 17:37