Описание тега snappydata
SnappyData - это интеграция с открытым исходным кодом базы данных в памяти GemFireXD и кластерной вычислительной системы Apache Spark для рабочих нагрузок OLTP, OLAP и приблизительной обработки запросов.
1
ответ
Храните часть данных в памяти, а часть на диске
У меня есть таблица столбцов с миллионами записей. Я хотел бы сохранить только последние 3 месяца в памяти, остальное должно быть на диске, но можно проконсультироваться. Возможно ли это сделать в SnappyData?
05 сен '17 в 13:50
2
ответа
SnappyData SQL PUT INTO не обновляет значения
Привет я использую SnappyData и пытаюсь обновить Table_A с рядами из Table_B: Table_A(key1, key2, val, primary key(key1, key2)) -- cumulative results Table_B(key1, key2, val, primary key(key1, key2)) -- new rows - updates Так как Table_B будет содер…
13 апр '17 в 18:31
2
ответа
Snappydata UDF ClassNotFoundException
Я создал snappydata udf, затем, когда я использую его, он выдает исключение, как это ПРЕДУПРЕЖДЕНИЕ: [kryo] Невозможно загрузить класс com.gaojihealth.bdp.application.snappydata.udf.TBUdf с помощью загрузчика классов kryo. Повторная попытка с текущи…
08 июн '18 в 07:19
1
ответ
SnappyData: подключить автономное задание зажигания к встроенному кластеру
То, чего я пытаюсь достичь, похоже на режим Smart Connector, но документация мне не сильно помогает, потому что примеры Smart Connector основаны на Spark-Shell, а я пытаюсь запустить отдельное приложение Scala. Поэтому я не могу использовать аргумен…
25 окт '17 в 21:53
1
ответ
Могу ли я объединить три таблицы в snappy данных
Мне нужно выполнить colocate join для таблиц категорий и подписчиков И мне также нужно выполнить объединение colocate для категорий и таблиц лайков, могу ли я определить опцию colocate_with как несколько таблиц
03 авг '18 в 06:00
1
ответ
Как загрузить данные CSV в таблицу snappydata в режиме rowstore с использованием соединения JDBC
Привет, я начинаю изучать ссылку на хранилище строк snappydata, там я попробовал все примеры, как он работает, но мне нужно сохранить данные csv, json в таблице snappydata, в примере, который они используют, вручную подключая оболочку snappy и созда…
12 мар '17 в 08:19
2
ответа
Может ли схема базы данных SnappyData сосуществовать с хранилищем метаданных улья?
Я создал схему базы данных с несколькими таблицами строк в SnappyData 0.9 без подключения к хранилищу метаданных улья. Позже я добавляю свойство hive.metastore.uris в файл hive-site.xml и подключаю к нему SnappyData. К моему удивлению, ведущая служб…
12 июл '17 в 19:55
1
ответ
SnappyData или SnappySession: SignalHandler: получен явный сигнал ОС SIGPIPE
Получите эту ошибку при отправке данных в кластер: 2018-01-22 18:49:54 101 4859929 [обработчик SIGPIPE] ПРЕДУПРЕЖДЕНИЕ snappystore - SignalHandler: получен явный сигнал ОС SIGPIPE java.lang.Throwable: null в com.pivotal.gemfirexd.internal.engine.Sig…
23 янв '18 в 06:52
2
ответа
Самый быстрый способ создать словарь из pyspark DF
Я использую Snappydata с pyspark для запуска своих sql-запросов и преобразования выходного DF в словарь, чтобы массово вставить его в монго. Я прошел через много похожих запросов, чтобы проверить преобразование искрового DF в словарь. В настоящее вр…
07 дек '17 в 10:47
1
ответ
SnappyData snappy-sql PUT INTO вызывает ошибку:spark.sql.execution.id уже установлен
Я использовал SQL-оболочку SnappyData (snappy-sql) и выполнял операторы SQL (PUT INTO) и столкнулся с ошибкой: ERROR 38000: (SQLState=38000 Severity=20000) (Server=localhost/127.0.0.1[1528] Thread=pool-3-thread-3) The exception 'com.pivotal.gemfirex…
13 апр '17 в 22:50
1
ответ
Как получить сохраненные данные массива в snappaydata?
У меня есть образец массива данных в snappydata. snappy-sql> select * from test; ID |DOMAINS ----------------------------------- 1 |{"COL_0":[1,2]} 2 |{"COL_0":[1,2,5,6,7,9]} Вставлены данные с использованием этого запроса: insert into test selec…
20 июл '18 в 12:49
1
ответ
Из pyspark.sql.snappy import SnappyContext - ImportError: Нет модуля с именем snappy
Даже после переустановки pyspark и snappydata каждый раз, когда я пытаюсь импортировать pyspark.sql.snappy, импортировать SnappyContext из кода ниже: from pyspark.sql.snappy import SnappyContext from pyspark.storagelevel import StorageLevel SparkCon…
31 окт '17 в 10:09
1
ответ
Увеличьте объем памяти Java на Spark для создания больших хэш-связей
В настоящее время я пытаюсь выполнить запрос TPC-H для SnappyData. Сначала запрос дал мне ошибку, говоря ОШИБКА 38000: (SQLState=38000 Severity=-1) (Сервер =localhost[1528], Поток [DRDAConnThread_29,5,gemfirexd.daemons]) Исключение "Обе стороны этог…
16 окт '16 в 21:05
1
ответ
SnappyData несколько заданий для достижения параллелизма
Я использую Snappydata и SQL для выполнения некоторого анализа, однако работа медленная и включает операции соединения с очень большими входными данными. Сначала я рассматриваю разделение входных данных, а затем одновременно запускаю задания на разн…
21 сен '17 в 02:35
1
ответ
Snappydata - sql, помещенный в сервер заданий, не агрегирует значения
Я пытаюсь создать банку для запуска на оболочке snappy-job с потоковой передачей. У меня есть функция агрегации, и она отлично работает в Windows. Но мне нужно иметь таблицу с одним значением для каждого ключа. Основываясь на примере из github a, со…
24 окт '17 в 08:30
1
ответ
Почему мой кластер SnappyData сталкивался с медленным запросом примерно раз в день
Когда мой кластер работает в течение определенного времени (может быть, дня, может быть, двух дней), некоторые запросы могут стать очень медленными, примерно на 2-10 минут, чтобы завершиться, когда это произойдет, мне нужно перезапустить весь класте…
23 фев '19 в 15:59
2
ответа
Snappydata не может иметь массив размером более 1000
Может ли кто-нибудь помочь мне и предоставить мне информацию относительно предела длины массива и размеров, которые может иметь строка таблицы строки / столбца. Я не могу добавить более 1000 элементов в мой массив. Есть ли способ увеличить его разме…
21 ноя '17 в 13:15
1
ответ
Тета Sketch (Yahoo) на SnappyData
Как хранить Theta Sketch (Yahoo) в таблице SnappyData вместо записи в файл? Потому что я создаю миллиарды эскизов каждый день, и мне нужно хранить миллионы эскизов в Интернете для запросов в реальном времени. Может кто-нибудь мне помочь? Благодарю.
11 май '18 в 10:27
1
ответ
Как хранить массив или блоб в SnappyData?
Я пытаюсь создать таблицу с двумя столбцами, как показано ниже: CREATE TABLE test (col1 INT ,col2 Array<Decimal>) USING column options(BUCKETS '5'); Он успешно создается, но когда я пытаюсь вставить в него данные, он не принимает какой-либо фо…
01 ноя '17 в 10:13
2
ответа
SnappyData - Ошибка при создании таблицы потоков Kafka
Я вижу проблему при создании таблицы потоковой передачи с использованием kafka из оболочки snappy. "Исключение" Неверный ввод "C", ожидаемая операция dmlOperation, insert, withIdentifier, select или put (строка 1, столбец 1):' Ссылка: http://snappyd…
09 авг '16 в 00:26