Описание тега orientdb-etl

Модуль Extractor Transformer and Loader, или ETL, для OrientDB обеспечивает поддержку перемещения данных в базы данных OrientDB и из них с использованием процессов ETL.
1 ответ

Импорт типа данных SQL Server SQL_VARIANT в вершину OrientDB - какой тип свойства мне следует использовать?

Я оцениваю OrientDB в качестве замены для MS SQL Server. Одна из таблиц SQL Server, которую мне нужно импортировать в OrientDB, содержит данные временных рядов со столбцом значения, использующим тип данных SQL_VARIANT. Я изо всех сил пытаюсь определ…
13 сен '18 в 13:11
0 ответов

Ориентированная проблема производительности ETL с импортом ребер в plocal на SSD

Моя цель - импортировать 25 миллионов ребер в графе, который имеет около 50 миллионов вершин. Целевое время: Текущая скорость импорта составляет ~150 ребер / сек. Скорость при удаленном соединении была около 100 ребер / сек. извлечено 20 694 336 стр…
12 ноя '16 в 10:31
0 ответов

Класс не найден в базе данных OrientDB Scala API

Я использую OrientDB через файл docker-compose. Я импортировал данные, используя инструмент загрузки ETL, и в базе данных Meetup был создан класс Event. Я могу просматривать данные этого класса через консоль OrientDB. Я попытался прочитать данные, и…
28 июл '18 в 09:34
0 ответов

Настройка производительности для загрузки гигабайт данных в OrientDB

В настоящее время я использовал инструмент ETL, чтобы вставить кучу данных CSV в OrientDB. Конфигурация системы, которую я использовал для ознакомительных целей, имеет большой размер EC2 M3 ( 7,5 ГБ памяти, 2 виртуальных ЦП, 32 ГБ локального хранили…
29 авг '16 в 02:02
1 ответ

Что делает _targetVertexFields_ параметр пограничного преобразователя в Orientdb?

В документации сказано Defines the field on which to set the target vertex. но что это значит, мне непонятно, так как уже есть joinFieldName а также lookup комбинация для выбора целевой вершины.
22 апр '18 в 21:37
1 ответ

Заполнение только вершины из файла CSV

Нужна помощь, чтобы узнать, как мне заполнить мой класс вершин в orientdb файлом csv. Формат в CSV-файле name,type,status xxxxx,ABC,3 yyyyy,ABC,1 zzzzz,123,5 -- У меня есть вершина и ребра, расширенные в OrientDB, где у вершины есть 3 свойства, имя,…
13 июн '17 в 12:46
1 ответ

Создание кромок по ETL в том же классе

1) Предметы класса с ItemId и Name готовы в базе данных. 2) CSV-файл: две колонки, ItemId1,ItemId2001 ItemId1,ItemId2345 ItemId1,ItemId2381 ... ItemId2,ItemId8393 ItemId2,ItemId8743 .. так далее. Вопрос: Как определить json-файл ETL для создания гра…
26 окт '16 в 11:27
1 ответ

Можно ли импортировать строчный JSON в OrientDB, используя инструмент ETL?

У меня есть куча файлов (~10 Гб каждый), где каждая строка представляет один объект JSON. Я хочу импортировать их в потоковом режиме, но, похоже, сейчас это не поддерживается (OrientDB v.2.2.12). Есть ли обходные пути? И каков рекомендуемый способ д…
10 ноя '16 в 10:05
0 ответов

Свойства ребра, затирающие свойства вершин в OrientDB из ETL

Это продолжение другого вопроса, который я разместил в отношении импорта простой базы данных в OrientDB с использованием ETL, у которого были свойства как ребер, так и вершин с датами на обоих. Вот мои данные: vertices.csv: label,data,date v01,0.123…
01 авг '16 в 15:42
1 ответ

Запись данных OrientDB из файлов CSV

Я исследовал OrientDB, и он в режиме одного хоста не показал выдающихся результатов в производительности. Мне нужно создать таблицу в OrientDB путем импорта записей из файла CSV. Существует ли какая-либо конкретная команда для записи файла CSV с одн…
05 сен '18 в 09:23
1 ответ

OrientDB ETL: как пропустить дублирующую вершину, но создать ребро

Я создаю коммуникационный граф.У каждого сообщения есть сообщение, и у каждого человека есть идентификатор пользователя.Я уже создал вершины сообщения, теперь я хочу создать пользовательские вершины и ребро, соединяющее вершину сообщения с пользоват…
14 июн '16 в 01:48
0 ответов

ETL: как импортировать огромный CSV и генерировать различные вершины / ребра на основе значений столбца CSV

У меня действительно огромный CSV-файл с несколькими столбцами (допустим, есть столбцы A - H). Первый столбец A является первичным ключом основной записи (вершина MainRecord). Но столбцы D, E, F, G являются столбцами, которые должны храниться в собс…
08 мар '18 в 07:43
1 ответ

Синхронизация OrientDB Community Edition

Я использую OrientDB 2.2 Community Edition и уже использовал teleporter для импорта базы данных SQL, состоящей из 22 таблиц и 11 миллионов записей. Я отбросил класс вершин, поскольку мне нужно было что-то изменить, и когда я пошел, чтобы заново импо…
18 сен '17 в 09:29
1 ответ

Результаты ETL OrientDB не в графе База данных

Я создал этот файл конфигурации: { "config": { "log": "debug" }, "extractor": { "jdbc": { "driver":"com.ibm.db2.jcc.DB2Driver", "url":"jdbc:db2://DB2TVIPA:447/DB2TVIPA", "userName": "lidt9bl", "userPassword": "Wam52017", "query": "select * from DB2T…
25 апр '17 в 18:15
0 ответов

Сохранять базу данных после ETL OrientDB

Я использую OrientDB через образ докера. Я импортирую все необходимые данные из файлов CSV с помощью ETL Loader. Однако после перезапуска docker-compose все данные теряются. Как я могу сохранить текущую базу данных? Должен ли я использовать некоторы…
26 июл '18 в 12:02
1 ответ

OrientDB ETL загружает CSV с вершинами в одном файле и ребрами в другом

У меня есть некоторые данные, которые находятся в 2 файлах CSV, один содержит вершины, а другой файл содержит ребра в другом файле. Я работаю над тем, как настроить это, используя ETL, и я близок, но еще не совсем там - это в основном работает, но у…
28 июл '16 в 06:11
1 ответ

OrientDB импортирует ребра только с помощью инструмента ETL

Я уже использовал OETL, чтобы вставить всю мою вершину в график. Теперь у меня есть файл, который очерчивает края следующим образом: node_1, rel_type, node_2 11000001, relation_A, 10208879 11000001, relation_A, 10198662 11000001, relation_B, 1015992…
10 май '16 в 08:45
1 ответ

Как импортировать края из CSV с ETL в график OrientDB?

Я пытаюсь импортировать края из CSV-файла в OrientDB. Вершины хранятся в отдельном файле и уже импортированы через ETL в OrientDB. Так что моя ситуация похожа на импортные ребра OrientDB только с использованием инструмента ETL и ETL OrientDB, загруж…
27 июл '17 в 09:03
0 ответов

Как загрузить огромный CSV-файл в orient db

Я хочу загрузить огромный CSV-файл в мою восточную базу данных базы данных. Существует несколько контрольных списков для базы данных, которые должны следовать нашей базе данных. 1 - будет один CSV-файл, и этот CSV-файл будет содержать миллионы запис…
28 фев '18 в 10:46
0 ответов

Быстро загрузиться oritendb от RBMS

Как я могу быстро загрузить схему Orientdb и схему из существующей РСУБД . Я хотел бы извлечь существующую схему RDBMS в одну схему Orientdb, чтобы иметь возможность редактировать и корректировать схему вручную и контролировать окончательную схему. …
09 фев '18 в 16:27