Описание тега bulk-load

Массовая загрузка означает импорт файла данных в указанном пользователем формате в таблицу или представление базы данных.
0 ответов

Hdfs загрузить Hbase Utility

Я попробовал следующую команду, чтобы загрузить данные из hdfs в таблицу hbase. Задание загружает данные в таблицу hbase, но не в соответствующие столбцы (то есть значение col1 загружается в col2, значение col2 загружается в col5 и т. Д.). Может ли …
22 янв '18 в 16:50
1 ответ

Массовая замена содержимого таблиц SQL Server

Мое приложение ASP.NET MVC имеет несколько веб-серверов, обращающихся к базе данных SQL Server через Entity Framework 6. База данных имеет 2 таблицы, между которыми существует связь один ко многим. Один раз в день все содержимое обеих таблиц необход…
23 май '14 в 17:31
1 ответ

Импорт файла XML в базу данных SQL с несколькими дочерними элементами

Я пытаюсь импортировать файл XML в базу данных SQL Server. Пожалуйста, посмотрите на код и файл XML. Заранее спасибо. Я пытался гуглить много страниц, но все они имеют дело только с одним ребенком (или как это назвать). Но в моем реальном XML структ…
12 окт '12 в 13:38
2 ответа

Массовая вставка и разбор сложного XML-файла в несколько таблиц

У меня есть следующая хранимая процедура sql для массовой вставки и анализа XML-файла и вставки его данных в несколько таблиц в базе данных. Sql ниже работает, однако его вставка дублирующих записей в таблицу #questions и таблицу #cards. Любая помощ…
18 май '13 в 02:35
0 ответов

Исключение в потоке "main" java.lang.reflect.InvocationTargetException

Я запускал программу массовой загрузки hbase в кластере с одним узлом на терминале. команда hadoop для запуска этой работы HADOOP_CLASSPATH='hbase classpath' hadoop jar /home/cloudera/Videos/hbaseBulk.jar /user/cloudera/Game1.csv /user/cloudera/hbas…
06 июн '13 в 10:44
2 ответа

Есть ли ограничения по времени для одного вызова синхронизации в Eloqua?

Мне нужно получить 1000 тыс. Записей из Eloqua для отправки в мул ESB. Для получения данных я делаю следующие 3 вызова в Eloqua: Создать определение экспорта Синхронизировать исходящие данные во временную промежуточную область Получить данные В каче…
02 авг '17 в 07:42
1 ответ

Redis массовая вставка: протокол против встроенных команд

Для моей задачи мне нужно как можно скорее загрузить большую часть данных в Redis. Похоже, эта статья относится к моему делу правильно: https://redis.io/topics/mass-insert Статья начинается с примера использования нескольких встроенных SET Команды с…
01 авг '17 в 15:29
1 ответ

SQLXMLBulkLoad: обнаружена COMExecption, ошибка подключения к источнику данных

Я сталкиваюсь с этой ошибкой при попытке сделать SQLXMLBulkLoad. Вот конфигурация для объекта: Public Shared objbl As New SQLXMLBULKLOADLib.SQLXMLBulkLoad4 objbl.ConnectionString = ReadVariables("Data Source=localhost;Initial Catalog=db1;Integrated …
17 окт '12 в 16:32
0 ответов

Передать несколько файлов изображений в массиве на сервер.JS Node

У меня есть простой скрипт, который читает все изображения из определенной папки. Я хочу, чтобы он прочитал все файлы изображений и сразу отправил данные в мой Node .JS API. Затем Node.JS API обрабатывает эти изображения одно за другим. Я не хочу от…
25 апр '18 в 05:50
1 ответ

Массовая загрузка данных Apache Phoenix - не может использовать имя таблицы маленькой буквой

У меня есть таблица Phoenix abc, я хочу массовую загрузку данных через MapReduce, а затем использовал следующую команду для загрузки файла CSV Jadoop Jar /root/Phoenix/apache-phoenix-4.8.0-HBase-0.98-bin/phoenix-4.8.0-HBase-0.98-client.jar org.apach…
16 дек '16 в 08:38
3 ответа

В PostgreSQL как вставить данные с помощью команды COPY?

У меня проблема при запуске 1 проекта NodeJs с базой данных PostgreSQL. У меня ошибка при попытке вставить данные в pgAdmin с помощью COPY команда. COPY beer (name, tags, alcohol, brewery, id, brewery_id, image) FROM stdin; Bons Voeux blonde 9.5 Bra…
28 авг '15 в 12:43
1 ответ

Массовый импорт Neo4j для Windows

Я запускаю Neo4j 2.0.2 на сервере Windows 2012 и мне нужно быстро импортировать сотни миллионов узлов / связей (в день). Существуют ли какие-либо инструменты или процессы массового импорта, которые можно использовать в Windows? Я попытался загрузить…
25 апр '14 в 15:02
1 ответ

Загрузить данные S3 в экземпляр Aurora MySQL

Я пытаюсь загрузить данные в S3 в экземпляр Aurora MySQL. Я сделал это с помощью PySpark и производительность составляет 4 ГБ в час. current_df.write.format('jdbc').options( url=url, driver=jdbc_driver, dbtable=table_name, user=username, password=pa…
03 май '18 в 13:29
2 ответа

SQLXML Импорт / Экспорт

У меня есть база данных SQL, из которой я экспортирую данные в виде XML, используя код VB.Net. Код относительно прост, работает быстро и прекрасно форматирует XML. Код является: Dim connetionString As String Dim connection As SqlConnection Dim adapt…
16 июл '13 в 21:31
1 ответ

Массовая вставка в Couchbase с использованием.NET SDK

Я пытаюсь массово вставить в couchbase, используя.NET SDK (1.3), но не могу найти правильный синтаксис. В документации SDK в разделе "Устранение неполадок" это относится к проблеме, которая может возникнуть при "массовой загрузке". Это заставляет ме…
27 мар '14 в 14:52
1 ответ

Выполнить команду COPY в удаленной базе данных, используя локальный файл

Я пытаюсь выполнить Postgres COPY команда. COPY warehouse_terminal.test_table FROM 'C:\file.csv' DELIMITERS E'\t' CSV HEADER QUOTE E'\"' ESCAPE E'\\' NULL AS ''; Проблема в том, что БД, где я собираюсь использовать это удаленно, а файл "file.csv" на…
2 ответа

Массовая загрузка в B-Tree

https://en.wikipedia.org/wiki/B-tree В настоящее время я знаю 2 способа построения B-Tree: массовая загрузка и вставка ключа после ключа. В примере вики ключи отсортированы, что является предварительным условием для массовой загрузки. В чем преимущ…
27 июл '17 в 11:11
1 ответ

Вставка файла в таблицу на сервере sql с помощью хранимой процедуры Giving error

declare @path nvarchar(max) set @path='C:\a\SQLQuery1.sql' SELECT * FROM OPENROWSET(BULK '@path',SINGLE_BLOB) as res Я пытаюсь выполнить этот конкретный блок в SQL-сервере, но его ошибка выдачи говорит, что Массовая загрузка невозможна,@path не суще…
01 мар '17 в 15:37
1 ответ

Как выполнить массовый импорт документов с пользовательскими метаданными из CSV в репозиторий Alfresco?

У меня есть файл Excel (или CSV), который содержит список документов с их свойствами и абсолютными путями на локальном жестком диске.Теперь, когда мы собираемся использовать Alfresco (v5.0.d) в качестве DMS, я уже создал собственный аспект, отражающ…
14 фев '16 в 17:27
7 ответов

Django bulk_create с игнорированием строк, которые вызывают IntegrityError?

Я использую bulk_create для загрузки тысяч или строк в базу данных postgresql. К сожалению, некоторые строки вызывают IntegrityError и останавливают процесс bulk_create. Мне было интересно, есть ли способ сказать Django игнорировать такие строки и с…
16 сен '12 в 21:52