Описание тега marklogic-corb

CORB - это инструмент Java, разработанный для массовой обработки содержимого документов, хранящихся в MarkLogic.
2 ответа

Передача параметров на этап corb uri с помощью ml-gradle

Я использую ml-gradle с corb2 2.4.5 и Marklogic 9.0.5. Я пытаюсь передать параметр corb при запуске задачи gradle. Я передал параметр в -DURIS-MODULE.id="sf" В моем модуле xquery у меня есть declare variable $id as xs:string external; Процесс corb в…
12 мар '20 в 04:54
1 ответ

Изменить имя файла экспорта в CORB

Есть ли способ изменить имя файла экспорта в CORB? У меня есть модуль URIS, выбирающий определенный набор URI, в модуле PROCESS я делаю некоторые преобразования, а затем возвращаю то, что хочу записать. Входящий URI - это файл XML, а файл экспорта -…
02 мар '20 в 18:43
1 ответ

MarkLogic CORB - Какие разрешения для запуска corb

Какие разрешения позволяют разработчикам запускать corb для выбора / обновления узлов в MarkLogic. роли: hadoop-пользователь-чтение hadoop-пользователь-запись
24 янв '20 в 17:18
1 ответ

MarkLogic CORB - Как избежать тайм-аута при запуске corb

Как избежать тайм-аута CORB при запуске большого пакета данных, превышающего 10 миллионов документов pdf/xml? Нужно ли мне уменьшить количество потоков и размер пакета. uris-модуль: let $uris := cts:uris( (), (), cts:and-query(( cts:collection-query…
19 фев '20 в 21:32
1 ответ

MarkLogic 9 - Слияние при запуске corb

Слияние происходит во время процесса corb для добавления узлов более 10 миллионов документов. CPU/IO достигли максимального времени ожидания причины. если я отключу слияние, процесс карниза остановится из-за большого количества стоек. Что я могу сде…
23 май '20 в 19:15
1 ответ

MarkLogic Corb как настроить для включения веб-интерфейса

Мне интересно, как в реальном времени предоставлять метрики для работы Корба по мере ее выполнения. настроен для включения веб-интерфейса и службы HTTP, чтобы просматривать текущую статистику и ход выполнения задания, приостанавливать / возобновлять…
25 май '20 в 18:54
2 ответа

Marklogic - удаление коллекций с поддержкой версий

У меня около 43 миллионов документов, в которых есть последняя версия документа в коллекции LIVE, а также такой же документ с версией в другой коллекции версий с именем (/ collection / versionNumber). Я хочу удалить коллекции с поддержкой версий, ко…
27 авг '20 в 10:10
1 ответ

проверка совместимости corb2 с MarkLogic

Как и в случае с mlcp, я не вижу комментариев о совместимости corb2 с последними версиями MarkLogic. CoRB2 совместим со всеми версиями ML? Если нет, могу ли я сослаться на это место? Я знаю, что могу это проверить, но лучше проверить документацию, т…
16 окт '20 в 10:36
1 ответ

Как изменить количество ниток на корбе на лету

Как уменьшить количество потоков во время работы corb. Я пытался ниже, но не работал, спасибо [linux1]$corb thread-count 8
17 фев '21 в 19:20
1 ответ

Разница между CORB и MLCP MarkLogic

Есть ли различия между CORB и MLCP MarkLogic? Я вижу, что они делают такую ​​же работу. В каких сценариях вы используете то или другое?
05 мар '21 в 13:55
0 ответов

ReactJS/Typescript: Cross-Origin Read Blocking (CORB) заблокировал перекрестный источник

Я получаю ошибку CORB при попытке получить, используя конфигурацию ниже. На консоли написано: «Блокировка чтения из разных источников (CORB) заблокировала ответ из разных источников http: // localhost: 8080 / api / xxxxx / xxxxx с MIME-типом applica…
1 ответ

Невозможно получить XML-файл с помощью MarkLogic Corb Tool

Я хочу получить входной файл xml с помощью инструмента MarkLogic CoRB, чтобы продолжить, но не могу получить этот файл с помощью инструмента CoRB: Файл свойств конфигурации ML: THREAD-COUNT=16 MODULE-ROOT=/ MODULES-DATABASE=.\\37074\\XQuery\\PROD-Me…
07 июн '21 в 21:39
1 ответ

Как сохранить список URI, соответствующих шаблону в Marklogic с помощью corb?

Мне нужна помощь с MarkLogic, XQuery и corb, У меня миллионы документов в базе данных, я пытаюсь написать XQuery, чтобы сохранить совпадающие URI. urisVersions.xqy xquery version "1.0-ml"; let $uris := cts:uri-match("*versions/*version-*") return (f…
10 июн '21 в 19:21
1 ответ

Как увеличить размер кучи в Corb2 на MarkLogic

Я пытаюсь запустить созданный мной фреймворк для удаления, который содержит очень большой объем данных. При попытке запустить Corb2 я получаю следующее предупреждение, а иногда и ошибку из-за нехватки памяти. WARNING: Slow receive! Consider increasi…
23 сен '21 в 21:06
1 ответ

Как передать внешние переменные в модуль CORB из выполнения ml-gradle?

Есть ли способ передать параметры в модули CORB из ml-gradle, не передавая их в командной строке через -DPROCESS_MODULE.parameter. У меня есть CorbTask, который я планирую вызывать несколько раз из другой задачи с разными параметрами каждый раз.
28 сен '21 в 18:14
1 ответ

Как отфильтровать не-json-документы в MarkLogic?

У меня есть много данных, загруженных в мою базу данных, где некоторые из загруженных документов не являются файлами JSON, а просто двоичными файлами. Правильные данные выглядят так: «/foo/bar/1.json», но неправильные данные имеют формат «/ foo / ba…
18 окт '21 в 18:59
1 ответ

Массовое преобразование данных с использованием CoRB

Я выполняю преобразование данных с помощью CoRB в 3-узловом кластере MarkLogic с серверами ОЗУ 128 ГБ. В настоящее время я выполняю задание CoRB с 16 потоками (параллельные задания не выполняются). Можно ли увеличить количество потоков для повышения…
25 ноя '21 в 14:58
1 ответ

Инструмент Marklogic CoRB не сохраняет файлы XML в формате UTF-8

Если мы попытаемся сохранить XML из Marklogic с помощью xdmp:saveФункция сохраняет файл в формате UTF-8. Теперь, если мы попытаемся сохранить тот же файл с помощью инструмента Marklogic CoRB, он сохранит этот файл в формате ANSI вместо UTF-8. Почему…
31 янв '22 в 15:03
1 ответ

Информационные сообщения MarkLogic CoRB

Ниже я вижу сообщения, когда отправляется задание CoRB для обновления разрешений в восстановленной базе данных. Jan 06, 2021 1:29:59 AM com.marklogic.developer.corb.QueryUrisLoader logQueueStatus INFO: queued 100,000/112,551,188 : /Position/4638075/…
06 янв '21 в 07:57
2 ответа

CORB: неопределенная внешняя переменная fn:QName("","URI")

Я новичок в CORB, пытаюсь удалить документы с помощью кода Java, но получаю com.marklogic.xcc.exceptions.XQueryException: XDMP-EXTVAR: (err:XPDY0002) declare variable $URI as xs:string* external; -- Undefined external variable fn:QName("","URI")искл…
07 сен '21 в 17:29