Получить все документы из индекса кластера эластичного поиска и индексировать его в другом кластере эластичного поиска

Question

Получить все документы из индекса кластера эластичного поиска и индексировать его в другом кластере эластичного поиска

Моя цель здесь - получить все документы из индекса кластера ES и вставить их в другой кластер ES, сохраняя те же метаданные.

Я взглянул на mget API для извлечения данных и Bulk API для их вставки, но этот Bulk API нуждается в специальной структуре:

action_and_meta_data\n
optional_source\n
action_and_meta_data\n
optional_source\n

Поэтому моя идея состоит в том, чтобы извлечь мои данные EScluster1 в файл и перестроить их так, чтобы они соответствовали структуре Bulk API, и индексировать их в EScluster2.

Видите ли вы лучший и / или более быстрый способ продолжить?

1

elasticsearch indexing elasticsearch-bulk-api

Источник

user4174052 23 окт '14 в 13:46

1 ответ

Решение

Другие вопросы по тегам elasticsearch indexing elasticsearch-bulk-api

user1041442 23 окт '14 в 14:35 2014-10-23 14:35 · Accepted Answer · 2014-10-23 14:35

asticdump делает это. Если вы хотите сделать это вручную, вам нужно будет выполнить запрос с помощью прокрутки, а затем выполнить массовый индекс того, что из этого получится. Не слишком сложно писать вместе. С помощью эластичного дампа вы можете качать данные без записи в файл. Однако, это немного ограничено, когда в вашем индексе есть, например, отношения родитель / ребенок.