Описание тега aws-elasticsearch

Используйте этот тег для вопросов, связанных с AWS Elastic search, который является RESTful-системой распределенного поиска и аналитики с открытым исходным кодом, построенной на Apache Lucene. С момента выпуска первой версии Elasticsearch в 2010 году он быстро стал самой популярной поисковой системой и широко используется для анализа журналов, полнотекстового поиска и оперативного анализа.
2 ответа

Шаблон облачной информации для отправки журналов облачных часов в asticsearch

Я ищу шаблон Cloudformation для отправки журналов cloudwatch на asticsearch в другой учетной записи. Даже к той же учетной записи было бы хорошо, и я могу обновить это. Похоже на стандартную проблему, но не видел ни одного шаблона, который автоматиз…
0 ответов

Индексируйте pdf файлы в сервисе AWS Elasticsearch с помощью средства поиска файловой системы Elasticsearch

Я могу индексировать pdf файлы в локальный Elasticsearch, используя Elasticsearch File System Crawler. По умолчанию параметр fscrawler имеет параметры порта, хоста и схемы, как показано ниже. { "name" : "job_name2", "fs" : { "url" : "/tmp/es", "upda…
21 май '18 в 14:26
1 ответ

Сценарий Elasticsearch со значением из другого документа

Представьте, что у меня есть два типа документов: Клиенты - содержит информацию, такую ​​как регион, язык и т. Д.) Покупки - содержат информацию об отдельных покупках). Между покупателями / покупателями существуют отношения между родителями и детьми…
0 ответов

Данные не вставляются из пожарного шланга AWS Kinesis Data Stream в Elasticsearch

Я пытаюсь собрать журналы сервера из EC2 с агентом AWS Kinesis в Kinesis Data Stream и Firehose, и хранение необработанных данных в S3 идет хорошо, но это не помогает отправке в Elasticsearch Service для индексации данных после небольшой обработки с…
1 ответ

AWS Elasticsearch в качестве первичной базы данных

Я работаю над приложением, которое должно хранить огромные транзакции (2 миллиона в день) и нуждается в полнотекстовом поиске по нему. Мне нужно сохранить как минимум 10 лет данных. Имея в виду производительность и целостность данных, могу ли я испо…
1 ответ

Доступ к AWS Elasticsearch из AWS Beanstalk

У меня есть экземпляр службы Elasticsearch Service в AWS и Elastic Beanstalk. Я хочу предоставить доступ только для чтения к beanstalk, однако beanstalk не имеет статического IP-адреса по умолчанию, и с небольшим количеством прибегая к помощи слишко…
0 ответов

ElasticSearch - ошибка при запросе службы AWS ElasticSearch - неподдерживаемый тип содержимого: text/html

Используя ElasticSearch HighLevel Rest Client, я пытаюсь найти сервис AWS ElasticSearch, в котором есть данные, которые я ранее переиндексировал. Код поиска SearchRequest searchRequest = new SearchRequest(quickSearchDTO.getIndexName()); searchReques…
25 янв '18 в 13:02
1 ответ

AWS Elasticsearch - подскажите, сколько осколков и реплик создается для экземпляра m4.large.elasticsearch

У меня есть 3 основных узла и 5 узлов данных на этом экземпляре типа m4.large.elasticsearch (2cCPU & 8gb memory) с объемом памяти 512 ГБ. Пожалуйста, предложите максимальное количество шардов и реплик, которые я могу создать для вышеуказанной конфиг…
1 ответ

Нет обработчика для типа [join], объявленного в поле

Я попытался создать индекс с типом соединения на новом AWS Elasticsearch 6.0. Следующая инструкция по документу Elasticsearch 6.0: https://www.elastic.co/guide/en/elasticsearch/reference/6.0/parent-join.html PUT my_index { "mappings": { "doc": { "pr…
14 дек '17 в 19:46
0 ответов

Elasticsearch: Версия 2.3 будет в порядке на AWS или я должен заплатить вдвое больше за 6.X

Я впервые использую Elasticsearch для клиента. Вариант использования очень мал по масштабу. Мы находимся на AWS, и я хотел использовать AWS Elasticsearch для удобства и простоты вместо запуска его на нашем экземпляре EC2 - однако по какой-то причине…
1 ответ

RestHighLevelClient с проблемой BulkProcessor Elastic Search

Ранее я использовал TransportClient в своем приложении. В последнее время переход на AWS управляет сервисами Elastic Search. Узнал, что управляемый AWS ES Cluster не будет поддерживать TransportClient. Таким образом, перенос кода, где он использовал…
0 ответов

Сервису AWS Elasticsearch требуется много времени для перенастройки типа экземпляра кластера

У меня около 80 тыс. Документов, хранящихся в эластичном поиске, документы передаются с DynamoDB. Каждый предмет в Dynamodb выглядит так: { "news": "abc", "createdAt": 1527786360574, "id": "fc554a1d-64f4-11e8-5a54-fbcd7712f7bf", "location": "東京都 Jap…
0 ответов

Подстановочный знак в нескольких столбцах в поисковом запросе Elastic

У меня есть требование, чтобы сопоставить входные данные, переданные пользователем по 2 атрибутам в упругом поиске, и это должен быть поиск по шаблону. Я использую AWS-ES версии 6.4 Когда я запрашиваю один единственный атрибут, результаты в порядке,…
1 ответ

Amazon AWS эластичный поиск Kibana доступ из браузера

Я знаю, что этот вопрос уже обсуждался ранее, но я чувствую, что мой вопрос немного другой. Я пытаюсь выяснить, как мне разрешить доступ к Kibana через саморегулируемый упругий поиск AWS, который есть в моей учетной записи AWS. Может быть, то, что я…
0 ответов

"Невозможно прочитать свойство presigned-expires of undefined"

Общий обзор, я получил AWS Lambda, где работает приложение Node.js, которое отправляет через HTTP-вызов JSON на мою AWS Elastic Search DB Итак, я начал с этой маленькой ошибки: AWS: {"Message":"User: anonymous is not authorized to perform: es:ESHttp…
1 ответ

Подключение к Kibana на основе VPC с помощью AWS Cognito

Я новичок в AWS и немного смущен системой AWS Cognito. У меня есть служба AWS Elasticsearch за VPC. Я пытаюсь получить доступ к конечной точке Kibana с помощью AWS Cognito, но при переходе к экрану входа в систему я вижу пустую страницу. Является ли…
1 ответ

Подписка на события AWS AppSync в зависимости от местоположения

Я понимаю, как выполнять геопространственные запросы через AppSync чтобы найти события в пределах расстояния от GPS-координаты, добавив решатель, связанный с ElasticSesarch, как описано здесь. Однако что, если я хочу, чтобы мой клиент подписывался н…
1 ответ

Количество индексов на одну упругую область

Я читал ограничения на сервис упругого поиска AWS. Я понимаю, что это Elastic Cluster == AWS Elastic domain. Существует ограничение в 100 доменов на одну учетную запись AWS. Также существует ограничение в 20 "экземпляров данных" на домен. Не ясно, я…
0 ответов

Потоковые журналы доступа aws с s3 на asticsearch

Все журналы доступа elb и alb напрямую передаются в одну корзину s3, я пытаюсь написать функцию lamda для анализа каждой папки, получения сжатого файла журнала, разархивирования его и передачи содержимого в asticsearch. Это должно быть сделано для н…
0 ответов

Экземпляры Ec2 для AWS ElasticSearch с хорошей производительностью записи и хранением

Я использую AWS Elasticsearch и нуждаюсь в совете о том, какие типы экземпляров выбрать для моего кластера и сколько шардов использовать. Мой пример использования следующий: моя система выдает максимум 150 000 000 записей в день (например, = 1736 за…
17 дек '18 в 21:54