Описание тега td-agent
Используйте этот тег, чтобы задать вопрос относительно td-agent, демона сбора данных.
https://support.treasuredata.com/hc/en-us/articles/360000687108-Overview-of-Server-Side-Agent-td-agent-
1
ответ
Запустите команду Java из плагина in_exec Fluentd
У меня есть проблемы с настройкой Fluentd; Я хочу позвонить in_exec плагин для запуска Linux bash-скрипта, который вызывает jar, но он не работает. Мой код: <source> @type exec format none tag none command sh /var/tmp/script.sh run_interval 5m…
08 фев '18 в 07:51
0
ответов
logspout gelf, отправленный на fluentd, находится в формате JSON?
Поэтому я использую logspout с плагином gelf (vincit/logspout-gelf) для вывода gelf в fluentd (td-agent). Fluentd настроен с помощью входного плагина gelf (MerlinDMC/fluent-plugin-input-gelf). Цель состоит в том, чтобы перехватить журналы докеров-ко…
12 фев '18 в 15:47
0
ответов
TD-AGENT + WebHDFS + kerberos = ошибка "запрос проверки webhdfs не выполнен"
Есть ошибка: попробуйте использовать fluentd (td-agent) для записи логов в HDFS с помощью плагина WebHDFS, но не можете. Потому что между ними злой охранник - Kerberos: я не могу авторизоваться с помощью keytab. 2018-11-28 20:22:19 +0300 [error]: #0…
10 янв '19 в 08:54
1
ответ
td-agent не будет работать на Amazon Linux 2
Я хотел бы знать, как заставить td-agent читать файлы журнала apache на Amazon linux2. Кажется, у td-agent нет прав на чтение файла журнала, но я не могу это исправить. Я установил amazon linux2 в virtualbox с помощью vagrant. Ссылка https://app.vag…
06 авг '18 в 07:32
2
ответа
Блоки Fluentd, работающие через daemonset, прекращают работу с предупреждениями на движке контейнера Google
Я пытаюсь запустить fluentd в качестве демона на кластере kubernetes (GKE). Конфиг успешно анализируется, затем плагины получают сигнал выключения с несколькими предупреждающими сообщениями. Там нет сообщений об ошибках. Я попытался увеличить уровен…
08 сен '18 в 13:59
2
ответа
Записи системного журнала в Mongodb
При использовании команды db["my_collectionName"].find() в оболочке mongo мои запросы возвращаются: "message" : "Permission denied @ rb_sysopen - /var/log/syslog". Как мне решить эту проблему с разрешениями?
12 июл '18 в 08:04
0
ответов
Могу ли я передать имя файла, созданное с помощью тега совпадения, в тег источника в Fluentd?
Я могу передать имя файла, созданное с помощью тега совпадения, исходному тегу в качестве аргумента script.sh во Fluentd? Например: <source>...</source> <match log.usage> @type file path /var/tmp/cm_ buffer_path /var/tmp/buffer for…
08 фев '18 в 10:17
0
ответов
Не удалось получить метку времени с помощью анализатора fluentd csv
Я использую Fluentd для извлечения журналов из CSV-файлов. Он работает нормально, но мне нужно получить "метку времени" при извлечении журнала. В документации сказано, что когда time_key отсутствует в записи, по умолчанию будет использоваться текуще…
15 янв '19 в 14:43
0
ответов
fluent-plugin-salesforce выдает ошибочный аргумент (ожидаемый объект или строка uri)
Я пытался соединить salesforce с fluentd, используя fluent-plugin-salesforce, но получаю ошибку: [ошибка]: #0 неожиданная ошибка error_class=ArgumentError error="неверный аргумент (ожидаемый объект URI или строка URI)" Мой файл конфигурации: <sou…
03 янв '19 в 05:24
0
ответов
Непредвиденная ошибка Errno::EACCES error= В доступе отказано EMR
Когда я пытаюсь собрать журналы пряжи с помощью td-agent, я получаю это исключение в журнале td-agent. Td-agent установлен в корень непредвиденная ошибка error_class=Errno::EACCES error="В доступе отказано @ rb_file_s_stat - /var/log/hadoop-yarn/ Co…
24 окт '18 в 02:34
0
ответов
Как разобрать GELF, диктующий принудительное добавление метки времени
Поэтому я использую logspout с плагином gelf (vincit/logspout-gelf) для вывода gelf в fluentd (td-agent). Fluentd настроен с помощью входного плагина gelf (MerlinDMC/fluent-plugin-input-gelf). Цель состоит в том, чтобы перехватить журналы докеров-ко…
14 фев '18 в 15:23
0
ответов
Запуск td-agent (fluentd) сценария init.d под супервизором получил (ошибка появления)
Я установил td-agent, и они предоставляют скрипт init.d, с которым вы можете его запустить, я настроил td-agent и запускаю его через скрипт init.d, и он работает без сбоев, но я хочу переместить td-agent чтобы работать под супервизором, я перечитал …
21 фев '19 в 08:56
0
ответов
Свободно и Кибана
Конфигурация Fluentd на стороне клиента хвостовой тег типа underutilized.log путь /var/log/utilization/monthly_summary.log формат /^,HOST,(?[^,]+),DATE,(?[^,]+),STREAK,(?[^,]+),CPU_DAY_UTIL,(?[^,]+)$/ Pos_file /var/spool/fluentd/underutilized.log.po…
10 окт '18 в 09:33
0
ответов
Конфигурация fluentd td-agent для dovecot
Мне нужно отправить все журналы с удаленными сообщениями из dovecot в asticsearch через td-agent. Я хочу отправить отфильтрованный контент. Например, некоторые строки, которые мне нужны: 10 августа 04:58:01 srv85 dovecot: imap (inbox@domain.com): ex…
09 авг '18 в 21:14
2
ответа
RPM установить / удалить тупик
У меня проблема: не могу установить пакет "TD-агент". Потому что есть тупик: Если вы попытаетесь установить (sudo rpm -ivh /my/pass/td-agent-3.2.1-0.el7.x86_64.rpm) - у вас есть ошибка: Preparing... ################################# [100%] package t…
17 дек '18 в 07:48
0
ответов
Простой способ мониторинга Apache службы TD-агента
Возможно, я что-то упускаю, но есть ли простой способ отслеживать, работает ли служба или нет (в данном случае apache). Я уже попробовал плагин modstatus. Это работает для общего мониторинга. Однако, когда я останавливаю службу httpd и запускаю ее с…
22 ноя '18 в 14:53
1
ответ
Дата не добавляется к имени индекса asticsearch при использовании td-agent
Мне нужно сохранить журнал в индексе Es, когда я использую logstash. Дата добавляется к имени индекса как logstash.2018-08-06, но когда я пытаюсь дать пользовательское имя, как в текущем файле conf, оно не добавляется </store> <store> @t…
03 окт '18 в 06:53
0
ответов
Перезапуск службы td-agent при возврате в Ubuntu - не удается найти пользователя для --group (ArgumentError)
Я устанавливал td-agent через рецепт шеф-повара на Ubuntu 14.04.5 LTS" Я пытался запустить агент под пользователем root вместо td-agent . Я изменил следующие строки для достижения этой цели. sed -i 's/^TD_AGENT_USER=td-agent/#TD_AGENT_USER=td-agent/…
04 май '18 в 01:05
0
ответов
Сделать беглый (td-agent) читать все вещи из файла
У меня есть 1 файл журнала, который не изменяется, и я хочу перейти к этому файлу в ElasticSearch, и я хочу использовать fluentd для этих целей, мой /etc/td-agent.conf выглядит так <source> @type tail path /var/log/salam-pacanam.log tag loan f…
12 июл '18 в 17:41
0
ответов
Td-агент, увеличивающий процесс на сервере и вызывающий сбои в работе
Я использую TD-agent для перемещения журналов с нескольких серверов (КЛИЕНТОВ) на один централизованный (HOST) сервер, где журналы принимаются и отправляются в Elasticsearch. В конце отправителя мой td-agent считывает журналы доступа, журналы ошибок…
24 авг '18 в 17:21