Вопросы по теме 'logstash'

Настройка ElasticSearch Logstash
Я пытаюсь настроить конвейер LogStash/Redis/ElasticSearch для централизованного ведения журнала, у меня есть несколько вопросов, Я считаю, что для того, чтобы это сработало, вам нужна определенная версия elasticsearch и logstash, есть ли место,...
16127 просмотров
schedule 20.04.2024

Как удалить завершающую новую строку из поля сообщения
Я отправляю файлы журналов Glassfish 4 с помощью Logstash в приемник ElasticSearch. Как я могу удалить с помощью Logstash завершающую новую строку из поля сообщения? Мое событие выглядит так: { "@timestamp" => "2013-11-21T13:29:33.081Z",...
13898 просмотров
schedule 25.04.2024

logstash + elasticsearch: перезагружает те же данные
Удалось получить logstash (1.3.1) для отправки данных в elasticsearch (0.9.5). Моя настройка файла logstash conf input { file { path => ["D:/apache-tomcat-7.0.5/logs/*.*"] } } output { stdout { } elasticsearch_http {...
4331 просмотров
schedule 27.09.2022

Распределенная настройка logstash + redis + elasticsearch
В нашей сети есть локальные узлы, которые не всегда связаны с центральным узлом, и мы не можем изменить это условие. Наши требования заключаются в следующем; В локальных узлах; локальные журналы будут храниться и могут быть найдены В...
1610 просмотров
schedule 29.08.2022

Как сделать данные журнала как значение графика Kibana
У меня есть файл журнала, который дает Duration: 10 с отметкой времени в моем файле журнала. Когда я помещаю поле поиска в kibana для продолжительности, я могу получить точку, появляющуюся на графике всякий раз, когда продолжительность появляется в...
468 просмотров
schedule 20.10.2022

Смена хоста elasticsearch в веб-интерфейсе logstash 1.3.3
Я выполнил шаги, описанные в этом документе. и мне удалось получить некоторые отчеты о данных Шекспира. Я хочу сделать то же самое с удаленно установленным эластичным поиском. Я попытался настроить «хост» в файле конфигурации, но запросы...
140 просмотров
schedule 22.03.2024

Почему Logstash перезагружает повторяющиеся данные из файла в Linux?
Я использую logstash, elasticsearch и kibana. Мой файл конфигурации logstash выглядит следующим образом. input { file { path => "/home/rocky/Logging/logFiles/test1.txt" start_position => "end" sincedb_path => "test.db" }...
876 просмотров
schedule 08.03.2024

Могу ли я удалить поле сообщения из Logstash?
У меня есть базовая настройка Logstash -> Elasticsearch, и оказывается, что поле 'message' не требуется после того, как фильтр logstash выполнил свою работу - сохранение этого необработанного поля сообщения в elasticsearch только добавляет ненужные...
21297 просмотров
schedule 23.10.2022

Logstash - ›Elasticsearch не отображает правильное отображение
Поэтому я недавно создал кластер ELK, используя этот сайт в качестве шаблона для этого. Настройка кластера ELK Я столкнулся с проблемой, когда шаблон json на узле обработки Logstash не используется на фактических узлах данных Elasticsearch. Я...
1908 просмотров
schedule 03.04.2024

Многострочный фильтр logstash: последняя часть сброса сообщения
В многострочном фильтре была известная проблема, заключавшаяся в том, что он не печатал последнюю часть фильтруемого ввода, поскольку он все еще ожидает следования шаблону и не сбрасывается. Проблема решена. Если да, то как? Есть ли тег, чтобы...
930 просмотров
schedule 13.02.2024

Где я должен обрабатывать события журнала для logstash? (Агент против сервера)
Это может быть очень общий вопрос типа «зависит от вашей среды», но я хотел бы узнать о передовой практике, основанной на вашем опыте работы с logstash и агрегацией журналов в целом. Итак, я пытаюсь интегрировать logstash в нашу производственную...
665 просмотров
schedule 12.03.2024

Получение ошибки синтаксического анализа журнала logstash: grokparsefailure
Я пытаюсь интегрировать logstash в наше приложение, где я включаю следующий фрагмент шаблона в файл custompattern. Path: <path>/custom_pattern -- This is custom pattern file. I include this path in conf. Content: ACCESSLOGPARSE...
7059 просмотров
schedule 14.10.2022

Как ввести данные в logstash
Я пытаюсь ввести файл csv в elasticsearch через logstash. Это мой файл конфигурации input { file { codec => plain{ charset => "ISO-8859-1" } path => ["PATH/*.csv"] sincedb_path => "PATH/.sincedb_path"...
306 просмотров
schedule 18.09.2022

Замените значения предопределенным сопоставлением с помощью ELK
У меня есть файл, который я прочитал с помощью Logstash, содержащий определенный параметр с именем type . Возможные значения для этого параметра: 0,1,2,3,4,5 (на самом деле он представлен как Enum в моем коде Java). Допустим, тип 0 означает...
1225 просмотров
schedule 29.10.2022

Как установить тип контента с выходом Logstash и rabbitmq?
Я хочу анализировать журналы с помощью logstash и отправлять результаты через rabbitmq. Приложение, использующее эти результаты, ожидает сообщения с типом содержимого, установленным на «application/json». На данный момент мои сообщения не имеют...
766 просмотров
schedule 25.06.2022

Установка драгоценного камня mysql в logstash
Я пытаюсь установить несколько драгоценных камней в Logstash 1.4.2. Для этого я погуглил и нашел ответ SO ( как добавить драгоценные камни в logstash ) Следуя ответу, я смог легко установить драгоценный камень продолжения. Но когда я...
334 просмотров
schedule 12.08.2022

Logstash - дата события журнала ошибок передается в виде строки в ES
Я использую Logstash для пересылки журналов ошибок с серверов приложений на ES. Все работает нормально, за исключением того, что временная метка журнала передается в ES в виде строки. Вот мой формат журнала [Дата: 2015-03-25 01: 29: 09,554]...
97 просмотров

Logstash - грок многострочный
Я попытался использовать многострочный фильтр в grok, но он не работает должным образом. Мои журналы H3|15:55:04:760|exception|not working properly message:space exception at line number 25 Мой файл конфигурации input { file {...
2992 просмотров
schedule 07.07.2022

Необходимо создать диаграмму стоимости с течением времени с помощью Kibana 4.
Я использую logstash для хранения файла журнала, содержащего время чтения кабеля (конкретно для моего приложения). Я хотел бы построить график времени чтения кабеля (ось Y) по прошедшему времени (ось X) с использованием Kibana. Файл конфигурации...
379 просмотров
schedule 18.04.2024

Программное обеспечение для создания отчетов журнала для стека ELK
У меня есть узел ELK (elasticsearch-logstash-kibana), и мне нужно сохранить отчет и статистику журналов, есть программное обеспечение, которое это делает? Я нашел другую панель инструментов для elasticsearch, но все они похожи на kibana и не...
211 просмотров
schedule 08.02.2024