Вопросы по теме 'logstash'
Настройка ElasticSearch Logstash
Я пытаюсь настроить конвейер LogStash/Redis/ElasticSearch для централизованного ведения журнала, у меня есть несколько вопросов,
Я считаю, что для того, чтобы это сработало, вам нужна определенная версия elasticsearch и logstash, есть ли место,...
16127 просмотров
schedule
20.04.2024
Как удалить завершающую новую строку из поля сообщения
Я отправляю файлы журналов Glassfish 4 с помощью Logstash в приемник ElasticSearch. Как я могу удалить с помощью Logstash завершающую новую строку из поля сообщения?
Мое событие выглядит так:
{
"@timestamp" => "2013-11-21T13:29:33.081Z",...
13898 просмотров
schedule
25.04.2024
logstash + elasticsearch: перезагружает те же данные
Удалось получить logstash (1.3.1) для отправки данных в elasticsearch (0.9.5).
Моя настройка файла logstash conf
input {
file {
path => ["D:/apache-tomcat-7.0.5/logs/*.*"]
}
}
output {
stdout { }
elasticsearch_http {...
4331 просмотров
schedule
27.09.2022
Распределенная настройка logstash + redis + elasticsearch
В нашей сети есть локальные узлы, которые не всегда связаны с центральным узлом, и мы не можем изменить это условие.
Наши требования заключаются в следующем;
В локальных узлах; локальные журналы будут храниться и могут быть найдены
В...
1610 просмотров
schedule
29.08.2022
Как сделать данные журнала как значение графика Kibana
У меня есть файл журнала, который дает Duration: 10 с отметкой времени в моем файле журнала. Когда я помещаю поле поиска в kibana для продолжительности, я могу получить точку, появляющуюся на графике всякий раз, когда продолжительность появляется в...
468 просмотров
schedule
20.10.2022
Смена хоста elasticsearch в веб-интерфейсе logstash 1.3.3
Я выполнил шаги, описанные в этом документе. и мне удалось получить некоторые отчеты о данных Шекспира.
Я хочу сделать то же самое с удаленно установленным эластичным поиском. Я попытался настроить «хост» в файле конфигурации, но запросы...
140 просмотров
schedule
22.03.2024
Почему Logstash перезагружает повторяющиеся данные из файла в Linux?
Я использую logstash, elasticsearch и kibana. Мой файл конфигурации logstash выглядит следующим образом.
input {
file {
path => "/home/rocky/Logging/logFiles/test1.txt"
start_position => "end"
sincedb_path => "test.db"
}...
876 просмотров
schedule
08.03.2024
Могу ли я удалить поле сообщения из Logstash?
У меня есть базовая настройка Logstash -> Elasticsearch, и оказывается, что поле 'message' не требуется после того, как фильтр logstash выполнил свою работу - сохранение этого необработанного поля сообщения в elasticsearch только добавляет ненужные...
21297 просмотров
schedule
23.10.2022
Logstash - ›Elasticsearch не отображает правильное отображение
Поэтому я недавно создал кластер ELK, используя этот сайт в качестве шаблона для этого. Настройка кластера ELK
Я столкнулся с проблемой, когда шаблон json на узле обработки Logstash не используется на фактических узлах данных Elasticsearch. Я...
1908 просмотров
schedule
03.04.2024
Многострочный фильтр logstash: последняя часть сброса сообщения
В многострочном фильтре была известная проблема, заключавшаяся в том, что он не печатал последнюю часть фильтруемого ввода, поскольку он все еще ожидает следования шаблону и не сбрасывается. Проблема решена. Если да, то как? Есть ли тег, чтобы...
930 просмотров
schedule
13.02.2024
Где я должен обрабатывать события журнала для logstash? (Агент против сервера)
Это может быть очень общий вопрос типа «зависит от вашей среды», но я хотел бы узнать о передовой практике, основанной на вашем опыте работы с logstash и агрегацией журналов в целом.
Итак, я пытаюсь интегрировать logstash в нашу производственную...
665 просмотров
schedule
12.03.2024
Получение ошибки синтаксического анализа журнала logstash: grokparsefailure
Я пытаюсь интегрировать logstash в наше приложение, где я включаю следующий фрагмент шаблона в файл custompattern.
Path: <path>/custom_pattern -- This is custom pattern file. I include this path in conf.
Content: ACCESSLOGPARSE...
7059 просмотров
schedule
14.10.2022
Как ввести данные в logstash
Я пытаюсь ввести файл csv в elasticsearch через logstash.
Это мой файл конфигурации
input {
file {
codec => plain{
charset => "ISO-8859-1"
}
path => ["PATH/*.csv"]
sincedb_path => "PATH/.sincedb_path"...
306 просмотров
schedule
18.09.2022
Замените значения предопределенным сопоставлением с помощью ELK
У меня есть файл, который я прочитал с помощью Logstash, содержащий определенный параметр с именем type . Возможные значения для этого параметра: 0,1,2,3,4,5 (на самом деле он представлен как Enum в моем коде Java).
Допустим, тип 0 означает...
1225 просмотров
schedule
29.10.2022
Как установить тип контента с выходом Logstash и rabbitmq?
Я хочу анализировать журналы с помощью logstash и отправлять результаты через rabbitmq. Приложение, использующее эти результаты, ожидает сообщения с типом содержимого, установленным на «application/json». На данный момент мои сообщения не имеют...
766 просмотров
schedule
25.06.2022
Установка драгоценного камня mysql в logstash
Я пытаюсь установить несколько драгоценных камней в Logstash 1.4.2.
Для этого я погуглил и нашел ответ SO ( как добавить драгоценные камни в logstash )
Следуя ответу, я смог легко установить драгоценный камень продолжения.
Но когда я...
334 просмотров
schedule
12.08.2022
Logstash - дата события журнала ошибок передается в виде строки в ES
Я использую Logstash для пересылки журналов ошибок с серверов приложений на ES. Все работает нормально, за исключением того, что временная метка журнала передается в ES в виде строки.
Вот мой формат журнала
[Дата: 2015-03-25 01: 29: 09,554]...
97 просмотров
schedule
22.01.2024
Logstash - грок многострочный
Я попытался использовать многострочный фильтр в grok, но он не работает должным образом.
Мои журналы
H3|15:55:04:760|exception|not working properly
message:space exception
at line number 25
Мой файл конфигурации
input { file {...
2992 просмотров
schedule
07.07.2022
Необходимо создать диаграмму стоимости с течением времени с помощью Kibana 4.
Я использую logstash для хранения файла журнала, содержащего время чтения кабеля (конкретно для моего приложения).
Я хотел бы построить график времени чтения кабеля (ось Y) по прошедшему времени (ось X) с использованием Kibana.
Файл конфигурации...
379 просмотров
schedule
18.04.2024
Программное обеспечение для создания отчетов журнала для стека ELK
У меня есть узел ELK (elasticsearch-logstash-kibana), и мне нужно сохранить отчет и статистику журналов, есть программное обеспечение, которое это делает? Я нашел другую панель инструментов для elasticsearch, но все они похожи на kibana и не...
211 просмотров
schedule
08.02.2024