Публикации по теме 'logstash'
Регистрация полных трассировок стека на сервере без публикации исходного кода JavaScript
Это очень распространенный факт, когда клиентские журналы в конечном итоге отправляются на сервер журналов (скажем, Logstash). Также неплохо избегать публикации исходного кода JavaScript без минификации и обфускации в производственных средах.
Итак, что, если мы хотим, чтобы на наш сервер журналов отправлялись содержательные журналы с реальными именами файлов и номерами строк в трассировке стека без ущерба для исходного кода нашего клиента?
Отправка обычной трассировки стека в..
Вопросы по теме 'logstash'
Получение метки времени события из имени файла в logstash
У нас есть процесс, который записывает события в файл без метки времени. Сами имена файлов имеют суффикс с отметкой времени, которая является отметкой времени, которая должна использоваться для всех событий в файле. Теперь я пытаюсь проанализировать...
6014 просмотров
schedule
11.12.2022
Grep любит соседние строки из ElasticSearch
Приложение, которое я отлаживаю, создает файлы журналов, в которых многие вызовы API регистрируются как два события:
timestamp1 request_ip-->{$URL}
timestamp2 response_ip<--{$DATA}
Недавно я начал заливать журналы в ElasticSearch с...
1891 просмотров
schedule
09.06.2024
Изменение анализатора по умолчанию в ElasticSearch или LogStash
У меня есть данные, поступающие от Logstash, которые тщательно анализируются. По сути, поле "OS X 10.8" будет разбито на "OS" , "X" и "10.8" . Я знаю, что могу просто изменить сопоставление и переиндексировать существующие данные, но как мне...
11649 просмотров
schedule
07.11.2023
Индексатор Logstash масштабируется?
Я использую грузоотправитель logstash -> redis -> индексатор logstash -> elastricsearch -> kibana
Я понимаю, что Redis и elastricsearch предназначены для масштабирования. Как насчет индексатора logstash, я вижу только на основном сайте logstash...
1649 просмотров
schedule
04.01.2024
grok - как найти строку в кавычках
Я пытаюсь получить вывод из файла журнала nginx и отправить его в logstash.
10.1.10.20 - bob [14/Feb/2014:18:57:05 +0000] “POST /main/foo.git/git-upload-pack HTTP/1.1” 200 3653189 “-” “git/1.8.3.4 (Apple Git–47)”
Грок отлично находит первые...
9407 просмотров
schedule
10.10.2022
Извлечение полей из путей в logstash
Я настраиваю logstash для сбора журналов от нескольких рабочих на нескольких хостах. В настоящее время я добавляю поля для хоста:
input {
file {
path => "/data/logs/box-1/worker-*.log"
add_field => {...
1453 просмотров
schedule
25.04.2024
Оповещение/уведомление с использованием Kibana3?
Я использую logstash-1.4.1 , elasticsearch-1.1.1 и kibana-3.1.0 для анализа своих журналов. Я могу просматривать и запрашивать свои журналы.
Существует потребность в предупреждении/уведомлении, когда происходит определенный журнал/событие....
23520 просмотров
schedule
24.02.2024
Файл конфигурации Logstash не работает, что не так с синтаксисом?
Как насчет файла .conf, приведенного ниже, он неверен, из-за чего logstash не индексирует и не сохраняет файл журнала для elasticsearch? Я запускаю kibana/elasticsearch/logstash на одном и том же сервере Windows (2008 R2) с использованием IIS....
706 просмотров
schedule
08.11.2023
Конфигурация Logstash: проверьте, существует ли логическое поле
Используя Logstash 1.4.2, у меня есть поле myfield , которое является логическим значением в моем документе JSON.
Чтобы проверить, существует ли он (не заботьтесь о логическом значении), я использовал:
if[myfield] { ...exists... } else {...
9826 просмотров
schedule
25.12.2023
Фильтр Logstash для преобразования $epoch.$microsec в $epoch_millis
Я пытаюсь преобразовать поле метки времени в форме $epoch.$microsec в $epoch_millis .
Пример:
1415311569.541062 --> 1415311569541
Похоже, что в Logstash нет никаких средств для умножения чисел, поэтому ts * 1000 и приведение к...
1220 просмотров
schedule
12.06.2024
Анализ задержек из лог-файлов с помощью logstash и kibana
Я новичок в стеке ELK и надеялся использовать его для отладки проблем из файлов журнала. Мое требование состоит в том, чтобы построить график времени, необходимого потоку для обработки задачи и возвращения обратно в пул. В основном журналы выглядят...
1020 просмотров
schedule
06.06.2024
Проблемы с конфигурацией сервера Logstash
В настоящее время я создаю централизованную настройку ведения журнала, используя logstash и kibana. Я успешно установил сервер, но в настоящее время застрял со следующей проблемой.
Все мои конфигурации, кажется, в порядке,...
2192 просмотров
schedule
24.10.2023
ElasticSearch / Logstash / Kibana Как бороться с резкими скачками трафика журналов
Как лучше всего справиться с резким увеличением количества сообщений журнала, записываемых в кластер ElasticSearch при стандартной настройке ELK?
Мы используем стандартную настройку ELK (ElasticSearch / Logstash / Kibana) в AWS для нужд ведения...
1930 просмотров
schedule
29.10.2022
Использование фильтра сопоставления символов при создании индекса с использованием logstash
Я пытаюсь применить «фильтр символов сопоставления» (для сопоставления точек как пробелов) в elasticsearch, но не могу найти файл, в котором можно выполнить настройку. Индексы в моем экземпляре elasticsearch создаются logstash с использованием...
167 просмотров
schedule
06.02.2024
Журналы IIS и Logstash
Я просматриваю варианты анализа журналов SharePoint IIS и в настоящее время перемещаю файлы журналов на другой сервер и обрабатываю их с помощью AWStats.
Я хотел бы исследовать с помощью ELK (Elasticsearch, Logstash и Kibana). Можно ли собирать...
291 просмотров
schedule
11.11.2023
Регулярное выражение Elasticsearch в Kibana
Я здесь новичок, использую Elasticsearch, Logstash и Kibana.
Прямо сейчас у меня есть несколько журналов в Kibana с такими полями, как «отметка времени» «сообщение». (Они показаны в нижнем левом углу Kibana.) Но «сообщение» содержит много...
617 просмотров
schedule
11.10.2022
Logstash продолжает работать без сбоев или вывода (как для Windows, так и для Linux)
Я использую простой файл conf для получения файла log4j и вывода в виде стандартного вывода (для отладки)
input {
file {
type => "log4j"
path => "C:\Stash\log4stash.log"
start_position => "beginning" }
}
output {# only...
845 просмотров
schedule
09.06.2024
Logstash перестает получать через некоторое время в стеке ELK?
У меня установлен и запущен стек ELK (Elasticsearch / Logstash / Kibana).
Я использую один сервер в качестве сервера ELK для сбора и хранения всех журналов с других серверов. logstash-forwarder используется для отправки журналов в ELK. Проблема...
602 просмотров
schedule
10.10.2022
logstash вычислить прошедшее время не работает
У меня есть файл, содержащий серию таких сообщений:
component+branch.job 2014-09-04_21:24:46 2014-09-04_21:24:49
Это строка, несколько пробелов, первая дата и время, несколько пробелов и вторая дата и время....
1500 просмотров
schedule
18.09.2022
logstash зависает после выполнения команды
Я определил этот файл конфигурации
input {
file {
path => "C:\Users\Jack\Desktop\logsatash_practice"
type => "txt"
}
}
output {
file {
path => "C:\Users\Jack\Desktop\logsatash_practice\op"
}
}
и запустил команду...
84 просмотров
schedule
06.10.2022
