Отправка строк логов в Loki loki
Ручная отправка записи лога для проверки приёма. note: метка времени — наносекунды epoch.
curl -s -H 'Content-Type: application/json' -XPOST "$LOKI_ADDR/loki/api/v1/push" -d '{"streams":[{"stream":{"app":"test"},"values":[["'$(date +%s%N)'","hello loki"]]}]}'
more loki
all 7 commands →
Парсинг JSON-логов и переформатирование строки
{app="api"} |= "error" | json | line_format "{{.level}} {{.msg}}"
Скорость логов по уровням
sum by (level) (rate({app="api"} | logfmt [5m]))
Квантиль по извлечённой задержке
quantile_over_time(0.99, {app="api"} | json | unwrap latency_ms [5m]) by (route)
Подсчёт совпадающих строк во времени
sum(count_over_time({namespace="prod"} |~ "timeout|deadline exceeded" [1m]))
Разовый запрос через logcli
logcli query '{job="app/api"} |= "panic"' --since=1h --limit=200 --output=jsonl