Найти медленные трейсы с ошибками через TraceQL

Находит span с ошибкой у сервиса дольше 2 с. Сочетает атрибут, статус и длительность

{ .service.name = "api" && status = error && duration > 2s }

инструмент
tempo3 команды
теги
tempotraceqlperformancetroubleshooting

Другие команды tempo

  • curl -sG "$TEMPO_ADDR/api/search" --data-urlencode 'q={ .http.status_code >= 500 }' --data-urlencode 'limit=20' | jq '.traces[].traceID'

    Ищет трейсы через TraceQL по HTTP и выводит их ID. limit ограничивает число результатов

  • curl -s "$TEMPO_ADDR/api/traces/<id>" | jq '.batches[].scopeSpans[].spans[] | {name, durationNs: (.endTimeUnixNano|tonumber)-(.startTimeUnixNano|tonumber)}'

    Получает трейс по ID и считает длительность каждого span. Важно: время в наносекундах Unix

все 3 команды tempo