Найти высокую кардинальность в TSDB

Показывает метрики и пары меток с самой высокой кардинальностью. С этого начинать, когда растёт память

promtool tsdb analyze /prometheus --limit 20

инструмент
prometheus30 команд
теги
prometheusperformancetroubleshootingobservability

Другие команды prometheus

  • curl -sG 'http://prometheus:9090/api/v1/query' --data-urlencode 'query=up' | jq .

    Разовый PromQL-запрос из командной строки

  • promtool query instant http://prometheus:9090 'up{job="kubelet"}'

    Выполняет мгновенный PromQL-запрос через promtool

  • curl -sG 'http://prometheus:9090/api/v1/query_range' --data-urlencode 'query=rate(http_requests_total[5m])' --data-urlencode 'start=2024-01-01T00:00:00Z' --data-urlencode 'end=2024-01-01T01:00:00Z' --data-urlencode 'step=60s' | jq .

    Получает данные Prometheus за период через HTTP API

  • promtool check rules rules.yml

    Проверяет синтаксис файлов с правилами алертов и recording rules

  • amtool silence add --alertmanager.url=http://alertmanager:9093 alertname=<name> --duration=2h --comment='Maintenance'

    Создаёт silence, чтобы алерт не присылал уведомления во время работ

все 30 команд prometheus