Спрогнозировать заполнение диска

Алерт, если по тренду за последние 6 ч диск заполнится в ближайшие 4 ч

predict_linear(node_filesystem_avail_bytes{mountpoint="/"}[6h], 4*3600) < 0

инструмент
prometheus30 команд
теги
prometheusdiskmonitoringtroubleshooting

Другие команды prometheus

  • absent(up{job="node"} == 1)

    Срабатывает, когда нет ни одной серии, и ловит job, который целиком пропал из service discovery

  • label_replace(node_uname_info, "host", "$1", "nodename", "(.+)")

    Создаёт новую метку из группы regex, удобно для join и аккуратных дашбордов

  • max_over_time(rate(node_network_receive_bytes_total[5m])[1h:1m])

    Подзапрос: максимальный rate за 5m с шагом 1 минута за последний час, показывает всплески трафика

  • sum without(instance) (rate(http_requests_total{code=~"5.."}[5m]))

    without() оставляет все метки, кроме instance. Проще, чем перечислять много меток в by()

  • groups: - name: slo rules: - record: job:request_errors:ratio5m expr: sum by(job)(rate(http_requests_total{code=~"5.."}[5m])) / sum by(job)(rate(http_requests_total[5m]))

    Заранее считает долю ошибок для SLO, чтобы дашборды и алерты работали быстро

все 30 команд prometheus