Прогноз заполнения диска prometheus
алерт, когда линейный тренд за 6ч прогнозирует заполнение диска в ближайшие 4ч
predict_linear(node_filesystem_avail_bytes{mountpoint="/"}[6h], 4*3600) < 0
more prometheus
all 30 commands →
Обнаружение пропавшей цели через absent
absent(up{job="node"} == 1)
Переписать метку через label_replace
label_replace(node_uname_info, "host", "$1", "nodename", "(.+)")
Максимум посекундного rate за окно
max_over_time(rate(node_network_receive_bytes_total[5m])[1h:1m])
Агрегация с сохранением всех меток кроме instance
sum without(instance) (rate(http_requests_total{code=~"5.."}[5m]))
Recording rule для дорогого отношения
groups:
- name: slo
rules:
- record: job:request_errors:ratio5m
expr: sum by(job)(rate(http_requests_total{code=~"5.."}[5m])) / sum by(job)(rate(http_requests_total[5m]))