Статус TSDB prometheus
Просмотр TSDB head: чанки и активные серии
curl -s http://prometheus:9090/api/v1/status/tsdb | jq '{head_chunks: .data.headStats.numChunks, series: .data.headStats.numSeries}'
more prometheus
all 30 commands →
95-й перцентиль задержки из гистограммы
histogram_quantile(0.95, sum by(le,job)(rate(http_request_duration_seconds_bucket[5m])))
Прогноз заполнения диска
predict_linear(node_filesystem_avail_bytes{mountpoint="/"}[6h], 4*3600) < 0
Обнаружение пропавшей цели через absent
absent(up{job="node"} == 1)
Переписать метку через label_replace
label_replace(node_uname_info, "host", "$1", "nodename", "(.+)")
Максимум посекундного rate за окно
max_over_time(rate(node_network_receive_bytes_total[5m])[1h:1m])