Активные алерты prometheus
Показать только активные алерты с именем и важностью
curl -s http://prometheus:9090/api/v1/alerts | jq '.data.alerts[] | select(.state=="firing") | {name: .labels.alertname, severity: .labels.severity}'
more prometheus
all 30 commands →
Список всех метрик
curl -s http://prometheus:9090/api/v1/label/__name__/values | jq '.data | length, .[0:20]'
Мощность серий по job
count by (job) ({__name__=~".+"})
Заглушить алерт
amtool silence add alertname=HighMemory --duration=2h --comment='Investigating'
Статус TSDB
curl -s http://prometheus:9090/api/v1/status/tsdb | jq '{head_chunks: .data.headStats.numChunks, series: .data.headStats.numSeries}'
95-й перцентиль задержки из гистограммы
histogram_quantile(0.95, sum by(le,job)(rate(http_request_duration_seconds_bucket[5m])))