Диагностика узла NotReady k8s-debug
Смотрит Conditions узла, затем хвост журнала kubelet, чтобы понять причину NotReady
kubectl describe node <node> | grep -A12 Conditions; ssh <node> 'journalctl -u kubelet -n 100 --no-pager'
more k8s-debug
all 27 commands →
Причина ImagePullBackOff
kubectl get events -n <ns> --field-selector reason=Failed -o wide | grep -i 'pull\|manifest\|unauthorized'
Очистка вытесненных подов
kubectl get po -A | grep Evicted | awk '{print $2" -n "$1}' | xargs -L1 kubectl delete po
Снятие зависшего Terminating-пода
kubectl patch po <pod> -n <ns> -p '{"metadata":{"finalizers":null}}' --type=merge; kubectl delete po <pod> -n <ns> --grace-period=0 --force
Сырая статистика kubelet
kubectl get --raw /api/v1/nodes/<node>/proxy/stats/summary | jq '.pods[] | {name:.podRef.name, mem:.memory.workingSetBytes}'
Статистика conntrack на узле
kubectl debug node/<node> -it --image=nicolaka/netshoot -- conntrack -S