Удалить под, зависший в Terminating

Сбросить finalizers и принудительно удалить под, зависший в Terminating; сначала убедитесь, что нода действительно мертва

kubectl patch po <pod> -n <ns> -p '{"metadata":{"finalizers":null}}' --type=merge; kubectl delete po <pod> -n <ns> --grace-period=0 --force

инструмент
k8s-debug27 команд
теги
k8s-debugtroubleshootingk8s

Другие команды k8s-debug

  • kubectl get --raw /api/v1/nodes/<node>/proxy/stats/summary | jq '.pods[] | {name:.podRef.name, mem:.memory.workingSetBytes}'

    Получить актуальную память по подам из Summary API kubelet в обход metrics-server

  • kubectl debug node/<node> -it --image=nicolaka/netshoot -- conntrack -S

    Проверить счётчики drop и insert_failed в conntrack по каждому CPU; когда таблица nf_conntrack заполнена, пакеты теряются

  • kubectl run dnstest --rm -it --image=nicolaka/netshoot --restart=Never -- dig +short <name>.<ns>.svc.cluster.local

    Отрезолвить FQDN сервиса из временного пода, чтобы отличить проблемы CoreDNS от проблем DNS в приложении

  • kubectl events --for pod/<pod> -n <ns> --types=Warning

    Показать только Warning-события одного пода по времени; новая замена get events с фильтрами

  • kubectl logs <pod> -n <ns> -c <name> --previous --timestamps --tail=200

    Показать последние 200 строк предыдущего экземпляра контейнера с метками времени, чтобы поймать трейс перед рестартом

все 27 команд k8s-debug