Найти поды с наибольшим числом рестартов

Отсортировать поды во всём кластере по числу рестартов и быстро найти crash loop

kubectl get po -A --sort-by='.status.containerStatuses[0].restartCount' | tail -20

инструмент
k8s-debug27 команд
теги
k8s-debugtroubleshootingk8sobservability

Другие команды k8s-debug

  • kubectl get po -A -o jsonpath='{range .items[*]}{.metadata.namespace}{" "}{.metadata.name}{" "}{.status.containerStatuses[*].lastState.terminated.reason}{"\n"}{end}' | grep OOMKilled

    Показать поды во всех неймспейсах, где контейнер последний раз завершился с OOMKilled

  • kubectl get po -A --field-selector=status.phase=Pending -o name | xargs -I{} kubectl describe {} -n <ns> | grep -A3 FailedScheduling

    Показать причины FailedScheduling для каждого Pending-пода (taints, ресурсы, affinity)

  • kubectl describe node <node> | grep -A12 Conditions; ssh <node> 'journalctl -u kubelet -n 100 --no-pager'

    Посмотреть Conditions ноды, затем последние строки журнала kubelet и понять, почему она NotReady

  • kubectl get events -n <ns> --field-selector reason=Failed -o wide | grep -i 'pull\|manifest\|unauthorized'

    Показать ошибки загрузки образа из registry: неверный тег, нет imagePullSecret или упёрлись в rate limit

  • kubectl get po -A | grep Evicted | awk '{print $2" -n "$1}' | xargs -L1 kubectl delete po

    Удалить все Evicted-поды, оставшиеся после вытеснения из-за нехватки ресурсов на ноде

все 27 команд k8s-debug