Под мертв. Контейнер добавлен в K8s 1.13

Кто-нибудь сталкивался со сценарием, когда pod выселяется с одного узла (т.е. узла A), а затем немедленно планируется на другом узле (т.е. узле B). Но кублет узла А продолжает жаловаться на невозможность удалить контейнер пода. Контейнер поднят и не убит.

Aug 30 20:29:36 staging-node-4 kubelet[2173]: I0830 20:29:36.358238    2173 kubelet_pods.go:1073] Killing unwanted pod "thanos-compactor-0"
Aug 30 20:29:36 staging-node-4 kubelet[2173]: I0830 20:29:36.362581    2173 kuberuntime_container.go:559] Killing container "docker://b22287cd406c3fe9eff4ff2df1792c6f84b5b92d001359f05ea73f8788715609" with 30 second grace period
Aug 30 20:29:36 staging-node-4 kubelet[2173]: E0830 20:29:36.363416    2173 kuberuntime_container.go:71] Can't make a ref to pod "thanos-compactor-0_thanos(23096418-c7b2-11e9-9be7-005056bc2883)", container thanos: selfLink was empty, can't make reference
Aug 30 20:29:38 staging-node-4 kubelet[2173]: I0830 20:29:38.362191    2173 kubelet_pods.go:1073] Killing unwanted pod "thanos-compactor-0"
Aug 30 20:29:38 staging-node-4 kubelet[2173]: I0830 20:29:38.366884    2173 kuberuntime_container.go:559] Killing container "docker://b22287cd406c3fe9eff4ff2df1792c6f84b5b92d001359f05ea73f8788715609" with 30 second grace period
Aug 30 20:29:38 staging-node-4 kubelet[2173]: E0830 20:29:38.367901    2173 kuberuntime_container.go:71] Can't make a ref to pod "thanos-compactor-0_thanos(23096418-c7b2-11e9-9be7-005056bc2883)", container thanos: selfLink was empty, can't make reference
Aug 30 20:29:38 staging-node-4 kubelet[2173]: I0830 20:29:38.997510    2173 setters.go:72] Using node IP: "172.17.21.146"
Aug 30 20:29:40 staging-node-4 kubelet[2173]: I0830 20:29:40.364388    2173 kubelet_pods.go:1073] Killing unwanted pod "thanos-compactor-0"
Aug 30 20:29:40 staging-node-4 kubelet[2173]: I0830 20:29:40.368226    2173 kuberuntime_container.go:559] Killing container "docker://b22287cd406c3fe9eff4ff2df1792c6f84b5b92d001359f05ea73f8788715609" with 30 second grace period
Aug 30 20:29:40 staging-node-4 kubelet[2173]: E0830 20:29:40.369235    2173 kuberuntime_container.go:71] Can't make a ref to pod "thanos-compactor-0_thanos(23096418-c7b2-11e9-9be7-005056bc2883)", container thanos: selfLink was empty, can't make reference

b22287cd — это идентификатор контейнера докера, который не удаляется.


kubernetes docker kubelet
person swetad90    schedule 30.08.2019    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Я столкнулся с этой проблемой несколько недель назад. Поды были исключены из узла и иногда «застревали» в завершающем состоянии.

Проверьте состояние вашего модуля, запустив kubectl -n <NAMESPACE> get pod

Использование kubectl delete pod <PODNAME> --grace-period=0 --force --namespace <NAMESPACE> решило проблему.

person DavidPi    schedule 30.08.2019
comment
В моем случае они не находятся в прекращенном состоянии. На самом деле модуль больше не существует как набор состояний. Это просто контейнер, который запущен и работает - person swetad90; 03.09.2019