พ็อดติดอยู่ในสถานะยกเลิก

ฉันพยายามลบ a ReplicationControllerด้วย 12 พ็อดและฉันเห็นว่าพ็อดบางตัวติดอยู่ในTerminatingสถานะ

คลัสเตอร์ Kubernetes ของฉันประกอบด้วยโหนดเครื่องบินควบคุมหนึ่งโหนดและโหนดผู้ปฏิบัติงานสามโหนดติดตั้งบนเครื่องเสมือน Ubuntu

อะไรคือสาเหตุของปัญหานี้

NAME        READY     STATUS        RESTARTS   AGE
pod-186o2   1/1       Terminating   0          2h
pod-4b6qc   1/1       Terminating   0          2h
pod-8xl86   1/1       Terminating   0          1h
pod-d6htc   1/1       Terminating   0          1h
pod-vlzov   1/1       Terminating   0          1h

คุณสามารถใช้คำสั่งต่อไปนี้เพื่อลบ POD ได้

kubectl delete pod <PODNAME> --grace-period=0 --force --namespace <NAMESPACE>

บังคับลบพ็อด:

kubectl delete pod --grace-period=0 --force --namespace <NAMESPACE> <PODNAME>

--forceธงมีผลบังคับใช้

ลบบล็อก finalizers ออกจากทรัพยากร (pod, การปรับใช้, ds ฯลฯ ... ) yaml:

"finalizers": [
  "foregroundDeletion"
]

คำตอบที่เป็นประโยชน์ - คุณสามารถลบพ็อดที่สิ้นสุดได้โดยเรียกใช้:

kubectl delete pod NAME --grace-period=0

คำตอบเชิงประวัติศาสตร์ - มีปัญหาในเวอร์ชัน 1.1 ซึ่งบางครั้งพ็อดติดอยู่ในสถานะการเลิกจ้างหากโหนดของพวกเขาถูกลบอย่างไม่สะอาดจากคลัสเตอร์

ฉันพบคำสั่งนี้ตรงไปตรงมามากขึ้น:

for p in $(kubectl get pods | grep Terminating | awk '{print $1}'); do kubectl delete pod $p --grace-period=0 --force;done

มันจะลบพ็อดทั้งหมดในสถานะการยุติในเนมสเปซเริ่มต้น

ในกรณีของฉัน--forceตัวเลือกไม่ได้ผล ฉันยังเห็นพ็อดอยู่! มันติดอยู่ในโหมด Terminating / Unknown ดังนั้นหลังจากการวิ่ง

kubectl delete pods <pod> -n redis --grace-period=0 --force

ฉันวิ่ง

kubectl patch pod <pod> -p '{"metadata":{"finalizers":null}}'

หาก--grace-period=0ไม่ทำงานคุณสามารถทำสิ่งต่อไปนี้

kubectl delete pods <pod> --grace-period=0 --force

ฉันสะดุดกับสิ่งนี้เมื่อเร็ว ๆ นี้เมื่อลบ namespace rook ceph - มันติดอยู่ในสถานะการเลิกจ้าง

สิ่งเดียวที่ช่วยให้ได้รับการลบ Kubernetes finalizer โดยการเรียกโดยตรง API k8s กับขดเป็นข้อเสนอแนะที่นี่

• kubectl get namespace rook-ceph -o json > tmp.json
• ลบ kubernetes finalizer ในtmp.json(ปล่อยอาร์เรย์ว่างไว้"finalizers": [])
• เรียกใช้kubectl proxyในเทอร์มินัลอื่นเพื่อวัตถุประสงค์ในการตรวจสอบและเรียกใช้การร้องขอ curl ต่อไปยังพอร์ตที่ส่งคืน
• curl -k -H "Content-Type: application/json" -X PUT --data-binary @tmp.json 127.0.0.1:8001/k8s/clusters/c-mzplp/api/v1/namespaces/rook-ceph/finalize
• namespace หายไป

รายละเอียดการแยกโกง Ceph ที่นี่

คำถามเดิมคือ " สิ่งที่อาจเป็นสาเหตุของปัญหานี้หรือไม่ " และคำตอบคือได้หารือในที่https://github.com/kubernetes/kubernetes/issues/51835 & https://github.com/kubernetes/kubernetes/issues / 65569 & ดูhttps://www.bountysource.com/issues/33241128-unable-to-remove-a-stopped-container-device-or-resource-busy

มันเกิดจากนักเทียบท่าเมารั่วใน namespace อื่น ๆ

คุณสามารถเข้าสู่ระบบเพื่อโฮสต์ pod เพื่อตรวจสอบ

minikube ssh
docker container ps | grep <id>
docker container stop <id> 

ฉันสะดุดเมื่อเร็ว ๆ นี้เพื่อเพิ่มทรัพยากรในคลัสเตอร์ของฉัน นี่คือคำสั่งที่จะลบพวกเขาทั้งหมด

kubectl get pods --all-namespaces | grep Terminating | while read line; do 
pod_name=$(echo $line | awk '{print $2}' ) name_space=$(echo $line | awk 
'{print $1}' ); kubectl delete pods $pod_name -n $name_space --grace-period=0 --force; 
done

หวังว่านี้ช่วยคนที่อ่านนี้