0/3 nodes are available: 1 node(s) had untolerated taint {node-role.kubernetes.io/control-plane: }, 2 node(s) were unschedulable. preemption: 0/3 nodes are available: 1 Preemption is not helpful for scheduling, 2 No preemption victims found for incoming pod.
Nodurile de lucru sunt marcate unschedulable (după kubectl cordon sau drain), deci nu primesc poduri noi. Dacă mentenanța s-a terminat, rulează kubectl uncordon NOD; statusul nodului arată SchedulingDisabled.
Explicat de Tudor Andrei Dumitrescu, Senior Software Developer, fondatorul Academiei ProgramatorilorActualizat la
Ce înseamnă
kubectl cordon (și kubectl drain, care începe cu cordon) marchează nodul ca unschedulable: podurile existente rămân, dar scheduler-ul nu mai pune altele noi pe el. În kubectl get nodes statusul devine Ready,SchedulingDisabled.
Mesajul apare când toate nodurile potrivite sunt în această stare, de obicei pentru că mentenanța s-a încheiat, dar nimeni nu a rulat kubectl uncordon. Podurile noi (o scalare, o actualizare, un pod recreat) rămân Pending.
În spate, cordon adaugă și taint-ul node.kubernetes.io/unschedulable:NoSchedule. DaemonSet-urile îl tolerează automat, de aceea agenții de sistem rulează și pe nodurile cordonate.
De ce apare: cauzele frecvente
1Mentenanță terminată fără uncordon
kubectl drain academia-worker --ignore-daemonsets
# ... mentenanța s-a încheiatkubectl uncordon academia-workeruncordon permite din nou programarea podurilor pe nod.
2Toate nodurile cordonate odată
kubectl cordon academia-worker
kubectl cordon academia-worker2# fă mentenanța pe rând: cordon/drain, lucrări, uncordon, apoi următorul nodCu toate nodurile scoase, aplicațiile nu au unde să pornească.
Repară eroarea, direct în pagină
După o actualizare de kernel, ambele noduri de lucru au rămas cordonate, iar Deploymentul nou chat al unui operator de telefonie stă cu podul în Pending. Mentenanța s-a terminat. Fă nodurile de lucru din nou programabile și verifică faptul că podul pornește.
Indiciu
Comanda inversă lui kubectl cordon este kubectl uncordon.
Reparația
Nodurile și motivul:
kubectl get nodes
kubectl describe pod -l app=chat | grep FailedScheduling | tail -1NAME STATUS ROLES AGE VERSION
academia-control-plane Ready control-plane 15m v1.31.2
academia-worker Ready,SchedulingDisabled <none> 15m v1.31.2
academia-worker2 Ready,SchedulingDisabled <none> 14m v1.31.2
Warning FailedScheduling 20s default-scheduler 0/3 nodes are available: 1 node(s) had untolerated taint {node-role.kubernetes.io/control-plane: }, 2 node(s) were unschedulable. preemption: 0/3 nodes are available: 1 Preemption is not helpful for scheduling, 2 No preemption victims found for incoming pod.Redeschide nodurile:
kubectl uncordon academia-worker
kubectl uncordon academia-worker2
kubectl rollout status deploy/chat
kubectl get nodesnode/academia-worker uncordoned
node/academia-worker2 uncordoned
Waiting for deployment "chat" rollout to finish: 0 of 1 updated replicas are available...
deployment "chat" successfully rolled out
NAME STATUS ROLES AGE VERSION
academia-control-plane Ready control-plane 15m v1.31.2
academia-worker Ready <none> 15m v1.31.2
academia-worker2 Ready <none> 15m v1.31.2De ce merge
Nodurile cordonate nu primesc poduri noi, iar nodul de control e rezervat, deci podul nu avea niciun loc. uncordon scoate marcajul unschedulable și taint-ul asociat, iar scheduler-ul programează podul la următoarea încercare, fără să-l recreezi. Fă mentenanța pe un nod odată, ca aplicațiile să aibă mereu unde rula.
Alte forme ale mesajului
Warning FailedScheduling default-scheduler 0/2 nodes are available: 2 node(s) were unschedulable.
Cum o eviți pe viitor
- Scrie procedura de mentenanță cu uncordon ca ultim pas obligatoriu.
- Lucrează pe un singur nod odată și verifică aplicațiile înainte de următorul.
- Monitorizează nodurile
SchedulingDisabledmai vechi de câteva ore. - Folosește PodDisruptionBudget, ca drain-ul să nu oprească prea multe replici deodată.
Întrebări frecvente
Cordon oprește podurile care rulează?
Nu. Cordon doar oprește programarea podurilor noi. Drain le și evacuează pe cele existente.
Cum văd ce noduri sunt cordonate?
kubectl get nodes: coloana STATUS arată SchedulingDisabled. Sau kubectl get nodes -o custom-columns=NOD:.metadata.name,BLOCAT:.spec.unschedulable.
Erori înrudite
error: unable to drain node "academia-worker" due to error: cannot delete DaemonSet-managed Pods (use --ignore-daemonsets to ignore): kube-system/kindnet-jktsv, kube-system/kube-proxy-smf5m kubectl drain nu evacuează podurile DaemonSet-urilor (ar fi recreate imediat pe același nod) și se oprește dacă nu-i spui explicit să le ignore. Rulează drain cu --ignore-daemonsets; nodul e deja cordonat de prima încercare. 0/3 nodes are available: 2 node(s) had untolerated taint {dedicat: gpu}, 1 node(s) had untolerated taint {node-role.kubernetes.io/control-plane: }. preemption: 0/3 nodes are available: 1 Preemption is not helpful for scheduling, 2 No preemption victims found for incoming pod. Nodurile au un taint (aici dedicat=gpu:NoSchedule) pe care podul nu îl tolerează, deci nu poate fi programat. Fie adaugi podului o toleranță pentru taint, dacă are voie pe acele noduri, fie scoți taint-ul de pe noduri, dacă nu mai e necesar. error when evicting pods/"plati-7c9f8d6b4-x2kq9" -n "default" (will retry after 5s): Cannot evict pod as it would violate the pod's disruption budget. Un PodDisruptionBudget cere ca un anumit număr de replici să rămână disponibile, iar evacuarea podului ar coborî sub prag, așa că drain reîncearcă la nesfârșit. Mărește temporar numărul de replici (ca să existe rezervă) sau ajustează PDB-ul; nu-l șterge doar ca să treacă drain-ul. Învață Kubernetes de la zero, cu exerciții la fiecare lecție
Curs Kubernetes: lecții scurte, fiecare cu un exercițiu verificat automat, direct în browser. Primele 12 lecții sunt gratuite.
