Liveness probe failed: Get "http://10.244.2.9:8080/health": dial tcp 10.244.2.9:8080: connect: connection refused
Proba de liveness eșuează înainte ca aplicația să termine pornirea, iar kubelet-ul o repornește la nesfârșit, așa că nu apucă niciodată să pornească. Pentru aplicații lente adaugă o startupProbe (de exemplu failureThreshold 30 × periodSeconds 5) sau corectează portul dacă e greșit.
Explicat de Tudor Andrei Dumitrescu, Senior Software Developer, fondatorul Academiei ProgramatorilorActualizat la
Ce înseamnă
Proba de liveness începe după initialDelaySeconds (implicit 0). Dacă aplicația are nevoie de 45 de secunde ca să deschidă portul (încărcare de date, încălzirea JVM-ului, migrații), iar proba eșuează de 3 ori la 5 secunde, containerul e omorât după 15 secunde, înainte să fie gata. Repornit, o ia de la capăt: un ciclu fără ieșire, cu CrashLoopBackOff și failed liveness probe, will be restarted în evenimente.
Soluția modernă e startupProbe: cât timp ea nu a reușit, liveness și readiness sunt suspendate. O dai generoasă (de exemplu 30 de încercări la 5 secunde = 150 s), iar liveness rămâne strictă după pornire.
Dacă eroarea continuă și după ce aplicația sigur a pornit, portul din probă e greșit.
De ce apare: cauzele frecvente
1Aplicație lentă fără startupProbe
livenessProbe:
httpGet:
path: /health
port: 8080
periodSeconds: 5 startupProbe:
httpGet:
path: /health
port: 8080
periodSeconds: 5
failureThreshold: 30
livenessProbe: ...startupProbe acordă timp pornirii; liveness intră în joc abia după ea.
2initialDelaySeconds ghicit
initialDelaySeconds: 20 # pornirea durează 45 s # startupProbe cu failureThreshold 30O întârziere fixă e prea mică uneori și prea mare alteori; startupProbe se adaptează.
3Port greșit
port: 80 port: 8080Dacă portul e greșit, proba eșuează mereu, oricât aștepți.
Repară eroarea, direct în pagină
Serviciul de rapoarte al unei bănci (rapoarte, academia/lent:1.0, deschide portul 8080 abia după 45 de secunde) e repornit continuu de proba de liveness. Adaugă în ~/k8s/rapoarte.yaml o startupProbe pe /health:8080 cu periodSeconds: 5 și failureThreshold: 30, apoi aplică fișierul.
Indiciu
startupProbe stă la același nivel cu livenessProbe, în container.
Reparația
Repornirile și motivul:
kubectl get pods -l app=rapoarte
kubectl describe pod -l app=rapoarte | grep -E 'Unhealthy|Killing' | tail -2NAME READY STATUS RESTARTS AGE
rapoarte-t8gbtcxfvz-4jpb7 1/1 Running 2 (25s ago) 63s
Warning Unhealthy 4s (x7 over 60s) kubelet Liveness probe failed: Get "http://10.244.2.2:8080/health": dial tcp 10.244.2.2:8080: connect: connection refused
Normal Killing 27s (x2 over 50s) kubelet Container rapoarte failed liveness probe, will be restartedAdaugă startupProbe și aplică:
Fișierul rapoarte.yaml:
apiVersion: apps/v1
kind: Deployment
metadata:
name: rapoarte
spec:
replicas: 1
selector:
matchLabels:
app: rapoarte
template:
metadata:
labels:
app: rapoarte
spec:
containers:
- name: rapoarte
image: academia/lent:1.0
ports:
- containerPort: 8080
startupProbe:
httpGet:
path: /health
port: 8080
periodSeconds: 5
failureThreshold: 30
livenessProbe:
httpGet:
path: /health
port: 8080
periodSeconds: 5kubectl apply -f rapoarte.yaml
kubectl rollout status deploy/rapoarte --timeout=120sdeployment.apps/rapoarte configured
Waiting for deployment "rapoarte" rollout to finish: 1 old replicas are pending termination...
Waiting for deployment "rapoarte" rollout to finish: 0 of 1 updated replicas are available...
deployment "rapoarte" successfully rolled outDe ce merge
Fără startupProbe, liveness eșuează de trei ori în primele 15 secunde și omoară aplicația înainte să deschidă portul, iar ciclul se repetă. startupProbe suspendă liveness până când aplicația răspunde prima dată și îi acordă până la 150 de secunde. După aceea, liveness își face treaba normal.
Alte forme ale mesajului
Normal Killing kubelet Container sl failed liveness probe, will be restartedStartup probe failed: Get "http://10.244.1.7:8080/health": dial tcp 10.244.1.7:8080: connect: connection refused
Cum o eviți pe viitor
- Măsoară timpul real de pornire al aplicației și dimensionează startupProbe pentru cazul cel mai lent.
- Nu folosi liveness pentru a aștepta pornirea; folosește startupProbe.
- Fă proba de liveness ieftină și independentă de alte servicii.
- Verifică după livrare că RESTARTS nu crește.
Întrebări frecvente
De ce nu pun pur și simplu initialDelaySeconds: 120?
Merge, dar întârzie depistarea unei aplicații blocate la fiecare pornire și rămâne fragil dacă pornirea devine mai lentă. startupProbe se oprește imediat ce aplicația e gata.
Ce se întâmplă dacă startupProbe eșuează de failureThreshold ori?
Containerul e repornit, ca la liveness. Alege o valoare care acoperă cu siguranță pornirea normală.
Erori înrudite
Liveness probe failed: HTTP probe failed with statuscode: 404 Proba de liveness cere o adresă pe care aplicația nu o are (404), iar kubelet-ul crede că aplicația s-a blocat și repornește containerul la nesfârșit. Corectează path-ul probei (de exemplu /health) și portul, ca să indice un endpoint care răspunde 200. Readiness probe failed: Get "http://10.244.2.8:80/ready": dial tcp 10.244.2.8:80: connect: connection refused Proba de readiness încearcă un port pe care containerul nu ascultă (aici 80, deși aplicația ascultă pe 8080), sau aplicația încă nu a pornit serverul. Pune în probă portul real al aplicației; dacă pornirea durează, adaugă initialDelaySeconds sau o startupProbe. Back-off restarting failed container api in pod api-6d8f7c9b5-x2kq9_default Containerul pornește și se oprește iar și iar, iar kubelet-ul așteaptă tot mai mult între reporniri (CrashLoopBackOff). Cauza e aproape mereu în jurnalul rulării care a căzut: kubectl logs POD --previous. Repară configurarea sau codul care face procesul să iasă. Învață Kubernetes de la zero, cu exerciții la fiecare lecție
Curs Kubernetes: lecții scurte, fiecare cu un exercițiu verificat automat, direct în browser. Primele 12 lecții sunt gratuite.
