Brokerul de mesaje unic a căzut și comenzile nu se mai pot plasa
Toate comenzile publică un eveniment în coadă, iar brokerul rulează într-o singură instanță: când cade, publicarea eșuează și comenzile dau erori. Rulează brokerul în cluster (de exemplu 3 noduri, cozi replicate) sau folosește un serviciu gestionat.
Explicat de Tudor Andrei Dumitrescu, Senior Software Developer, fondatorul Academiei ProgramatorilorActualizat la
Ce înseamnă
Coada pare o componentă „din spate”, dar dacă aplicația publică sincron un eveniment la fiecare scriere, brokerul e pe drumul cererii. Un singur nod RabbitMQ sau Kafka devine astfel un punct unic de eșec: la cădere, publish aruncă excepții (Connection refused, AMQP connection closed, TimeoutException), iar comenzile eșuează.
Mai grav, mesajele aflate doar pe nodul căzut pot fi pierdute dacă nu erau persistate sau replicate.
Soluții: un cluster de brokeri cu cozi replicate (RabbitMQ quorum queues pe 3 noduri, Kafka cu replication.factor=3 și min.insync.replicas=2) sau un serviciu gestionat (SQS, Pub/Sub, Amazon MQ cu redundanță). Ca protecție suplimentară, aplicația poate salva evenimentul în bază, în aceeași tranzacție cu comanda (outbox pattern), iar un proces separat îl publică când brokerul revine.
De ce apare: cauzele frecvente
1Un singur broker
rabbitmq: 1 nod, coadă clasică necopiatărabbitmq: 3 noduri, x-queue-type = quorumCozile quorum sunt replicate pe majoritatea nodurilor și supraviețuiesc căderii unuia.
2Publicare directă, fără plasă de siguranță
repo.save(comanda);
broker.publica(eveniment); // dacă brokerul e căzut, comanda dă eroare@Transactional
void plaseaza(Comanda c) {
repo.save(c);
outbox.save(new Eveniment("ComandaPlasata", c.id()));
}
// un proces separat publică din outboxComanda și evenimentul se salvează atomic; publicarea se face când brokerul e disponibil.
Repară eroarea, direct în pagină
Toate comenzile publică un eveniment într-o coadă cu un singur broker, care apare ca SPOF în simulare. Elimină punctul unic de eșec.
Indiciu
Coada scalează ca orice componentă: mai mulți brokeri.
Reparația
1. Atinge Coadă de mesaje. 2. Brokeri = 3.
Rezultat: fără SPOF.
De ce merge
Cu un singur broker, căderea lui oprește scrierile. Cu 3 brokeri (cozi replicate), căderea unuia e tolerată.
Alte forme ale mesajului
java.net.ConnectException: Connection refused (AMQP)org.apache.kafka.common.errors.TimeoutException: Topic comenzi not present in metadata after 60000 ms.NOT_ENOUGH_REPLICAS
Cum o eviți pe viitor
- Rulează brokerul în cluster, cu cozi / topicuri replicate.
- Folosește
acks=allșimin.insync.replicasla Kafka pentru mesaje importante. - Ia în calcul outbox pattern pentru evenimentele legate de tranzacții.
- Include brokerul în testele de cădere.
Întrebări frecvente
Un serviciu gestionat elimină problema?
SQS sau Pub/Sub sunt redundante intern, deci nu sunt SPOF-uri pe care să le gestionezi tu. Tot trebuie să tratezi erorile temporare de publicare.
Ce e outbox pattern?
Salvezi evenimentul într-un tabel outbox în aceeași tranzacție cu datele, iar un proces separat îl citește și îl publică. Nu pierzi evenimente și nu publici evenimente pentru tranzacții anulate.
Erori înrudite
Single point of failure (SPOF): o singură componentă cade și oprește tot site-ul O componentă rulează într-un singur exemplar pe drumul tuturor cererilor (un server de aplicație, o bază fără standby, un singur load balancer), deci căderea ei oprește tot sistemul. Pune cel puțin două instanțe în spatele unui load balancer cu health check sau un standby cu failover automat. Mesaje pierdute: consumatorul confirmă (ack) înainte să termine procesarea Consumatorul spune brokerului „am primit” (ack, commit de offset, delete în SQS) înainte să termine lucrul. Dacă procesul cade între confirmare și finalizare, mesajul e pierdut definitiv. Confirmă doar după ce efectul e salvat și fă procesarea idempotentă, pentru eventualele relivrări. Învață System Design de la zero, cu exerciții la fiecare lecție
Curs System Design: lecții scurte, fiecare cu un exercițiu verificat automat, direct în browser. Primele 10 lecții sunt gratuite.
