...
Eroare System Design · Baza de date: conexiuni, lock-uri, interogări lente

Baza de date primară la 100% CPU din cauza citirilor

Pe scurt

Majoritatea interogărilor sunt citiri, iar baza primară, singura care le servește, a ajuns la limită. Mută citirile pe replici de citire (read replicas) și pune un cache în față pentru datele citite des; primara rămâne pentru scrieri.

Explicat de Tudor Andrei Dumitrescu, Senior Software Developer, fondatorul Academiei ProgramatorilorActualizat la

Ce înseamnă

În cele mai multe aplicații web citirile sunt de zeci de ori mai multe decât scrierile: pagini de produs, liste, profiluri. Când toate merg la o singură bază, ea ajunge la 100% CPU, latența crește, conexiunile se adună, iar la final apar timeout-uri în toată aplicația.

Două unelte rezolvă problema fără să schimbi baza de date. Cache-ul scoate citirile repetate (aceleași produse populare) din bază. Replicile de citire sunt copii ale primarei, actualizate asincron prin replicare; aplicația trimite citirile la ele și scrierile la primară. Cu N replici, capacitatea de citire crește aproximativ de N ori.

Compromisul replicilor e întârzierea de replicare: o replică poate fi cu câteva milisecunde (uneori secunde) în urmă. Citirile care trebuie să vadă imediat o scriere proaspătă (profilul tocmai salvat) merg la primară.

De ce apare: cauzele frecvente

1Toate citirile la primară

Greșit
spring.datasource.url=jdbc:postgresql://db-primar:5432/magazin
Corect
# scrieri: db-primar; citiri: db-replica (routing după @Transactional(readOnly = true))
app.datasource.write.url=jdbc:postgresql://db-primar:5432/magazin
app.datasource.read.url=jdbc:postgresql://db-replici:5432/magazin

Un DataSource de rutare trimite tranzacțiile readOnly la replici, iar restul la primară.

2Cache cu rată de hit mică

Greșit
redis.setex(cheie, 10, valoare)   # TTL de 10 secunde pentru produse care se schimbă rar
Corect
redis.setex(cheie, 600, valoare)  # TTL mai lung + invalidare la modificare

Un TTL prea scurt face cache-ul să expire înainte să fie refolosit, iar citirile ajung tot în bază.

Repară tu

Repară eroarea, direct în pagină

Baza primară e peste capacitate: cache-ul are doar 50% hit, iar restul citirilor (3.000 pe secundă) ajung în ea. Fără să schimbi cache-ul, adaugă capacitate de citire astfel încât toate cererile să fie tratate și toate componentele să fie sub 80%.

Indiciu

Citirile pot fi servite de copii ale bazei, care primesc datele de la primară.

Alte forme ale mesajului

  • CPU utilization 100% (RDS primary)
  • too many active sessions / high DB load (read-heavy)

Cum o eviți pe viitor

  • Măsoară raportul citiri : scrieri înainte să alegi soluția.
  • Pune cache pentru datele citite des și rar modificate.
  • Adaugă replici de citire când cache-ul nu mai ajunge.
  • Trimite la primară citirile care trebuie să vadă scrieri proaspete.

Întrebări frecvente

Replici sau cache, ce pun întâi?

Cache-ul, dacă aceleași date sunt citite des: e ieftin și scade latența. Replicile ajută și la citiri variate, care nu se repetă destul ca să fie în cache.

Replicile ajută și la scrieri?

Nu. Fiecare scriere trebuie aplicată pe primară și pe toate replicile. Pentru scrieri multe, soluția e sharding-ul.

Erori înrudite

← Toate erorile System Design

Tudor Andrei Dumitrescu
Cine a explicat eroarea

Tudor Andrei Dumitrescu

Senior Software Developer · fondatorul Academiei Programatorilor

LinkedIn
  1. 2019 Junior JavaCognizant Softvision
  2. 2021 Mid JavaCognizant Softvision
  3. 2022 Team LeaderEndava
  4. 2023 Senior Software DeveloperUniCredit
  5. Acum Senior Software DeveloperHCLTech
Certificat de absolvire Instructor / Preparator formare, Tudor Andrei Dumitrescu
Certificat de formator autorizatMinisterul Muncii și Ministerul Educației · 2022
Certificat de absolvire Instructor / Preparator formare, Tudor Andrei Dumitrescu

Certificat de formator autorizat · Ministerul Muncii și Ministerul Educației · 2022

Din 2020 construiește Academia Programatorilor, iar din 2026 și JoburiIT.ro. Fiecare eroare de aici a fost reprodusă în editorul nostru: codul greșit chiar dă mesajul din titlu, iar reparația chiar funcționează.

Învață System Design de la zero, cu exerciții la fiecare lecție

Curs System Design: lecții scurte, fiecare cu un exercițiu verificat automat, direct în browser. Primele 10 lecții sunt gratuite.