Estimări: stocare și bandă
Pe lângă cereri pe secundă, orice design are nevoie de două cifre: câte date strângi în timp (stocarea) și câte date trimiți pe rețea în fiecare secundă (banda). Ele decid ce bază de date alegi, dacă îți trebuie object storage sau un CDN și cât te costă luna. Le calculezi aici pentru comenzile și pozele MagazinPlus.
Unitățile de măsură
În estimări folosim unitățile în baza 1000, ca să calculăm ușor de cap. Diferența față de baza 1024 (1 KiB = 1.024 octeți) e mică și nu schimbă ordinul de mărime.
| Unitate | Octeți | Exemplu |
|---|---|---|
| 1 KB (kilobyte) | 1.000 | un rând dintr-o comandă, un mesaj scurt |
| 1 MB (megabyte) | 1.000.000 | o poză de telefon comprimată, o melodie de un minut |
| 1 GB (gigabyte) | 1.000 MB | un film scurt, un milion de comenzi mici |
| 1 TB (terabyte) | 1.000 GB | un disc mare; pozele unui magazin mare |
| 1 PB (petabyte) | 1.000 TB | videoclipurile unei platforme mari |
Când treci de la KB la GB împarți la 1.000.000 (un milion). În panou poți scrie direct 50k*2*365*5/1M și obții gigaoctetii.
Formula stocării
Stocarea crește în fiecare zi. O calculezi pornind de la câte obiecte noi apar zilnic și cât ocupă fiecare.
Stocare = obiecte noi pe zi × mărimea unui obiect × numărul de zile Exemplu: 10.000 de comenzi/zi × 2 KB × 365 zile = 7.300.000 KB ≈ 7,3 GB pe an
Două lucruri se adaugă des la calcul:
- Perioada de păstrare: comenzile se păstrează ani de zile (obligații legale, de exemplu 5 ani), log-urile poate doar 30 de zile.
- Replicarea: bazele de date păstrează de obicei 3 copii ale datelor, ca să nu le piardă dacă pică un disc. Stocarea fizică = stocarea logică × 3.
Formula benzii
Banda (*bandwidth*) este cantitatea de date trimisă pe rețea într-o secundă. Contează mai ales la ieșire (răspunsurile spre utilizatori), pentru că furnizorii de cloud o taxează.
Bandă = cereri pe secundă × mărimea răspunsului Exemplu: 500 cereri/s × 100 KB = 50.000 KB/s = 50 MB/s
Rețelele se măsoară des în biți pe secundă, nu în octeți. Un octet are 8 biți: 50 MB/s = 400 Mbps (megabiți pe secundă). Dacă vezi „b” mic, sunt biți; dacă vezi „B” mare, sunt octeți.
Pozele și videoclipurile consumă de sute de ori mai multă bandă decât textul. O pagină de produs fără poze are câțiva KB; cu poze, sute de KB. De aceea fișierele mari se servesc dintr-un CDN, pe care îl vei folosi în modulul de scalare.
Exemplu complet: pozele MagazinPlus
| Ce stochezi | Unde se potrivește |
|---|---|
| Comenzi, utilizatori, prețuri (date mici, structurate) | Baza de date (SQL) |
| Poze, PDF-uri cu facturi, videoclipuri (fișiere mari) | Object storage, servit prin CDN |
| Log-uri și evenimente (multe, păstrate puțin) | Sisteme specializate de log-uri, cu ștergere automată |
Greșeli frecvente
| Greșeală | Rezultat | Corect |
|---|---|---|
| Uiți să înmulțești cu zilele | Calculezi stocarea pe o zi în loc de 5 ani. | Obiecte/zi × mărime × zile. |
| Amesteci KB cu MB | Greșești de 1.000 de ori. | Treci totul în aceeași unitate înainte să compari. |
| Confunzi biți cu octeți | Banda pare de 8 ori mai mică sau mai mare. | 8 biți = 1 octet; Mbps ≠ MB/s. |
| Ignori replicarea | Discurile se umplu de 3 ori mai repede decât ai crezut. | Spui explicit dacă înmulțești cu 3. |
Pe scurt
- Stocare = obiecte pe zi × mărime × zile (× 3 dacă socotești replicarea).
- Bandă = cereri pe secundă × mărimea răspunsului; 1 octet = 8 biți.
- Unități în baza 1000: KB → MB → GB → TB, fiecare de 1.000 de ori mai mare.
- Fișierele mari (poze, video) merg în object storage, nu în baza de date.
Estimează stocarea și banda pentru MagazinPlus: răspunde la cele 4 estimări din tab-ul Estimări (toleranță 10%). Rezultatele se cer în GB și MB/s, în baza 1000.
- Stocarea comenzilor pe 5 ani, în GB.
- Aceeași stocare cu 3 copii (replicare), în GB.
- Stocarea pozelor noi pe un an, în GB.
- Banda de ieșire pentru paginile de produs, în MB/s.
Soluția exercițiului
e1: 50k*2*365*5/1M ≈ 182,5 GB. e2: 182,5*3 ≈ 547,5 GB. e3: 1000*3*500*365/1M ≈ 547,5 GB. e4: 300*200/1000 = 60 MB/s.
