...
← Curs Marketing digital: toate lecțiile
Lecția 14 · Primii pași

A câștigat varianta B?

Ai schimbat poza principală pe pagina unei plante, iar noua variantă vinde cu 30% mai mult. Gata, o păstrezi? Nu încă. Cu puțini vizitatori, diferențele mari apar și din întâmplare. În lecția asta citești rezultatul unui test A/B ca un specialist: rata de conversie, creșterea și dacă diferența e sigură.

Ce este un test A/B

Într-un test A/B arăți la jumătate din vizitatori pagina actuală (A) și la cealaltă jumătate o variantă schimbată (B), în aceeași perioadă. Apoi compari câți oameni au cumpărat din fiecare grup. Pentru că grupurile sunt alese la întâmplare și văd paginile în aceleași zile, diferența vine din schimbarea ta, nu din vreme sau din reduceri.

Important

Schimbi un singur lucru o dată (poza, titlul, butonul). Dacă schimbi cinci lucruri și B câștigă, nu știi care dintre ele a ajutat.

Două calcule simple

rata de conversie = conversii / vizitatori × 100
creșterea relativă = (rata B − rata A) / rata A × 100

Exemplu: A are 3.000 de vizitatori și 90 de comenzi (3%), B are 3.000 de vizitatori și 105 comenzi (3,5%). Creșterea relativă: (3,5 − 3) / 3 × 100 = 16,7%. B pare mai bună cu 16,7%.

Atenție la diferența dintre puncte procentuale (3,5% − 3% = 0,5 puncte) și procente relative (+16,7%). Rapoartele de test folosesc de obicei creșterea relativă.

Semnificația statistică pe înțeles

Dă cu banul de 10 ori și poți obține 7 steme, deși banul e corect. La fel, cu puțini vizitatori, o pagină poate „câștiga” din întâmplare. Semnificația statistică răspunde la întrebarea: „Cât de probabil e să vedem o diferență atât de mare doar din noroc?”.

1
Simulatorul calculează valoarea p: cu cât e mai mică, cu atât e mai puțin probabil ca diferența să fie doar noroc.
2
Regula folosită de obicei: dacă p e sub 0,05 (adică încrederea e peste 95%), spui că diferența e semnificativă.
3
Dacă p e peste 0,05, nu înseamnă că B e mai slabă, ci că nu ai încă destule date ca să fii sigur.
SituațieCe decizi
B e mai bună și diferența e semnificativăimplementezi B
B pare mai bună, dar diferența nu e semnificativăcontinui testul (sau accepți că nu e o diferență mare)
A e mai bună și diferența e semnificativăpăstrezi A; ai învățat ce nu funcționează

Exemplu: aceeași creștere, alte concluzii

CasaVerde a testat o poză nouă pe două pagini de produs (date de exercițiu). În ambele cazuri B convertește cu 30% mai mult decât A:

TestABCreștereÎncredereConcluzie
Pagina ghivecelor6.000 vizitatori, 180 comenzi (3%)6.000 vizitatori, 234 comenzi (3,9%)+30%99,3%B câștigă
Pagina altei plante1.000 vizitatori, 30 comenzi (3%)1.000 vizitatori, 39 comenzi (3,9%)+30%73%mai aștepți

Aceeași creștere de 30%, dar al doilea test are prea puțini vizitatori: diferența de 9 comenzi poate fi noroc.

Greșeli frecvente

  • Oprești testul în ziua în care B „pare” să câștige: rezultatele sar mult în primele zile.
  • Rulezi testul doar 2–3 zile: comportamentul diferă între zilele lucrătoare și weekend; lasă cel puțin o săptămână întreagă.
  • Compari perioade diferite („luna trecută A, luna asta B”): diferența poate veni din sezon, nu din pagină.

Cum lucrezi în simulator

Simulatorul din dreapta este un calculator de test A/B, ca cele folosite de specialiști. Are trei părți:

1
Datele testului: scrii în cele patru căsuțe vizitatorii și conversiile (aici, comenzile) pentru A și pentru B, din enunț. Poți scrie 2000 sau 2.000.
2
Rezultat: după ce completezi toate căsuțele, simulatorul calculează singur rata de conversie a fiecărei variante, diferența relativă (creșterea), valoarea p și încrederea (încrederea = (1 − p) × 100). Dedesubt, un mesaj îți spune dacă diferența e semnificativă statistic (p sub 0,05) sau nu.
3
Intervalul de încredere de sub mesaj arată între ce valori e, foarte probabil, diferența reală dintre B și A, în puncte procentuale. Dacă intervalul cuprinde și 0 (pornește de la o valoare negativă), B s-ar putea să nu fie deloc mai bună.
4
Decizia: bifezi una dintre cele trei variante, după ce citești rezultatul.
5
Verificarea: când ai terminat, apasă „Verifică” (sus, în dreapta). În caseta „Verificare” de sub simulator vezi ce mai ai de reparat; când totul e corect, apare mesajul de felicitare. „Resetează” readuce exercițiul la început.
Exercițiul tău

CasaVerde testează o poză nouă pe pagina unei plante (date de exercițiu, două săptămâni). Varianta A (poza veche): 2.000 de vizitatori, 60 de comenzi. Varianta B (poza nouă): 2.000 de vizitatori, 78 de comenzi. Introdu datele, citește rezultatul și decide.

  • Introdu vizitatorii și comenzile (conversiile) pentru A și B.
  • Citește rata de conversie a fiecărei variante, creșterea relativă și dacă diferența e semnificativă.
  • Alege decizia corectă.
B are o creștere mare, dar uită-te la mesajul de sub rezultate: este diferența semnificativă statistic (p sub 0,05)?

Soluția exercițiului

A:
2.000 vizitatori, 60 de comenzi (3%).
B:
2.000 vizitatori, 78 de comenzi (3,9%). Creșterea relativă e 30%, dar valoarea p e aproximativ 0,12 (încredere ~88%), peste pragul de 0,05: diferența nu e încă sigură.
Decizia:
continuăm testul.
Excelent! Continuă cu lecția următoare →
Simulator marketingMarketing
VerificareSe încarcă...
Mediul de lucru se încarcă. Poți citi lecția între timp.
Parcursul tău Primii pași în marketing digital Lecția 14 · A câștigat varianta B?
Progres 0% 0 din 17
Lecția curentă 14 / 15 Primii pași