Expected to fail, but passed.
Testul e marcat cu test.fail() (ca bug cunoscut), dar a trecut. Pentru Playwright asta e un eșec: de obicei bug-ul a fost reparat, iar marcajul a rămas. Scoate test.fail() (sau condiția lui) și lasă testul să ruleze normal.
Explicat de Tudor Andrei Dumitrescu, Senior Software Developer, fondatorul Academiei ProgramatorilorActualizat la
Ce înseamnă
test.fail() îi spune lui Playwright: „testul ăsta trebuie să pice, e un bug cunoscut”. Testul rulează, iar dacă pică raportul îl arată ca trecut (comportamentul e cel așteptat). Dacă însă trece, Playwright raportează eșec cu Expected to fail, but passed., ca să afli că situația s-a schimbat.
Cel mai des, bug-ul a fost reparat în aplicație și cineva a uitat marcajul. Alte cauze: testul a fost modificat și nu mai verifică exact bug-ul (de exemplu aserțiunea e prea slabă și trece oricum), sau condiția din test.fail(browserName === 'webkit', ...) se aplică pe alt browser decât cel cu bug. Reparația corectă e să verifici că bug-ul e chiar rezolvat, apoi să scoți test.fail(). Nu folosi test.fail() pentru teste instabile; pentru ele există test.fixme() sau repararea cauzei.
De ce apare: cauzele frecvente
1Bug-ul a fost reparat
test('totalul ține cont de cantitate', async ({ page }) => {
test.fail(); // bug: totalul ignoră cantitatea
// ...
});test('totalul ține cont de cantitate', async ({ page }) => {
// ...
});Aplicația calculează acum corect, deci testul trece. Marcajul de bug cunoscut nu mai are sens.
2Condiția se aplică pe browserul greșit
test.fail(browserName === 'chromium', 'datepicker stricat în Safari');test.fail(browserName === 'webkit', 'datepicker stricat în Safari');Bug-ul e în WebKit. Pe Chromium testul trece, deci marcajul pe Chromium dă eroarea.
3test.fail folosit pentru un test instabil
test.fail(); // pică uneori în CItest.fixme(); // instabil în CI, de investigatUn test flaky care trece uneori produce Expected to fail. fixme îl sare până e reparat.
Repară eroarea, direct în pagină
Testul totalul rândului ține cont de cantitate pică cu Expected to fail, but passed.. Fusese marcat cu test.fail() cât timp totalul ignora cantitatea, dar bug-ul a fost reparat. Coșul de test are 2 bucăți din Mouse ergonomic (129,00 lei). Repară testul ca să ruleze normal, să verifice totalul rândului 258,00 lei și să-l afișeze.
import { test, expect } from '@playwright/test';
test('totalul rândului ține cont de cantitate', async ({ page }) => {
test.fail(); // BUG-123: totalul rândului ignoră cantitatea
await page.goto('/#/cos');
await expect(page.getByTestId('line-total')).toHaveText('258,00 lei');
console.log(await page.getByTestId('line-total').textContent());
});Indiciu
Testul trece: marcajul de bug cunoscut nu mai e adevărat.
Reparația
import { test, expect } from '@playwright/test';
test('totalul rândului ține cont de cantitate', async ({ page }) => {
await page.goto('/#/cos');
await expect(page.getByTestId('line-total')).toHaveText('258,00 lei');
console.log(await page.getByTestId('line-total').textContent());
});De ce merge
test.fail() îi spunea lui Playwright că testul trebuie să pice. Bug-ul a fost reparat, aplicația calculează corect 258,00 lei, testul a trecut, iar Playwright a raportat asta ca eșec. Fără marcaj, testul e unul obișnuit, care trece cât timp totalul e corect și pică dacă bug-ul revine.
Alte forme ale mesajului
Error: Expected to fail, but passed.
Cum o eviți pe viitor
- Pune lângă fiecare
test.fail()un motiv și un link la bug:test.fail(true, 'BUG-123: totalul ignoră cantitatea'). - Când un bug se închide, caută în teste marcajele lui.
- Folosește
test.fail()doar pentru bug-uri stabile și reproductibile; pentru teste instabile,test.fixme()sau repararea cauzei.
Întrebări frecvente
Care e diferența dintre test.fail, test.fixme și test.skip?
fail rulează testul și așteaptă să pice. fixme și skip nu-l rulează deloc; fixme spune „de reparat”, skip spune „nu se aplică aici”.
Ce înseamnă un test cu test.fail care pică?
Că bug-ul încă există: raportul îl arată ca trecut, fiindcă rezultatul e cel așteptat.
Erori înrudite
1 flaky Raportul spune „1 flaky” când un test a picat, apoi a trecut la reîncercare (retries). Cauza tipică: testul citește pagina după o pauză fixă (waitForTimeout) sau cu valori de moment (count(), textContent(), isVisible()). Înlocuiește-le cu aserțiuni care așteaptă: toHaveCount, toHaveText, toBeVisible. Error: Tag must start with "@" symbol, got "smoke" instead. Un tag dat în opțiunea tag a unui test sau describe nu începe cu @. Scrie { tag: '@smoke' } (sau ['@smoke', '@login']), nu { tag: 'smoke' }; filtrarea se face apoi cu npx playwright test --grep @smoke. Error: expect(locator).toHaveText(expected) failed Textul elementului nu a devenit egal cu cel așteptat în 5 secunde. Compară rândurile Expected și Received: toHaveText cere tot textul elementului (cu spațiile normalizate), deci pentru o bucată din text folosește toContainText sau o expresie regulată. Învață Testare automată de la zero, cu exerciții la fiecare lecție
Curs Test Automation (Playwright și Selenium): lecții scurte, fiecare cu un exercițiu verificat automat, direct în browser. Primele 20 lecții sunt gratuite.
