Expertise hub / Techniek
Techniek Kwaliteit 6 min lezen

Alle testen groen. En toch staat de knop verkeerd.

De pipeline is groen en de release gaat live. Een uur later meldt een gebruiker dat de bestelknop op mobiel half achter de footer verdwijnt. Functioneel werkte alles. Visueel niet.

Dat is geen uitzonderlijk scenario. Het is precies het soort fout waar een klassieke testsuite blind voor is, en waar visual regression testing voor bestaat.

Groen betekent niet dat het er goed uitziet

Functionele testen controleren gedrag: kan een gebruiker inloggen, wordt een bestelling correct verwerkt, verschijnt de juiste foutmelding? Ze zoeken elementen op via selectors en controleren of die bestaan, zichtbaar zijn en reageren. Waar een element precies staat, welke kleur het heeft of of het overlapt met iets anders, valt meestal buiten hun blikveld.

Een knop kan dus perfect klikbaar zijn voor je testframework, terwijl hij voor een echte gebruiker verschoven, onleesbaar of half verborgen is. Zulke fouten ontstaan zelden bewust. Een CSS-aanpassing, een update van een component library of een nieuw lettertype werkt door op plaatsen waar niemand aan dacht.

Hoe visual regression testing werkt

Je vergelijkt screenshots van je applicatie met een goedgekeurde referentie, de baseline.

  1. Baseline vastleggen. Je maakt een screenshot van een pagina of component in een gekende, correcte toestand.
  2. Vergelijken. Bij elke testrun maakt het framework een nieuw screenshot en vergelijkt het met de baseline.
  3. Verschil beoordelen. Wijkt het resultaat meer af dan de ingestelde tolerantie, dan faalt de test en zie je waar het verschil zit.
  4. Bewust beslissen. Is de wijziging gewenst, dan wordt het nieuwe screenshot de baseline. Is ze dat niet, dan heb je een regressie gevonden.
BASELINE
Verder
ACTUEEL
Verder
diff: positie + kleur van de knop gewijzigd

In Playwright zit dit ingebouwd. Eén assertion volstaat:

checkout.visual.spec.tsPlaywright
// de eerste run schrijft de baseline weg, elke volgende run vergelijkt ermee
import { test, expect } from '@playwright/test';

test('checkout ziet er nog uit zoals goedgekeurd', async ({ page }) => {
  await page.goto('/checkout');
  await expect(page).toHaveScreenshot('checkout.png', {
    maxDiffPixelRatio: 0.01,
    animations: 'disabled',
    mask: [page.getByTestId('order-date')],
  });
});

Met maxDiffPixelRatio stel je in hoeveel afwijking aanvaardbaar is, animations zet animaties stil en mask dekt dynamische zones af, zoals een datum die bij elke run verandert.

Wanneer loont het?

Visuele testen vervangen je functionele testen niet. Ze vullen ze aan op plaatsen waar visuele fouten vaak voorkomen of duur zijn:

Voor een interne beheerapplicatie die zelden van uitzicht verandert, is de investering vaak niet nodig. Begin waar een visuele fout het meeste pijn doet.

Functioneel correct is niet hetzelfde als visueel correct.

Welke tools zijn er?

ToolTypeSterk in
PlaywrightOpen sourceIngebouwd via toHaveScreenshot(). Gratis, baselines beheer je zelf in je repo.
ChromaticSaaSVisuele testen op componentniveau via Storybook, met review per pull request.
PercySaaSPagina's en componenten, review-UI en integratie met bestaande testframeworks.
ApplitoolsSaaSAI-gebaseerde vergelijking in plaats van pixel per pixel, minder gevoelig voor ruis.

De keuze hangt minder af van features dan van je context. Welk framework gebruik je al? Waar wil je baselines beheren? En wie beoordeelt de verschillen, alleen het testteam of ook designers en developers? Met Playwright heb je geen extra licentie nodig. Een SaaS-tool loont vooral wanneer meerdere teams mee reviewen.

De valkuilen

Valse alarmen door de omgeving

Fonts, anti-aliasing en rendering verschillen per besturingssysteem en browserversie. Een screenshot van je laptop komt zelden pixel voor pixel overeen met een screenshot uit een Linux-pipeline. Maak en vergelijk baselines daarom altijd in dezelfde omgeving, bijvoorbeeld een vaste Docker-image.

Dynamische inhoud

Datums, tellers, advertenties en animaties veranderen bij elke run. Maskeer die zones of zet animaties stil, anders faalt je test om de verkeerde reden.

Te veel screenshots

Elke baseline is onderhoud. Honderd screenshots van bijna identieke pagina's leveren vooral reviewwerk op, geen extra zekerheid.

Blind accepteren

Bij een falende visuele test is de verleiding groot om alles opnieuw goed te keuren. Dan test je eigenlijk niets meer. Elke nieuwe baseline verdient een review, net zoals een code review.

Waar je begint

  1. Kies vijf tot tien schermen waar een visuele fout echt pijn doet.
  2. Leg de testomgeving vast: dezelfde browserversie, dezelfde viewport, dezelfde container.
  3. Maskeer dynamische inhoud en zet animaties stil.
  4. Voeg de visuele testen toe aan je CI/CD-pipeline, met een duidelijke reviewstap in de pull request.
  5. Breid pas uit wanneer de eerste set stabiel draait en het team het reviewproces beheerst.

Visual regression testing vangt precies de fouten op die je functionele testen niet zien. Op voorwaarde dat je het gericht inzet en het reviewproces ernstig neemt.

Carrousel: visual regression testing
// Ook als carrousel

Dit artikel verscheen ook als carrousel op LinkedIn.

Bekijk op LinkedIn
// Verder praten

Herkenbaar?

We nemen je testaanpak door en zeggen eerlijk waar de winst zit. En waar niet.

Plan een gesprek
// Lees ook