Software testen: les 8 van 11, Exploratory testing

Exploratory testing: vrij zoeken naar fouten, met een plan

Bij exploratory testing bedenk je je tests terwijl je test. In het Nederlands heet het ook exploratief testen. Het is geen rondklikken: je werkt met een doel, een vaste tijd en aantekeningen. In deze les doet Noor haar eerste sessie op de kaartverkoop van De Kleine Komeet.

Wat is exploratory testing?

Volgens de ISTQB-lesstof ontwerp je bij exploratory testing tests, voer je ze uit en beoordeel je de uitkomst, allemaal tegelijk. Ondertussen leer je steeds meer over het systeem. De term werd voor het eerst gebruikt door Cem Kaner, in zijn boek Testing Computer Software uit 1988.

Vergelijk het met de testcases uit les 5. Daar schrijf je de stappen en het verwacht resultaat vooraf op. Dat is goed voor wat je vaker wilt herhalen. Bij exploratory testing volg je geen script, maar je nieuwsgierigheid en ervaring. Zo vind je fouten waar niemand aan dacht. De twee vullen elkaar aan.

Testen in sessies: charter, tijdvak, logboek, nabespreking

Hoe weet je achteraf wat je hebt getest? Jon Bach en James Bach beschreven daarvoor in 2000 session-based test management, ontwikkeld bij Hewlett-Packard. Je test in sessies. Elke sessie heeft vier onderdelen:

Een testsessie
  1. 1Charterhet doel in één zin
  2. 2Tijdvakvast blok, wekker aan
  3. 3Sessietesten, leren, noteren
  4. 4Nabesprekingwat vond je, wat nu?
  5. 5Nieuw charterverder waar het schuurt

en dan weer opnieuw bij stap 1

Uit de nabespreking komt vaak een nieuw charter. Zo werk je in rondes verder.

Een goed charter

Een charter is niet te groot en niet te klein. "Verken de hele website" is te groot: je weet niet waar je moet beginnen. "Klik op de knop Betalen" is te klein: dat is een testcase. Een goed charter noemt één deel van het systeem en één ding dat je wilt ontdekken.

Fouten raden: waar zitten ze vaak?

Bij exploratory testing gebruik je je ervaring. De ISTQB-lesstof noemt dat fouten raden (error guessing): je voorspelt waar fouten zitten, op basis van eerdere fouten en vergissingen die ontwikkelaars vaak maken. Denk aan invoer, uitvoer, berekeningen, logica, koppelingen met andere systemen en opgeslagen gegevens. Werk je met een vaste lijst van zulke mogelijke fouten, dan heet dat een foutaanval (fault attack).

Noor maakt een lijstje voor de kaartverkoop:

Veel punten komen uit les 6 en les 7; hier ga je er vrijer mee aan de slag.

Samen testen: in paren of als groep

Je kunt ook samen een sessie doen. Bij pair testing testen twee mensen samen op één scherm, bijvoorbeeld een tester en een ontwikkelaar. Noor bedenkt wat ze proberen, Daan ziet meteen wat er in de code gebeurt.

Bij mob testing of ensemble testing test een hele groep samen op één computer. Dit komt voort uit mob programming: rond 2011 zette het team van Woody Zuill de hele groep achter één computer om samen te programmeren. Omdat "mob" negatief klinkt, zeggen velen liever "ensemble". Samen testen helpt om kennis te delen.

Probeer het zelf: je eerste sessie

Kies een website of app die je kent, bijvoorbeeld het contactformulier van een bedrijf. Download het werkblad en doe een sessie van 45 minuten.

Werkblad exploratory testing
Excelbestand met twee tabbladen. Charter: je doel en tijdvak vooraf, en de nabespreking achteraf. Logboek: per regel de tijd, wat je deed, wat je zag en het soort (bug, vraag, idee of notitie).

Download (7 kB)
  1. Vul op het tabblad Charter je doel in met het sjabloon "Verken ... met ... om ... te ontdekken".
  2. Zet een wekker en test. Schrijf op het tabblad Logboek meteen op wat je doet en ziet.
  3. Vul na afloop de nabespreking in: wat vond je, wat lukte niet en wat wil je de volgende keer verkennen?

Vond je een fout? Schrijf er een bugmelding voor zoals in les 10. Wil je een hele website nalopen, kijk dan ook in les 9.

Onthoud

Check jezelf

Wat is het verschil tussen exploratory testing en een uitgeschreven testcase?

Bij een testcase staan de stappen en het verwacht resultaat vooraf vast. Bij exploratory testing bedenk je de volgende stap terwijl je test, op basis van wat je net hebt gezien.

Is "Verken de hele website" een goed charter?

Nee, dat is te groot. Een goed charter noemt één deel van het systeem en één ding dat je wilt ontdekken.

Wat bespreek je in de nabespreking?

Wat je hebt gedaan, wat je hebt gevonden, wat niet lukte of niet getest is, en wat je de volgende keer wilt verkennen.

Ken je iemand die dit ook kan gebruiken? Deel de cursus.

Deel via WhatsApp

LinkedIn Facebook E-mail

Veelgestelde vragen

Wat is exploratory testing?

Bij exploratory testing (in het Nederlands ook exploratief testen) bedenk je tests, voer je ze uit en beoordeel je de uitkomst tegelijk, terwijl je het systeem steeds beter leert kennen. Je werkt niet met vooraf uitgeschreven stappen, maar wel met een duidelijk doel.

Wat is een test charter?

Een test charter is het doel van een testsessie in een paar woorden: wat je gaat verkennen, waarmee en wat je wilt ontdekken. Een veelgebruikt sjabloon is: "Verken [doel] met [middelen] om [informatie] te ontdekken."

Wie heeft exploratory testing bedacht?

Cem Kaner gebruikte de term voor het eerst in zijn boek Testing Computer Software uit 1988. Jon Bach en James Bach beschreven in 2000 een manier om het in sessies te organiseren: session-based test management.

Is exploratory testing hetzelfde als zomaar wat rondklikken?

Nee. Je werkt met een charter, een vaste tijd, aantekeningen en een nabespreking. Je kiest dus bewust waar je zoekt en je kunt achteraf vertellen wat je hebt gedaan en gevonden.

Aangeraden door