Leerresultaten meten: hoe weet je of een opleiding echt werkt?

Negentig procent geslaagd en een acht als gemiddelde beoordeling. Klinkt goed, maar het zegt vooral iets over de toets en over het humeur van de cursisten. Of de opleiding daadwerkelijk iets heeft veranderd, weet je daarmee nog niet.

Vier lagen van meten

Het helpt om onderscheid te maken tussen wat cursisten van de opleiding vinden, wat ze hebben geleerd, wat ze anders doen en wat dat de organisatie oplevert. De eerste laag is het makkelijkst te meten en het minst informatief. Hoe verder je komt, hoe waardevoller het antwoord en hoe meer moeite het kost.

• Waardering: vonden cursisten het nuttig en duidelijk?
• Kennis: kunnen ze na afloop meer dan ervoor?
• Gedrag: doen ze hun werk anders dan voorheen?
• Resultaat: merkt de organisatie er iets van?

Meet voor en na, niet alleen na

Een eindtoets laat zien wat iemand weet, niet wat hij heeft geleerd. Wie de stof al beheerste, haalt dezelfde score als iemand die er veel van heeft opgestoken. Een korte nulmeting aan het begin van de opleiding lost dat op: het verschil tussen de twee metingen is de daadwerkelijke leerwinst. Dat verschil is ook het cijfer waarmee je een opleiding kunt verantwoorden.

Meet nog een keer na drie maanden

Kennis zakt weg. Een toets direct na de laatste module meet vooral het kortetermijngeheugen. Een korte herhaaltoets een paar maanden later laat zien wat er echt is blijven hangen. Dat is confronterend, maar het is precies de informatie die je nodig hebt om te bepalen welke onderdelen herhaling verdienen.

Gedrag meten hoeft niet ingewikkeld te zijn

De derde laag lijkt lastig, maar vaak volstaat een simpele vraag aan de leidinggevende of begeleider: merk je verschil in hoe deze persoon dit aanpakt? Drie korte vragen, een paar maanden na afloop, geven meer inzicht dan een uitgebreide evaluatie direct na de laatste les.

Kies een paar cijfers en houd ze jaren vol

De waarde van meten zit in de vergelijking over tijd. Twee of drie cijfers die je elk jaar op dezelfde manier verzamelt, zeggen meer dan een uitgebreid dashboard dat na een half jaar niemand meer bijhoudt. Kies wat je gaat meten, leg vast hoe je het meet, en verander die methode daarna zo min mogelijk.

Pas op voor cijfers die zichzelf mooi maken

Zodra een cijfer wordt gebruikt om te beoordelen, gaat het omhoog zonder dat er iets verbetert. Wordt een opleiding afgerekend op het slagingspercentage, dan wordt de toets vanzelf makkelijker. Wordt er gestuurd op afrondingspercentage, dan worden modules korter. Dat is geen kwade wil, het gebeurt vanzelf. Combineer daarom altijd minstens twee cijfers die niet tegelijk te beinvloeden zijn, bijvoorbeeld leerwinst en het resultaat van de herhaaltoets na drie maanden.

Vraag ook wat er niet werkte

De meeste evaluatieformulieren vragen naar een cijfer en naar wat men goed vond. Dat levert vriendelijke antwoorden op en weinig bruikbare informatie. Een vraag als: welk onderdeel had je achteraf kunnen overslaan, levert vaak binnen een paar reacties een duidelijk patroon op. Datzelfde geldt voor: waar liep je vast? Twee open vragen zijn genoeg, mits je ze ook echt leest en er iets mee doet.