Het vinkjesprobleem
De standaardtoets aan het eind van een e-learningmodule bestaat uit vier meerkeuzevragen waarvan het juiste antwoord er direct uitspringt. Iedereen haalt hem, de registratie staat op groen, en niemand weet meer dan voor de module.
Dat is niet alleen zonde van de tijd. Het is actief schadelijk, omdat de organisatie nu denkt dat het geregeld is. Bij een audit ligt er een lijst met honderd procent geslaagd, en die lijst geeft valse zekerheid over precies het onderwerp waar het misgaat.
Drie niveaus van toetsen
Het helpt om onderscheid te maken tussen wat je meet.
Weten. Kent iemand het feit, de norm, de grenswaarde? Meerkeuzevragen zijn hiervoor prima, en dit niveau is nodig. Je kunt niet handelen zonder te weten. Het is alleen zelden voldoende.
Beslissen. Kiest iemand in een concrete situatie de juiste handeling? Dit toets je met scenario’s: een situatie met onvolledige informatie, meerdere verdedigbare opties en een gevolg. Dit is het niveau waar de meeste industriële trainingsvragen thuishoren, en het niveau dat het vaakst wordt overgeslagen.
Doen. Voert iemand de handeling correct uit? Dit is niet digitaal te toetsen. Het vraagt observatie op de werkplek door iemand die weet waar hij op moet letten.
Een volwassen toetsopzet gebruikt alle drie, in die volgorde, en beperkt het derde tot de handelingen waar het echt om gaat.
Goede afleiders maken de toets
Bij scenariovragen zit de kwaliteit volledig in de foute antwoorden.
Een vraag met één plausibel en drie onzinnige opties toetst of iemand kan lezen. Een vraag waarin alle vier de opties door een ervaren collega verdedigd zouden kunnen worden, en waarin één optie net iets beter is, toetst oordeelsvorming.
Die afleiders verzin je niet achter een bureau. Ze komen uit incidentrapportages en uit gesprekken met vakmensen: welke keuze maakte degene die het fout deed, en waarom leek die op dat moment logisch? Dat is de afleider die werkt.
Wat je registreert
Voor aantoonbaarheid heb je meer nodig dan geslaagd of niet.
Leg per persoon vast welke versie van het materiaal is doorlopen, bij een audit na een proceswijziging is dat de vraag die gesteld wordt. Leg vast op welke onderdelen iemand fout zat, niet alleen het eindcijfer. En kijk naar patronen over de groep: als tachtig procent dezelfde vraag fout heeft, is dat geen kennisprobleem van tachtig procent van je mensen maar een probleem met de procedure of met de uitleg ervan.
Dat laatste is de meest onderbenutte opbrengst van toetsing. De scores zijn niet alleen een oordeel over de deelnemers; ze zijn een meting van je eigen materiaal en soms van je eigen procedures. Wie er zo naar kijkt, haalt er meer uit dan een certificaat.
Toetsing is het sluitstuk van een programma, en het werkt alleen als de rest ervoor klopt. Hoe die opbouw eruitziet, staat in de gids over een bedrijfsacademie opzetten of vernieuwen. Wat je daarvoor uit een leerplatform moet kunnen halen, staat bij learning management.