De kracht van (formatieve) toetsing RU-onderwijsdag 29 okt 2015
Marc Vorstenbosch
Testing rules learning (1) •In de experimentele groep werden steeds vragen gesteld •Studenten antwoordden met ‘clickers’ (shakespeak zou ook kunnen) •Uitleg werd afgestemd op de antwoorden van studenten.
•Twee groepen (n=267/271) natuurkunde studenten •Controle: zeer ervaren en altijd hoog gewaardeerde docent verzorgt drie klassieke colleges over elektriciteit en magnetisme. •Experiment: net gepromoveerde, onervaren docent verzorgt ook drie colleges over de zelfde leerstof. •Figuur toont toetsresultaten (best een fors verschil) Deslauriers, L., et al. (2011). "Improved Learning in a Large-Enrollment Physics Class." Science 332(6031): 862-864.
Testing rules learning (2) •Initieel leren van een tekst •Vervolgens twee experimentele groepen: Practice test (oefentoets) en Restudy (opnieuw studeren) •Grafiek: resultaten van 3 opeenvolgende, verschillende experimenten. •De oefentoets geeft in alle experimenten, zowel voor feitenkennis als concepten betere resultaten.
Butler, A. C. (2010). Repeated testing produces superior transfer of learning relative to repeated studying. Journal of Experimental Psychology: Learning, Memory, and Cognition, 36, 1118–1133.
Testing rules learning (3) •Laboratoriumonderzoek naar het leren van moeilijke woorden •S = studeren ; T = toetsen •Grafiek: resultaten van 10 minuten ‘free recall’ •Afwisseling werkt het best (STST) •Herhaald toetsen werkt beter dan herhaald studeren (STTT>SSST) •Sleutelbegrip uit cognitieve neuroscience = retrieval practice: Het ‘ophalen’ van informatie versterkt de ‘memory trace’.
Karpicke, J. D. and H. L. Roediger (2007). "Repeated retrieval during learning is the key to long-term retention." Journal of Memory and Language 57(2): 151-162.
Toetsvraag over toetsing 1 Welk doel past het beste bij uw benadering van toetsing? 1. Het leren stimuleren (assessment for learning) 2. Onderbouwd beslissen over voortgang (assessment of learning) 3. Toetsing is onderwijs (assessment as learning) 4. Evaluatie van het onderwijs 5. Maatschappelijke verantwoording afleggen
Waar ligt een rol voor formatieve toetsing?
Toetsvraag over toetsing 2 Formatieve toetsing is een Nederlandse term. Wat is de Engelse term voor formatieve toetsing?
a) Educational assessment b) Formative assessment c) Learning assessment
Formative evaluation/assessment toegeschreven aan Scriven (1967), uitgewerkt door Bloom (1968)
Toetsvraag over toetsing 3 Formatieve toetsing is een veelgebruikte term. Wat is formatieve toetsing eigenlijk? a) Een schriftelijke toets met oude toetsvragen, maar dan digitaal b) Alle activiteiten waarbij gedrag (product, antwoorden op vragen) wordt geobserveerd en gewaardeerd, zonder dat het meetelt voor het diploma c) Een toets die wel meetelt maar waar de uitslag wordt voorzien van rijke feedback
Mooiste definitie (beste?): the process used by teachers and students to recognise and respond to student learning in order to enhance that learning, during the learning (Cowie &Bell 1999)
Toetsvraag over toetsing 4 Wat is het doel van formatieve toetsing? Er zijn meerdere antwoorden mogelijk.
a) b) c) d) e)
Feitenkennis drillen Feedback geven aan studenten Feedback geven aan docenten Studenten voorbereiden op de beoordelende toetsing De leeractiviteiten van de studenten de juiste kant op sturen
In andere woorden: Formatieve toetsing kan dienen… 1) 2) 3) 4) 5) 6) 7) 8)
Als voorbereiding van een onderwijs bijeenkomst. Als toelatingseis voor een onderwijsbijeenkomst Als feedback voor studenten Als bepaling van voorkennis, opdat de docent keuzes kan maken Om voorkennis te activeren (in de voorbereiding van ander onderwijs) Als leervorm voor het stampen van feitenkennis Als oefening voor de summatieve toets ….
Toetsvraag over toetsing 5 “Toetsvragen maken is tijdrovend en lastig en nu moeten we ook nog vragen maken voor formatieve toetsing”. Hoe maak je een goede formatieve toets? a) Het is maar voor formatieve toetsing dus je kunt gerust oude toetsvragen gebruiken b) Je moet elk jaar nieuwe vragen maken anders werkt het niet c) Voor een optimaal effect van je formatieve toets moet je goed nadenken over je toetsmateriaal
Toetsing stuurt het leren Doel van toetsen en beoordelen •Studenten ‘de goede kant op’ laten leren •Verantwoording van diplomering
Docent
onderwijsprogramma
Doelen
≠?= Student
leeractiviteiten
Toets
Toetsing stuurt het leren Doel van toetsen en beoordelen •Studenten ‘de goede kant op’ laten leren •Verantwoording van diplomering
Docent
onderwijsprogramma
Doelen
toetsconstructie
Student
leeractiviteiten
Toets
Toetsing stuurt het leren Doel van toetsen en beoordelen •Studenten ‘de goede kant op’ laten leren •Verantwoording van diplomering
Docent
onderwijsprogramma toetsconstructie
Student
Doelen Toets
“Constructive alignment” “Create a test worth taking”
Ruimte voor vragen en discussie
