SIG Digitaal Toetsen 5 juni 2012
SCALA: Efficiënt tussentijds feedback geven op schriftelijke werkstukken Patris van Boxel (
[email protected]) Sanne Gratama van Andel (
[email protected])
Patris van Boxel UBVU
SCALA Scaffolding Assessment for Learning
SURF project, onderdeel van programma ‘Toetsing en toetsgestuurd leren’ Partner instellingen:
Universiteit Utrecht Vrije Universiteit Hogeschool van Amsterdam Hogeschool van Utrecht
SCALA: waar gaat het over?
Projectdoelstellingen 25% besparing op de tijd die docenten normaal gesproken kwijt zijn aan nakijken Verbetering van de kwaliteit van de beoordeling en feedback
1. Inzet digitale feedbacktools Hergebruik van feedback Gestructureerde feedback Criteriageleide feedback
2. Inzet rubrics De beoordeling wordt goed onderbouwd Feedback wordt feedforward Mogelijkheid om cursusoverstijgende leerlijnen te benoemen Kwaliteitsverbetering bij peerfeedback
3. Inzet tools
Project plan
28 pilots 80 docenten Scholing Good practices Begeleidingsmodel peerfeedback Workflow on-screen nakijken
SCALA > VU context VU instellingsplan (2011-2015) Prioriteit: studierendement en -succes Grotere focus op tussentijdse feedback
Richtlijn
Bacheloronderwijs VU (1/9/2012)
Er wordt zo frequent en vroegtijdig mogelijk getoetst. Hiertoe is er uiterlijk halverwege het vak een deeltoetsmoment waarop de docent de vorderingen van de student evalueert en aan hem of haar kenbaar maakt. Daarnaast wordt elk vak afgerond met een laatste deeltoets. Per vak wordt het gewicht van de deeltoetsen vooraf bepaald. Op basis daarvan wordt de eindbeoordeling vastgesteld.
Organisatie van feedback
Docenten
Produceren van geschreven feedback tijdsintensief Groeiende studentaantallen Inefficiënte workflows (opslag, distributie,..) Feedback bevat vaak repetitieve elementen
Studenten
Raadplegen / bewaren feedback Begrijpen / gebruiken van feedback
Digitale feedbacktool: Turnitin
Sinds 2006 via www.turnitin.com
Sinds 2011 via Blackboard
Grade Mark • Digitaal nakijken (docent) Peer Mark • Peer review (student) Originality Report • Plagiaatdetectie
Feedback geven via GradeMark
Student levert opdracht in via Blackboard Alle papers in 1 overzicht, incl. plagiaatscan Docenten geeft commentaar / beoordeling via Annotaties ‘QuickMarks’ (herbruikbaar; drag en drop) ‘Rubrics’ (analytische beoordelingsschaal) Audio feedback Student verwerkt commentaar en levert eindversie in
GradeMark in Blackboard
“Quick Marks”
Standaard markeringen / herbruikbare feedback Nuttig bij vaak voorkomende fouten taalgebruik,
interpunctie, structuur,..
Marks naar de tekst slepen Basisset ingebouwde marks + zelf te maken Uitwisselbaar met andere docenten
‘QuickMarks’ in GradeMark
Rubrics in GradeMark
Rubrics in GradeMark
Docent ervaringen
Sinds BB integratie grote toename gebruikers 50
> 300 actieve GM users
Tendens: bespaart tijd (tot 40%) Minder
logistieke overhead / printen Efficiënter essay management Minder repetitief nakijkwerk Meer uitwisseling met collega’s
GradeMark potentie Versneld inwerken nieuwe docenten mbt feedback procedures / criteria Stimuleren opleidingsbrede aanpak Verhogen transparantie/consistentie beoordelen > kwaliteitsimpuls
Tussentijdse feedback via peer review
Efficiënte en leerzame manier om (deel van) beoordeling te organiseren Activerende werkvorm
Diepere verwerking van de leerstof (tentamenvoorbereiding / betere eindproducten) Beoordelingscriteria geven inzicht in vereiste kwaliteit > reflectie op eigen produkt en voortgang Draagt bij aan ontwikkelen academische vaardigheden
Peer review met PeerMark Voorbeeld van een Peer Review cyclus
Docent voert beoordelingscriteria in Student levert paper in PeerMark verdeelt papers random onder (x aantal) reviewers Student voert (x) aantal reviews uit Student ontvangt (x) aantal reviews Student verwerkt (aantoonbaar) de feedback en levert eindversie van de opdracht in
PeerMark in Blackboard
Conclusies
GradeMark en Peermark faciliteren tijdige, persoonlijke, informatie-rijke feedback Potentiële katalyst voor kwaliteitsslag op vlak van beoordelen
Reële bijdrage aan efficiëntere manieren van werken voor docenten