2
Effecten van learning analytics bij computerondersteund samenwerkend leren Anouschka van Leeuwen, Jeroen Janssen & Gijsbert Erkens Afdeling Educatie, Universiteit Utrecht
Wanneer leerlingen in een computerleeromgeving samenwerken, is het lastig om een goed beeld te krijgen van de voortgang van de groepjes. Learning analytics, waarbij data over de leeractiviteiten van de leerlingen grafisch worden weergegeven, helpen leraren de groepjes beter te begeleiden en maken leerlingen bewust van het samenwerkingsproces. De verwachting is dat inzicht in het verloop van het samenwerkingsproces niet alleen bijdraagt aan een betere samenwerking, maar ook resulteert in betere onderwijsresultaten.
Het is van alle tijden: bij een groepsopdracht loopt
zouden dit soort hobbels al eerder aan het licht
één van de groepsleden de kantjes er vanaf,
moeten komen. De leraar kan immers meekijken
waardoor een deel van de opdracht stagneert
tíjdens het samenwerkingsproces, dankzij de ge
en/of er meer werk op de schouders van de
gevens die het computersysteem verzamelt over
anderen terecht komt. Als leraar hoor je dit vaak
activiteiten van leerlingen. In de praktijk echter is
pas achteraf, als de opdracht al is ingeleverd. Bij
de hoeveelheid verzamelde informatie zo groot,
groepsopdrachten in een computerleeromgeving
dat leraren door de bomen het bos niet meer
14
15
gedaan hebben of na te gaan hoe het samen
informatie een stuk beter te behappen: leerlingen
werkingsproces in de groep is verlopen.
zien van elkaar hoeveel iedereen bijdraagt en de
Samenwerken op de computer biedt niet
leraar heeft inzicht in het proces. Deze grafische
alleen nieuwe mogelijkheden, maar brengt
weergave van leerlingactiviteiten is een vorm van
ook nieuwe problemen met zich mee. De
learning analytics.
beschikbaarheid van alle overleg, activiteiten
In dit artikel gaan we eerst in op de mogelijk
en producten maakt het leerlingen en leraren
heden en beperkingen van computerondersteund
lastig een globaal overzicht te krijgen van het
samenwerkend leren. Daarna beschrijven we
samenwerkingsproces. Zo geven leerlingen
wat onderzoek uitwijst over de vraag of learning
soms aan in een computerleeromgeving minder
analytics kunnen helpen het samenwerkings
zicht te hebben op wie wat doet of heeft gedaan.
proces op computers beter te laten verlopen.
En leraren vinden de begeleiding van de online
De achterliggende verwachting is dat inzicht in
samenwerkende groepjes leerlingen lastig. Zij
het samenwerkingsproces de leeropbrengsten
hebben wel toegang tot alle online gevoerde dis
van samenwerkend leren versterkt (Kirschner &
cussies en tussenproducten, maar het ontbreekt
Erkens, 2013). Aan het einde van het artikel gaan
ze aan tijd om deze door te nemen en op basis
we in op de vraag of dat ook gebeurt.
daarvan in te schatten welke groepjes aan welke
Mogelijkheden en beperkingen van computerondersteund samenwerkend leren
Proces Leraar
3 a visu
Learning analytics
lise
rin g begeleiding
zien. Door relevante data te visualiseren, is de
ge 1 ge v is
ve
ua
2
li se
rin
4
ns
g
Leerlingen
Samenwerkingsactiviteiten
5
Leerlingen
Leeropbrengsten
Figuur 1: Redeneerketen rondom de interactie tussen leraar, leerling en analyses/visualisaties van samenwerkingsactiviteiten, in relatie tot de leeropbrengsten.
begeleiding behoefte hebben. Om de extra mogelijkheden van computers
matisch te analyseren en in de vorm van
suggestie. Ook leerlingen onderling kunnen dat
bij samenwerkend leren te kunnen benutten, zul
visualisaties terug te koppelen naar de leerlingen
op basis van de terugkoppeling doen, bijvoor
len deze informatieproblemen opgelost moeten
en de leraar. Deze automatische analyse en
beeld door zelf een groepslid aan te spreken.
Waarom is het interessant om computers te
worden zodat het samenwerkingsproces goed
visualisatie van leeractiviteiten van leerlingen is
Het beoogde effect is dat de samenwerkings
gebruiken bij samenwerkend leren? Computer
kan verlopen.
een vorm van learning analytics, de verzamel
activiteiten van de leerlingen verbeteren. Pijl
term voor ‘het meten, verzamelen, analyseren en
5 weerspiegelt de verwachting dat inzicht in
rapporteren van gegevens over leerlingen en hun
het verloop van het samenwerkingsproces ook
context, met het oog op het begrijpen en optimali
resulteert in hogere leeropbrengsten.
ondersteuning bij samenwerkend leren biedt (Stahl et al., 2006). De computerleeromgeving
De rol van learning analytics in het samenwerkingsproces
maakt samenwerking tijd- en plaatsonafhankelijk,
Wanneer leerlingen werken in een elektro
seren van het leren en de omgevingen waarin het
geeft toegang tot online bronnen, biedt een com
nische leeromgeving houdt het systeem een
leren zich voordoet’ (Siemens & Gasevic, 2012).
municatieplatform voor overleg, en tools als wiki’s,
groot aantal zaken bij: Waar wordt op geklikt?
Figuur 1 geeft de rol van learning analytics in
Effect van learning analytics op het samenwerkingproces
blogs of gedeelde tekstverwerkers voor gemeen
Hoeveel communicatie is er en met wie? Hoe
het samenwerkingsproces weer. Om te begin
Er vond en vindt veel onderzoek plaats naar de
schappelijke taakproducten. Bovendien is het
lang wordt een pagina bekeken? Hoeveel tekst
nen vormen gegevens over de activiteiten van
manier waarop het samenwerkingsproces op
mogelijk om speciale toepassingen te gebruiken
is er al geschreven? Deze gegevens kunnen
leerlingen de input van analyses (pijl 1). Hiervan
computers te verbeteren is. Bijvoorbeeld naar
die passen bij gezamenlijke kennisconstructie en
waardevol zijn, omdat ze veel informatie bevat
vindt een terugkoppeling plaats in de vorm van
de vraag of en hoe de onderlinge samenwerking
probleemoplossing, zoals gedeelde mindmaps
ten over waar leerlingen mee bezig zijn en wat ze
visualisaties naar de leerlingen (pijl 2) en/of
verandert als leerlingen dankzij learning analytics
en simulatieprogramma’s. Daarbij is al het online
doen. Maar in ruwe vorm is de data nauwelijks
de leraar (pijl 3). De leraar kan vervolgens op
inzicht hebben in de participatie binnen de groep;
overleg en elk tussentijds taakproduct continu op
bruikbaar – het is simpelweg te veel.
deze informatie inspelen in de interactie met de
de vraag die in dit artikel centraal staat (pijlen 1 en
te slaan. De leraar kan deze informatie inzetten
De gegevens over de samenwerkings
leerling (pijl 4), bijvoorbeeld door een groepje
2). Een voorbeeld van een toepassing die inzicht
om leerlingen te laten reflecteren op wat ze
activiteiten van de leerlingen zijn echter auto
dat vastloopt verder te helpen met een vraag of
geeft in de participatie is de Participation Tool, die
zowel leraren als leerlingen talrijke mogelijkheden
16
17
Pierre
20 2
Tiffany
Anne Figuur 2: De Participation Tool visualiseert hoeveel de deelnemers hebben bijgedragen.
er, want zij kunnen nauwkeuriger aangeven welk
het verloop van de samenwerking. Inzicht in de
groepslid niet evenredig deelneemt.
participatie zorgt ervoor dat de werkhouding van
In een studie die op het moment afgerond
de leerlingen verandert en actiever wordt, net als
wordt, kregen leraren informatie over welke
de begeleiding door de leraren. Terugredenerend
taakrelevante kernwoorden leerlingen gebruiken
was de verwachting dat dit ook zou leiden tot
in hun discussies (Concept Trail Tool) en in hoe
betere leeropbrengsten (pijl 5 in figuur 1). Is dat
verre zij vorderingen maakten met de taak. Het
zo? Nee, deze verwachting wordt tot op heden niet
gevolg was dat leraren in het algemeen meer
gestaafd door onderzoek: er is geen direct effect
berichten gingen sturen, en wederom vaker naar
aangetoond tussen de beschikbaarheid van deze
groepen met taakproblemen, bijvoorbeeld wan
vorm van learning analytics en leeropbrengsten.
weergeeft hoeveel de groepsleden ieder hebben
op basis van een inhoudelijke analyse van door
neer er in discussies over andere zaken werd
Al hebben leerlingen meer inzicht in de participatie
bijgedragen aan het groepsproces (Janssen et al.,
leerlingen verstuurde berichten weergeeft in hoe
gesproken dan de stof.
van hun groepsleden en al kunnen leraren op ba
2007b). Deze tool verzamelt informatie over (1)
verre leerlingen tijdens een overleg met elkaar
De aanwezigheid van learning analytics lijkt
sis van de learning analytics de groepjes actiever
de hoeveelheid berichten en de lengte van de be
overeenstemmen dan wel discussiëren (Janssen
leraren dus niet alleen te ondersteunen bij het in
begeleiden, het levert geen beter groepsproduct
richten die groepsleden versturen tijdens het com
et al., 2007a). Verschillende onderzoeken naar
de gaten houden van problemen, maar hen ook
op, noch een betere individuele prestatie. Daar
municeren en (2) het aantal toetsaanslagen per
dergelijke learning analytics laten zien dat ook
te activeren om groepen met problemen hulp te
mee is de meerwaarde van learning analytics wel
groepslid bij het schrijven van een groepsverslag.
deze visualisaties het samenwerkingsproces
bieden.
aantoonbaar voor het samenwerkingsproces, maar
Deze informatie wordt vervolgens gevisualiseerd
beïnvloeden, bijvoorbeeld doordat leerlingen gaan
in de vorm van bolletjes, waarbij groepsleden die
beseffen dat kritische discussies van belang zijn
meer communiceren en meer typen groter en
voor het leerproces (voor een overzicht, zie
Effect van learning analytics op leeropbrengsten
prominenter zijn weergegeven (figuur 2).
Janssen & Bodemer, 2013).
Samenvattend kunnen we concluderen dat
Uit ons onderzoek naar het effect van de
niet voor de leeropbrengsten.
learning analytics gunstige effecten hebben op
den tot een ander en actiever samenwerkings
Effect van learning analytics op begeleiding door de leraar
proces. Zij helpen leerlingen bewust te worden
Ook leraren kunnen vanuit het systeem terug
van het belang van gelijkwaardige participatie
koppeling krijgen over de activiteiten van de
tijdens samenwerking, met als gevolg een
leerlingen in de vorm van visualisaties. Kunnen
Anouschka van Leeuwen
actievere bijdrage van leerlingen aan het over
zij met deze informatie de leerlingen beter bege
Hoofdauteur
leggen en discussiëren en een gelijkwaardiger
leiden (pijl 3 > 4 in figuur 1)? Uit ons onderzoek
[email protected]
participatie binnen groepen. In ons onderzoek
naar de Participation Tool (Van Leeuwen et al.,
probeerden sommige leerlingen de visualisatie
2014) blijkt dat leraren, dankzij informatie over
te manipuleren door onzinberichten te ver
de individuele inbreng van groepsleden, scheve
Anouschka van Leeuwen is promovenda en
Jeroen Janssen is universitair docent. Hij
sturen. De groepsleden spraken hen hier echter
verhoudingen in de groepen beter opsporen en
docent. Zij verricht onderzoek in het voortgezet
onderzoekt (computerondersteund) samen
op aan, waardoor de kwaliteit van de discussie
er actie op ondernemen. Vervolgens blijken zij
onderwijs naar het gebruik van learning
werkend leren.
niet verslechterde (Janssen et al., 2007b).
relatief meer berichten te sturen naar groepen
analytics door leraren.
Gijsbert Erkens was tot 2012 universitair
Participation Tool blijkt dat deze visualisaties lei
Jeroen Janssen & Gijsbert Erkens Auteurs
Het is ook mogelijk om informatie te visuali
waarin de participatie problematisch is dan naar
hoofddocent. Hij is nog betrokken bij
seren die meer kwalitatief van aard is. Een
groepen waarin dat niet het geval is. Daarnaast
onderzoek naar computerondersteuning
voorbeeld hiervan is de Shared Space Tool, die
is hun beoordeling van de participatie specifiek
van samenwerkend leren.
18
19
Wat we weten over learning analytics bij samenwerkend leren in een computerleeromgeving
Meer weten? Janssen, J., Erkens, G. & Kanselaar, G. (2007a). Visualization of agreement and discussion processes during computer-supported collaborative learning. Computers in Human Behavior, 23, 1105-1125. Janssen, J., Erkens, G., Kanselaar, G. & Jaspers, J. (2007b). Visualization of participation: Does it contribute to successful computer-supported collaborative learning? Computers & Education, 49, 1037-1065. Janssen, J. & Bodemer, D. (2013). Coordinated computer-supported collabora tive learning: Awareness and awareness tools. Educational Psychologist, 48(1),
● Met learning analytics zijn leeractiviteiten van leerlingen te analyseren
40-55.
en in grafische vorm terug te koppelen aan leraren en leerlingen. Kirschner, P.A. & Erkens, G. (2013). Toward a framework for CSCL research. ● De beschikbaarheid van deze vorm van learning analytics verandert
Educational Psychologist, 48(1), 1-8.
en activeert het samenwerkingsproces. Enerzijds doordat leraren meer zicht hebben op het functioneren van de verschillende groepjes, waar
Leeuwen, A. van, Janssen, J., Erkens, G. & Brekelmans, M. (2014). Supporting
door ze hun aandacht kunnen richten op groepjes die dit nodig hebben.
teachers in guiding collaborating students: effects of learning analytics in CSCL.
Anderzijds doordat de leerlingen zich meer bewust worden van het
Computers & Education, 79, 28-39.
samenwerkingsproces en hoe ze dit beter kunnen laten verlopen. Siemens, G. & Gasevic, D. (2012). Guest editorial-learning and knowledge ● Er is geen direct verband aangetoond tussen deze vorm van learning analytics en leeropbrengsten.
analytics. Educational Technology & Society, 15(3), 1-2. Geraadpleegd op http://www.ifets.info/journals/15_3/1.pdf Stahl, G., Koschmann, T. & Suthers, D. (2006). Computer-supported collaborative learning: an historical perspective. In R.K. Sawyer (Red.), Cambridge handbook of the learning sciences (pp. 409-426). Cambridge, Verenigd Koninkrijk: Cambridge University Press. Geraadpleegd op http://GerryStahl.net/cscl/CSCL_English.pdf
20
21
Naamsvermelding-NietCommercieel-GeenAfgeleideWerken 3.0 Nederland. (http://creativecommons.org/licenses/by-nc-nd/3.0/deed.nl) De gebruiker mag: • Het werk kopiëren, verspreiden, tonen en op- en uitvoeren onder de volgende voorwaarden: Naamsvermelding. De gebruiker dient bij het werk de naam van Kennisnet en de naam van de auteur te vermelden. NietCommercieel. De gebruiker mag het werk niet voor commerciële doeleinden gebruiken. GeenAfgeleideWerken. De gebruiker mag het veranderde materiaal niet verspreiden als deze het werk heeft geremixt, veranderd, of op het werk heeft voortgebouwd. • Bij hergebruik of verspreiding dient de gebruiker de licentievoorwaarden van dit werk kenbaar te maken aan derden. • De gebruiker mag uitsluitend afstand doen van een of meerdere van deze voorwaarden met voorafgaande toestemming van Kennisnet. Het voorgaande laat de wettelijke beperkingen op de intellectuele eigendomsrechten onverlet. Dit is een publicatie van Stichting Kennisnet.