Schoolchildren Climbing On Unsecured Wooden Ladders, Zhang Jiawan Village, Southern China
Student Analytics en aansluiting VO-HO
boredpanda.com ANALYSE GEGEVENS
18 December 2014
Voor een betere oriëntatie, studiekeuze en studentbegeleiding
STUDIESUCCES & ANALYTICS
30 september 2014
Op weg naar onderwijs 5-Hour Journey Into The Mountains On A 1ft Wide Path To Probably The Most Remote School In The World, Gulu, China boredpanda.com
Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
1
Op weg naar onderwijs 5-Hour Journey Into The Mountains On A 1ft Wide Path To Probably The Most Remote School In The World, Gulu, China boredpanda.com
Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
2
Op weg naar onderwijs Elementary School Students Crossing A River On Inflated Tire Tubes, Rizal Province, Philippines boredpanda.com
Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
3
Op weg naar onderwijs
Elementary School Students Crossing A River On Inflated Tire Tubes, Rizal Province, Philippines boredpanda.com
Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
4
Op weg naar onderwijs
Kids Flying 800m On A Steel Cable 400m Above The Rio Negro River, Colombia boredpanda.com Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
5
Op weg naar onderwijs Kids Flying 800m On A Steel Cable 400m Above The Rio Negro River, Colombia boredpanda.com
Member Firms and DTTL: Insert appropriate copyright (Go Header & Footer to edit this text)
6
Wie is Theo Bakker?
Theo Bakker
UvA Studie Informatiekunde VU Studie theologie Familie Vrienden Deloitte
Theo Bakker,
[email protected], 06-10999307 Bron: LinkedIn Maps 7 © 2014 Deloitte The Netherlands
Deloitte en studiesucces Een samenhangend geheel aan diensten
VISIE EN STRATEGIE Welke factoren spelen een rol in studiesucces? Wat is de visie van de instelling op dit thema? MONITORING
ANALYSE STUDENTDATA
Wat is het effect van de nieuwe aanpak?
Wat kunnen we leren uit studentdata (historische en realtime data)
STUDIESUCCES
BORGING
SNAPSHOT INTERVENTIES
Hoe kunnen we de uitkomsten van de analyses borgen in informatiesystemen, processen en procedures?
Wat is de huidige werkpraktijk? Welke interventies worden nu ingezet? INTERVENTIE ARRANGEMENTEN Welke interventie arrangementen sluiten optimaal aan bij de daadwerkelijke behoefte van studenten?
8
© 2014 Deloitte The Netherlands
Wat willen we leren vandaag?
TRENDS
Welke trends zijn er in digitalisering van onderwijs en studentbegeleiding? GEGEVENS
Welke gegevens zijn beschikbaar en met elkaar te verbinden? ANALYSE
GEGEVENS
ANALYSE
Hoe kunnen we deze gegevens analyseren? INZICHTEN
Hoe zijn nieuwe inzichten vervolgens in de praktijk te gebruiken en voor wie? VERZILVERING STUDIESUCCES & ANALYTICS
9
Hoe kunnen VO en HO elkaar en de student zo informeren dat deze nieuwe inzichten daadwerkelijk ontstaan en verzilverd kunnen worden? © 2014 Deloitte The Netherlands
ANALYSE GEGEVENS
Trends
STUDIESUCCES & ANALYTICS
1
2
3
11
© 2014 Deloitte The Netherlands
LinkedIn voorbeeld d.d. 21-05-2014 • • • • • • • • • • • • • •
Harvard Open Courses edX Udemy Udacity Muse University Coursera MIT Open Courseware Stanford Online Khan Academy UC Berkeley Duke UCLA Open Yale Carnegie Mellon
https://www.linkedin.com/today/post/article/20140520115703-10999323-design-your-own-master-s-degree-in-7-easy-steps?trk=tod-home-art-list-small_1 12
© 2014 Deloitte The Netherlands
De behoefte aan goede (stuur)informatie schuift naar voren in de keten van HO naar VO
13
© 2014 Deloitte The Netherlands
“Traditionele” BI versus Analytics Van achteruit kijken en verklaren, naar vooruitkijken en voorspellen
Analytics Verkennen en ontdekken, toekomst voorspellen, actiegerichte inzichten
Optimalisatie, simulatie & scenario analyse
Voorspellende modellen
Segmentatie / statisch clusteren
Data exploratie
Traditionele BI
Prestaties meten en rapporteren
Feiten begrijpen, rapportage verleden en huidige prestatie
Data extractie & integratie 14
© 2014 Deloitte The Netherlands
ANALYSE
GEGEVENS
Gegevens, analyse en inzichten STUDIESUCCES & ANALYTICS
Studentfactoren die bijdragen aan studiesucces in het Hoger Onderwijs
Student Opleiding
Capaciteiten • Vooropleiding • Intelligentie • Plannen, coördineren, time-management • Motivatie • Vermogen om sociale relaties aan te gaan • Vermogen om hulp te zoeken Omgevingsfactoren: persoonlijke achtergrond • Achtergrond gezin (1e generatie student of niet, broers / zussen die studeren, inkomen, etc.) • Achtergrond woonplaats (mate van verstedelijking, kwaliteit van de school) • Geslacht, leeftijd • Andere verplichtingen naast de studie
Capaciteiten
Omgevingsfactoren: Overheid • Wet- en regelgeving • Studiefinanciering
Omgevingsfactoren 16
© 2014 Deloitte The Netherlands
Data is gecombineerd van 17.000 studenten uit verschillende bronnen waarover analyses op uitval en studieduur zijn uitgevoerd
Data ware house
Intake gegevens
Roostersysteem
CRM x Eerstejaars Inschrijvingen SIS / Extract 1 / Extract 2
Extern: CBS, DUO
Analyses op uitval en studieduur
17
© 2014 Deloitte The Netherlands
Studenten met een VWO vooropleiding hebben een kleinere kans op uitval, maar studeren gemiddeld wel iets langer
• Cijfers hebben een verwachte invloed op zowel uitval als studieduur. • Er kan het beste gekeken worden naar het gemiddelde cijfer van de middelbare school. • Mensen met een diploma van een middelbare school uit een stedelijk gebied hebben meer kans op uitval (38% tov 28%).
92% VWO
Advies: Differentieer op gemiddeld cijfer middelbare school en stedelijkheid middelbare school.
Effect van middelbare schoolcijfers op uitval
Gem. cijfer middelbare school <7 Cijfer Nederlands <7 Cijfer Wiskunde <7
Cijfer Engels <7
Survival grafiek van matig presterende scholieren
32
25
33
Opleidingsfactoren
• Een VWO vooropleiding betekent minder kans op uitval tijdens of na het eerste jaar (30% tov 34%).
Verdeling van vooropleidingen HAVO HAVO/VWO 6% 2%
28 31 27 31 29
Ja Nee 18
0 5 10 15 20 25 30 35 © 2014 Deloitte The Netherlands
Studenten die bewust kiezen voor een opleiding hebben meer studiesucces Motivatiekeuzes*
Vanwege de Master Aangeraden hier te studeren Het is dichtbij Vanwege de stad x Vanwege de studie 0
5 10 15 20 25 30 35
Effect van voorlichting op uitvalskansen
• Studenten die aangeven te studeren omdat hun vrienden er studeren hebben een hogere kans op uitval (32% tov 26%). • Het is belangrijk dat de student zelf inschat meer dan 35 uur per week te gaan studeren (27% tov 33%). Adviezen: 1) Differentieer studiebegeleiding op basis van getoond commitment en specifieke vormen van motivatie (mn. vanwege vrienden). 2) Richt vragenlijsten faculteitsbreed gelijk in.
Effect van voorlichting op studieduur 29,0 31,0
Voorlichtingsbrochure
Studentfactoren
32 26 28 25 28 26 27 26 26 26 24 31
Mijn vrienden studeren er
• Studenten die gemotiveerd zijn door de inhoud van het curriculum hebben een lagere kans op uitval (24% tov 31%).
22,0
Voorlichtingsevenement
32,0 21,0
Meeloopdag
31,0
Ja Nee
0
5 10 15 20 25 30 35
* Motivatievragen worden gesteld bij departementen x, y en z. 19
© 2014 Deloitte The Netherlands
Studenten die op latere leeftijd (>21) aan hun opleiding beginnen hebben meer kans op uitval Percentage uitval per leeftijdscategorie
Leeftijdsverdeling
25
18
25
19
656 3,968 3,864
20
26 30
2,443
21
1,719
22
35
1,314
23
36 42
886 644
24
39
373
25
38
237
26
43 38 47 43 30 28 50 45 40 35 30 25 20 15 10
5
0
27
159
28
117
29
89
30 - 35
104
35 - 40
47
40 - 45
43 0
1,000
2,000
3,000
Studentfactoren
<=17
27
4,000
Advies: Differentieer in studiebegeleiding voor studenten 17-21 en >21. Houd hierbij rekening met diverse redenen voor een instroom op latere leeftijd: HBO-achtergrond versus studenten die langer over het middelbaar onderwijs hebben gedaan. 20
© 2014 Deloitte The Netherlands
Eerdere of andere studies hebben veel invloed op uitval en vertraging Percentage uitval van studenten met meerdere opleidingen
Bachelor gelijktijdig
52
30
Eerdere master
31
• Dit laatste wordt mogelijk gemaakt door vrijstellingen.
66
31
Master gelijktijdig
Advies: Differentieer op basis van nevenstudies. Maak daarbij onderscheid tussen BA studenten die minder presteren of juist beter. Breng bij de laatste groep Excellentieprogramma’s onder de aandacht. Overweeg studenten die al eerder een master hebben gevolgd af te raden een BA opleiding te gaan volgen.
49
35 31
Tweede studie tijdens eerste*
0 10 20 30 40 50 60 70 Studieduur van studenten met meerdere opleidingen
Studieduur van studenten met meerdere opleidingen
3,6 3,8
Eerdere bachelor
Studentfactoren
• Vooral eerdere en gelijktijdige bachelors komen vaker voor en leiden tot hoge uitval en juist korte studieduur.
34 30
Eerdere bachelor
4,2 3,7
Bachelor gelijktijdig
Master gelijktijdig
3,2 3,7
Tweede studie tijdens eerste*
3,2 3,7 Ja 0
21
1
2
3
4
5
* Een studie met een startdatum die binnen de duur van een andere studie aan de universiteit valt
Nee © 2014 Deloitte The Netherlands
De resultaten van het eerste semester zijn het meest bepalend voor kans op uitval en studieduur Kans op uitval per eerste semester statistiek
50
16
<20 studiepunten
43
10
46
Eerste cijfer onvoldoende
17 13
• De resultaten hebben ook zonder uitval veel invloed op de verwachte studieduur van studenten.
27
Niet Cum Laude
15 0 5 10 15 20 25 30 35 40 45 50
Gemiddelde studieduur per eerste semester statistiek 4,3 3,6 4,1 3,5 4,1 3,6
Gemiddeld onvoldoende <20 studiepunten Eerste cijfer onvoldoende
Nee 22
Advies: Baseer interventies consistent op het 1e tentamencijfer en herhaal dit na ieder blok. % Survival curve voor studenten met een eerste onvoldoende tov de rest
4,1 3,5 3,8 3,4
Slagingspercentage <75% Ja
• Een gemiddeld onvoldoende cijfer leidt tot uitval in 50% van de gevallen. • Deze factoren correleren sterk met elkaar.
42
Slagingspercentage <75%
• Het allereerste tentamen cijfer blijkt al doorslaggevend voor de kans op uitval.
Studentfactoren
Gemiddeld onvoldoende
Niet Cum Laude 0
1
2
3
4
5 © 2014 Deloitte The Netherlands
De verschillende opleidingen kennen een soortgelijke verdeling voor verwachte studieduur met een aantal interessante uitschieters * Deze grafiek bevat een selectie op studenten met minimaal 180 studiepunten en geen vrijstelling
Opleidingsfactoren
Verdeling van de studieduur per opleiding
70% diploma in 4 jaar
Studieduur Advies: Classificeer opleidingen naar studieduur en voer hiervoor gericht beleid in (i.c. opleiding a,b,c,d). Stuur aan op minder langstudeerders en versneld afstuderen van langstudeerders. 23
© 2014 Deloitte The Netherlands
Een aantal opleidingen met een hoge uitval heeft een kortere studieduur. Een aantal opleidingen met een lage uitval heeft een langere studieduur.
Opleidingsfactoren
Verdeling van uitval en studieduur per opleiding 55
70% diploma in 4 jaar Opleiding 24
Opleiding 2 Opleiding 12
50
Opleiding 8 Opleiding 14
45
Opleiding 22 Opleiding 4 Opleiding 13
Percentage Uitval
40
Opleiding 23
Opleiding 21
Opleiding 20 Opleiding 17
Opleiding 19 Opleiding 27
35
Opleiding 26
Opleiding 6
30
Opleiding 5 Opleiding 25
Opleiding 18 Opleiding 16 Opleiding 10
CoH A
25
Opleiding 15 23% uitval
CoH B Opleiding 11
CoH C
20
CoH D
Opleiding 9
Opleiding 7 Opleiding 3
CoH E
Opleiding 1
CoH F
15 2,9
3,0
3,1
3,2
3,3
3,4
3,5
3,6
3,7
3,8
3,9
4,0
4,1
4,2
4,3
4,4
4,5
4,6
Gemiddelde studieduur
Advies: Het is van belang dat het eerste tentamencijfer over alle opleidingen even representatief is voor de gehele opleiding. Dit lijkt nu nog niet overal de praktijk. 24
© 2014 Deloitte The Netherlands
Er lijkt hier deels een verband met het eerste tentamen als representatief selectie-instrument 55
23% uitval
Opleiding 2 Opleiding 8
50 Opleiding 24
Percentage onvoldoendes eerste tentamen
Opleiding 13
Opleiding 16
45
Opleiding 19 Opleiding 4 Opleiding 6
40
Opleiding 9
Opleiding 22 Opleiding 27
Opleiding 18
Opleiding 20
35
Opleiding 21
Opleiding 5 Opleiding 17
Opleiding 7
30
Opleiding 23 Opleiding 12 Opleiding 14
Opleiding 26
Opleiding 10 Opleiding 15 Opleiding 3
25
Opleiding 11 Opleiding 1
20 Opleiding 25
CoH A
CoH D
CoH B
CoH E
CoH C
CoH F
Opleidingsfactoren
Verdeling van de eerste resultaten van studenten per opleiding ten opzichte van uitval
15 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 Percentage uitval
Advies: Het is van belang dat het eerste tentamencijfer over alle opleidingen even representatief is voor de gehele opleiding. Dit is nu nog niet overal de praktijk. 25
© 2014 Deloitte The Netherlands
Welke gegevens zijn er nog meer beschikbaar voor analyses?
Student Opleiding
• Bespreek met je buurman/buurvrouw aan welke gegevens je nog meer denkt om te gebruiken? • Waar moeten die gegevens vandaan komen? • Zijn die gegevens vrij beschikbaar? • Kunnen ze gemakkelijk gekoppeld worden aan een leerling / student?
26
© 2014 Deloitte The Netherlands
Om verder in te zoomen op verschillende type studenten gebruiken we een geavanceerde visuele segmentatie techniek: de Self Organizing Map Stel je voor dat alle studenten van de FGw op het grasveld van de Amsterdam Arena staan... De opdracht: Ga naast de personen staan op wie je het meest lijkt qua:
•
studieresultaten in het eerste semester
• middelbare school cijfers en vooropleiding • genoten voorlichting • motivatie om te studeren
Tot diep in de nacht discussiëren de studenten en groepen beginnen zich steeds meer te vormen. Laat in de ochtend worden gekleurde vlaggen uitgedeeld, een helicopter stijgt op, en wordt er een vraag gesteld: Wat was het cijfer voor jouw eerste tentamen?
27
© 2014 Deloitte The Netherlands
De 16.666 studenten zijn vervolgens op basis van studiegedrag ingedeeld in 12 groepen
9) Slechte starters Al iets oudere studenten die waarschijnlijk uitvallen, vaker uit gemeentes met laag inkomen (#753)
12) Stapelaars Lang over middelbare school gedaan (#676)
11
5) De middenmoters Geen hoge cijfers, maar vallen over het algemeen niet uit (#2.742)
10) Goede VWO-ers Goede en excellente studenten (#3.803)
6) Plattelanders Van het platteland naar de stad met hoge cijfers (#764)
12 10
9 8
8) Hakken over de sloters Lage cijfers middelbare school, kans op uitval en studievertraging (#901)
7) HBO niet-Nederlands HBO-vooropleiding, nietNederlands (#1.671)
5 7
6 1
1) Snelle uitvallers Lage cijfers bij 1e tentamen (#1.821)
2
2) Trage voorlichtingslozen Hadden geen voorlichting nodig voor hun studiekeuze, en halen slechts rond de 10 studiepunten in het eerste semester (#1.310) Speciaal beleid tegen uitval 28
3
4
4) Contractanten Studeren als hobby, contractanten (#299)
Studentfactoren
11) HBO propedeusers HBO propedeuse met kans op een slechte start (#1.117)
3) De harde werkers Divers segment met hoge cijfers en kans op uitval (#824)
Potentie voor differentiatie ten gunste van hogere resultaten © 2014 Deloitte The Netherlands
Uitval groepeert zich aan de linkerkant van de kaart in segment 1, 9 en een gedeelte van 8 en 3 Uitval binnen of na één jaar
(1,3,8,9) Uitval speelt zich af op meerdere gebieden; dit duidt erop dat de redenen voor uitval verschillen.
11
12
10
9 •
(idem) Uitval en vertraging in jaren na het eerste jaar lijken sterk op de uitval in het eerste jaar.
8
5
1
Jaren tot examen
11
12
4
11
10
12
10
9 8
8
5
2
5
7
6
29
3
2
Uitval over de gehele studie
9
1
7
6
Studentfactoren
•
3
7
6 1 4
2
3
4
© 2014 Deloitte The Netherlands
De statistieken van de SOM kunnen we ook aggregeren naar segment niveau Percentage studenten per segment
• •
De goede VWOers (10) en de middenmoters (5) zijn 39% van de populatie. De HBO segmenten (7 en 11) tellen op tot 17%. 25% van de uitval valt onder het segment snelle uitvallers.
11
12
10
9 8
5 7
6 1
3
2 Percentage studenten per segment 1) Snelle uitvallers
11
2) Trage voorlichtingslozen 3) Harde werkers
8
4) Contractanten
Uitval of Switch
37
10 5 23 7 4 4
19 40 63
9) Slechte starters
10) Goede VWO-ers 11) HBO propedeusers 12) Stapelaars
11
7) HBO niet-Nederlands 8) Hakken over de sloters
5
9) Slechte starters
32 22
5) De middenmoters 6) Plattelanders
5
2
26
4) Contractanten 16
0
68
1) Snelle uitvallers 2) Trage voorlichtingslozen 3) Harde werkers
Overig
2
7) HBO niet-Nederlands 8) Hakken over de sloters
30
Percentage uitval per segment
5
5) De middenmoters 6) Plattelanders
4
10) Goede VWO-ers 11) HBO propedeusers
15 30
12) Stapelaars 6
8 10 12 14 16 18 20 22 24
Studentfactoren
•
17 0
10
20
30
40
50
60
70
© 2014 Deloitte The Netherlands
Snelle uitvallers (segment 1) – 1/2 – kans op uitval 68% VWO vooropleiding
12
11
10
8
8 5
5
7
6 3
2
3
2
4
4
Gemiddeld cijfer hele bachelor
12
7
6 1
1
Gemiddeld cijfer bij middelbare school
11
10
9
12
10
9 8
8
5
1 2
5
7
6
31
10
9
9
11
12
Studentfactoren
11
Verstedelijking rond middelbare school
3
7
6
1 4
2
3
4
© 2014 Deloitte The Netherlands
Snelle uitvallers (segment 1) – 2/2 – kans op uitval 68% Vrouw
Leeftijd bij middelbare school examen
12
Studentfactoren
11
10
9 8
5
7
6 1
3
2
4
Voorlichtingsbrochure
11
Voorlichtingsevenement
12
10
11
12
10
9 8
9 5
8
7
6
5 7
6 1 2
32
3
4
1 2
3
4 © 2014 Deloitte The Netherlands
Welke extra inzichten zijn er mogelijk als meer gegevens uit het VO gebruikt worden?
Student Opleiding
• Stel dat we meer gegevens uit het VO kunnen gebruiken, welke extra inzichten verwacht je dan? • In welke mate wissel je nu al gegevens uit met het HO c.q. VO en met welke doel?
33
© 2014 Deloitte The Netherlands
ANALYSE
GEGEVENS
Verzilvering
STUDIESUCCES & ANALYTICS
Voorlichting en inschrijving vanuit het perspectief van de student Studiekeuzetraject Hier of ergens anders? Verkeerde keuze?
Meeloopdag Kennismaking op school Open dag Website
Wat wil ik? Wat vinden mijn ouders? Wat kan ik? Wat kan ik worden? Thuis wonen of op kamers? Wat zijn de regels? Diploma HAVO/VWO halen
1. Voorlichting Oriëntatie
F
Inschrijving
Ter illustratie
Student-ID Collegekaart Collegegeld Studiefinanciering Bijbaantje of lenen? DigiD OV-jaarkaart Aanmaning Studielink Intakegesprek Dyslexie, etc. Introductie SLB Vrienden maken Taal- en wiskundetoets Heel veel keuzes Wat kan en moet ik kiezen?
Jr 1
2. Propedeuse
F
Studieadvies
Versnippering
Jr 2
3. Hoofdfase voorbereiding verdieping
F Toegang stage, minor
Jr 3+4
4. Hoofdfase verdieping
F Voorlichting en begeleiding 35
Vervolgopleiding
Diploma
F = formeel, procedureel proces – aan regels gebonden © 2014 Deloitte The Netherlands
Hoe kunnen extra inzichten verzilverd worden?
Student Opleiding
• Welke bestaande interventies kun je aanpassen zodat ze meer effect hebben? • Welke nieuwe interventies zie je en wanneer vinden die plaats? • Wat is de doelgroep van deze interventies en waarom?
36
© 2014 Deloitte The Netherlands
Meer informatie
Theo Bakker Senior Manager Onderwijs Deloitte Consulting
[email protected] 06-10999307
37
© 2014 Deloitte The Netherlands
Deloitte refers to one or more of Deloitte Touche Tohmatsu Limited, a UK private company limited by guarantee, and its network of member firms, each of which is a legally separate and independent entity. Please see www.deloitte.com/about for a detailed description of the legal structure of Deloitte Touche Tohmatsu Limited and its member firms. Deloitte provides audit, tax, consulting, and financial advisory services to public and private clients spanning multiple industries. With a globally connected network of member firms in more than 150 countries, Deloitte brings world-class capabilities and deep local expertise to help clients succeed wherever they operate. Deloitte's approximately 170,000 professionals are committed to becoming the standard of excellence. This publication contains general information only, and none of Deloitte Touche Tohmatsu Limited, its member firms, or their related entities (collectively, the “Deloitte Network”) is, by means of this publication, rendering professional advice or services. Before making any decision or taking any action that may affect your finances or your business, you should consult a qualified professional adviser. No entity in the Deloitte Network shall be responsible for any loss whatsoever sustained by any person who relies on this publication.
© 2014 Deloitte The Netherlands