Analyse wijze en stimuleren van invullen Nationale Studenten Enquête 2012. Pascal Brenders – 19 juni 2013 Aanleiding Studiekeuze123 is verantwoordelijk voor de uitvoering van de Nationale Studenten Enquête (NSE). De Nationale Studenten Enquête (NSE) is een grootschalig landelijk onderzoek waarin jaarlijks bijna alle studenten in het hoger onderwijs worden uitgenodigd om hun mening te geven over hun opleiding. Studiekeuze123 heeft als doelstelling om de oordelen van de studenten objectief en betrouwbaar aan te leveren aan de deelnemende instellingen in het hoger onderwijs, studiekiezers en andere afnemers zoals de Inspectie van Onderwijs, CHOI en Elsevier . De vraag is of de oordelen van studenten op enige wijze beïnvloed zouden kunnen zijn door de wijze van invullen van de enquête of door stimulering van studenten vanuit instellingen. Om deze vraag te kunnen beantwoorden zijn in de vragenlijst van de NSE 2012 vier extra vragen opgenomen die ons in staat stellen om te analyseren: a) waar (locatie), b) met wie (alleen of klassikaal), c) onder aansporing van (wie attendeert de studenten op de vragenlijst) en d) met welk invulmedium de enquête is ingevuld. Tevens kan geanalyseerd worden of deze aspecten de mate van tevredenheid op een of andere manier beïnvloed. Vragen enquête De vier extra vragen in de NSE 2012 zijn terug te vinden onder kopje 21 (invullocatie) en betreffen vraag v39 tot en met vraag v42 van het document (Vragenlijst NSE2012 NL.pdf). Hieronder zijn de vier vragen opgenomen. V39. Waar heb je deze vragenlijst ingevuld? 1 Thuis/privésituatie 2 Op mijn onderwijsinstelling 3 Onderweg (in trein, bus etc.) 4 Elders V40. Vulde je de vragenlijst alleen of klassikaal in? 1 Alleen/individueel (op een door mij zelf gekozen tijdstip) 2 Klassikaal (de rest van de klas/ vulde de vragenlijst op het zelfde tijdstip in) V41. Ben je door iemand aangespoord om deze vragenlijst in te vullen? 1 Nee, ik reageerde alleen op de uitnodiging per e-mail 2 Ja, door een docent 3 Ja, door een studiebegeleider 4 Ja, door een medestudent 5 Ja, anders V42. Je hebt de vragenlijst ingevuld op: 6 een pc/notebook 7 mijn mobiele telefoon/smartphone/iPhone 8 tablet pc/iPad 9 anders
De uitkomsten van deze vragen zijn niet opgenomen in het benchmarkbestand 2012 en ook niet in de instellingsbestanden van 2012 omdat deze alleen voor interne analyse (lees SK123) gebruikt wordt. In het ruwe databestand (NSE 2012, ruw bestand ResearchNed) dat door ResearchNed in 2012 is aangeleverd staat deze data wel vermeld. De vragen zijn in het ruwe bestand anders genummerd, namelijk van V41 tot en met V44, zie onder. In onderstaande analyses wordt deze laatste codering aangehouden.
1
V41. Waar heb je deze vragenlijst ingevuld? 1 Thuis/privésituatie 2 Op mijn onderwijsinstelling 3 Onderweg (in trein, bus etc.) 4 Elders V42. Vulde je de vragenlijst alleen of klassikaal in? 1 Alleen/individueel (op een door mij zelf gekozen tijdstip) 2 Klassikaal (de rest van de klas/ vulde de vragenlijst op het zelfde tijdstip in) V43. Ben je door iemand aangespoord om deze vragenlijst in te vullen? 1 Nee, ik reageerde alleen op de uitnodiging per e-mail 2 Ja, door een docent 3 Ja, door een studiebegeleider 4 Ja, door een medestudent 5 Ja, anders V44. Je hebt de vragenlijst ingevuld op: 6 een pc/notebook 7 mijn mobiele telefoon/smartphone/iPhone 8 tablet pc/iPad Analyse 9 anders vragen
Respondenten die de enquête succesvol hebben beëindigd zijn opgenomen in de analyses. Hierna is per vraag geïnventariseerd wat de tevredenheid van de studie was van de studenten, zie stap 2 in Bijlage A. Vervolgens is per vraag beoordeeld of er verschillen waren in hun oordelen op vraag 14 uit de vragenlijst: Je studie in het algemeen (gemeten op een likertschaal van 1, duidend op zeer ontevreden, tot 5, zeer tevreden). Voor de precieze formulering van vraag 14, zie kader onder deze tekst. Voordat deze verschillen zijn onderzocht zijn de antwoorden n.v.t. op vraag 14 verwijderd. Op alle vragen was er sprake van 0.6% missende waarden door systeem fouten (system missing). Aandacht is besteed aan beschrijvende statistiek (mede omdat toetsende statistiek met het aantal respondenten (lees grote aantallen) wat de NSE invult snel tot significante resultaten leidt). We willen je graag vragen hoe jij je studie in het algemeen beoordeelt. Geef alsjeblieft hieronder aan hoe tevreden je bent over je studie in het algemeen: <1 t/m 5; 1=zeer ontevreden; 5=zeer tevreden; 6=n.v.t.>
Analyse vraag 41: waar heb je de vragenlijst ingevuld? In totaal vulde 69.0% van de respondenten de vragenlijst thuis of in privésituatie in, 19.3% op hun onderwijsinstelling, 1.0% onderweg (in trein, bus, etc) en 10.1% elders, zie Tabel 1. Tabel 1 Waar heb je het grootste gedeelte van deze vragenlijst ingevuld? Freque Perce Valid Cumulative ncy nt Percent Percent Thuis/privésituatie 126057 69,0 69,4 69,4 Op mijn 35227 19,3 19,4 88,8 onderwijsinstelling Valid Onderweg (in trein, 1869 1,0 1,0 89,8 bus etc.) Elders 18461 10,1 10,2 100,0 Total 181614 99,4 100,0 Missing System 1168 ,6 Total 182782 100,0 Respondenten van de vragenlijst bleken de vragen dus op verschillende locaties in te vullen. Daarom is onderzocht of de plaats van invullen een impact had op de tevredenheid van de studie van de studenten. De uitkomsten tonen verschillen aan in tevredenheid, afhankelijk van
2
de locatie van het invullen. In het bijzonder geldt dat de laagste tevredenheid in de studie werd door studenten gegeven op de plaats “elders”, zie Tabel 2. Tabel 2 Dependent Variable: Je studie in het algemeen : Waar heb je het grootste gedeelte van deze Mea vragenlijst ingevuld? n
Std. Deviation
Thuis/privésituatie
3,83
,840
Op mijn onderwijsinstelling
3,78
,797
Onderweg (in trein, bus etc.)
3,81
,894
Elders
3,69
,846
Total
3,81
,834
N 1260 05 3521 2 1866 1844 2 1815 25
Analyse vraag 42: vulde je de vragenlijst alleen of klassikaal in? 95.4% van de respondenten vulde de vragenlijst alleen/individueel in (op een door henzelf uitgekozen tijdstip) en 4% van de respondenten vulden de vragenlijst klassikaal in (de rest van de klas vulde de vragenlijst op hetzelfde moment in), zie Tabel 3. Tabel 3 Vulde je het grootste gedeelte van deze vragenlijst alleen of klassikaal in? Freque Perce Valid Cumulative ncy nt Percent Percent Alleen/individueel (op een door mij 174342 95,4 96,0 96,0 zelf gekozen tijdstip) Valid Klassikaal (de rest van de klas vulde 7272 4,0 4,0 100,0 de vragenlijst op hetzelfde tijdstip in) Total 181614 99,4 100,0 Missing System 1168 ,6 Total 182782 100,0 Studenten die de vragenlijst alleen invulden waren meer tevreden dan studenten die de vragenlijst klassikaal invulden, zie Tabel 4. Tabel 4 Dependent Variable: Je studie in het algemeen : Vulde je het grootste gedeelte van deze vragenlijst alleen of klassikaal in? Alleen/individueel (op een door mij zelf gekozen tijdstip) Klassikaal (de rest van de klas vulde de vragenlijst op hetzelfde tijdstip in) Total
Mea n
Std. Deviation
N
3,81
,838
1743 41
3,69
,755
7271
3,81
,835
1816 12
Analyse vraag 43: ben je door iemand aangespoord om deze vragenlijst in te vullen? 75.6% van de respondenten was niet aangespoord om de vragenlijst in te vullen en vulde de vragenlijst in op uitnodiging van de e-mail, de resterende 24.4% was wel aangespoord om de vragenlijst in te vullen, zie Tabel 5. Uitgesplitst naar type aansporing bleek dat 14.4% was
3
aangespoord door een docent, 7.3% door een studiebegeleider, 2.6% door een student en 3.7% op een andere wijze. Tabel 5 Nee, ik reageerde alleen op de uitnodiging per e-mail Frequency Percent Valid Percent Cumulative Percent No 44334 24,4 24,4 24,4 Valid Yes 137191 75,6 75,6 100,0 Total 181525 100,0 100,0 In de volgende vier analyses is onderzocht of de algemene tevredenheid van de studie van de studenten afhankelijk was van het wel of niet aangespoord zijn om de vragenlijst in te vullen door: een docent, een studiebegeleider, een student, of aansporing op een andere wijze. Deze analyses zijn apart uitgevoerd omdat gebleken is dat een aantal respondenten meerdere antwoord categorieën hadden ingevuld, bij deze antwoorden is het niet duidelijk tot welke categorie deze behoren en daarom is een overal analyse niet uitgevoerd. Respondenten die de vragenlijst direct n.a.v. de uitkomsten van de e-mail beantwoordden hadden een hogere tevredenheid dan studenten die dat niet deden, zie Tabel 6. Tabel 6 Dependent Variable: Je studie in het algemeen : Nee, ik reageerde alleen op de uitnodiging per e-mail
Mea n
Std. Deviation
No
3,76
,782
Yes
3,82
,851
Total
3,81
,835
N 4436 3 1372 49 1816 12
Respondenten die aangespoord waren door een docent hadden een lagere tevredenheid dan studenten die niet aangespoord waren, zie Tabel 7. Tabel 7 Dependent Variable: Je studie in het algemeen : Ja, door een Mea Std. N docent n Deviation 1553 No 3,82 ,845 36 2627 Yes 3,76 ,771 6 1816 Total 3,81 ,835 12 Respondenten die aangespoord waren door een studiebegeleider hadden een ietwat lagere tevredenheid dan studenten die niet aangespoord waren, zie Tabel 8.
4
Tabel 8 Dependent Variable: Je studie in het algemeen: Ja, door een Mea Std. studiebegeleider n Deviation
N
No
3,81
,840
Yes
3,79
,770
Total
3,81
,835
1682 52 1336 0 1816 12
Respondenten die aangespoord waren door een medestudent hadden een ietwat lagere tevredenheid dan studenten die niet aangespoord waren, zie Tabel 9. Tabel 9 Dependent Variable: Je studie in het algemeen : Ja, door een Mea Std. medestudent n Deviation No
3,81
,835
Yes
3,78
,834
Total
3,81
,835
N 1769 25 4687 1816 12
Respondenten die aangespoord waren op een “andere manier” hadden een lagere tevredenheid dan studenten die niet aangespoord waren, zie Tabel 10. Tabel 10 Dependent Variable: Je studie in het algemeen : Ja, Mea Std. N anders n Deviation 17488 No 3,81 ,835 8 Yes 3,74 ,837 6724 18161 Total 3,81 ,835 2
Analyse vraag 44: je hebt de vragenlijst ingevuld op 94.3% van de respondenten vulden de vragenlijst in op hun pc (of notebook), 3.0% op hun mobiele telefoon/smartphone/iphone, 2.1% op hun tablet PC of IPad en 0.9% op een andere wijze. In de volgende vier analyses is onderzocht of de algemene tevredenheid van de studie van de studenten afhankelijk was van het wel of niet invullen van de vragenlijst op een: pc (of notebook), mobiele telefoon/smartphone/iphone, tabele PC of IPad, of op een andere wijze. Respondenten die de vragenlijst op hun PC of notebook invulden hadden een hogere tevredenheid dan studenten die dat niet deden, zie Tabel 11.
5
Tabel 11 Dependent Variable: Je studie in het algemeen : een Mea Std. N pc/noteboo n Deviation k No 3,74 ,907 9304 1723 Yes 3,81 ,831 08 1816 Total 3,81 ,835 12 Respondenten die de vragenlijst op hun telefoon invulden hadden een ietwat lagere tevredenheid dan studenten die dat niet deden, zie Tabel 12. Tabel 12 Dependent Variable: Je studie in het algemeen : mijn mobiele telefoon/smartphone/iPhone
Mea n
Std. Deviation
No
3,81
,834
Yes
3,78
,868
Total
3,81
,835
N 1761 29 5483 1816 12
Respondenten die de vragenlijst op hun tablet PC of IPAD invulden hadden een lagere tevredenheid dan studenten die dat niet deden, zie Tabel 13. Tabel 13 Dependent Variable: Je studie in het algemeen : tablet Mea Std. N pc/iPad n Deviation 1777 No 3,81 ,834 43 Yes 3,75 ,893 3869 1816 Total 3,81 ,835 12 Respondenten die de vragenlijst op “een andere manier” invulden hadden een lagere tevredenheid dan studenten die dat niet deden. Dit bleek het laagste waardeoordeel te zijn, zie Tabel 14. Tabel 14 Dependent Variable: Je studie in het algemeen : ande Mea Std. N rs n Deviation No 3,81 ,833 179987 Yes 3,55 1,036 1625 Total 3,81 ,835 181612
6
Conclusies In deze analyse zijn vier vragen van de nationale studenten enquête uit 2012 geanalyseerd. De vragen stellen ons in staat om te analyseren a) waar (locatie), b) met wie (alleen of klassikaal), c) onder aansporing van (wie attendeert de studenten op de vragenlijst) en d) met welk invulmedium (PC, telefoon, tablet, etc.) de enquête uit 2012 is ingevuld. Verder is onderzocht of dit een impact heeft op het algemene tevredenheid van een studie. Deze vraag is belangrijk omdat studiekeuzer123 als doelstelling heeft om de NSE gegevens objectief en betrouwbaar aan te leveren. Locatie 69% van de studenten vulde de enquête thuis in, 19.3% op de onderwijsinstelling, 10.1 % elders en 1% onderweg. Studenten die de enquête “elders” invullen zijn het minst tevreden over hun studie, studenten die de enquête thuis invullen zijn het meest tevreden over hun studie. Met wie De meeste studenten vulden de enquête alleen in (95%), de rest klassikaal. Bij klassikaal invullen zijn de studenten minder tevreden over hun studie dan bij individueel invullen. Onder aansporing invullen Driekwart van de studenten vulde de enquête in aan de hand van uitnodiging via e-mail, de rest op aansporing van iemand anders. Studenten die aangespoord waren door een docent, studiebegeleider, medestudent of op een andere wijze waren minder tevreden over hun studie dan diegenen die de enquête n.a.v. de e-mail invulden. Invulmedium 94% van de studenten vulden de vragenlijst in op hun PC (of notebook). De studenten die de enquête op een telefoon, tablet of andere wijze invulden waren minder tevreden over hun studie vergeleken met studenten die de enquête op een PC (of notebook) invulden.
7
