JOB-monitor en LAKS-monitor 2014 Onderzoeksverantwoording
Onderzoek in opdracht van JOB en LAKS Froukje Wartenbergh-Cras Joyce Bendig-Jacobs Danny Brukx
ResearchNed april 2014
© 2014 ResearchNed Nijmegen in opdracht van JOB en LAKS. Alle rechten voorbehouden. Het is niet geoorloofd gegevens uit dit rapport te gebruiken in publicaties zonder nauwkeurige bronvermelding. ResearchNed werkt conform de kwaliteitsnormen NEN-EN-ISO 9001:2008 voor kwaliteitsmanagementsystemen en NEN-ISO 20252:2012 voor markt-, opinie- en maatschappelijk onderzoek.
1 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Inhoudsopgave
1
Inleiding
3
1.1 1.2 1.3
Inleiding Taakstelling deskundigenpanel Leeswijzer
3 3 3
2
Vragenlijst
4
3
Inrichting veldwerk
5
3.1 3.2
JOB-monitor LAKS-monitor
5 8
4
Respons, datacleaning en weging
14
4.1
Respons 4.1.1 JOB-monitor 4.1.2 LAKS-monitor Datacleaning Weging 4.3.1 JOB-monitor 4.3.2 LAKS-monitor
14 14 14 14 15 15 17
5
Thematische clustering van vragen
19
5.1 5.2
JOB-monitor LAKS-monitor
19 21
6
Rapporteren over de resultaten
24
6.1 6.2
Instellingsrapportages en instellingsbestanden Online rapportage
24 24
7
Vragen aan het deskundigenpanel
25
4.2 4.3
Bijlage A
Vragenlijst JOB-monitor
27
Bijlage B
Vragenlijst LAKS-monitor
33
Bijlage C
Netto-respons per instelling JOB-monitor
41
Bijlage D
Netto-respons per instelling LAKS-monitor
43
2 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
1
1.1
Inleiding
Inleiding Voor u ligt de onderzoeksverantwoording van de JOB-monitor en LAKS-monitor 2014. De JOB-monitor is het landelijke studenttevredenheidsonderzoek in het mbo dat de JongerenOrganisatie Beroepsonderwijs (JOB) sinds 2000 tweejaarlijks laat uitvoeren, met financiering van OCW. Met de monitor wordt door studenten gesignaleerd wat goed gaat in het mbo en waar verbetering noodzakelijk is. Het biedt in de eerste plaats studentenraden en instellingen een handvat om hun kwaliteit mee te verbeteren. De LAKSmonitor is vergelijkbaar aan de JOB-monitor, eveneens uitgevoerd met financiering vanuit OCW, maar vindt plaats in het voortgezet onderwijs. LAKS staat voor Landelijk Aktie Komitee Scholieren. Het LAKS behartigt de belangen van alle scholieren, en daarom is het voor LAKS belangrijk om te weten hoe tevreden scholieren zijn met hun school en onderwijs. Om die reden doet het LAKS sinds 2010 elke twee jaar een grootschalig onderzoek naar de tevredenheid onder scholieren: de LAKS-monitor. Het LAKS wil met de LAKS-monitor een helder en betrouwbaar beeld geven van de leerlingentevredenheid. In deze verantwoording worden de keuzes toegelicht in de onderzoeksopzet en de databewerking van beide monitoren. Er is voor gekozen om de verantwoording van beide onderzoeken te integreren, omdat de keuzes die gemaakt zijn binnen de databewerking grotendeels overeenkomen en de teams van beide projecten zowel aan de kant van de opdrachtgever als aan de kant van het onderzoeksbureau dit jaar voor het eerst volledig identiek zijn.
1.2
Taakstelling deskundigenpanel Het deskundigenpanel – bestaande uit prof. dr. Dirk Sikkel, prof. dr. Joop Hox en prof. dr. Bert Felling – adviseert in 2014 voor de derde maal als onafhankelijke partij ResearchNed. Het deskundigenpanel is samengesteld in overleg met de begeleidingscommissie en de opdrachtgevers vanuit LAKS en JOB. Het deskundigenpanel wordt nauw betrokken bij de stappen die de onderzoekers nemen in het analyseproces. Dit betreft alle keuzes die ten grondslag liggen aan responsberekening, datacleaning, weging en datapublicaties. Ook de betrouwbaarheid en validiteit van het onderzoek komen hierin aan de orde. In overleg met het deskundigenpanel wordt bepaald of herweging van de data als gevolg van onevenwichtigheid van de respons noodzakelijk is. Alle stappen in dit proces zijn in voorliggende onderzoeksverantwoording zorgvuldig gedocumenteerd en worden na goedkeuring door het deskundigenpanel voor geïnteresseerden ter inzage beschikbaar gesteld.
1.3
Leeswijzer In deze notitie gaan we allereerst kort in op de gebruikte vragenlijst waarna de gekozen onderzoeksopzet wordt besproken. In het derde hoofdstuk gaan we in op de deelname van instellingen, de cleaning en weging van de data. De clustering van de vragen en de betrouwbaarheid en de validiteit van de twee monitoren worden in hoofdstuk 5 behandeld. Vervolgens wordt het aggregatieniveau van de resultaten besproken en we eindigen deze notitie met een aantal vragen die wij het deskundigenpanel hebben voorgelegd.
3 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
2
Vragenlijst
De vragenlijst voor de JOB-monitor en die voor de LAKS-monitor zoals gebruikt in vorige meting (2012) zijn in overleg met JOB en LAKS waar nodig aangepast. Hierbij is zoveel mogelijk rekening gehouden met het opgebouwde JOB-monitortrendbestand en met de wens om een trendbestand op te bouwen voor de LAKS-monitor. Alleen de noodzakelijke wijzigingen zijn doorgevoerd. Dit jaar heeft de kerngroep van het Platform Gehandicapten MBO een verzoek ingediend bij JOB en LAKS om mee te mogen denken over de vragen in de twee monitoren rondom studeren met een beperking. Dit heeft geleid tot het uitbreiden van de lijst met mogelijke beperkingen en het toevoegen van vier vragen over studeren met een beperking. Deze aanpassingen zijn afgeleid van bestaande vragenlijsten in het hoger onderwijs en komen daarmee ten goede aan de vergelijking met andere onderzoeken. De bijgestelde vragenlijsten zijn voorafgaand aan de start van het veldwerk ‘uitgetest’. De test voor de JOB-monitor is gebeurd bij twee groepen mbo-studenten van twee verschillende instellingen. Op verzoek van het gebruikersplatform van de JOB-monitor 2012 is nogmaals expliciet aandacht besteed aan het testen van de vragenlijst bij de groep niveau-1-studenten. De test voor de LAKS-monitor is gebeurd bij een groep vo-studenten bij één vo-school. Bij alledrie de testrondes hebben de testgroepen de vragenlijst ingevuld en is gevraagd om onduidelijkheden te noteren. Naderhand is de inhoud van de vragenlijst doorgesproken en hebben de onderzoekers deze aan de hand van de uitkomsten zo nodig verfijnd. Voor de JOB-monitor heeft dit geleid tot: • een negental wijzigingen in vraagstelling (vervanging van woorden die beter aansluiten bij de doelgroep); • toevoegen van vijf vragen; • verwijderen van drie vragen; • verplaatsen van het blok “beperking”; • aanpassen van de uitleg van de vraag bij zeven vragen. Voor de LAKS-monitor heeft dit geleid tot: • een zevental wijzigingen in vraagstelling (vervanging van woorden die beter aansluiten bij de doelgroep) • toevoegen van zes vragen; • verwijderen van vier vragen; • verplaatsen van twee vragen en het blok “voorzieningen”; • aanpassen/toevoegen van de uitleg van de vraag bij vijftien vragen. De twee definitieve vragenlijsten voor het veldwerk van deze ronde zijn te vinden in bijlage a (JOBmonitor) en bijlage b (LAKS-monitor). De definitieve vragenlijsten alsook de versies met wijzigingen ten opzichte van de vorige meting zijn ook op de portal van de betreffende monitoren gepubliceerd ter inzage voor de instellingen en andere geïnteresseerden.
4 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
3
3.1
Inrichting veldwerk
JOB-monitor De JOB-monitor wordt sinds 2008 volledig online afgenomen. In de JOB-monitor 2014 hadden studenten van 3 december 2013 tot en met 28 maart 2014 de mogelijkheid de vragenlijst op een speciaal daarvoor ingerichte website in te vullen. Deelname aan de JOB-monitor loopt in de meeste gevallen via een inlogfaciliteit die door DUO in samenwerking met ResearchNed is ontwikkeld. Studenten gaan (veelal klassikaal) naar de website www.job-monitor2014.nl waarop naast de link naar de vragenlijst informatie over het onderzoek en over de wijze waarop hun privacy gewaarborgd wordt. Hierna een aantal screenshots om een beeld te geven van de wijze waarop studenten aan de monitor deelnemen.
5 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
6 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
De meeste mbo-studenten nemen deel via de DUO-inlogfaciliteit, waar zij toegang krijgen tot de vragenlijst met een combinatie van hun pgn (persoonsgebonden nummer of onderwijsnummer). Deze inlogmethode werkt voor studenten die geregistreerd staan bij DUO. Sinds 1 januari 2012 leveren ook niet-bekostigde mbo-instellingen verplicht gegevens aan DUO aan. Dit maakt het mogelijk om naast studenten aan bekostigde instellingen ook studenten aan niet-bekostigde instellingen via de DUOinlogfaciliteit toegang te geven tot de enquête. Voor het eerst in de geschiedenis van de JOB-monitor resulteerde dat deze meting in deelname van Hogeschool TIO (met hun mbo-opleidingen). Ook nieuw in deze meting is de deelname van de Politieacademie. Deze instelling is weliswaar bekostigd, maar niet door OCW en daarmee zijn de studenten ook niet geregistreerd bij DUO. Voor deze studenten is daarom een alternatieve inlogroute gerealiseerd, waarbij niet om het privacygevoelige pgn gevraagd wordt, maar het minder-privacygevoelige studentnummer van de instelling volstaat. Deze inlogroute loopt direct bij ResearchNed.
7 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Voordeel van de gehanteerde methode van inloggen met een unieke inlogcode per student is in beide gevallen dat studenten hooguit één keer de vragenlijst kunnen invullen met een voor hen al bekend uniek nummer en dat het bovendien mogelijk is een groot deel van de relevante achtergrondkenmerken te koppelen vanuit de bestaande studentenadministratie bij DUO in BRONMBO1 (deelname van de Politieacademie gebeurde onder voorwaarde dat zij dezelfde administratieve informatie konden aanleveren als we ook van DUO ontvangen). Deze methode laat bovendien de ruimte aan studenten om de vragenlijst in te vullen buiten de onderwijsinstelling (thuis of op de leerwerkplek), de vragenlijst tussentijds te stoppen en later verder te gaan op het punt waar ze waren gebleven en voorkomt dat studenten de vragenlijst meer dan eens invullen. De oproep tot het invullen van de vragenlijst ligt in eerste instantie bij de mbo-instellingen zelf. Er is promotiemateriaal (posters, flyers en informatiefilmpjes) beschikbaar dat instellingen kunnen gebruiken om het onderzoek onder de aandacht van studenten te brengen. Alhoewel de mogelijkheid wederom is aangeboden, hebben instellingen deze ronde geen aanvullende mailings naar de studenten laten versturen door ResearchNed. Wel is er door JOB gedurende het veldwerk actief campagne gevoerd op onder meer de sociale media om de monitor bij studenten onder de aandacht te brengen. Ook heeft JOB in deelnamecontracten met de instellingen een inspanningsvereiste bij de instellingen neergelegd. 3.2
LAKS-monitor De werving van scholen om deel te nemen aan de LAKS-monitor en de verdere communicatie rondom de monitor heeft het LAKS ook dit jaar op zich genomen. In mei 2013 hebben alle vo-scholen een eerste aankondiging van de monitor van het LAKS ontvangen. Vanaf half september tot eind december konden scholen zich aanmelden voor de LAKS-monitor via een hiervoor door ResearchNed ontwikkeld aanmeldformulier. Vervolgens konden scholen op vestigingsniveau of locatieniveau via een online portal vanaf half november aangeven met welke klassen ze wilden deelnemen aan de monitor (zie ook volgende pagina). Het stond de school vrij om zelf een keuze te maken in de selectie van klassen. Wel is geadviseerd om zoveel mogelijk klassen mee te laten doen om ook uitspraken over de gehele school mogelijk te maken. Per klas moest in het aanmeldformulier aangegeven worden welk niveau de leerlingen volgden, welk leerjaar het betrof en hoeveel leerlingen in een klas zaten. Daarnaast konden scholen maximaal vijf eigen vragen toevoegen aan de monitor, die aan het einde van de vragenlijst toegevoegd werden. De vijf mogelijke antwoordcategorieën voor deze eigen vragen komen overeen met die in de basisvragenlijst om het invullen voor de scholieren zo eenvoudig mogelijk te laten zijn. Door zeven scholen (verantwoordelijk voor achttien vestigingen) zijn extra vragen aangeleverd.
1
De koppeling met achtergrondkenmerken gebeurt bij DUO, de verrijkte bestanden worden met een nietherleidbaar ‘omnummer’ aan ResearchNed geleverd, waardoor de koppeling tussen pgn en het onderzoeksresultaten nooit te maken is (DUO krijgt de onderzoeksresultaten niet, ResearchNed krijgt het echte pgn niet). De toestemming voor de wijze waarop het pgn gebruikt wordt in dit onderzoek is gegeven door OCW, in afstemming met de privacy-officer van DUO.
8 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Het scherm om eigen gegevens te wijzigen of klassen en/of eigen vragen toe te voegen zag er als volgt uit:
9 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Het scherm om klassen toe te voegen, zag er als volgt uit:
Nadat een klas was toegevoegd, kwam de ingevoerde informatie in beeld inclusief het wachtwoord waarmee de klas kon inloggen in de enquête:
Door onderaan het beginscherm op “verstuur details per e-mail” te klikken kon de contactpersoon de aangemelde klassen inclusief de bijbehorende wachtwoorden naar zichzelf e-mailen. De inlogcodes van de diverse klassen konden op deze manier relatief gemakkelijk onder de begeleidende docenten verspreid worden. De dataverzameling van de LAKS-monitor heeft net als in het verleden wederom geheel online plaatsgevonden. De vragenlijst is klassikaal afgenomen onder begeleiding van een docent in de periode 3 februari tot en met 28 maart 2014, via de website www.laks-monitor.nl, waarop later ook de resultaten van het onderzoek beschikbaar worden gesteld.
10 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
11 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Het inlogscherm om te beginnen aan de vragenlijst:
Scholen waren zelf verantwoordelijk voor het inplannen van de afname voor alle aangemelde klassen en konden zelf bepalen wanneer de vragenlijst gedurende deze periode werd afgenomen. Wanneer een school achterbleef met invullen met de enquêtes, is de school actief aangespoord door het LAKS hun klassen alsnog de enquête in te laten vullen. Op basis van de gebruikte klasspecifieke inlogcode werden achteraf de gegevens over de klas zoals aangegeven in het aanmeldformulier en gegevens over de school afkomstig uit open onderwijsdata beschikbaar gesteld door DUO (voetv12 en voatv122 met o.a. locatiecode, leerlingaantal en etniciteit) aan de enquêteresultaten gekoppeld. Aan het eind van de enquête van de LAKS-monitor is de vragenlijst van Vensters voor Verantwoording toegevoegd. Vensters voor Verantwoording is een project waarbij alle cijfermatige informatie over scholen voor voortgezet onderwijs, verzameld wordt in één systeem. Deze informatie, afkomstig van DUO, Onderwijsinspectie en van de scholen zelf, wordt bewerkt en gevisualiseerd. Doel van het project is mede kwaliteitsstandaarden te ontwikkelen en de mogelijkheid om scholen op basis van resultaten met elkaar te vergelijken (benchmarking). Een onderdeel van Vensters voor Verantwoording is dat scholen verplicht zijn jaarlijks vijftien (in het geval van praktijkonderwijs zeventien) vragen over leerlingtevredenheid in te laten vullen door de leerlingen van de derde klas en deze informatie te leveren aan Vensters voor Verantwoording. Scholen kunnen zelf bepalen via welke manier zij de leerlingtevredenheid invullen. Deelnemen aan de LAKS-monitor is één manier om aan de informatieplicht voor Vensters voor Verantwoording te voldoen. Naast deelname aan de LAKS-monitor via reguliere deelname konden scholen die een licentie hebben bij Kwaliteitscholen ook deelnemen aan de monitor via hun portaal. Kwaliteitscholen geeft scholen onder meer de mogelijkheid zelf enquêtes af te nemen onder leerlingen, ouders en medewerkers. Momenteel zijn ruim 600 locaties van vo-scholen hierbij aangesloten. Verschillende scholen gaven tijdens de eerste LAKS-monitor aan dat zij niet deelnamen aan de LAKS-monitor omdat zij al een samenwerking hadden met Kwaliteitscholen. Om die reden heeft het LAKS ervoor gekozen voor de volgende LAKS-monitoren de samenwerking met Kwaliteitscholen aan te gaan. Kwaliteitscholen heeft scholen de mogelijkheid geboden via hun website de LAKS-monitor in te vullen. Van alle derdeklassers die ook de vragen voor Vensters voor
2
Vooralsnog zijn de voorlopige gegevens van schooljaar 2012-2013 gebruikt als basis voor aanmaak van de weegfactor; voor overige populatiegegevens is gebruikt gemaakt van voorlopige populatiegegevens op instellingsniveau (brin) met als peildatum 1 oktober 2013 afkomstig van www.duo.nl. In dit bestand ontbreken de gegevens over etniciteit.
12 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Verantwoording invulden krijgt Kwaliteitscholen de antwoorden teruggekoppeld, zodat deze direct zichtbaar zijn voor scholen op de website van Kwaliteitscholen.
13 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
4
4.1 4.1.1
Respons, datacleaning en weging
Respons JOB-monitor In 2014 namen ALLE 66 bekostigde mbo-instellingen deel aan de JOB-monitor (een historisch hoogtepunt in de JOB-monitorgeschiedenis) alsook de Politieacademie en een niet-bekostigde instelling (Hogeschool TIO). Binnen de instellingen hebben 277.016 studenten de vragenlijst geopend (55% van de populatie: 500.956 studenten). Na cleaning (zie paragraaf 4.2) resteert een bruikbare netto-respons van 255.859 studenten (51% van de populatie). In bijlage c is de netto-respons per instelling te vinden.
4.1.2
LAKS-monitor Met 162 vestigingen/locaties hebben 95 van de in totaal 658 vo-scholen (14%) deelgenomen aan de LAKS-monitor 2014. Door 66.132 scholieren van de deelnemende instellingen is een start gemaakt met de enquête (7% van de populatie: 980.449 scholieren; 36% van de populatie van de deelnemende scholen: 182.577). De cleaning heeft geresulteerd in een netto-respons van 59.075 scholieren (53.529 afkomstig van scholen die volgens de reguliere weg de vragenlijst hebben ingevuld; 5.546 enquêtes zijn afkomstig via Kwaliteitscholen.nl; in totaal 6% van de populatie en 32% van de populatie van de deelnemende scholen). Veel scholen hebben ervoor gekozen om slechts een deel van de leerlingen te laten deelnemen. In bijlage d is de netto-respons per instelling te vinden. Derdeklassers zijn op alle niveaus oververtegenwoordigd. Hiervoor wordt gecorrigeerd door het berekenen van een weegfactor.
4.2
Datacleaning De datacleaning vindt in beide onderzoeken plaats volgens een vast stramien waarbij we kijken naar de mate waarin de vragenlijst volledig - en in het geval van de JOB-monitor in ieder geval voor 40 procent - is ingevuld, naar de invultijd en naar de eenzijdigheid van antwoorden. Voor de LAKS-monitor worden alleen compleet ingevulde vragenlijsten meegenomen. Hiervoor is gekozen omdat bij deze monitor gewerkt wordt met een klassencode en het daarom niet uit te sluiten is dat een leerling die de vragenlijst in eerste instantie niet volledig ingevuld heeft, later alsnog een volledige enquête invult. Hierbij moet wel opgemerkt worden dat alleen gekeken wordt naar de hoofdvragenlijst van de LAKS-monitor; wanneer leerlingen de vragen van Vensters voor Verantwoording of de schoolspecifieke vragen niet (volledig) hebben ingevuld maar de hoofdvragenlijst wel, dan worden deze toch meegenomen in de analyse. In de JOB-monitor is gewerkt met persoonlijke inlogcodes, daar kunnen studenten wél na het onderbreken van de vragenlijst op een ander moment verder gaan met invullen. Bij de JOB-monitor worden daarom alleen vragenlijsten die voor minimaal 40 procent zijn ingevuld meegenomen, rekening houdend met het totaal aantal verplichte vragen. Voor zowel de JOB-monitor als de LAKS-monitor zijn vragenlijsten die te snel zijn ingevuld, niet meegenomen. Voor beide monitoren is de grens van vijf minuten invultijd gehanteerd: studenten danwel scholieren die de vragenlijst sneller dan in vijf minuten hebben ingevuld, worden niet meegenomen. Wanneer te vaak een zelfde antwoordcategorie is gekozen (telkens score 1, 2, 3, 4 of 5), wordt de enquête niet meegenomen. Voor beide monitoren is de grens van maximaal 85 procent dezelfde antwoordcategorie gehanteerd voor het wel of niet meenemen van de enquête.
14 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Uiteindelijk blijft er van de brutorespons van de JOB-monitor van 277.016 studenten een groep van 255.859 studenten over waarvan de analyses in dit onderzoek gedaan zullen worden (tabel 1). Van de brutorespons van de LAKS-monitor (66.132 scholieren) blijft er voor de analyses in dit onderzoek een groep van 59.075 scholieren over.
Tabel 1 – Datacleaning Weggelaten
(Overgebleven) respons
Populatie
7.367 7.077 6.713
277.016 269.6493 262.572 255.859
500.956 55% 54% 52% 51%
JOB-monitor Landelijke populatie Bruto respons Vragenlijst voor min. 40 % ingevuld Voldoende invultijd (min. 5 min.) Voldoende afwisseling (max. 85% zelfde antwoorden)
Landelijk
5.071 749
66.132 61.061 60.312
980.449 7% 6% 6%
Deelnemende scholen 182.577 36% 33% 33%
1.237
59.075
6%
32%
LAKS-monitor Populatie Bruto respons Vragenlijst geheel ingevuld Voldoende invultijd (min. 5 min.) Voldoende afwisseling (max. 85% zelfde antwoorden)
4.3 4.3.1
Weging JOB-monitor Tot dusver is er in de voorgaande JOB-monitoren gecorrigeerd voor onevenwichtige respons met een poststratificatie weegmodel. Binnen dit weegmodel is de onevenredige verdeling in de respons tussen opleidingen (tot dusver: brin*opleidingsrichting*leerweg*niveau*geslacht*etniciteit) rechtgetrokken door het relatieve aandeel van een deelpopulatie in de responsgroep te delen door ditzelfde aandeel binnen de populatie. Ook uit de responsanalyses op het bestand van 2014 blijkt dat er sprake is van een onevenwichtigheid naar achtergrondkenmerken (zie tabel 2) en dat deze kenmerken bovendien samenhingen met de tevredenheid over docenten (zie tabel 3). Met een stijging in de respons, is de scheefheid van de respons ten opzichte van de populatie telkens minder groot dan in de jaren daarvoor. Omdat deze echter op cruciale kenmerken nog altijd verschilt, en zoals gezegd deze verschillen medebepalend zijn voor de tevredenheid, vinden we het belangrijk ook in deze meting een weegfactor toe te passen. Voor te hoge en te lage weegfactoren wordt daarbij gecorrigeerd, lager dan 0,3 wordt gezet op 0,3 (dit gold voor geen enkel geval) en hoger dan 3 op 3 (kwam 1.355 keer (0, 5%) voor).
3
Hiervan heeft 98,7 procent de vragenlijst geheel ingevuld.
15 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Tabel 2 - Verdeling personen binnen JOB-monitor 2014 naar niveau, leerweg, geslacht en etniciteit Respons
Niveau
Onbekend Niveau Niveau Niveau Niveau
1 2 3 4
Populatie
%
N
%
N
0,7%
1.845
1,0%
4.843
2,3% 19,3% 26,3% 51,4%
5.997 49.337 67.207 131.473
3,8% 21,3% 26,8% 47,1%
18.869 106.873 134.469 235.902
Chi-square 2094,7**
Leerweg
Onbekend BBL BOL
0,0% 17,6% 82,4%
0 44.926 210.933
2,1% 24,2% 73,8%
10.475 121.012 369.469
10379,0**
Geslacht
Man Vrouw
49,6% 50,4%
126.872 128.987
52,5% 47,5%
262.774 238.182
557,6**
Etniciteit
Autochtoon Allochtoon
76,8% 23,2%
196.505 59.354
72,9% 27,1%
365.406 135.550
1319,9**
Bron: JOB-monitor 2014; ** significant bij p<0.01 * significant bij p<0.05.
Tabel 3 – Percentage studenten binnen JOB-monitor 2014 dat docenten (zeer) goed vindt, naar achtergrondkenmerken Ongewogen Gem.
N
Gewogen Sig.
Gem.
N
Sig.
76,3% 62,9% 58,7% 58,0%
5.997 49.337 67.207 131.473
**
76,5% 62,9% 59,2% 57,7%
7.408 52.821 68.964 124.037
**
BBL BOL
66,0% 58,2%
44.926 210.933
**
66,1% 58,0%
56.516 199.343
**
Geslacht
Man Vrouw
61,9% 57,3%
126.872 128.987
**
62,0% 57,4%
131.847 124.012
**
Etniciteit
Autochtoon Allochtoon
59,7% 59,3%
196.505 59.354
**
59,9% 59,5%
187.726 68.133
**
Niveau
Niveau Niveau Niveau Niveau
Leerweg
1 2 3 4
Bron: JOB-monitor 2014; ** significant bij p<0.01 * significant bij p<0.05.
Het is belangrijk om bij JOB de weging altijd te nesten naar instelling, omdat de samenstelling van de studentpopulatie sterk verschilt tussen instellingen. Niet opgenomen in deze rapportage, maar wel getest in de voorbereiding ervan, is een toets van de geneste verschillen per instelling. Daaruit blijkt dat de verdeling naar domein*niveau*leerweg*geslacht*etniciteit bij 16 van de 68 instellingen niet significant afwijkt van de populatie, bij de overige 52 instellingen is deze mismatch er wel.
16 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
4.3.2
LAKS-monitor In de LAKS-monitor is het niet mogelijk om te wegen op vestigingsniveau, omdat er op dat niveau geen geadministreerde populatiedata beschikbaar zijn. Omdat veel scholen ervoor kiezen slechts een deel van de leerlingen deel te laten nemen aan het onderzoek, ontstaat er een scheve verdeling van leerlingen ten opzichte van de hele populatie, waardoor ongewogen landelijke resultaten een onjuist beeld zouden geven. Een analyse van de respons naar achtergrondkenmerken laat zien dat er sprake is van een onevenwichtige vertegenwoordiging in de respons naar leerjaar, schoolsoort, geslacht en etniciteit (zie tabel 4, genest zijn deze verschillen eveneens significant) en dat deze kenmerken samenhangen met de gegeven rapportcijfers voor school (tabel 5). Net als bij de JOB-monitor corrigeren we daarvoor door met een poststratificatiemodel de weegfactor te berekenen. In de eerste twee leerjaren is daarbij overigens geen onderscheid gemaakt naar schoolsoort, omdat deze in die eerste twee jaar niet altijd al vastligt (leerlingen zitten vaak in een gemengde brugklas). Voor te hoge en te lage weegfactoren is daarbij net als bij de JOB-monitor gecorrigeerd, lager dan 0,3 naar 0,3 (dit gold voor 179 cases, 0,3%) en hoger dan 3 naar 3 (kwam 49 (0,08%) keer voor).
Tabel 4 - Verdeling respons en populatie binnen LAKS-monitor 2014 naar leerjaar, schoolsoort, geslacht en etniciteit Respons
Populatie
%
N
%
N
Chi-square
Leerjaar
1 2 3 4 5 6
23,1% 19,4% 31,0% 17,1% 7,2% 2,1%
13.664 11.490 18.304 10.113 4.237 1.267
21,8% 21,6% 21,1% 21,6% 9,9% 4,0%
208.560 206.222 201.954 206.649 94.410 37.940
4076,6**
Schoolsoort
Brugklas Praktijkonderwijs Vmbo Havo Vwo
43,5% 0,4% 25,5% 15,5% 15,0%
25.718 235 15.086 9.185 8.851
44,1% 1,6% 21,5% 15,9% 16,9%
421.222 15.526 205.811 152.073 161.103
1073,5**
Geslacht
Man Vrouw
48,5% 51,5%
28.676 30.399
50,3% 49,7%
480.377 475.358
65,9**
Etniciteit
Autochtoon Allochtoon
81,2% 18,8%
47.980 11.095
78,0% 22,0%
745.583 210.152
335,7**
Bron: LAKS-monitor 2014; ** significant bij p<0.01 * significant bij p<0.05.
17 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Tabel 5 - Rapportcijfer school LAKS-monitor 2014 Ongewogen
Gewogen
Gem.
N
Sig.
Gem.
N
Sig.
Leerjaar
1 2 3 4 5 6
7,7 7,0 6,6 6,4 6,8 6,9
13.664 11.490 18.304 10.113 4.237 1.267
**
7,6 7,0 6,6 6,4 6,8 6,9
12.954 12.809 12.516 12.829 5.695 2.272
**
Schoolsoort
Brugklas Praktijkonderwijs Vmbo Havo Vwo
7,3 6,1 6,3 6,6 7,1
25.718 235 15.086 9.185 8.851
**
7,3 6,0 6,2 6,6 7,1
26.163 677 12.783 9.445 10.006
**
Geslacht
Man Vrouw
6,8 7,0
28.676 30.399
**
6,8 7,0
29.666 29.409
**
Etniciteit
Autochtoon Allochtoon
7,0 6,6
47.980 11.095
**
7,0 6,6
46.113 12.962
**
Bron: LAKS-Monitor 2014; ** significant bij p<0.01 * significant bij p<0.05.
18 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
5
Thematische clustering van vragen
De vragen in zowel de JOB- als de LAKS-monitor zijn bij de afname op zo’n manier ingedeeld dat ze inhoudelijke thema’s vormen. Of deze thema’s ook opgevat mogen worden als een schaal is op basis van factoranalyse nagegaan. De uitkomsten van de verschillende factoranalyses voor de JOB-monitor zijn in tabel 6 weergegeven, voor de LAKS-monitor volgt de tabel een paragraaf later (tabel 7). Niet alle voorgelegde vragen konden worden ingedeeld bij een thema. Deze vragen worden afzonderlijk in het rapport besproken. In beide tabellen staan per item de communaliteit, de factorscore en de ‘alpha if item deleted’ weergegeven. Een communaliteit geeft het deel van de variantie weer dat door de factor wordt bepaald. Het betreft een proportioneel deel en ligt tussen 0 en 1. Er is uitgegaan, mede op aanraden van het deskundigenpanel van de vorige JOB- en LAKS-monitor, van een minimale vereiste waarde van 0,30. De factorlading geeft de correlatie weer tussen de afzonderlijke items en de te construeren schaal. Voor een statistisch goede fit liggen deze boven de 0,40. Met behulp van betrouwbaarheidsanalyse is de Cronbach’s alpha berekend voor de schalen. In de regel dienen de alpha’s boven de 0,70 te liggen. 5.1
JOB-monitor Uit de onderstaande tabel blijkt dat in principe (na afronding op 1 decimaal) ieder voorgesteld cluster mag worden opgevat als een schaal. De communaliteiten alsook de factorladingen zijn hoog genoeg om te mogen spreken van afzonderlijke clusters, waaruit statistisch verantwoorde conclusies getrokken kunnen worden. Er zijn drie clusters die voor afronding op één decimaal de grenzen van de vereiste waarde opzoeken. Bij het cluster lessen heeft het item uitval onderwijsactiviteiten een iets lage factorlading, bij het cluster onderwijsfaciliteiten is de cronbach’s alpha .69 en bij het cluster werkplek (bbl) is de factorlading bij het item moeite werkplek vinden aan de lage kant.
Tabel 6 – Communaliteiten, factorlading en cronbach’s alpha JOB-monitor 2014 Cluster
Communaliteit
Factorlading
Alpha if item deleted
0,73 0,73
0,85 0,85
-
0,42 0,74 0,53 0,66 0,59 0,35 0,56
0,63 0,39 0,55 0,78 0,75 0,58 0,69
0,70 0,74 0,71 0,67 0,67 0,71 0,69
0,63 0,69 0,45 0,56 0,38
0,80 0,83 0,67 0,75 0,61
0,72 0,70 0,76 0,73 0,78
Informatie (correlatie: 0,46) Informatie voorafgaand aan opleiding Informatie over opbouw opleiding
Lessen Afwisseling zelfstandig werken en in groepen werken Uitval onderwijsactiviteiten Roosterwijzigingen op tijd doorgegeven Tevredenheid over docenten Tevredenheid over lesmateriaal Gebruik gekocht lesmateriaal Goed contact met docenten Cronbach’s alpha=0,73
Toetsing Toets op tijd bekend Inhoud toets op tijd bekend Uitslag toets op tijd bekend Aansluiting bij lesstof Studenten gelijke wijze beoordeeld Cronbach’s alpha=0,78
19 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
(vervolg) Cluster
Communaliteit
Factorlading
Alpha if item deleted
0,69 0,68 0,57 0,51
0,83 0,83 0,75 0,71
0,70 0,71 0,75 0,77
0,49 0,53 0,50 0,58
0,70 0,73 0,71 0,76
0,64 0,62 0,63 0,60
0,50 0,60 0,56 0,49 0,62 0,61 0,53 0,41 0,39
0,70 0,77 0,75 0,70 0,79 0,78 0,73 0,64 0,63
0,87 0,87 0,87 0,87 0,86 0,86 0,87 0,88 0,88
0,58 0,75 0,68 0,74 0,47 0,72 0,75 0,64 0,56
0,68 0,43 0,50 0,62 0,67 0,74 0,63 0,62 0,66
0,76 0,79 0,78 0,77 0,76 0,75 0,77 0,77 0,77
0,39 0,67 0,58
0,37 0,70 0,66
0,77 0,70 0,71
0,64 0,59 0,55
0,69 0,66 0,74
0,70 0,71 0,69
0,52
0,61
0,72
0,68 0,75
0,82 0,87
0,82 0,76
0,81
0,90
0,70
Studiebegeleiding Tevredenheid over studiebegeleiding Hulp bij leerproblemen Goed beeld van eigen studievoortgang Voldoende mogelijkheid om in eigen tempo te studeren Cronbach’s alpha=0,79
Onderwijsfaciliteiten Tevredenheid over begeleiding tijdens zelfstandig werken Plaats om rustig te kunnen studeren Beschikbaarheid computers Bereikbaarheid medewerkers Cronbach’s alpha=0,69
Competenties Samenwerken Probleem oplossen Plannen en organiseren Zelfstandig werken Communiceren Werken volgens afspraak Jezelf en je werk beoordelen? Beroep (vakkennis) Leeropbrengst school Cronbach’s alpha=0,88
Stage (BOL) Voorbereiding op stage Moeite stageplaats vinden Hulp van school bij vinden stageplaats Stage voldoende leerzaam Aansluiting theorie bij praktijk Tevredenheid over begeleiding door school Tevredenheid over begeleiding door stagebedrijf Voldoende contact tussen school en leerbedrijf Tevredenheid over manier van beoordeling van stage Cronbach’s alpha=0,79
Werkplek (BBL) Moeite werkplek vinden Tevreden over begeleiding door werkplek Mogelijkheid om op school ervaring op werkplek te bespreken Werkplek voldoende leerzaam Aansluiting theorie bij praktijk Tevredenheid over manier van beoordeling van praktijkdeel Voldoende contact tussen school en leerbedrijf Cronbach’s alpha=0,75
Studieloopbaanbegeleiding Hulp bij het maken van keuzes tijdens studie Duidelijkheid over de mogelijkheden om verder te studeren Begeleiding bij beroepskeuze of keuze voor vervolgopleiding Cronbach’s alpha=0,83
20 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
(vervolg) Cluster
Communaliteit
Factorlading
Alpha if item deleted
0,67 0,72 0,67
0,82 0,85 0,82
0,70 0,66 0,70
0,47 0,75 0,75 0,71 0,52
0,68 0,87 0,86 0,84 0,72
0,86 0,80 0,80 0,81 0,84
0,77 0,77
0,87 0,87
-
Organisatie Goed geïnformeerd over rechten en plichten School past regels consequent toe Klachtenbehandeling Cronbach’s alpha=0,77
Veiligheid en sfeer In en om het schoolgebouw schoon Veiligheid binnen het schoolgebouw Veiligheid op het schoolterrein School doet voldoende om studenten veilig te laten voelen Sfeer op school Cronbach’s alpha=0,85
School en studie (correlatie: 0,53) Opnieuw voor opleiding kiezen Opnieuw voor school kiezen Bron: JOB-monitor 2014
In de rapportage wordt gewerkt met gemiddelde clusterscores: het gemiddelde over alle vragen in een cluster. De gemiddelde percentages positief en negatief zijn berekend door binnen elk cluster het aantal positief gescoorde items binnen elk thema te percenteren ten opzichte van het totaal aantal items in een schaal. 5.2
LAKS-monitor De uitkomsten van de factoranalyse voor de LAKS-monitor staan in tabel 7. Hieruit blijkt dat alle voorgestelde clusters een goede fit hebben: zowel de communaliteiten, de factorladingen als de cronbach’s alpha’s voldoen aan de gestelde voorwaarden. Een groep items dat in de vragenlijst onder het thema organisatie getoond werd, bleek net als vorige edities van de LAKS-monitor geen betrouwbaar cluster te vormen. De vragen uit dit thema worden als aparte items behandeld in de rapportages.
Tabel 7 – Communaliteiten, factorlading en cronbach’s alpha LAKS-monitor 2014 Cluster
Communaliteit
Factorlading
Alpha if item deleted
0,70 0,71
0,84 0,84
0,61 0,60
0,56
0,75
0,74
Lesmateriaal Ben je tevreden over het lesmateriaal? Ben je tevreden over hoe docenten lesmateriaal gebruiken? Ben je tevreden over praktijkmateriaal voor gym/techniek/kunst? Cronbach’s alpha=0,73
21 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Communaliteit
Factorlading
Alpha if item deleted
0,63 0,63 0,54
0,79 0,79 0,74
0,79 0,79 0,81
0,62 0,57
0,79 0,76
0,79 0,80
over de hoeveelheid theorie die je krijgt in
0,51
0,71
0,72
over de hoeveelheid praktijk die je krijgt
0,48
0,69
0,72
over het gebruik van opdrachten en
0,51
0,72
0,72
over hoe vakken op elkaar aansluiten? over of de lessen zin hebben? over de hoeveelheid huiswerk die je
0,47 0,52 0,30
0,69 0,72 0,55
0,72 0,71 0,76
over hoe docenten met ICT werken? over hoe goed de ICT werkt? over hoe de lesstof digitaal wordt
0,67 0,56 0,62
0,82 0,75 0,79
0,74 0,79 0,76
over hoeveel ICT er wordt gebruikt?
0,68
0,83
0,74
tevreden over of je op tijd weet dat je een toets
0,54
0,73
0,81
tevreden over dat je weet wat je moet leren? tevreden over hoe snel je de uitslag van een toets
0,60 0,43
0,77 0,66
0,80 0,82
tevreden over hoe de leerstof terugkomt in de
0,62
0,79
0,79
tevreden over de beoordeling van de toetsen? tevreden over de moelijkheid van de toetsen?
0,60 0,51
0,77 0,71
0,80 0,81
0,59 0,65 0,43 0,50
0,77 0,81 0,65 0,71
0,63 0,60 0,70 0,67
over de bibliotheek/mediatheek/Open
0,36
0,60
0,67
over over over over
0,37 0,63 0,45 0,48
0,61 0,79 0,67 0,70
0,67 0,59 0,65 0,64
Cluster
Docenten Ben je tevreden over hoe docenten met je omgaan? Kun je met jouw vragen terecht bij jouw docenten? Ben je tevreden over wat jouw docenten van hun vak weten? Ben je tevreden over of docenten jou motiveren? Ben je tevreden over hoe je begeleid wordt bij zelfstandig werken? Cronbach’s alpha=0,83
Manier van lesgeven Ben je tevreden de lessen? Ben je tevreden in de lessen? Ben je tevreden groepswerk? Ben je tevreden Ben je tevreden Ben je tevreden krijgt?
Cronbach’s alpha=0,76
Ict Ben je tevreden Ben je tevreden Ben je tevreden gepresenteerd? Ben je tevreden
Cronbach’s alpha=0,81
Toetsen Ben je hebt? Ben je Ben je krijgt? Ben je toets? Ben je Ben je
Cronbach’s alpha=0,83
Onderwijsvoorziening Ben Ben Ben Ben
je je je je
tevreden tevreden tevreden tevreden
over over over over
de klaslokalen? de studieplekken op school? het aantal zelfstudie-uren? het aantal computers op school?
Cronbach’s alpha=0,72
Faciliteiten Ben je tevreden Leercentrum? Ben je tevreden Ben je tevreden Ben je tevreden Ben je tevreden
de conciërges? hoe schoon het is op school? de kantine? hoe schoon de toiletten zijn?
Cronbach’s alpha=0,70
22 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Cluster
Communaliteit
Factorlading
Alpha if item deleted
0,60 0,61 0,35 0,60 0,62
0,77 0,78 0,59 0,78 0,78
0,74 0,74 0,80 0,74 0,73
0,59
0,77
0,78
0,64 0,71
0,80 0,84
0,76 0,74
0,62
0,79
0,77
0,75 0,75
0,87 0,87
0,74 0,74
0,71
0,84
0,78
0,87
0,93
0,87
0,93
Leefbaarheid en sfeer Ben je tevreden Ben je tevreden Ben je tevreden Ben je tevreden Ben je tevreden problemen?
over over over over over
de veiligheid op school? de sfeer op school? jouw mentor/tutor/coach? hoe school iets tegen pesten doet? hulp krijgen bij persoonlijke
Cronbach’s alpha=0,79
Inspraak Ben je tevreden over of leerlingen kunnen meepraten over besluiten van jouw school? Ben je tevreden over de leerlingenraad? Ben je tevreden over de mate waarin je gehoord wordt door de leerlingenraad of de medezeggenschapsraad? Ben je tevreden over de mate waarin jouw school het mogelijk maakt deel te nemen aan de medezeggenschapsraad? Cronbach’s alpha=0,81
Regels en klachten Ben je tevreden over de regels op school? Ben je tevreden over wat je weet over jouw rechten en plichten? Ben je tevreden over de manier waarop klachten worden behandeld op school? Cronbach’s alpha=0,82
Vmbo-beroepsstage (correlatie: 0,73) Ben je tevreden over wat je geleerd hebt tijdens jouw beroepsstage? Ben je tevreden over de begeleiding op jouw beroepsstageplaats?. Bron: LAKS-Monitor 2014
De clusterscores zijn op dezelfde wijze verwerkt als in de JOB-monitor: een gemiddelde score op een vijfpuntsschaal voor het clustergemiddelde en een percentage positief en negatief berekend door het aantal positieve dan wel negatieve gescoorde items te relateren aan het totaal aantal items in een cluster.
23 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
6
6.1
Rapporteren over de resultaten
Instellingsrapportages en instellingsbestanden Voor instellingen die deelgenomen hebben aan de JOB-monitor is het mogelijk om op eigen verzoek vanaf half april een voorlopige instellingsrapportage te ontvangen. Hierin staan de resultaten grafisch weergegeven per vraag en naar drie eigen niveau’s aangeleverd door de instelling (bijv. team, locatie). Daarnaast is het mogelijk om een voorlopig databestand aan te vragen zodat de instelling zelf aan de slag kan met de instellingsgegevens. De voorlopige (gewogen) resultaten zijn uitdrukkelijk onder embargo aan de instellingen verstrekt. Daarbij is benadrukt dat de voorlopige data niet definitief zijn en JOB noch ResearchNed verantwoordelijk kunnen worden gehouden voor eventuele verschillen die ontstaan zijn door correcties die later kunnen worden doorgevoerd. In juni 2014 krijgen alle deelnemende instellingen beschikking over de definitieve data van hun instelling. Op diezelfde dag worden ook alle landelijke data openbaar. Voor instellingen die deelgenomen hebben aan de LAKS-monitor is het eveneens mogelijk om een voorlopig databestand aan te vragen met daarin de resultaten op vestigingsniveau. Hier is minder vraag naar dan bij de JOB-monitor. In juni 2014 krijgen alle deelnemende instellingen beschikking over de definitieve data en twee rapportages. Eén rapportage met daarin het percentage tevredenheid voor de vestiging per cluster en per vraag weergegeven. De andere rapportage geeft grafisch de resultaten weer op vestigingsniveau per vraag uitgesplitst naar niveau, leerjaar, geslacht. Daarnaast wordt de totale vestigingsscore vergeleken met de landelijke score per cluster en vraag. De resultaten in de rapportages worden ongewogen berekend, omdat de weegfactor niet op instellingsniveau wordt berekend. Bij de rapportages wordt vermeld dat de resultaten een afspiegeling zijn van de groep deelnemende scholieren.
6.2
Online rapportage In voorgaande JOB- en LAKS-monitoren werden de onderzoeksresultaten ontsloten via de online ontsluitingstool ‘KIWI’. Deze applicatie maakte het mogelijk dat instellingen zelf tabellen samen konden stellen met daarin de gewenste combinaties van achtergrondkenmerken. In de praktijk kwamen er echter veel klachten over de gebruiksvriendelijkheid van de tool. COMBO (de overkoepelende stichting van JOB en LAKS) heeft daartoe gekozen voor een nieuwe ontsluitingstool, ontwikkeld door OiG. In deze tool wordt gebruik gemaakt van statische, vooraf klaargezette tabellen die op een gebruiksvriendelijke manier gepresenteerd worden. In deze tool worden resultaten geaggregeerd getoond op het niveau van instelling*domein*opleidingscluster (JOB) en vestiging (LAKS), met de mogelijkheid een beperkt aantal filters toe te passen (bijv. schoolgrootte, niveau). Toen KIWI nog gebruikt werd, is ervoor gekozen de resultaten al dan niet te tonen op basis van de hoogte van de n (een statische waarde niet rekening houdend met populatieomvang, n=20 openbaar, n=5 achter de inlog). De huidige ontsluitingstool geeft ruimte om een andere grens te hanteren voor het al dan niet tonen van tabellen, flexibel te bepalen per getoonde tabel. In de nieuwe tool bestaat er geen inlogmogelijkheid meer zoals ten tijde van KIWI: alle data op een lager geaggregeerd niveau dan in de online tool worden alleen via de instellingsrapportages en –bestanden aan de instellingen terug geleverd.
24 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
7
Vragen aan het deskundigenpanel
In dit hoofdstuk staat een aantal vragen die wij u als deskundigen voor willen leggen.
Algemeen (1)
Kunt u zich vinden in de beschreven procedures voor de databewerking van de JOB- en LAKSmonitor? - Antwoord deskundigenpanel: Na het overleg konden alle leden van het deskundigenpanel
zich vinden in de procedures voor databewerking, waarbij wel werd gewenst dat er in de toekomst onderzoek wordt gedaan naar de non-respons bij de LAKS-monitor. Populatiebestand (2)
Het gebruikte populatiebestand voor het maken van de weegfactor voor de LAKS-monitor is niet actueel (data over etniciteit is niet actueel, peildatum 1 okt 2012). Mocht er geen actueel populatiebestand op tijd beschikbaar komen (voorzien in april), onder welke voorwaarden zijn deze verouderde gegevens te gebruiken als basis voor het aanmaken van een weegfactor? Met andere woorden: weegt het gebruiken van een actueel populatiebestand op tegen het wegen op alle gewenste variabelen uit een niet-actueel populatiebestand? - Antwoord deskundigenpanel:
Deskundigenpanel ziet geen grote bezwaren in het gebruik van een niet-actueel databestand. Waarschijnlijk zal het qua weegfactor niet veel uitmaken. Er zal wel eerst geprobeerd worden een recent populatiebestand te bemachtigen (wellicht een voorlopig databestand dat al beschikbaar kan worden gesteld aan ResearchNed)4. Analyses (3)
Voor de politieacademie geldt dat binnen het cluster Werkplek (BBL) één item niet aan de studenten voorgelegd kon worden omdat het niet voor hen van toepassing was. Is het toegestaan om voor deze instelling het cluster te berekenen met één item minder? Mogen we het cluster dan indicatief nog vergelijken met de andere instellingen? Gaat dit problemen opleveren (bijv. bij het landelijke gemiddelde)? - Antwoord deskundigenpanel: Dit kan berekend worden. Aan de hand van de
berekening kan de conclusie getrokken worden om dit wel of niet te doen5. Ontsluiting resultaten (4)
De nieuwe online ontsluitingstool wordt gevuld met tabellen (in plaats van met microdata zoals bij de oude online tool). Dat heeft als groot voordeel dat we zelf de minimale n voor het tonen van de resultaten flexibel kunnen bepalen. Maar is dat ook wenselijk? Kiezen we dus voor een minimale n voor iedereen of berekenen we een minimale noodzakelijke n en passen we die flexibel toe? Kunnen we deze laatste optie nog uitleggen aan de gebruikers van de resultaten? Dit is met name een discussiepunt waar het gaat om kleinere opleidingen; bij een vaste minimale n is het mogelijk dat bij
4
Het voorlopige populatiebestand met peildatum 1 oktober 2013 is beschikbaar gekomen op 14 april 2014. Na nadere analyses blijkt dat de verdeling tussen de subgroepen in de populatie van 2012-2013 en van 2013-2014 slechts met een tiende tot drie tiende verschilt. De verdelingen in beide populaties zijn in alle gevallen significant verschillend van die in de respons. Vanwege een krappe planning van de oplevering van het LAKS-monitor rapport waren wij genoodzaakt om het schrijven van het rapport alvorens het voorlopig populatiebestand van 2013-2014 beschikbaar kwam op te starten. Mede hierom en vanwege de kleine verschillen tussen de twee populatiebestanden op de genoemde variabelen opgenomen in de weegfactor is ervoor gekozen om voor de weegfactor gebruik te maken van het populatiebestand van 2012-2013. Het berekenen heeft uitgewezen dat het verschil tussen de score met en zonder het item dat aan de politieacademie is gesteld, minimaal is. Er is daarom voor gekozen het cluster te handhaven zoals het is.
5
25 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
hele kleine opleidingen geen resultaten worden getoond, terwijl het aantal antwoorden best een betrouwbare representant van de populatie kan zijn. - Antwoord deskundigenpanel:
Deskundigenpanel raadt aan om een vaste ondergrens te bepalen. Dit wordt n=15 voor openbare data. Er wordt op de website een disclaimer toegevoegd dat bij kleine aantallen de resultaten van een groep minder betrouwbaar zijn. (5)
Indien gekozen wordt voor een vaste minimale n, is het dan noodzakelijk verschil te maken tussen de resultaten in de instellingsrapportages en de online tool? - Antwoord deskundigenpanel: Wat
betreft de instellingsrapportages kan er een lagere n gehanteerd worden. Voor de instellingsrapportages is bepaald dat n=5. (6)
Bij het terug leveren van databestanden aan instellingen is het niet mogelijk om een minimale (noodzakelijke) n te hanteren voor alle mogelijke subgroepen. Volstaat bij het terug leveren van databestanden aan de instellingen een disclaimer waarin staat dat de verantwoordelijkheid over het rapporteren van gegevens die niet voldoen aan de minimale (noodzakelijke) n bij de instelling zelf ligt? - Antwoord deskundigenpanel: Ja, mits bij het terug leveren van data een disclaimer
toegevoegd wordt waarin vermeld wordt dat de verantwoordelijkheid wat betreft het voldoen aan privacyeisen bij de instellingen ligt.
26 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Bijlage A
1
Op welke plaats vul je deze vragenlijst in? a b c d e
2
Vragenlijst JOB-monitor
Thuis Op school: tijdens de les Op school: zelfstandig Op mijn stageplaats / leerwerkplek Andere plek
In welk leerjaar zit je? [grid4: 1, 2, 3, 4] [indien BBL: + weet niet]
A Informatie 3
Klopt de informatie over de opleiding die je kreeg [i] voordat je aan de opleiding begon met wat je nu weet? [grid 6: helemaal niet – ja, zeker + n.v.t.]
[i] Hiermee doelen we op de informatie die je vooraf of aan het begin van je opleiding hebt gekregen van school of die je zelf hebt gevonden bijvoorbeeld op internet.
4
Wist je voor de start van je opleiding hoe de opleiding is opgebouwd [i]? [grid 5: helemaal niet – ja, zeker]
[i] Hiermee bedoelen we of je van te voren wist wat je te wachten stond wat betreft de verdeling van school/stage, toetsen enz.
B Onderwijs(inhoud) Thema: Lessen / programma 5
Ben je tevreden over de afwisseling tussen zelfstandig werken en in groepen werken? [grid5: heel ontevreden – heel tevreden]
6
Vind je dat er op school veel onderwijsactiviteiten [i] uitvallen? [grid5: veel te veel – nooit] [i] We bedoelen dan niet alleen lessen, maar ook bijvoorbeeld het werken aan projecten.
7
Vind je dat roosterwijzigingen op tijd worden doorgegeven? [grid6: veel te laat – ruim op tijd + n.v.t.]
8
Vind je jouw docenten goed[i]? [grid5: helemaal niet – ja, zeker] [i] Dit is misschien niet makkelijk in te vullen, want het verschilt natuurlijk per docent, maar probeer toch een gemiddelde voor docenten op jouw opleiding in te vullen.
9
Vind je het lesmateriaal [i] goed? [grid5: helemaal niet – ja, zeker] [i] We bedoelen dan niet alleen schoolboeken, maar ook bijvoorbeeld de spullen in het praktijklokaal.
10 Worden boeken en lesmaterialen die je moet kopen ook gebruikt? [grid6: veel te weinig – altijd + n.v.t.] 11 Heb je goed contact met je docenten? [grid5: heel slecht – heel goed]
Thema: Toetsing 12 Weet je op tijd wanneer er een toets is? [grid6: veel te laat – ruim op tijd + n.v.t.] 13 Weet je op tijd waar de toets over gaat? [grid6: veel te laat – ruim op tijd + n.v.t.]
27 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
14 Krijg je de uitslag van een toets op tijd te horen? [grid6: veel te laat – ruim op tijd + n.v.t.] 15 Sluiten de toetsen aan op wat je hebt geleerd? [grid6: helemaal niet – ja, zeker + n.v.t.]
16 Vind je dat je mede-studenten op dezelfde manier beoordeeld worden? [grid6: helemaal niet – ja, zeker + n.v.t.]
Thema: Studiebegeleiding 17 Hoe vind je de begeleiding [i] bij je opleiding? [grid5: heel slecht – heel goed] [i] Hiermee bedoelen we alles wat er vanuit school wordt gedaan aan begeleiding bij het leren. Hieronder vallen ook gesprekken met de mentor/docenten, de studiecoördinator en de studieloopbaanbegeleider.
18 Word je goed geholpen als je problemen hebt bij het leren? [grid6: helemaal niet – ja zeker + n.v.t.] 19 Heb je een goed beeld van je eigen voortgang bij je opleiding? [grid6: helemaal niet – ja, zeker + n.v.t.] 20 Is er voldoende mogelijkheid om in je eigen tempo te leren? [grid5: veel te weinig – ruim voldoende]
Thema: Onderwijsfaciliteiten 21 Ben je tevreden over de begeleiding [i] op school tijdens het zelfstandig werken? [grid5: heel ontevreden – heel tevreden] [i] We bedoelen dan bijvoorbeeld de begeleiding en het vragen kunnen stellen bij werken in het computerlokaal, open leer centrum (OLC) of mediatheek.
22 Kun je op school ergens rustig studeren? [grid5: helemaal niet– ja, zeker] 23 Kun je gebruik maken van een computer als dat nodig is? [grid5: helemaal niet – ja, zeker] 24 Als je een medewerker[i] van school nodig hebt, kun je die dan bereiken? [grid6: heel moeilijk – heel makkelijk + n.v.t.] [i] Een medewerker kan een docent zijn, maar ook iemand anders die op school werkt zoals een mentor, studiecoördinator of studieloopbaanbegeleider.
Thema: Onderwijstijd 25 Hoeveel uur moet je gemiddeld per week op school [i] zijn? [i] We bedoelen hier klokuren (60 min.) geen lesuren. Als je 1 hele dag per week op school zit, betekent dit dat je 8 klokuren op school bent.
minder dan 8 uur 8 tot 16 uur 16 tot 24 uur 24 tot 32 uur 32 uur of meer 26 Ben je tevreden over het aantal uur dat je op school moet zijn? [grid5: heel ontevreden – heel tevreden] 27 Ben je tevreden over de hoeveelheid stage/werk in je opleiding[i]? [grid5: heel ontevreden – heel tevreden] [i] Ook als je nog geen stage hebt gelopen, zijn we benieuwd naar wat je daarvan vindt!
28 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Thema: Competenties 28 Leer je in je opleiding voldoende: [grid5: veel te weinig – ruim voldoende] a b c d e f g h
... samen te werken? ... problemen op te lossen? ... te plannen en organiseren? ... zelfstandig te werken? ... te communiceren? ... te werken volgens afspraak? … jezelf en je werk te beoordelen? … over het beroep dat je later wilt uitoefenen?
29 Vind je dat je voldoende leert op school? [grid5: veel te weinig – ruim voldoende]
Thema: Stage/bpv (BOL) [ALLEEN BOL] 30 Heb je stage [i] gelopen of doe je dat op dit moment? [i] We bedoelen hier alleen de stage die je loopt voor een langere tijd. Niet een stage die je maar 1 dag hebt gelopen. a Ja, ik loop deze week stage b Ja, ik heb stage gelopen maar doe dat nu niet c Nee [verder naar 47]
31 Ben je door je school goed voorbereid op je stage/bpv? [grid5: helemaal niet – ja, zeker] 32 Had je moeite om een stage-/bpv-plaats te vinden? [grid5: heel veel moeite – geen moeite] 33 Helpt de school je bij het vinden van een stage-/bpv-plaats? [grid5: helemaal niet – ja, zeker] 34 Leer je op je stage-/bpv-plaats voldoende? [grid5: veel te weinig – ruim voldoende] 35 Sluit wat je op school leert voldoende aan bij wat je moet kunnen op je stage/bpv? [grid5: veel te weinig – ruim voldoende] 36 Ben je tevreden over de begeleiding door de school tijdens je stage/bpv? [grid5: heel ontevreden – heel tevreden] 37 Ben je tevreden over de begeleiding door het leerbedrijf tijdens je stage/bpv? [grid5: heel ontevreden – heel tevreden] 38 Vind je dat jouw begeleider op school en jouw stagebegeleider voldoende contact hebben? [grid5: veel te weinig – ruim voldoende] 39 Ben je tevreden over de manier van beoordeling van jouw stage/bpv? [grid5: heel ontevreden – heel tevreden + n.v.t.]
Thema: Werkplek (BBL) [ALLEEN BBL] 40 Had je moeite om voor je opleiding een werkplek te vinden? [grid5: heel veel moeite – geen moeite] 41 Ben je tevreden over de begeleiding door het leerbedrijf op je werkplek? [grid5: heel ontevreden – heel tevreden] 42 Kun je jouw werkervaringen voldoende op school bespreken? [grid5: veel te weinig – ruim voldoende] 43 Leer je op je werkplek voldoende? [grid5: veel te weinig – ruim voldoende]
29 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
44 Sluit wat je op school leert voldoende aan bij wat je moet kunnen op je werkplek? [grid5: veel te weinig – ruim voldoende] 45 Ben je tevreden over de manier van beoordeling van jouw praktijkdeel? [grid5: heel ontevreden – heel tevreden] 46 Vind je dat de school en jouw leerbedrijf voldoende contact hebben? [grid5: veel te weinig – ruim voldoende]
C (Studie)loopbaanbegeleiding 47 Word je goed geholpen [i] bij het maken van keuzes tijdens je opleiding? [grid6: veel te weinig – ruim voldoende + n.v.t.] [i] Hiermee bedoelen we door je mentor/loopbaanbegeleider
48 Heb je duidelijkheid over de mogelijkheden om verder te studeren [i]? [grid5: veel te weinig – ruim voldoende] [i] Weet je wat je hierna kan gaan doen?
49 Ben je tevreden over de begeleiding bij beroepskeuze of keuze voor vervolgopleiding[i]? [grid5: heel ontevreden – heel tevreden] [i] Hoe goed word je op school geholpen bij de keuze voor wat je na je opleiding gaat doen: een bepaalde baan, of juist nog verder studeren?
D Overige voorzieningen 50 Ben je tevreden over de kantine op je school? [grid5: helemaal niet – ja, zeker]
E Organisatie 51 Ben je goed geïnformeerd over je rechten en plichten? [grid5: helemaal niet – ja, zeker] 52 Houdt de school zich aan zijn eigen regels? [grid5: helemaal niet – ja, zeker] 53 Ben je tevreden over de wijze waarop op school wordt omgegaan met klachten van studenten [i]? [grid5: helemaal niet – ja, zeker + n.v.t.] [i] Het gaat hier om klachten die jij misschien hebt (gehad), maar ook om klachten van je medestudenten.
54 Weet je waar of bij wie je terecht kan als je een klacht hebt? a b c
30 |
Ja, dat weet ik Nee, dat weet ik niet Nee, ik heb tot nu toe geen klacht gehad
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
F Beperking 55 Heb je een van de volgende lichamelijke handicaps, functiebeperkingen of (chronische) ziektes? Je kunt meerdere antwoorden aankruisen. [multi resp, max. 5 aanklikbaar] a b c d e f g h i j k l m n o p q r s t u v w x y z aa bb
Nee [exclusief, naar vraag 62] Spraak- en/of taalproblemen (bijv. stotteren, afasie) Blind of zeer slechtziend (ook met bril nog slechtziend) Doof of zeer slechthorend Problemen met (trap)lopen, bewegen en/of gebruik van armen Ik zit in een rolstoel Dyslexie Dyscalculie Chronische pijnklachten RSI (pijn / tintelingen in armen, nek en rug door computergebruik) Migraine / ernstige (spannings)hoofdpijn Eetstoornis (boulimie, anorexia, obesitas) Long- en ademhalingsprobleem (bijv. cara, astma, chronische bronchitis, CF) Huidaandoening (bijv. eczeem, psoriasis) Suikerziekte / diabetes ADHD of ADD Psychisch probleem / aandoening (bijv. psychose, depressie, angststoornis, dwangneurose) Verslaving aan drugs, alcohol, gamen of gokken Een vorm van autisme (bijv. PDD-NOS, Asperger, klassiek autisme) Chronisch vermoeidheidssyndroom (ME, CVS) Artrose, reuma of andere gewrichtsklachten Spierdystrofie, spasme of andere spierziekte Een vorm van kanker Epilepsie Andere neurologische aandoening (bijv. MS, NAH) Hart- en vaatziekte (bijv. hartaandoening, hoge bloeddruk, vernauwde vaten) Ernstige darmstoornis (bijv. ziekte van Crohn, colitis) Anders
56 Is dit vastgesteld door een specialist? [alleen als vraag 55a ≠ 1; apart voor alle aangekruiste beperkingen] a b
Ja Nee
57 Heb je bij je school aangegeven dat je een beperking hebt? [alleen als vraag 55a ≠ 1] a b
Ja Nee
58 Heb je last van je beperking(en) in je opleiding? [grid 5: nooit – heel vaak; alleen als vraag 55a ≠ 1] 59 Ben je tevreden over de hoeveelheid aandacht die je van docenten krijgt voor jouw beperking? [grid6: heel ontevreden – heel tevreden + ik heb dat niet nodig; alleen als vraag 55a ≠ 1] 60 Ben je tevreden over de beschikbare hulpmiddelen en aanpassingen[i] die er op school zijn voor jouw beperking? [grid6: heel ontevreden – heel tevreden + ik heb dat niet nodig; alleen als vraag 55a ≠ 1] [i] We bedoelen hiermee rust- of werkruimtes, werkplekaanpassingen, extra verlichting, scanner, computeraanpassingen zoals bijvoorbeeld spraak of braille, ringleiding, verlenging examentijd.
31 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
61 Ben je tevreden over de geschiktheid van het gebouw [i] voor mensen met jouw beperking? [grid6: heel ontevreden – heel tevreden + ik heb dat niet nodig; alleen als vraag 55a ≠ 1] [i] We bedoelen hiermee de toegankelijkheid van school, bijvoorbeeld door drempels, liften, breedte van de deuren, aangepaste toiletten enzovoorts.
G Inspraak 62 Vindt de school jouw mening belangrijk? [grid5: helemaal niet – ja, zeker] 63 Heb je een studentenraad of deelnemersraad op school? a b c d
Ja, daar zit ik zelf in Ja, maar daar zit ik niet zelf in Nee Weet ik niet
64 Zou je zelf actief willen meedenken over het beleid op school? [grid5: beslist niet – heel graag]
H Sfeer en veiligheid 65 Is het in en om het schoolgebouw schoon? [grid5: helemaal niet – ja, zeker] 66 Voel je je veilig binnen het schoolgebouw? [grid5: helemaal niet – ja, zeker] 67 Voel je je veilig op het schoolterrein? [grid5: helemaal niet – ja, zeker] 68 Vind je dat je school voldoende doet om je er veilig / op je gemak te laten voelen? [grid5: veel te weinig – ruim voldoende] 69 Hoe vind je de sfeer binnen de school? [grid5: heel slecht – heel goed]
I Eindoordeel Thema: School & studie 70 Als je weer een opleiding moest kiezen, zou je dan weer deze opleiding kiezen? [grid5: beslist niet – beslist wel] 71 Als je weer een school moest kiezen, zou je dan weer deze school kiezen? [grid5: beslist niet – beslist wel]
Thema: Cijfer 72 Welk rapportcijfer geef je jouw opleiding? 73 Welk rapportcijfer geef je jouw school?
32 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Bijlage B
Vragenlijst LAKS-monitor
Voorafgaand aan de vragen over jouw school en onderwijs volgen hier eerst ongeveer 10 algemene vragen.
Algemeen 1.
Ben je man of vrouw? a. b.
2.
Man Vrouw
Wat is je geboortedatum? dag _ _ maand _________ jaar _ _ _ _
3.
In welk leerjaar zit je? [grid6: 1, 2, 3, 4, 5, 6]
4.
Welk type school volg je? a. b. c. d. e. f. g.
5.
Welke leerweg volg je? [Alleen voor vmbo leerjaar 1 en 2; twee antwoorden mogelijk] a. b. c. d.
6.
Ja Nee Weet ik niet
Welk profiel heb je gekozen? Indien je meerdere profielen volgt, kies dan je hoofdprofiel. [Alleen voor havo of vwo leerjaar 4 of hoger] a. b. c. d. e.
33 |
Basisberoepsgerichte leerweg Kaderberoepsgerichte leerweg Gemengde leerweg Theoretische leerweg (vmbo-t)
Heb je ook leerwegondersteuning? [Alleen voor vmbo] a. b. c.
8.
Basisberoepsgerichte leerweg Kaderberoepsgerichte leerweg Gemengde leerweg Theoretische leerweg (vmbo-t)
In welke leerweg doe je eindexamen? [Alleen voor vmbo leerjaar 3 en 4] a. b. c. d.
7.
Brugklas vmbo/havo Brugklas havo/vwo Brugklas vmbo/havo/vwo Praktijkonderwijs Vmbo Havo Vwo
Cultuur & Maatschappij Economie & Maatschappij Natuur & Gezondheid Natuur & Techniek Nog geen profiel gekozen
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
9.
Welke sector heb je gekozen? [Alleen voor vmbo leerjaar 3 of hoger] a. Landbouw / Groen onderwijs b. Techniek c. Zorg en Welzijn d. Economie e. Intersectoraal programma [i] [i] Als je vakken volgt van verschillende sectoren
10. Waar ben je geboren? a. b. c. d. e. f. g. h. i. j.
Nederland Suriname Antillen (inclusief Aruba) Marokko Turkije Een ander land in het Midden-Oosten Molukken Een ander Europees land Noord-Amerika, Oceanië (Australië, Nieuw-Zeeland), Japan of Indonesië/Nederlands-Indië Een ander land in Azië, Afrika of Zuid-Amerika
11. Waar is je moeder geboren? a. b. c. d. e. f. g. h. i. j.
Nederland Suriname Antillen (inclusief Aruba) Marokko Turkije Een ander land in het Midden-Oosten Molukken Een ander Europees land Noord-Amerika, Oceanië (Australië, Nieuw-Zeeland), Japan of Indonesië/Nederlands-Indië Een ander land in Azië, Afrika of Zuid-Amerika
12. Waar is je vader geboren? a. b. c. d. e. f. g. h. i. j.
Nederland Suriname Antillen (inclusief Aruba) Marokko Turkije Een ander land in het Midden-Oosten Molukken Een ander Europees land Noord-Amerika, Oceanië (Australië, Nieuw-Zeeland), Japan of Indonesië/Nederlands-Indië Een ander land in Azië, Afrika of Zuid-Amerika
Instructie Je staat nu aan het begin van de vragen over je onderwijs. Er zijn 14 thema’s, zoals: lessen, toetsen en docenten. Je kunt jouw tevredenheid aangeven door een van de vijf hokjes aan te kruisen. Voorbeeld: Over wat ik leer op school ben ik
heel tevreden
heel ontevreden
Als een vraag niet van toepassing is of je het antwoord niet weet, kun je bij sommige vragen n.v.t. aankruisen. N.v.t. betekent: niet van toepassing.
34 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Hoe tevreden ben je over de organisatie op school? 13. Hoeveel lessen vallen er uit? [grid 5: heel weinig – heel veel] 14. Over het op tijd doorgeven van roosterwijzigingen ben ik [grid5: heel tevreden – heel ontevreden] 15. Over mijn rooster ben ik [grid5: heel tevreden – heel ontevreden] 16. Het bijhouden van afwezigheid [i] gebeurt [grid5: nooit – altijd] [i] Of de leraar aan het begin van de les opschrijft wie er niet in de klas aanwezig is.
17. Over buitenschoolse activiteiten [i] ben ik [grid6: heel tevreden – heel ontevreden + nvt] [i] We bedoelen hiermee met school naar het museum, schoolreisje etc.
Hoe tevreden ben je over het lesmateriaal? 18. Over het lesmateriaal [i] ben ik [grid5: heel tevreden – heel ontevreden] [i] Met lesmateriaal bedoelen we bijvoorbeeld boeken.
19. Over hoe docenten lesmateriaal [i] gebruiken ben ik [grid5: heel tevreden – heel ontevreden] [i] Met lesmateriaal bedoelen we bijvoorbeeld boeken.
20. Over praktijkmateriaal [i] voor gym/techniek/kunst ben ik [grid5: heel tevreden – heel ontevreden] [i] Met praktijkmateriaal bedoelen we bijvoorbeeld gymtoestellen, labjassen, rekenmachines, kwasten, verf.
Hoe tevreden ben je over je docenten?
Dit is niet makkelijk in te vullen, want het verschilt natuurlijk per vak en docent, maar probeer toch een gemiddelde voor docenten op jouw school in te vullen! 21. Over hoe docenten met mij omgaan ben ik [grid5: heel tevreden – heel ontevreden] 22. Ik kan met mijn vragen terecht bij mijn docenten [grid5: zeer zeker – helemaal niet] 23. Over wat mijn docenten van hun vak weten ben ik [grid5: heel tevreden – heel ontevreden] 24. Over of docenten mij motiveren ben ik [grid5: heel tevreden – heel ontevreden] 25. Over hoe ik begeleid word bij zelfstandig werken ben ik [grid5: heel tevreden – heel ontevreden] Hoe tevreden ben je over de manier van lesgeven? 26. Over de hoeveelheid theorie [i] die ik krijg in de lessen ben ik [grid5: heel tevreden – heel ontevreden] [i] Het leren uit boeken of leren door te luisteren naar het verhaal van je docent.
27. Over de hoeveelheid praktijk [i] die ik krijg in de lessen ben ik [grid5: heel tevreden – heel ontevreden] [i] Het leren door te ‘doen’ in de les, zoals excursies of scheikunde-proefjes in plaats van luisteren of opgaven maken.
28. Over het gebruik van opdrachten en groepswerk ben ik [grid5: heel tevreden – heel ontevreden]
35 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
29. Over hoe vakken op elkaar aansluiten [i] ben ik [grid5: heel tevreden – heel ontevreden] [i] We bedoelen hiermee of je wat je bij het ene vak leert ook weer kunt gebruiken bij een ander vak.
30. Over of de lessen zin hebben [i] ben ik [grid5: heel tevreden – heel ontevreden] [i] Hiermee bedoelen we of je de lessen nuttig vindt.
31. Over de hoeveelheid huiswerk die ik krijg ben ik [grid5: heel tevreden – heel ontevreden] Hoe tevreden ben je over het ICT-gebruik op jouw school?
In dit onderdeel van de vragenlijst kijken we naar het ICT-gebruik op jouw school. Je moet hierbij denken aan bijvoorbeeld het werken met computers, elektronische leeromgevingen of smartboards. 32. Over hoe docenten met ICT [i] werken ben ik [grid5: heel tevreden – heel ontevreden] [i] Met ICT bedoelen we bijvoorbeeld computers, digitale leeromgevingen of smartboards.
33. Over hoe goed de ICT [i] werkt ben ik [grid5: heel tevreden – heel ontevreden] [i] Met ICT bedoelen we bijvoorbeeld computers, digitale leeromgevingen of smartboards.
34. Over hoe de lesstof digitaal wordt gepresenteerd ben ik [grid5: heel tevreden – heel ontevreden] 35. Over hoeveel ICT [i] er wordt gebruikt ben ik [grid5: heel tevreden – heel ontevreden] [i] Met ICT bedoelen we bijvoorbeeld computers, digitale leeromgevingen of smartboards.
Hoe tevreden ben je over de toetsen? 36. Over of ik op tijd weet dat ik een toets heb ben ik [grid5: heel tevreden – heel ontevreden] 37. Over dat ik weet wat ik moet leren ben ik [grid5: heel tevreden – heel ontevreden] 38. Over hoe snel ik de uitslag van een toets krijg ben ik [grid5: heel tevreden – heel ontevreden] 39. Over hoe de leerstof terugkomt in de toets ben ik [grid5: heel tevreden – heel ontevreden] 40. Over de beoordeling van de toetsen ben ik [grid5: heel tevreden – heel ontevreden] 41. Over de moeilijkheid van de toetsen ben ik [grid5: heel tevreden – heel ontevreden] Hoe tevreden ben je over de onderwijsvoorzieningen? 42. Over de klaslokalen ben ik [grid5: heel tevreden – heel ontevreden] 43. Over de studieplekken [i] op school ben ik [grid5: heel tevreden – heel ontevreden] [i] Hiermee bedoelen we bijvoorbeeld de studieplekken in het Open Leercentrum, in de bibliotheek/mediatheek en in studielokalen
44. Over het aantal zelfstudie-uren ben ik [grid5: heel tevreden – heel ontevreden] 45. Over het aantal computers op school ben ik [grid5: heel tevreden – heel ontevreden]
36 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Hoe tevreden ben je over de voorzieningen / faciliteiten? 46. Over de bibliotheek/mediatheek/Open Leercentrum ben ik [grid5: heel tevreden – heel ontevreden] 47. Over de conciërges ben ik [grid5: heel tevreden – heel ontevreden] 48. Over hoe schoon het is op school ben ik [grid5: heel tevreden – heel ontevreden] 49. Over de kantine ben ik [grid5: heel tevreden – heel ontevreden] 50. Over hoe schoon de toiletten zijn ben ik [grid5: heel tevreden – heel ontevreden] Hoe tevreden ben je over de leefbaarheid en sfeer op school? 51. Over de veiligheid [i] op school ben ik [grid5: heel tevreden – heel ontevreden] [i] Hiermee bedoelen we of je je prettig voelt op school, of er geen agressie is op school, of er geen geweld gebruikt wordt of er voldoende camerabewaking is, enzovoort.
52. Over de sfeer op school ben ik [grid5: heel tevreden – heel ontevreden] 53. Over mijn mentor/tutor/coach ben ik [grid5: heel tevreden – heel ontevreden] 54. Over hoe school iets tegen pesten doet [i] ben ik [grid5: heel tevreden – heel ontevreden] [i] Hiermee bedoelen we of de school regels heeft om het pesten te voorkomen, of er posters tegen het pesten op school hangen of dat er in de klas gesproken wordt over pesten enzovoorts
55. Over hulp krijgen bij persoonlijke problemen ben ik [grid6: heel tevreden – heel ontevreden + nvt]
37 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Op school met een beperking 56. Heb je een van de volgende lichamelijke handicaps, functiebeperkingen of (chronische) ziektes? We vragen dit om te meten of je school hier goed mee omgaat. Je kunt meerdere antwoorden aankruisen. [multi resp] a. b. c. d. e. f. g. h. i. j. k. l. m. n. o. p. q. r. s. t. u. v. w. x. y. z. aa. bb.
Nee [exclusief, naar vraag 63] Spraak- en/of taalproblemen (bijv. stotteren, afasie) Blind of zeer slechtziend (ook met bril nog slechtziend) Doof of zeer slechthorend Problemen met (trap)lopen, bewegen en/of gebruik van armen Ik zit in een rolstoel Dyslexie Dyscalculie Chronische pijnklachten RSI (pijn / tintelingen in armen, nek en rug door computergebruik) Migraine / ernstige hoofdpijn Eetstoornis (boulimie, anorexia, obesitas) Long- en ademhalingsprobleem (bijv. cara, astma, chronische bronchitis, CF) Huidaandoening (bijv. eczeem, psoriasis) Suikerziekte / diabetes ADHD of ADD Psychisch probleem / aandoening (bijv. psychose, depressie, angststoornis, dwangneurose) Verslaafd aan drugs, alcohol, gamen of gokken Een vorm van autisme (bijv. PDD-NOS, Asperger, klassiek autisme) Chronisch vermoeidheidssyndroom (ME, CVS) Artrose, reuma of andere gewrichtsklachten Spierdystrofie, spasme of andere spierziekte Een vorm van kanker Epilepsie Andere neurologische aandoening (bijv. MS, NAH) Hart- en vaatziekte (bijv. hartaandoening, hoge bloeddruk, vernauwde vaten) Ernstige darmstoornis (bijv. ziekte van Crohn, colitis) Anders
57. Is dit vastgesteld door een specialist? [alleen als vraag 56a ≠ 1; apart voor alle aangekruiste beperkingen] a. b.
Ja Nee
58. Heb je bij je school aangegeven dat je een beperking hebt? [alleen als vraag 56a ≠ 1] a. b.
Ja Nee
59. Heb je hier last van in je opleiding? [grid5: nooit – heel vaak; alleen als vraag 56a ≠ 1] 60. Ben je tevreden over de hoeveelheid aandacht die je van docenten krijgt voor jouw beperking? [grid6: heel ontevreden – heel tevreden + ik heb dat niet nodig; alleen als vraag 56a ≠ 1] 61. Ben je tevreden over de beschikbare hulpmiddelen en aanpassingen[i] die er op school zijn voor jouw beperking? [grid6: helemaal niet – ja zeker + ik heb dat niet nodig; alleen als vraag 56a ≠ 1] [i] We bedoelen hiermee rust- of werkruimtes, werkplekaanpassingen, extra verlichting, scanner, computeraanpassingen zoals spraak of braille, enzovoorts.
38 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
62. Ben je tevreden over de geschiktheid van het gebouw [i] voor mensen met jouw beperking? [grid6: nooit – heel vaak + ik heb dat niet nodig; vraag 56a ≠ 1] [i] We bedoelen hiermee of je makkelijk het gebouw in kan komen en je makkelijk kan bewegen in het gebouw, bijvoorbeeld door drempels, liften, breedte van de deuren, aangepaste toiletten enzovoorts.
Hoe tevreden ben je over de inspraak op school? 63. Heb je een leerlingenraad [i] op school? a. Ja b. Nee c. Weet ik niet [i] De leerlingenraad is een groep leerlingen die de school beter en leuker voor de leerlingen probeert te maken (door bijv. een schoolfeest te organiseren of met de directie te praten)
64. Heb je een medezeggenschapsraad[i]/ouderraad [i]op school? a. Ja b. Nee c. Weet ik niet [i] In de medezeggenschapsraad bespreken leerlingen, docenten en ouders allerlei belangrijke schooldocumenten met de schoolleiding. De leerlingen zijn voor deze taak gekozen. [i] In de ouderraad bespreken docenten en ouders allerlei belangrijke schooldocumenten
65. Zit je in een leerlingenraad of medezeggenschapsraad? [Alleen als vraag 63 = 1 en/of vraag 64 = 1] a. b.
Ja Nee
66. Over of leerlingen kunnen meepraten over besluiten van mijn school ben ik [grid5: heel tevreden – heel ontevreden] 67. Hoeveel behoefte heb je aan inspraak [i]op school? [grid5: heel veel – heel weinig] [i] Of je mee mag praten over wat er op school gebeurt.
68. Over de leerlingenraad ben ik [grid5: heel tevreden – heel ontevreden; alleen als vraag 63 = 1] 69. Over de mate waarin je gehoord wordt door de leerlingenraad of medezeggenschapsraad ben ik [grid5: heel tevreden – heel ontevreden; alleen als vraag 63 = 1 en/of vraag 64 = 1] 70. Over de mate waarin mijn school het mogelijk maakt deel te nemen aan de medezeggenschapsraad ben ik [grid5: heel tevreden – heel ontevreden; alleen als vraag 64 = 1] 71. Over de regels op school ben ik [grid5: heel tevreden – heel ontevreden] 72. Over wat ik weet over mijn rechten en plichten ben ik [grid5: heel tevreden – heel ontevreden] 73. Over de manier waarop klachten worden behandeld op school ben ik [grid5: heel tevreden – heel ontevreden] Hoe tevreden ben je over begeleiding bij en/of keuzes tijdens je schooltijd? 74. Over de begeleiding bij mijn profiel- of sectorkeuze ben ik [grid5: heel tevreden – heel ontevreden; alleen vmbo leerjaar 2-3-4 en vraag 9a ≠ 1, havo leerjaar 3-4-5, vwo leerjaar 3-4-5] 75. Over mijn profiel- of sectorkeuze ben ik [grid5: heel tevreden – heel ontevreden; alleen vmbo leerjaar 3-4 en vraag 9a ≠ 1, havo leerjaar 4-5 en vraag 8e ≠ 1, vwo leerjaar 4-5-6 vraag 8e ≠ 1]
39 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
76. Over de begeleiding bij de overgang van basisschool naar middelbare school ben ik [grid5: heel tevreden – heel ontevreden; alleen vraag 3 = 1] 77. Over begeleiding en voorbereiding op een vervolgstudie ben ik [grid5: heel tevreden – heel ontevreden; alleen vmbo leerjaar 3-4, havo leerjaar 4-5, vwo leerjaar 5-6] 78. Over informatie over eindexamens [i] ben ik [grid5: heel tevreden – heel ontevreden, alleen vmbo 4, havo 5, vwo 6] [i] We bedoelen hiermee de informatie over wanneer de eindexamens zijn, waar de eindexamens gehouden worden, hoe je voorbereid wordt in de klas enzovoort
Hoe tevreden ben je over je beroepsstage? Alleen vmbo 79. Heb je al beroepsstage [i] gelopen? a. Ja b. Nee [i] De beroepsstage is de stage die je loopt om te ontdekken welke baan je later leuk zou vinden.
80. Over de begeleiding van school tijdens mijn beroepsstage ben ik [grid5: heel tevreden – heel ontevreden] 81. Over wat ik geleerd heb tijdens mijn beroepsstage ben ik [grid5: heel tevreden – heel ontevreden] 82. Over de begeleiding op mijn beroepsstageplaats ben ik [grid5: heel tevreden – heel ontevreden] Het algemene oordeel over jouw school 83. Hoe goed vind je jouw school / welk rapportcijfer geef je jouw school? 84. Over mijn keuze voor deze school ben ik [grid5: heel tevreden – heel ontevreden] 85. Heb je nog opmerkingen over jouw school of onderwijs die je kwijt wilt? [max. 200 woorden]
40 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
Bijlage C
Netto-respons per instelling JOB-monitor
Netto-respons
Populatie
% netto-respons
Albeda College Alfa College AOC de Groene Welle AOC Oost AOC Terra Arcus College Berechja College CIBAP vakcollege CITAVERDE College Clusius College
9.273 6.413 907 875 951 3.666 38 930 827 1.011
20.466 10.882 1.285 1.625 2.171 7.732 144 1.570 1.530 1.721
45,3 58,9 70,6 53,8 43,8 47,4 26,4 59,2 54,1 58,7
Da Vinci College De Rooi Pannen Deltion College Drenthe College Edudelta Onderwijsgroep Friesland College Gilde Opleidingen Graafschap College Grafisch Lyceum Rotterdam Grafisch Lyceum Utrecht
4.232 4.422 8.118 4.399 563 4.937 6.487 5.206 2.166 1.358
8.245 6.574 13.917 8.141 847 9.880 11.014 9.189 4.015 1.990
51,3 67,3 58,3 54,0 66,5 50,0 58,9 56,7 53,9 68,2
Groenhorst College Helicon Opleidingen Hogeschool TIO Hoornbeeck College Hout- en Meubileringscollege ID College Koning Willem I College Landstede Leeuwenborgh Opleidingen Leidse Instrumentmakersschool
1.795 2.063 154 3.720 1.916 5.274 7.021 6.874 3.936 49
2.962 7.313 474 5.655 3.014 10.653 12.199 11.272 7.307 231
60,6 28,2 32,5 65,8 63,6 49,5 57,6 61,0 53,9 21,2
Lentiz onderwijsgroep MBO Amersfoort MBO Utrecht Mediacollege Amsterdam Nimeto Utrecht Noorderpoort Nordwin College Nova College Politieacademie Regio College
578 3.270 1.888 1.331 1.074 7.316 802 6.540 1.845 2.304
1.254 7.252 4.478 2.067 1.757 13.932 1.628 12.022 4.843 5.671
46,1 45,1 42,2 64,4 61,1 52,5 49,3 54,4 38,1 40,6
Rijn IJssel ROC A12 ROC Aventus ROC de Leijgraaf ROC Flevoland ROC Friese Poort ROC Horizon College ROC Kop van Noord-Holland ROC Leiden ROC Menso Alting
6.327 2.532 5.584 3.135 2.397 5.729 5.916 1.993 3.986 432
11.152 5.706 10.350 5.389 5.859 13.231 11.707 2.823 8.665 654
56,7 44,4 54,0 58,2 40,9 43,3 50,5 70,6 46,0 66,1
ROC ROC ROC ROC ROC ROC ROC
8.458 7.581 5.141 975 1.350 4.495 2.609
17.807 17.818 8.497 2.155 4.016 7.425 5.351
47,5 42,5 60,5 45,2 33,6 60,5 48,8
41 |
Midden Nederland Mondriaan Nijmegen RIVOR Ter AA Tilburg TOP
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
(vervolg) Netto-respons ROC van Amsterdam ROC van Twente ROC West-Brabant Scalda Scheepvaart en Transport College SintLucas SOMA College Summa College SVO vakopleiding food Wellantcollege Zadkine Totaal
42 |
Populatie
% netto-respons
12.023 11.175 8.821 5.155 2.783 2.141 569 7.577 811 2.271 7.364
28.589 19.108 16.743 9.133 4.884 2.877 1.010 16.696 1.784 4.120 18.485
42,1 58,5 52,7 56,4 57,0 74,4 56,3 45,4 45,5 55,1 39,8
255.859
500.956
51,1
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
% netto-respons (van populatie school)
Aangemelde leerlingen
Populatie school6
Netto-respons per instelling LAKS-monitor
Netto-respons
Bijlage D
00AH 00AQ 00HI 00NE 00PJ 00ZD 01EO 01FY 01GL 01IC
Het Stedelijk Lyceum Zwin College SG Dalton Voorburg Jan van Brabant College Erasmus College Bonhoeffercollege Purmerendse Scholengroep Sg Augustinianum Sophianum AOC OOST
175 130 889 108 972 1.054 811 267 1.122 2.250
239 1.060 1.188 120 1.796 1.509 924 376 1.622 2.968
3.319 1.065 1.607 564 1.803 1.528 4.423 1.021 1.626 3.035
5,3 12,2 55,3 19,1 53,9 69,0 18,3 26,2 69,0 74,1
01KL 01LZ 02CI 02DZ 02NZ 02QN 02TD 02TZ 02UC 02UT
Noordzee Onderwijs Groep Eerste Christelijk Lyceum Insula College Sint Stanislascollege Ludger College Marianum CSG Jan Arentsz Alkmaar en Langedijk St. Michaël College Atheneum College Hageveld Vrijzinnig-Christelijk Lyceum (VCL)
84 180 168 95 243 251 2.026 1.055 286 229
258 * 186 * 340 380 2.338 1.234 334 237
3.329 1.246 2.452 5.247 3.119 1.863 2.522 1.249 1.301 744
2,5 14,4 6,9 1,8 7,8 13,5 80,3 84,5 22,0 30,8
02VA 02VG 03AQ 03FO 04YX 05TA 06WY 08SG 09VG 11NY
Roelof van Echten College De Theaterhavo/vwo Open Schoolgemeenschap Bijlmer College de OpMaat Munnikenheide College CSG Willem de Zwijger Griendencollege Sprengeloo Reeshof College RSG Broklede
368 117 715 8 505 436 275 724 461 1.036
694 134 * 11 817 * 314 * 627 1.389
2.129 4.259 1.621 2.266 1.055 1.089 306 3.069 632 1.402
17,3 2,7 44,1 0,4 47,9 40,0 89,9 23,6 72,9 73,9
11UL 12IR 12VI 13US 14PS 14RC 14VY 15BH 15QW 15VQ
Edudelta Onderwijsgroep De Nieuwe Veste Nordwin College AOC de Groene Welle Bisschoppelijk College Broekhin Meerwegen College Christelijke Scholengemeenschap Buitenveldert CSG Groene Hart RGO Middelharnis Stellingwerf College
518 347 1.163 250 226 258 331 381 215 927
585 422 1.659 420 1.153 296 402 * * 1.485
843 2.047 1.686 423 2.110 4.011 797 2.881 1.012 1.493
61,4 17,0 69,0 59,1 10,7 6,4 41,5 13,2 21,2 62,1
Brin
Naam instelling
6
Gebaseerd op de voorlopige leerlingtellingen met peildatum 1 oktober 2013. * afname via kwaliteitscholen, aantal aangemelde leerlingen onbekend.
43 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
% netto-respons (van populatie school)
Aangemelde leerlingen
Populatie school7
Netto-respons 764 1.048 417 402 261 1.547 186 310 102 319
1.115 1.501 1.815 613 317 2.141 526 457 124 425
3.222 1.504 1.849 1.712 994 3.085 1.976 2.390 2.214 1.818
23,7 69,7 22,6 23,5 26,3 50,1 9,4 13,0 4,6 17,5
Lentiz Onderwijsgroep Anna van Rijn College Beatrix College Rembrandt College Koningin Wilhelmina College Onderwijsgroep Zuidwest-Drenthe Het Hooghuis Sintermeertencollege Graaf Engelbrecht Mariscollege
279 189 759 313 540 53 690 480 588 13
349 943 1.030 354 587 84 1.067 * 806 34
4.117 1.669 2.727 1.249 1.678 88 4.829 1.379 1.445 1.574
6,8 11,3 27,8 25,1 32,2 60,2 14,3 34,8 40,7 0,8
20BC 20BQ 20CF 20KA 20KZ 20LA 20LO 20MH 20SY 20ZK
Oranje Nassau College Mill-Hillcollege Gymnasium Celeanum Scholengemeenschap Groenewald Johan de Witt-gymnasium Esdal College Dr. Nassau College Jac. P. Thijsse College Jeroen Bosch College Scholengemeenschap Tongerlo
1.395 679 348 1.065 215 1.216 173 1.899 571 1.809
1.861 768 * 1.391 * 1.345 253 2.104 1.117 2.500
2.056 1.617 887 1.399 721 3.758 3.082 2.118 1.130 3.666
67,9 42,0 39,2 76,1 29,8 32,4 5,6 89,7 50,5 49,3
21AS 21CS 21ET 21EX 21GU 21GV 23JA 25CL 25CV 25EF
VOVA CITAVERDE College Gerrit van der Veen College Het Theresialyceum College Edith Stein SG Were Di Grafisch Lyceum Rotterdam Onderwijsgroep Zuidwest-Drenthe Bornego College Clusius College
165 1.460 31 308 694 217 426 1.083 1.540 2.277
630 1.778 272 1.379 1.292 * 517 1.896 * 2.733
1.445 1.777 2.603 1.443 2.701 2.373 514 1.926 1.983 3.860
11,4 82,2 1,2 21,3 25,7 9,1 82,9 56,2 77,7 59,0
25FX 25FY 25GV 25LV 25MB 26MP 27DG 27MD 27VD 27VG
Reynaert College Hulst Raayland College Groenhorst De Rooi Pannen Montessori College Eindhoven PrO De Noordhoek EBVO De Passie Utrecht Kennemer College Groenhorst Porta Mosana College
1.258 476 2.061 653 395 35 211 1.170 496 1.201
1.496 537 2.401 745 440 155 318 2.107 689 1.464
1.505 2.457 2.427 1.712 696 154 834 3.677 690 2.615
83,6 19,4 84,9 38,1 56,8 22,7 25,3 31,8 71,9 45,9
Brin
Naam instelling
16AW 16GZ 16MQ 16NK 16PA 16SK 16TV 17BZ 17GT 17HB
Helen Parkhurst scholengemeenschap RSG Tromp Meesters Koning Willem ll College Parcival College Christelijk Gymnasium Utrecht Liemers College Vrije Scholen ZWN Van der Capellen scholengemeenschap Sg St Ursula Heythuysen Stichting ZAAM
17WQ 18WS 18XU 19IP 19QA 19TQ 19XH 19XS 19XV 19ZP
7
Gebaseerd op de voorlopige leerlingtellingen met peildatum 1 oktober 2013. * afname via kwaliteitscholen, aantal aangemelde leerlingen onbekend.
44 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
27ZF 27ZH 28DH 30BC 30EU
Lyceum Bisschop Bekkers Sint-Maartenscollege IJburg College SintLucas Markland College Zevenbergen Totaal
700 593 838 337 164 59.075
8
Exclusief leerlingen aangemeld via kwaliteitscholen.
45 |
Onderzoeksverantwoording JOB-monitor en LAKS-monitor 2014
789 875 1.116 388 231 77.6128
% netto-respons (van populatie school)
Populatie school7
Aangemelde leerlingen
Naam instelling
Netto-respons
Brin
797 2.091 1.127 390 957
87,8 28,4 74,4 86,4 17,1
182.577
32,4