Verslag Gebruikersplatform JOB-monitor 2014 Datum:
14 januari 2014
Tijd:
11.00 uur tot 13.00 uur
Locatie:
Zaalverhuur7, Boothstraat 7, Utrecht
Aanwezig:
Marlies Kooijmans (Rijn Ijssel), Ronald Rondas (ROC Arcus), Kitty Mathijsen (ROC Koning Willem I College), Bob Leunk (ROC van Amsterdam en Flevoland), Marianne Maasland (Regio College), Hedy Beumkes (Albeda College), Gerda Broens (ROC Nijmegen), Henk ter Telgte (AOC de Groene Welle), Karin Dekkers (SintLucas), Froukje Wartenbergh (ResearchNed), Joyce Jacobs (ResearchNed), Kim Schut (OiG), Raoul Notté (OiG), Pieter Boon (Totta), Jettie Lensen (JOB) Tessy Duncker (ROC Tilburg), Lammert Folkerts (ROC van Twente), Pollyan van Swigchem (Graafschap College), Peter van der Blom (Media College), Anne-Marie Gootjes (Media College), Peter Thewissen (ROC Leeuwenborgh), Clara Verblauw (Horizon College), Linjo de Kruijf (Grafisch Lyceum Utrecht),
Afwezig:
Agenda: 1. Opening en welkom 2. Doorlopen actiepunten uit notulen 29-10-2013 3. Voortgang monitor: a. Begonnen met afname? b. Bereikbaarheid JOB c. Bereikbaarheid DUO d. Update respons e. Inloggen met BSN of onderwijsnummer f. De groene ‘verder’ knop op de inlogpagina 4. Uitbreiding online ontsluitingstool a. Update tool b. Mogelijkheden en wensen voor de uitbreiding van de online tool inventariseren. c. Inventarisatie bespreken van de SPSS cursus te volgen via ResearchNed en rapportwerk op maat: 7 geïnteresseerden in cursus, 2 geïnteresseerd in rapport op maat. 5. Rondvraag en afsluiting
Belangrijkste opmerkingen: Start JOB-monitor en voortgang: 1.
Jettie opent de bijeenkomst en er is een nieuwe voorstelronde. Henk ter Telgte van AOC De Groene Welle vervangt Hanny Dolfsma.
2.
Actiepunten en de vorige notulen worden kort besproken. a. Bob Leunk (ROC van Amsterdam en Flevoland) merkt op dat hij het actiepunt voor de laatste bijeenkomst, het evalueren van de vragenlijst, in de huidige actielijst mist. Dit punt wordt toegevoegd aan de evaluatie. Het gaat met name om het wel of niet mogen gebruiken van de term “competenties” Actiepunt 1 b. Gerda Broens (ROC Nijmegen) merkt op dat punt 23 uit de vorige notulen niet correct is weergegeven. Hier stond: “Jettie benadrukt dat alle data van alle instellingen wel beschikbaar blijft, evenals de instellingsrapportages. Het klopt inderdaad dat dit nu meer werk oplevert voor instellingen die voorheen gebruik maakten van KIWI. Daarom vraagt Jettie nogmaals of de leden van het gebruikersplatform eerder dan wel KIWI gebruikte, in tegenstelling tot eerdere berichten. Iedereen gaf aan dit niet te doen, alleen sporadisch.” Gerda stelt dat het niet zo is dat niemand KIWI gebruikte, maar dat het slecht was gesteld met de gebruiksvriendelijkheid (veel te traag) van KIWI dat het gebruik moeizaam ging.
3.
Jettie geeft een korte update van de voortgang vanuit JOB. JOB-monitor kick-off was geslaagd. Er waren veel studentenraden aanwezig uit heel het land en daar is JOB heel blij mee. Dat betekent dat de JOB-monitor leeft onder studentenraden. Ook op social media wordt er veel aandacht besteed aan de JOB-monitor en de likes van JOB gaan omhoog dankzij de JOB-monitor.
4.
Voortgang van de JOB-monitor wordt besproken. Iedereen vertelt over de voortgang op zijn of haar instelling. SintLucas: Afname begint te lopen, klassen staan ingepland. Het blijft lastig om de klassen die stage lopen te bereiken en de JOB-monitor af te laten nemen. AOC De Groene Welle: Afname loopt, weinig vragen. Regio College: Willen de JOB-monitor kort laten lopen. In maximaal 4 weken. JOBmonitor wordt klassikaal afgenomen. Informatie is inmiddels verspreid. Afname gaat nu beginnen. Rijn Ijssel: Zijn meteen op 2 december begonnen. Afname loopt goed. Wel opstart problemen gehad, dit lag vooral aan het feit dat studenten uit het inlogscherm werden gegooid als ze twee keer op de groen “verder” knop van de inlogfaciliteit van DUO hadden gedrukt. Jettie: op aanmeldscherm is een opmerking geplaatst dat studenten maar één keer op de groene knop hoeven te drukken. Verder geen klachten. Clusters gebruiken hun eigen contactpersoon. Albeda College: Start deze week. Instructiebrieven voor studenten zijn bewerkt en verspreid. Op het niveau van de hele instelling zijn ze bezig met de JOB-monitor. Directeur wil ook respons volgen. Afname is ingeroosterd. ROC van Amsterdam en ROC van Flevoland: Afname wordt in zes weken gedaan. Ze zijn twee weken geleden begonnen. Momenteel heeft 24 % de monitor ingevuld. Er wordt gecheckt of de afname ook echt staat ingepland.
ROC Nijmegen: Gebruiken de hele periode voor afname. Er zijn coördinatoren benoemd die hebben een eigen target opgegeven. Op deze manier worden zij zelf verantwoordelijk voor de behaalde respons. Eerste keer op deze wijze. ROC Koning Willem 1 College: Starten volgende week met afname en houden een beperkte afnameperiode aan. ROC Arcus: Afname verloopt via opleidingsmanagers. Inloggen: 5.
Zoals ook aangegeven door Marlies Kooijmans (Rijn Ijssel) is het problematisch dat als er tweemaal op de groene “verder” knop wordt gedrukt, de student tien minuten moet wachten om weer in te loggen. Dat motiveert niet om de JOB-monitor snel en serieus in te vullen. JOB heeft voor de aanvang van de lijst een melding gemaakt dat studenten maar één keer op de groene knop moeten drukken, en even geduld moeten hebben. Dit is ook opgenomen in de docenthandleiding die op de portal te vinden is. Voor instellingen die nog moeten starten met de afname is het raadzaam hier op te letten.
6.
Bob Leunk (ROC van Amsterdam en Flevoland) merkt op dat het inloggen met BSN voor onrust zorgt onder studenten. Dit was altijd al zo maar met de huidige nieuwsberichtgeving rondom anonimiteit is het er niet rustiger op geworden. Het is moeilijk te bewijzen dat de JOB-monitor écht anoniem is. Meer dan goede voorlichting geven kan er op dit moment niet gedaan worden. Bob stelt voor om de manier van inloggen te evalueren aan het einde van het project. Punt wordt meegenomen in de evaluatie. Actiepunt 2
7.
Bereikbaarheid JOB en DUO zijn goed. Niemand heeft hier een opmerking over. Respons:
8.
Op dit moment hebben 64.000 studenten de vragenlijst compleet ingevuld.
9.
Bob Leunk (ROC van Amsterdam en Flevoland) wil weten waar de groep anoniemen vandaan komt. Froukje (ResearchNed) geeft aan dat dit een groep is die niet is aangemeld bij het labelbestand, maar de JOB-monitor wel kan invullen omdat ze ingeschreven staan bij DUO. Het blijft vaak een raadsel wie er in die groep zitten. ResearchNed kan niet achterhalen welke studenten dit zijn, omdat zij geen bsn’s terug zien in de data.
10.
Gerda Broens (ROC Nijmegen) geeft aan de anonieme lijst buiten de analyse te laten. Bob Bob Leunk (ROC van Amsterdam en Flevoland) doet dat ook voor teams, maar geeft aan dat dit voor het landelijk responspercentage niet gebeurt. Gerda (ROC van Nijmegen) geeft aan dat je dit (verschillen in responspercentage) dan kan aangeven in je informatie naar het CvB .
11.
Froukje (ResearchNed) merkt op dat het landelijke percentage anonieme invullers erg klein is, maar dat het toch gek is dat er altijd een groep anoniemen tussen zit.
12.
Gerda Broens (ROC Nijmegen) geeft aan ook een groep op te hebben gegeven die niet meedoet aan de JOB-monitor omdat de monitor voor deze doelgroep niet is bedoeld (vergelijkbaar met de Bedrijfsgroepen). Froukje (ResearchNed) geeft aan dat deze groep dan weggehouden wordt uit de analyse als deze op basis van de aangeleverde labels te onderscheiden is. Uitbreiding online ontsluitingstool:
13.
Kim Schut (OiG) legt aan de hand van een powerpoint (toegevoegd op de portal bij achtergrond) uit wat de nieuwe uitbreiding van de online ontsluitingstool inhoudt. Naast instelling kan er nu vergeleken worden op drie niveaus: opleiding, domein en instelling.
14.
De vraag dient zich aan op welk niveau de opleidingen vergeleken kunnen worden. Crebo is een te laag niveau om te vergelijken. Bovendien zijn die crebo’s een wirwar en niet eenduidig. Voorstel is om de opleidingen te vergelijken op het niveau van de BC-codes. Dat zijn 240 opleidingsclusters. Deze opleidingsclusters worden getoond met naam en niet met code, zodat ze voor iedereen herkenbaar zijn.
15.
Je krijgt dan een uitklapsysteem waarin je achtereenvolgens eerst instelling, domein en BCcode kan uitklappen. Er zijn 16 domeinen (volgens site MBO-raad). Daaronder vallen dan weer de BC-codes.
16.
De vergelijkingen tussen de opleidingen op BC-codeniveau en instelling kunnen door iedereen gemaakt worden die de tool bezoekt. Hier zijn geen aparte inlogcodes voor nodig.
17.
In de tabel bij de optie “kijk en vergelijk” kunnen vier instellingen/opleidingen naast elkaar vergeleken worden. In de grafiek kunnen in theorie tot 50 instellingen/opleidingen naast elkaar gezet worden (in de praktijk is dit wellicht minder wenselijk).
18.
Bij de optie “kijk en vergelijk” kan er vergeleken worden op individuele indicatoren. Een startwaarde is er niet, omdat de tool openbaar is.
19.
Er wordt besproken of het voor instellingen mogelijk is om na een inlog nog te werken met de data per instelling, dus met de zelf aangeleverde labels. De conclusie is dat dit niet gaat lukken omdat niet elke instelling hetzelfde label aanlevert en de instellingen allemaal anders zijn opgebouwd.
20.
Er kan gefilterd worden op niveau, leerweg, type school (AOC, ROC, vakschool).
21.
Bob Leunk (ROC van Amsterdam en Flevoland) wil graag onderzocht hebben op welk niveau er openbaar vergeleken kan en mag worden. Met andere woorden. Waar hebben de voorzitters van het CvB voor getekend bij de deelnameovereenkomst. Actiepunt 3
22.
Voorstel is om, wanneer de data ontsluitingstool in gebruik wordt genomen, een instructiemiddag te organiseren voor alle geïnteresseerden die met de tool willen werken. Dit zou dan niet alleen voor kwaliteitszorgmedewerkers zijn, maar ook voor studentenraden. Hiervoor moet iedereen een uitnodiging krijgen. Actiepunt 4 Cursus SPSS door ResearchNed:
23.
In december 2013 is aan alle contactpersonen van de JOB-monitor van alle instellingen gevraagd of er behoefte is aan een cursus SPSS om de data van de JOB-monitor te kunnen analyseren. Een andere optie was het aanvragen van een rapport op maat door ResearchNed. Er is door ongeveer 15 instellingen gereageerd op deze vraag. Zeven instellingen zagen wat in een cursus SPSS door ResearchNed (tegen betaling). Twee instellingen zagen meer in een rapport op maat. De rest had aan geen van beide voorstellen behoefte. Froukje en Joyce (ResearchNed) gaan uitwerken wat deze SPSS-cursus precies inhoudt en waar en wanneer die gegeven wordt. Ook wordt er gekeken hoeveel een dergelijke cursus zou kosten. Een ruwe schatting van een driedaagse cursus, gegeven op het kantoor van ResearchNed in Nijmegen, voor zeven instellingen komt op een bedrag van €950 per deelnemer. Zodra de precieze inhoud bekend is krijgen alle instellingen opnieuw een uitnodiging om deel te nemen aan deze cursus. Actiepunt 5
Actiepunten: Actiepunt 1
Vragenlijst evalueren bij de laatste bijeenkomst van het gebruikersplatform (begin juli)
Actiepunt 2
Manier van inloggen evalueren bij de laatste bijeenkomst van het gebruikersplatform (begin juli)
Actiepunt 3
Uitzoeken wat er precies in de deelnameovereenkomst staat en of dit niet in conflict is met de manier waarop nu de data wordt ontsloten op instellings- en opleidingsniveau.
Actiepunt 4
Organiseren van een instructiemiddag om uitleg te geven over de werking van de nieuwe data ontsluitingstool.
Actiepunt 5
ResearchNed zal een precieze omschrijving maken van de SPSS cursus om de data van de JOB-monitor te kunnen analyseren. Alle instellingen ontvangen een uitnodiging om zich in te schrijven voor deze cursus. De cursus is tegen betaling.