ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP OPLEIDINGSNIVEAU Scholings Trainings en Opleidings Centrum STOC B.V. te ‘s-Gravenhage
Verzorgende-IG (Verzorgende-IG)
BRIN: Onderzoeksnummer: Onderzoek uitgevoerd: Conceptrapport verzonden op: Rapport vastgesteld te Utrecht op:
27RF 285524 17 november 2015 25 januari 2016 1 maart 2016
INHOUD 1 Inleiding .................................................................................................... 1 2 Conclusie en vervolg ................................................................................... 2 2.1 Conclusie ............................................................................................. 2 2.2 Vervolg ................................................................................................ 2 3 Resultaten opleiding .................................................................................... 3 3.1 Verzorgende-IG (Verzorgende-IG) ........................................................... 3 Bijlage.......................................................................................................... 5 Bijlage I Normering kwaliteitsgebieden .......................................................... 5
1 Inleiding In dit rapport staan de uitkomsten van het aangehouden onderzoek naar kwaliteitsverbetering, dat de Inspectie van het Onderwijs op 17 november 2015 heeft uitgevoerd bij Scholings Trainings en Opleidings Centrum STOC B.V. (STOC). De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie www.onderwijsinspectie.nl). Aanleiding onderzoeken naar kwaliteitsverbetering De aanleiding voor het onderzoek naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 19 november 2013). Tijdens het onderzoek naar kwaliteitsverbetering van 9 februari tot en met 5 maart 2015 (onderzoeksnummers 283329 en 283332, definitief rapport dd 2 juni 2015) is vastgesteld dat geen oordeel over het kwaliteitsgebied examinering en diplomering kon worden bepaald. Er was onvoldoende informatie beschikbaar om tot een valide oordeel over dit kwaliteitsgebied te komen. Binnen de gestelde verbetertermijn kon nog niet volgens de nieuwe werkwijze worden geëxamineerd. Daarom hebben wij ons oordeel over het kwaliteitsgebied examinering en diplomering opgeschort en het onderzoek aangehouden. Afgesproken is dat een half jaar na het rapport examinering en diplomering alsnog zou worden onderzocht. We hebben het aangehouden onderzoek naar kwaliteitsverbetering op het gebied van examinering en diplomering uitgevoerd bij de volgende opleiding. Gebied Examinering en diplomering 95530, Verzorgende-IG (Verzorgende-IG)
Leerweg, niveau, locatie leerweg bbl, niveau 3, locatie incompany
Verzorgende-IG (Verzorgende-IG), crebo 95530 We hebben de examinering en diplomering onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleiding geanalyseerd. Op locatie zijn documenten onderzocht en gesprekken gevoerd. Er is onder andere gesproken met verschillende examenfunctionarissen, de examencommissie en de directie. In dit rapport starten we met de conclusie van het aangehouden onderzoek naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Daarna volgt de toelichting op de beoordeling betreffende het gebied examinering en diplomering op opleidingsniveau (hoofdstuk 3).
Onderzoek naar kwaliteitsverbetering mbo
Pagina 1 van 5
2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van de onderzoeken naar kwaliteitsverbetering en beschrijven we het vervolg. 2.1 Conclusie Onderzoek naar kwaliteitsverbetering opleidingsniveau Verzorgende-IG (Verzorgende-IG), crebo 95530 We concluderen dat bij de opleiding Verzorgende-IG (Verzorgende-IG) het kwaliteitsgebied examinering en diplomering voldoende is. In onderstaande paragraaf is aangegeven wat het vervolgtoezicht inhoudt. 2.2 Vervolg Vervolg onderzoek naar aanleiding van de onderzochte opleiding We voeren bij deze opleiding geen vervolgtoezicht uit, omdat we het onderzochte kwaliteitsgebied als voldoende hebben beoordeeld.
Onderzoek naar kwaliteitsverbetering mbo
Pagina 2 van 5
3 Resultaten opleiding In dit hoofdstuk lichten wij het resultaat van het onderzoek bij de opleiding toe. We geven van het onderzochte kwaliteitsgebied aan wat het oordeel is (goed, voldoende, onvoldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. 3.1 Verzorgende-IG (Verzorgende-IG) Het onderzoek naar kwaliteitsverbetering bij Verzorgende-IG (Verzorgende-IG), crebo 95530, niveau 3, bbl, richtte zich op de examinering en diplomering. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling. We hebben ons binnen het gebied examinering en diplomering alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen hebben we overgenomen. Kwaliteitsgebied
Goed
Voldoende
2. Examinering en diplomering Kwaliteitsgebied Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering*
• Voldoende
Onvoldoende
Slecht
Onvoldoende
• • •
De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied.
Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat het kwaliteitsgebied examinering en diplomering niet voldoende was. De examinering en diplomering is eerder als slecht beoordeeld, omdat niet voldaan werd aan de aspecten exameninstrumentarium, afname en beoordeling en diplomering. Het exameninstrumentarium voldeed niet omdat het beoordelingsvoorschrift ontoereikend was. Bij de afname en beoordeling was de betrouwbaarheid tijdens de uitvoering van het examen onvoldoende geborgd. De diplomering voldeed niet omdat de examencommissie hier onvoldoende zicht op had en te weinig bijstuurde op de betrouwbaarheid van de examinering. Examinering en diplomering De examinering en diplomering is nu voldoende. Het exameninstrumentarium is nu voldoende. Het examen voor het beroepsgerichte deel dekt de eisen van het kwalificatiedossier en voldoet ook aan toetstechnische eisen. Daarbij wordt het beroepsgerichte materiaal gecontroleerd en vastgesteld door de examencommissie. Het exameninstrumentarium voor Nederlands is eerder door ons beoordeeld en voldoende bevonden. Het exameninstrumentarium voorziet in diverse opdrachten op verschillende momenten in een authentieke omgeving. Daarbij is een onafhankelijke beoordeling
Onderzoek naar kwaliteitsverbetering mbo
Pagina 3 van 5
van de uitvoering van de opdrachten ingericht. De beoordeling grijpt nu ook aan op de werkprocessen en leidt tot een oordeel op de betreffende kerntaken. We hebben gezien dat de cesuurbepaling voldoet, maar zien evenals de instelling, dat er ruimte is voor verdere ontwikkeling van de cesuurbepaling. Zo heeft een beoordeling 'goed' voor bepaalde prestatieindicatoren geen effect op het uiteindelijke oordeel voor het examenonderdeel. Dit heeft de instelling inmiddels als onderwerp van verbetering geagendeerd. De afname en boordeling beoordelen we nu ook als voldoende. Er is sprake van een authentieke realistische beroepssituatie en de beoordeling is deugdelijk. De beoordeling van het examen is gedegen en geborgd. De beoordelaars zijn of worden door STOC getraind in het beoordelen en het werken met het exameninstrumentarium. Indien de kwaliteit van de beoordeling aanleiding is voor bijsturing heeft de examencommissie dit vroegtijdig in de gaten en neemt zo nodig passende maatregelen. De diplomering beoordelen we als voldoende. De examencommissie heeft voldoende zicht op de kwaliteit van examinering en borgt een deugdelijke diplomering. Basis hiervoor is de hernieuwde samenstelling en duidelijke positionering van de examencommissie. Daarnaast is er nu een beschrijving van relevante taken, bevoegdheden en verantwoordelijkheden van examenfunctionarissen. De examencommissie heeft daarbij een onafhankelijke positie in de STOC organisatie. Bovendien heeft examinering nu een volwaardige status naast het onderwijsproces. Dit is duidelijk voor studenten en medewerkers. Er wordt door de examencommissie gecontroleerd en bijgestuurd en dat was in het verleden niet of minder gebruikelijk. We constateren dat de medewerkers nog moeten wennen aan deze nieuwe werkwijze. De 'controlemechanismen' van de examencommissie zijn opgenomen in het ontwikkelde 'plan van toezicht'. Hierin zijn activiteiten en monitoringsinstrumenten (voor alle fases van de examinering en diplomering) geformaliseerd. In dit plan zijn ook activiteiten opgenomen die bijdragen aan de ontwikkeling van de deskundigheid van de examencommissie. Daarbij gaat het zowel om de uitvoering van de taken als om het op de hoogte zijn van relevante ontwikkelingen op het terrein van examinering en diplomering. Er is ook periodiek afstemming tussen examinering en onderwijs om consequenties van examinering met onderwijsverantwoordelijken te kunnen bespreken. De diplomering is deugdelijk, er is sprake van een 100 procent controle van de examendossiers, zowel op juistheid als volledigheid, voorafgaand aan examinering en een steekproefsgewijze verificatie van de inhoudelijke beoordeling. De examencommissie heeft haar verantwoordelijkheid genomen door in voorkomende gevallen de diplomering aan te houden in verband met onvoldoende deugdelijke bewijsvoering in relatie tot de kwaliteit van de uitgevoerde examinering.
Onderzoek naar kwaliteitsverbetering mbo
Pagina 4 van 5
Bijlage Bijlage I Normering kwaliteitsgebieden De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode 2015-2016. De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. 2.
Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. Een normering per kwaliteitsgebied.
Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed
• Aan alle drie de aspecten is voldaan. • De elementen in het portret worden op een uitstekende wijze uitgevoerd.
Voldoende
• Aan alle drie de aspecten is voldaan. • Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen.
Onvoldoende
• Aan een of twee aspecten is niet voldaan.
Slecht
• Aan geen van de drie aspecten is voldaan.
Onderzoek naar kwaliteitsverbetering mbo
Pagina 5 van 5
