KWALITEITSONDERZOEK MBO Instituut Memo te Amersfoort Doktersassistent
juni 2013
H3257863/3
BRIN: Onderzoeksnummer: Onderzoek uitgevoerd in: Conceptrapport verzonden op: Rapport vastgesteld te Utrecht op:
30LG 4055487 6 en 15 april 2013 28 mei 2013 6 juni 2013
Inhoudsopgave
1 Inleiding .................................................................................................... 1 2 Conclusie en vervolgtoezicht ........................................................................ 2 2.1 Conclusie ............................................................................................. 2 2.2 Vervolgtoezicht ..................................................................................... 2 3 Resultaten van het onderzoek ...................................................................... 3 3.1 Oordeel Doktersassistent........................................................................ 3 Bijlagen ........................................................................................................ 5 Bijlage I Normeringen kwaliteitsgebieden ....................................................... 5 Bijlage II Beoordeling indicatoren opleiding Doktersassistent, 91310 ................. 6
H3257863/3
H3257863/3
1 Inleiding De Inspectie van het Onderwijs voerde in april 2013 een kwaliteitsonderzoek uit bij Instituut Memo. Dit onderzoek had betrekking op het middelbaar beroepsonderwijs. De aanleiding voor dit kwaliteitsonderzoek is het volgende. Tijdens het onderzoek in april 2012 bij uw instelling in het kader van de aanvraag diploma-erkenning, hebben wij risico's gezien voor de kwaliteit van het onderwijs. Op grond daarvan hebben wij besloten om een kwaliteitsonderzoek uit te voeren om vast te stellen of en in hoeverre er sprake is van tekortkomingen. Het onderzoek richtte zich op de examinering en diplomering. De volgende opleiding is onderzocht: Gebied Examinering en diplomering 91310, Doktersassistent
Leerweg, niveau, locatie bol, niveau 4, locatie Ringweg Randenbroek 110 te Amersfoort
Tijdens dit onderzoek zijn gesprekken gevoerd met studenten, docenten betrokken bij de examinering en de examencommissie. Daarnaast zijn documenten onderzocht en is de examenafname van de proeve van bekwaamheid geobserveerd. Ook maakte een gesprek met de directie deel uit van het onderzoek. De resultaten van het kwaliteitsonderzoek hebben geleid tot het bepalen van het vervolgtoezicht. De inspectie heeft zich bij het onderzoek gebaseerd op het Toezichtkader bve 2012. Dit is te vinden op www.onderwijsinspectie.nl. De normering is als bijlage I toegevoegd aan dit rapport. In hoofdstuk 2 leest u de conclusies waaronder ook het vervolgtoezicht voor de instelling. De resultaten van het kwaliteitsonderzoek vindt u in hoofdstuk 3.
Rapport kwaliteitsonderzoek mbo – Instituut Memo
pagina 1 van 6
2 Conclusie en vervolgtoezicht In dit hoofdstuk geven we aan welke conclusie we trekken uit het kwaliteitsonderzoek van de opleiding en wat het vervolgtoezicht inhoudt. 2.1 Conclusie Het kwaliteitsonderzoek bij Doktersassistent 91310 heeft geleid tot het volgende oordeel: Kwaliteitsgebied
Goed
Voldoende
2. Examinering en diplomering
Onvoldoende
Slecht
Het oordeel leidt ertoe dat we vervolgtoezicht uitvoeren. In paragraaf 2.2 wordt de aard van dit vervolgtoezicht nader uitgewerkt. 2.2 Vervolgtoezicht In onderstaand schema is het vervolgtoezicht te lezen. Doktersassistent, 91310 Beoordeling
Toezichtvorm
Vervolgtoezicht
Kwaliteit examinering is onvoldoende.
Aangepast toezicht vanwege onvoldoende examenkwaliteit.
De inspectie meldt het oordeel aan de minister. De instelling ontvangt een waarschuwing. Na de in de waarschuwingsbrief opgenomen termijn volgt een onderzoek naar kwaliteitsverbetering.
Rapport kwaliteitsonderzoek mbo – Instituut Memo
pagina 2 van 6
3 Resultaten van het onderzoek In dit hoofdstuk vermelden we het oordeel over het kwaliteitsgebied en geven we tevens een toelichting op dit oordeel. 3.1 Oordeel Doktersassistent Het kwaliteitsonderzoek bij Doktersassistent, 91310, niveau 4, locatie Ringweg Randenbroek 110 te Amersfoort heeft geleid tot het volgende oordeel: Kwaliteitsgebied
Goed
Voldoende
2. Examinering en diplomering
Onvoldoende
Slecht
Het kwaliteitsgebied examinering en diplomering is niet voldoende. Hierdoor vindt vervolgtoezicht plaats vanwege onvoldoende examenkwaliteit. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van het kwaliteitsgebied weer. In bijlage II is de beoordeling van de onderliggende indicatoren van de betreffende aspecten van het kwaliteitsgebied opgenomen. Kwaliteitsgebied Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering*
Voldoende
Onvoldoende
ntb
De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied.
Beschouwing Algemeen Naar aanleiding van het onderzoek in het kader van de aanvraag diplomaerkenning heeft de instelling gewerkt aan het aanpassen en verbeteren van de examinering. Hoewel wij een verbetering zien ten opzichte van het oorspronkelijke examenplan, is de examenkwaliteit van de opleiding doktersassistent onvoldoende doordat het exameninstrumentarium niet voldoet aan de toetstechnische eisen. Op het moment van onderzoek heeft nog niet de volledige examinering plaatsgevonden en heeft de opleiding nog geen diploma's uitgegeven. Het is hierdoor niet mogelijk een oordeel te geven over de deugdelijkheid en borging van de diplomering. De examencommissie werkt nog aan de verdere uitwerking van de invulling van haar rol. Examinering en diplomering De opleiding voert de beroepsgerichte examinering uit in zowel de instelling als in de beroepspraktijkvorming (bpv), waarbij de gebruikte exameninstrumenten qua inhoud en toetsvorm passend zijn en daarmee aansluiten bij de uitstroomeisen. Het exameninstrumentarium voldoet echter niet aan de toetstechnische eisen omdat het beoordelingsvoorschrift niet leidt tot een zo objectief mogelijke beoordeling. De beoordelingscriteria geven te veel ruimte voor een subjectieve beoordeling, deze zijn namelijk onvoldoende specifiek en meetbaar weergegeven.
Rapport kwaliteitsonderzoek mbo – Instituut Memo
pagina 3 van 6
De opleiding hanteert bovendien een score op een zevenpunt schaal waarbij niet helder is welke waardering aan een prestatie van een student toegekend moet worden. Ten aanzien van Nederlands en de moderne vreemde taal leidt de beoordeling van de vaardigheden luisteren, spreken en gesprekken voeren niet tot een niveauaanduiding die aansluit bij het kwalificatiedossier. Er zijn per vaardigheid weliswaar criteria, maar deze zijn niet duidelijk meetbaar, waardoor deze criteria niet leiden tot een onafhankelijke beoordeling. Doordat Nederlands beoordeeld wordt in combinatie met de criteria van het beroepsgerichte deel, kan de beoordeling voor Nederlands te laag uitpakken. Daarnaast hanteert de opleiding voor de talen en voor rekenen op dit moment niet de juiste zak-/slaagbeslissing. Nederlands en rekenen tellen ten onrechte mee in de zak-/slaagbeslissing en voor Engels geeft de instelling aan dat alle vaardigheden voldoende moeten zijn, terwijl hiervoor geldt dat minimaal 3 van de 5 vaardigheden met een voldoende moeten zijn beoordeeld. Omdat er nog geen diploma’s uitgegeven zijn, heeft dit geen invloed op het oordeel over het diplomabesluit. De instelling gaat dit herstellen. Het oordeel van Nederlands, moderne vreemde taal en rekenen telt overigens nog niet mee in het eindoordeel over de examenkwaliteit van de opleiding. We zien dat de examencommissie zicht houdt op de afname en beoordeling van de reeds uitgevoerde examens die binnen de instelling plaatsvinden. Dit blijkt uit aanwezigheid bij de examens in de rol van surveillant en uit evaluaties van de examens met de betrokkenen op basis waarvan verbeteracties plaatsvinden. Voor het deel dat uitgevoerd wordt in de bpv is nog niet uitgewerkt hoe de examencommissie hier zicht op houdt.
Rapport kwaliteitsonderzoek mbo – Instituut Memo
pagina 4 van 6
Bijlagen Bijlage I Normeringen kwaliteitsgebieden De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruik maakt van een normering. Deze bestaat uit: 1.
2. 3.
Een normering per indicator: wanneer wordt voldaan aan de indicator? Hiervoor gebruikt de inspectie portretten: de aangetroffen situatie voldoet aan de indicator indien deze over het geheel genomen voldoet aan de beschrijving in het portret. Het gaat hier om een weging van het geheel met hantering van toleranties. Een normering per aspect. Een normering per kwaliteitsgebied.
Normering Examinering en diplomering Goed
Voldoende
Onvoldoende Slecht
Aan alle standaarden is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Aan alle standaarden is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Aan één standaard is niet voldaan. Aan twee of drie standaarden is niet voldaan.
Rapport kwaliteitsonderzoek mbo – Instituut Memo
pagina 5 van 6
Bijlage II Beoordeling indicatoren opleiding Doktersassistent, 91310 Gebied 2: Examinering en diplomering Aspecten 2.1 Exameninstrumentarium*
2.2 2.3
Afname en beoordeling* Diplomering*
Indicatoren 2.1.1 Onderscheid tussen ontwikkelgerichte toetsen en examinering 2.1.2 Dekking van het kwalificatiedossier 2.1.3 Cesuur 2.1.4 Beoordelingswijze 2.1.5 Transparantie 2.2.1 Authentieke afname 2.2.2 Betrouwbaarheid 2.3.1 Besluitvorming diplomering 2.3.2 Verantwoordelijkheid examencommissie
Rapport kwaliteitsonderzoek mbo – Instituut Memo
Voldoende
Onvoldoende
ntb ntb
pagina 6 van 6