ONDERZOEK NAAR KWALITEITSVERBETERING MBO OPLEIDINGSNIVEAU ROC West-Brabant te Etten-Leur Medewerker schilderen (Gezel schilder totaalonderhoud)
Oktober 2014
3280511/7
BRIN: Onderzoeksnummer: Onderzoek uitgevoerd in: Conceptrapport verzonden op: Rapport vastgesteld te Utrecht op:
25LX 278030 April 2014 8 augustus 2014 3 oktober 2014
INHOUD
1 Inleiding .................................................................................................... 1 2 Conclusie en vervolg ................................................................................... 3 2.1 Conclusie ............................................................................................. 3 2.2 Vervolg ................................................................................................ 3 3 Resultaten ................................................................................................. 5 Bijlagen ........................................................................................................ 7 Bijlage I Normering kwaliteitsgebieden .......................................................... 7 Bijlage II Beoordeling indicatoren opleiding Medewerker schilderen ................... 8 (Gezel schilder totaalonderhoud) .................................................................. 8
3280511/7
1 Inleiding De Inspectie van het Onderwijs voerde in april 2014 een onderzoek naar kwaliteitsverbetering uit bij het Radius College van ROC West-Brabant. Dit onderzoek heeft betrekking op de kwaliteit van de kwaliteit van de examinering en de kwaliteitsborging. De volgende opleiding is onderzocht: Gebied Kwaliteitsborging 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
Gebied Examinering en diplomering 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
Leerweg, niveau, locatie leerweg bbl, niveau 3, locatie Kleine Krogt 36 te Breda
De aanleiding voor het onderzoek naar kwaliteitsverbetering is het vervolgtoezicht zoals is opgenomen in het rapport van de Staat van de instelling dat op 11 maart 2013 is vastgesteld. In het onderzoek zijn tekortkomingen in de kwaliteit van de examinering en diplomering en de kwaliteitsborging vastgesteld. Omdat de examencommissie op basis van eindtermgerichte examinering diploma’s versterkt heeft voor de beroepsgerichte opleiding 91463 Medewerker schilderen (Gezel schilder totaalonderhoud) was er sprake van ondeugdelijke besluitvorming. Het teamplan was onvoldoende smart geformuleerd en genereerde in onvoldoende mate sturingsinformatie. De verankering van de planning, monitoring, evaluatie en verbetering en monitoring was ten tijde van het onderzoek nog in opbouw. In dit onderzoek naar kwaliteitsverbetering hebben wij ons specifiek gericht op de indicatoren die eerder met een onvoldoende waren beoordeeld. Er zijn geen aanwijzingen het oordeel bij te stellen van de eerder als voldoende beoordeelde aspecten en indicatoren. Wij hebben gesprekken gevoerd met enkele docenten, de examencommissie en het management. Daarnaast hebben we documenten onderzocht. In hoofdstuk 2 leest u de conclusie waaronder ook het eventuele vervolg voor de instelling. De resultaten van het onderzoek naar kwaliteitsverbetering kunt u lezen in hoofdstuk 3. De inspectie heeft zich bij haar onderzoek gebaseerd op het Toezichtkader bve 2012. Dit is te vinden op www.onderwijsinspectie.nl. Hier is ook de werkwijze te vinden die de inspectie gebruikt bij onderzoeken naar kwaliteitsverbetering. De normering is als bijlage I toegevoegd aan dit rapport.
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 1 van 8
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 2 van 8
2 Conclusie en vervolg In dit hoofdstuk geven we aan welke conclusie we trekken uit het onderzoek naar kwaliteitsverbetering en, indien van toepassing, het vervolg. 2.1 Conclusie Het onderzoek naar kwaliteitsverbetering heeft geleid tot het oordeel voldoende voor de onderzochte kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met de raad van bestuur te maken voor deze opleiding. 2.2 Vervolg De beoordeling leidt niet tot vervolgtoezicht.
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 3 van 8
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 4 van 8
3 Resultaten In dit hoofdstuk geven we het oordeel over de onderzochte kwaliteitsgebieden. Daarna geven we hierop een toelichting. Het onderzoek naar kwaliteitsverbetering heeft geleid tot de volgende oordelen: Kwaliteitsgebied
Goed
2. Examinering en diplomering 4. Kwaliteitsborging
Voldoende
Onvoldoende
Slecht
Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de onderzochte kwaliteitsgebieden weer. De oordelen over de aspecten die tijdens vorig onderzoek als voldoende zijn beoordeeld, zijn overgenomen. Een detaillering van het oordeel vindt u in bijlage II. Daarin is de beoordeling van de onderzochte indicatoren weergegeven. Kwaliteitsgebied Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording
Voldoende
Onvoldoende
De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied.
Beschouwing Algemeen Het kleine en deskundige team van de opleiding en de directeur in de rol van voorzitter van de examencommissie hebben een grondige analyse opgesteld. In samenspraak met het bedrijfsleven adequate verbetermaatregelen doorgevoerd betreffende de kwalificerende examinering. Hierdoor besluit de examencommissie op basis van de examenresultaten die passend zijn bij de exameneisen uit het vigerende kwalificatiedossier tot het verstrekken van het diploma. Het teamplan Schilderen is voorzien van concrete doelen en te behalen resultaten. De informatievoorziening is zodanig verbeterd dat deze nu voldoende is en de kwaliteitsborging is in voldoende mate verankerd. Examinering en diplomering De diplomering is nu voldoende. Voor de korte termijn is het exameninstrumentarium voor kerntaak 1 ingekocht bij de examenleverancier Savantis. Mede gelet op ontwikkelingen binnen het bedrijfsleven is besloten om de werkprocessen behorende bij kerntaak 2 van het kwalificatiedossier in een gesimuleerde omgeving af te nemen. Hiertoe is het exameninstrumentarium voor kerntaak 2 zelf ontwikkeld. De toetsvorm is passend bij de werkprocessen. Het
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 5 van 8
exameninstrumentarium voldoet hierdoor aan de toetstechnische eisen en is door de inspectie als voldoende beoordeeld. Kwaliteitsborging De sturing en verbetering en verankering is nu voldoende. De geconstateerde tekortkomingen uit het kwaliteitsonderzoek van de Staat van de Instelling zijn onder centrale regie geanalyseerd. Op basis van deze analyse is een verbeterplan opgesteld. Het teamplan Schilderen voldoet aan het Radius College brede format. In het teamplan zijn organisatie brede en team specifieke doelstellingen opgenomen. Ook is het te behalen resultaat en het eigenaarschap per doelstelling vastgelegd. De voortgang wordt wekelijks door het team en teamvoorzitter in bijzijn van de afdelingsmanager besproken (Scrum board). De afdelingsmanager is de verbindende schakel tussen de teamdoelen en ROC brede beleidskader en verantwoordt zich aan de hand van tien kritieke prestatie indicatoren aan de collegedirecteur. Relevante sturingsinformatie is vanuit het managementinformatiesysteem Crebovolger beschikbaar. De planning, monitoring, evaluatie en verbetering en verantwoording vindt volgens een vastgelegde systematiek plaats. Daarbij wordt de collegedirecteur ondersteund door een kwaliteitsmedewerker.
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 6 van 8
Bijlagen Bijlage I Normering kwaliteitsgebieden De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarbij zij gebruikmaakt van een normering. Deze bestaat uit: 1.
2. 3.
Een normering per indicator: wanneer wordt voldaan aan de indicator? Hiervoor gebruikt de inspectie portretten: de aangetroffen situatie voldoet aan de indicator indien deze over het geheel genomen voldoet aan de beschrijving in het portret. Het gaat hier om een weging van het geheel met hantering van toleranties. Een normering per aspect. Een normering per kwaliteitsgebied. Deze normering wordt hieronder toegelicht.
Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect aangegeven. Normering Examinering en diplomering Goed Voldoende Onvoldoende Slecht
Aan alle standaarden is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Aan alle standaarden is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Aan één standaard is niet voldaan. Aan twee of drie standaarden is niet voldaan.
Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Deze kernaspecten moeten alle drie voldoende zijn om een voldoende beoordeling te krijgen. Bij één of meer onvoldoende kernaspecten is de kwaliteitsborging onvoldoende. Normering Kwaliteitsborging Goed
Voldoende
Onvoldoende Slecht
Aan alle aspecten is voldaan. Aan alle indicatoren is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Aan alle kernaspecten is voldaan. Aan alle indicatoren van deze aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Aan twee aspecten is niet voldaan. Aan één of twee kernaspecten is niet voldaan. Aan drie of vier aspecten is niet voldaan.
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
pagina 7 van 8
Bijlage II Beoordeling indicatoren opleiding Medewerker schilderen (Gezel schilder totaalonderhoud) Gebied 2: Examinering en diplomering Aspecten 2.1 Exameninstrumentarium*
2.2 2.3
Afname en beoordeling* Diplomering*
Indicatoren 2.1.1 Onderscheid tussen ontwikkelgerichte toetsen en examinering 2.1.2 Dekking van het kwalificatiedossier 2.1.3 Cesuur 2.1.4 Beoordelingswijze 2.1.5 Transparantie 2.2.1 Authentieke afname 2.2.2 Betrouwbaarheid 2.3.1 Besluitvorming diplomering 2.3.2 Verantwoordelijkheid examencommissie
Gebied 4: Kwaliteitsborging Aspecten 4.1 Sturing *
4.2
Beoordeling *
4.3
Verbetering en verankering *
4.4
Dialoog en verantwoording
Indicatoren 4.1.1 Plannen 4.1.2 Informatie 4.1.3 Continuïteit 4.2.1 Monitoring 4.2.2 Evaluatie 4.3.1 Verbeteraanpak 4.3.2 Deskundigheidsbevordering 4.3.3 Verankering 4.4.1 Intern 4.4.2 Extern
Onderzoek naar kwaliteitsverbetering mbo – ROC West-Brabant Crebo 91463 Medewerker schilderen (Gezel schilder totaalonderhoud)
Voldoende
Onvoldoende
•
Voldoende
Onvoldoende
• •
•
pagina 8 van 8