STICHTING STC-GROUP BEOORDELING KWALITEIT EXAMINERING 2007-2008
Amersfoort, juli 2008
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 2 van 23
VASTSTELLING RAPPORT Dit rapport bevat de resultaten van het onderzoek naar de kwaliteit van de examinering dat op 26 maart 2008 plaatsvond bij Stichting STC-Group. Het rapport is vastgesteld op 18 juli 2008. Reproductie van het rapport zonder toestemming van de inspectie of de school vindt niet plaats anders dan in zijn volledige vorm.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 3 van 23
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 4 van 23
INHOUDSOPGAVE SAMENVATTING 7 1
INLEIDING 9
2
KWALITEIT EXAMINERING BIJ STICHTING STC- GROUP 11
3
CONCLUSIES EN VERVOLGTOEZICHT 21 BIJLAGE 1: STANDAARDEN EN NORMERING 23
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 5 van 23
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 6 van 23
SAMENVATTING Het onderzoek naar de kwaliteit van de examens bij Stichting STC-Group vond plaats op 26 maart 2008. De examinering van de volgende opleidingen is van onvoldoende kwaliteit: • Warehouse voorman (10666) BOL, omdat het exameninstrumentarium inhoudelijk niet voldoet aan de uitstroomeisen van het eindtermendocument. Daarnaast zijn tekortkomingen geconstateerd in de toetstechnische eisen. • Manager haven, vervoer en logistiek (10682) BBL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het eindtermendocument en voldoet eveneens niet in voldoende mate aan de toetstechnische kwaliteitseisen. • Assistent-expediteur (10686) BOL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het eindtermendocument. • Medewerker havenoperaties (93070) BBL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het kwalificatiedossier en voldoet eveneens niet aan de toetstechnische kwaliteitseisen. Van deze constateringen van onvoldoende examenkwaliteit 2007-2008 wordt melding gemaakt aan de minister van OCW. Volgend jaar zal een onderzoek plaatsvinden naar de kwaliteitsverbetering van de examinering bij deze opleidingen. Over de uitvoering zullen te zijner tijd nadere afspraken gemaakt worden. De examinering van de volgende onderzochte opleidingen is van voldoende kwaliteit: • Stuurman/werktuigkundige zeevisvaart SW5 (10645) BOL • Matroos (10652) BBL • Chauffeur goederenvervoer (10678) BBL • Assistent operationeel medewerker transport en logistiek (10681) BOL • Matroos binnenvaart (91881) BOL • Bootman (93030) BBL Bij deze opleidingen vindt geen vervolgonderzoek plaats. De opleidingen kunnen overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 7 van 23
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 8 van 23
1
INLEIDING
Opzet onderzoek Het onderzoek is gebaseerd op het Toezichtkader examinering BVE 2007-2008 en de hierin opgenomen standaarden en normering. Deze zijn opgenomen in de bijlage. Uitgangspunt voor het onderzoek bij Stichting STC-Group was het jaarverslag 2007 dat de instelling had opgesteld. Op locatie vonden gesprekken plaats met constructeurs, vaststellers, beoordelaars, voorzitter en leden van de examencommissie en het management. Tevens werd relevante documentatie onderzocht. Het exameninstrumentarium van de tien opleidingen is onderzocht. De voorlopige uitkomsten van de productbeoordeling van bijna alle opleidingen zijn tijdens het bezoek besproken. Ter afsluiting vond een gesprek plaats met het college van bestuur. Tijdens het onderzoek bleek dat de geselecteerde deelkwalificatie Ladingbehandeling en fysieke distributie IV vervoer en distributie (52401) van de opleiding Manager haven, vervoer en logistiek (10682) BOL niet meer werd geëxamineerd en daarom is deze vervallen in dit onderzoek. De inspectie heeft vervolgens de eerstvolgende actieve deelkwalificatie uit de steekproef toegevoegd aan het onderzoek en het exameninstrumentarium van deze deelkwalificatie is na het bezoek aan de instelling onderzocht. Dit is de deelkwalificatie Ladingbehandeling en Fysieke distributie IV (52404). Onderzochte eindtermgerichte opleidingen Crebo Naam opleiding Leerweg Deelkwalificaties 10645 Stuurman/ BOL 52232 werktuigkundige zeevisvaart SW5 52249 52250 52260 10652 Matroos BBL 52284
10666
10678
Warehouse voorman
Chauffeur goederenvervoer
BBL
52285 52289 52290 52336
BBL
52338 52343 52375
Exameneenheid en locatie Stichting STCGroup
Stichting STCGroup
Stichting STCGroup
Stichting STCGroup
52383 56110 56111 Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 9 van 23
10681
10682
10686
Assistent operationeel medewerker transport en logistiek
Manager haven, vervoer en logistiek
Assistentexpediteur
BOL
52391
BOL
52394 52395 52396 52404
BBL
52410 52411 52412 52413
Stichting STCGroup
Stichting STCGroup
Stichting STCGroup
52418 52419 52421 Onderzochte competentiegerichte opleidingen Crebo Leerweg 91881 93030 93070
Matroos (Matroos binnenvaart) Bootman Medewerker havenoperaties
BOL
Exameneenheid en locatie Stichting STC-Group
BBL BBL
Stichting STC-Group Stichting STC-Group
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 10 van 23
2
KWALITEIT EXAMINERING BIJ STICHTING STC- GROUP
Vertrouwen beroepenveld
Tevredenheid deelnemer
Deskundigheid betrokkenen
Instrumentarium: uitstroomeisen Instrumentarium:
Transparantie processen
Borging processen
Wettelijke vereisten
2
3
4
5
6
7
8
BOL
G
V
V
V
V
V
V
V
BBL BBL BBL
G G G
V V V
V V V
V O G
V O V
V V V
V V V
V V V
BOL
G
V
V
V
V
V
V
V
BOL
G
V
V
O
O
V
V
V
BBL BOL
G G
V V
V V
O G
V V
V V
V V
V V
BBL BBL
G G
V V
V V
G O
V O
V V
V V
V V
Standaard
1
2.1. Beoordeling opleidingen bij Stichting STC-Group
10645 10652 10666 10678 10681 10682 10686 91881 93030 93070
Stuurman/ Werktuigkundige zeevisvaart SW5 Matroos Warehouse voorman Chauffeur goederenvervoer Assistent operationeel medewerker transport en logistiek Manager haven, vervoer en logistiek Assistent-Expediteur Matroos (Matroos binnenvaart) Bootman Medewerker havenoperaties
2.2 Beschouwing Algemeen beeld Het exameninstrumentarium van de opleidingen Warehouse voorman, Manager haven, vervoer en logistiek, Assistent-Expediteur en Medewerker havenoperaties voldoet inhoudelijk niet aan de uitstroomeisen. Het exameninstrumentarium van de opleidingen Warehouse voorman, Manager haven, vervoer en logistiek en Medewerker havenoperaties voldoet eveneens niet aan de toetstechnische kwaliteitseisen. Het exameninstrumentarium van de overige opleidingen voldoet inhoudelijk aan de uitstroomeisen en aan de toetstechnische kwaliteitseisen. Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 11 van 23
Voor alle onderzochte opleidingen geldt dat het bedrijfsleven een groot vertrouwen heeft in de examens en de deelnemers tevreden zijn. De betrokkenen bij de examinering op de onderwijsinstelling en de externe beoordelaars zijn voldoende deskundig. De examenprocessen zijn voldoende transparant en geborgd en er is voldaan aan de wettelijke vereisten. Toelichting beoordeling exameninstrumentarium
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
Zeemanschap-I/navigatie-I Visserijkunde I/II Zeemanschap-IIV Scheepswerktuigkunde-IIIP
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
52232 52249 52250 52260
4.
Standaard
Beoordeling exameninstrumentarium Stuurman/Werktuigkundige zeevisvaart SW5 10645 BOL
G G V G
G G V G
Toelichting beoordeling kwaliteit instrumentarium Stuurman/Werktuigkundige zeevisvaart SW5 De examenonderzoeken passen inhoudelijk en qua niveau voldoende op de uitstroomeisen, zoals opgenomen in het eindtermendocument. Bijna alle eindtermen worden gedekt en de gekozen onderzoeksvormen passen in voldoende mate bij de aard en het niveau van de eindtermen. Er wordt volledig tegemoet gekomen aan wettelijke beroepsvereisten die in het eindtermendocument zijn opgenomen. De opdrachten en beoordelingsmodellen die de opleiding gebruikt om het eindniveau te bepalen zijn betrouwbaar. De afname vindt plaats onder gestandaardiseerde condities.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 12 van 23
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
Reparatie en Onderhoud Laden en lossen 2 Laden en lossen 1 Basisvaardigheden Binnenvaart
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
52284 52285 52289 52290
4.
Standaard
Beoordeling exameninstrumentarium Matroos 10652 BBL
V G V V
V V V V
Toelichting beoordeling kwaliteit instrumentarium Matroos De examenonderzoeken passen inhoudelijk en qua niveau toereikend op de uitstroomeisen, zoals opgenomen in het eindtermendocument. Bijna alle eindtermen worden gedekt en de gekozen onderzoeksvormen passen in voldoende mate bij de aard en het niveau van de eindtermen. De opdrachten en beoordelingsmodellen die de opleiding gebruikt om het eindniveau te bepalen zijn betrouwbaar waarbij er een aandachtspunt is ten aanzien van het schriftelijk vastleggen van de beoordelingscriteria en cesuur in de bpv. De afname vindt plaats onder gestandaardiseerde condities.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
52336 Communicatie en leidinggeven 52338 Bedrijfseconomie, planning en organisatie 52343 Beroepsspecifiek warehouse voorman
4.
Standaard
Beoordeling exameninstrumentarium Warehouse voorman 10666 BBL
V V O
O V O
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 13 van 23
Toelichting beoordeling kwaliteit instrumentarium Warehouse voorman De examenonderzoeken passen inhoudelijk en qua niveau onvoldoende bij de uitstroomeisen, zoals opgenomen in het eindtermendocument. Deze constatering geldt voor de deelkwalificatie Beroepsspecifiek warehouse voorman waarbij praktische eindtermen zoals het uitvoeren van werkzaamheden en het verhelpen van storingen, worden afgetoetst door middel van schriftelijke opdrachten. Door te kiezen voor schriftelijke opdrachten bij deze praktische eindtermen wordt niet op het juiste beheersingsniveau getoetst. Het exameninstrumentarium voldoet onvoldoende aan de toetstechnische eisen; met name de beoordelingscriteria zijn onvoldoende uitgewerkt. Dit geldt voor de deelkwalificatie Communicatie en leidinggeven en Beroepsspecifiek warehouse voorman. De beroepsspecifieke praktijktoetsen bevatten wel criteria die opgenomen moeten worden in de verslagen maar niet aan welke voorwaarden deze moeten voldoen. Het is daardoor niet duidelijk op welke wijze de criteria moeten terugkomen in de verslagen. Daarnaast bevatten de beroepsspecifieke theorie toetsen een zeer summier antwoordmodel. Bijvoorbeeld: vraag 10 van de toets "01 beroepsspecifieke theorie 1" vraagt om een omschrijving van taken, doch deze worden niet uitgewerkt in het antwoordmodel. Een ander voorbeeld: in toets "02 beroepsspecifieke theorie 2" wordt bij vraag 1 gevraagd naar voorbereidingen, in het antwoordmodel staat dat er 7x2 punten te verdienen zijn dus moeten er 7 antwoorden gegeven worden (en dat moet dus ook aangegeven worden in de vraag), er zijn er zes genoemd.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
52375 Rituitvoering grensoverschrijdend 52383 Beroepshouding en communicatie v/d chauffeur goederenvervoer 56110 Voertuigtechniek en –onderhoud 56111 Vervoerskennis
4.
Standaard
Beoordeling exameninstrumentarium Chauffeur goederenvervoer 10678 BBL
G G
G G
G G
V V
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 14 van 23
Toelichting beoordeling kwaliteit instrumentarium Chauffeur goederenvervoer De examenonderzoeken passen inhoudelijk en qua niveau goed op de uitstroomeisen, zoals opgenomen in het eindtermendocument. Alle eindtermen worden geëxamineerd en de gekozen onderzoeksvormen passen bij het beheersingsniveau van de eindtermen. Er wordt volledig tegemoet gekomen aan wettelijke beroepsvereisten die in het eindtermendocument zijn opgenomen. De dekking en het niveau van de examenonderzoeken wordt zorgvuldig geborgd in procedures tijdens de constructie en vaststellingsfasen. De opdrachten en beoordelingsmodellen die de opleiding gebruikt om het eindniveau te bepalen zijn betrouwbaar. Daarbij is een aandachtspunt dat de beoordelingscriteria en cesuur in de BPV van de deelkwalificaties Voertuigtechniek en –onderhoud en Vervoerskennis nog beter schriftelijk kunnen worden vastgelegd. De afname vindt plaats onder gestandaardiseerde condities.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
52391Topografie van Nederland 52394 Werken in het vervoer 52395 Werken in een warehouse 52396 Verkenning vervoer en logistiek Basis
4.
Standaard
Beoordeling exameninstrumentarium Assistent operationeel medewerker transport en logistiek 10681 BBL
G V G V
G V V V
Toelichting beoordeling kwaliteit instrumentarium Assistent operationeel medewerker Transport en Logistiek De examenonderzoeken passen inhoudelijk en qua niveau toereikend op de uitstroomeisen, zoals opgenomen in het eindtermendocument. Bijna alle eindtermen worden gedekt en de gekozen onderzoeksvormen passen in voldoende mate bij de aard en het niveau van de eindtermen. De opdrachten en beoordelingsmodellen die de opleiding gebruikt om het eindniveau te bepalen zijn betrouwbaar waarbij er een aandachtspunt is ten Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 15 van 23
aanzien van het schriftelijk vastleggen van de beoordelingscriteria en cesuur in de bpv van drie deelkwalificaties. Deze kunnen nog beter schriftelijk worden vastgelegd. De afname vindt plaats onder gestandaardiseerde condities.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
52404 Ladingbeh. en fysieke distributie IV vervoer en distributie exp. 52410 (Bedrijfs)economie IV H,V&L 52411 Personeel en organisatie IV H,V&L 52412 Communicatie IV manager H,V&L
4.
Standaard
Beoordeling exameninstrumentarium Manager haven, vervoer en logistiek 10682 BOL
O
V
O G O
O V O
Toelichting beoordeling kwaliteit instrumentarium Manager haven, vervoer en logistiek De examenonderzoeken passen inhoudelijk en qua niveau niet voldoende op de uitstroomeisen. In de toetsen van Ladingbehandeling en fysieke distributie IV exp. worden de eindtermen 3, 4 en 5 niet volledig getoetst. Hierdoor wordt slechts 40% van de eindtermen volledig getoetst. De toetsvorm en de inhoud van de toetsen 52410.01 tot en met 52410.06 van de deelkwalificatie (Bedrijfs)economie IV H,V&L is voor een groot deel niet in overeenstemming met de eindtermen waardoor er een dekkingsgraad is van slechts 42%. Voor de deelkwalificatie Communicatie IV geldt dat het beheersingsniveau dat getoetst wordt niet overeenkomt met de aard van de eindtermen. De bijgevoegde toetsen zijn sterk gericht op theoretische aspecten en toetsen niet of de deelnemer in staat is op beleidsniveau te communiceren en terug te koppelen. De inhoud van de eindterm wordt te algemeen getoetst. Een deel van de toetsen heeft geen relatie met de eindtermen hoewel dat dit volgens de toetsmatrijs wel het geval zou moeten zijn. Hierdoor wordt slechts 63% van de eindtermen getoetst.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 16 van 23
De examenonderzoeken, zoals toetsen en bpv-opdrachten, die de opleiding gebruikt om het eindniveau te bepalen zijn gedeeltelijk niet betrouwbaar. De informatie voor deelnemer en beoordelaar is niet volledig bij de deelkwalificaties Bedrijfseconomie IV en Communicatie IV. Er wordt niet vermeld wat elke prestatie/antwoord voor deelscore oplevert. Hierdoor is een objectieve beoordeling niet geborgd. De deelkwalificaties Ladingbeh. en fysieke distributie IV vervoer en distributie exp. en Personeel en organisatie IV zijn met een voldoende beoordeeld omdat bij de meeste toetsen de deelscores wel duidelijk zijn.
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
Maatschappelijk culturele Vorming III Ladingadministratie en logistiek III AEXP (Bedrijfs)economie III AEXP/ACARG Communicatie III AEXP/ACARG
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
52413 52418 52419 52421
4.
Standaard
Beoordeling exameninstrumentarium Assistent- expediteur 10686 BOL
O G G V
V V V V
Toelichting beoordeling kwaliteit instrumentarium Assistent-expediteur De examenonderzoeken passen inhoudelijk en qua niveau onvoldoende bij de uitstroomeisen, zoals opgenomen in het eindtermendocument. Deze constatering is er voor deelkwalificatie Maatschappelijk Culturele Vorming III omdat de eindtermen 1, 2, 5, 10, 11 en 12 in onvoldoende mate zijn opgenomen in het exameninstrumentarium waardoor er een dekkingsgraad is behaald van slechts 53%. De examenonderzoeken, zoals toetsen en bpv-opdrachten, die de opleiding gebruikt om het eindniveau te bepalen voldoen aan de toetstechnische kwaliteitseisen.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 17 van 23
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
91881 Matroos (Matroos binnenvaart)
4.
Standaard
Beoordeling exameninstrumentarium Matroos binnenvaart 91881 BOL
G
V
Toelichting beoordeling kwaliteit instrumentarium Matroos De examenonderzoeken passen inhoudelijk en qua niveau goed op de uitstroomeisen, zoals opgenomen in het kwalificatiedossier. De dekking en het niveau van de examenonderzoeken wordt zorgvuldig geborgd in procedures tijdens de constructie en vaststellingsfasen en er wordt regelmatig geëvalueerd. De toetsen die worden gebruikt om het eindniveau te bepalen zijn voldoende. Er is een aandachtspunt ten aanzien van het nader specificeren van de beoordelingscriteria in de bpv. De afname vindt plaats onder gestandaardiseerde condities.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
93030 Bootman
4.
Standaard
Beoordeling exameninstrumentarium Bootman 93030 BBL
G
V
Toelichting beoordeling kwaliteit instrumentarium Bootman
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 18 van 23
De examenonderzoeken passen inhoudelijk en qua niveau goed op de uitstroomeisen, zoals opgenomen in het kwalificatiedossier. De dekking en het niveau van de examenonderzoeken wordt zorgvuldig geborgd in procedures tijdens de constructie en vaststellingsfasen en wordt regelmatig geëvalueerd. De toetsen die worden gebruikt om het eindniveau te bepalen zijn voldoende. Er is een aandachtspunt ten aanzien van het nader specificeren van de beoordelingscriteria in de bpv. De afname vindt plaats onder gestandaardiseerde condities.
Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen
Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.
93070 Medewerker havenoperaties
4.
Standaard
Beoordeling exameninstrumentarium Medewerker havenoperaties 93070 BBL
O
O
Toelichting beoordeling kwaliteit instrumentarium Medewerker havenoperaties Het exameninstrumentarium voldoet niet aan de inhoudelijke uitstroomeisen omdat in de proeven van bekwaamheid niet is opgenomen op welk beheersingsniveau de competenties per kerntaak moeten worden getoond door de deelnemer. Daarnaast ontbreekt de cesuur per kerntaak. Hierdoor bestaat het risico dat niet alle competenties en kerntaken op het juiste niveau worden getoetst. Het exameninstrumentarium voldoet niet aan de toetstechnische eisen omdat in de proeven van bekwaamheid de opdrachten voor de deelnemer niet zijn uitgewerkt waardoor de informatie voor de deelnemer niet duidelijk is. In deze proeven zijn weliswaar antwoordmodellen opgenomen die voor de beoordelaar specifiek zijn uitgewerkt voor wat betreft de te beoordelen onderwerpen, maar deze antwoordmodellen bevatten geen nadere specificatie bij welke deelscore er een voldoende dan wel een onvoldoende is behaald. Daarnaast is niet opgenomen onder welke afnamecondities de toetsing moet plaatsvinden. Hierdoor bestaat het risico dat de afname en beoordeling niet betrouwbaar verloopt.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 19 van 23
Toelichting beoordeling examineringsprocessen De navolgende toelichting geldt voor alle onderzochte opleidingen. Het representatieve beroepenveld heeft veel vertrouwen in de examinering van de opleiding en in potentiële werknemers die door de opleiding gediplomeerd zijn. Dit vertrouwen is gebaseerd op een goede werkrelatie met het beroepenveld, waardoor deze op de hoogte is van de inhoud van de examens en van de manier waarop de kwaliteit van examinering en examens geborgd wordt. Daarnaast is het beroepenveld ruim vertegenwoordigd in de bedrijfstakcommissies en daardoor periodiek betrokken bij de beoordeling, verbetering en innovatie van examens. De deelnemers zijn voldoende tevreden over de kernpunten van de examinering van de opleiding, dat wil zeggen over de voorlichting, de inhoud, de afname, de beoordeling, bekendmaking daarvan en inzage in gemaakt werk. Uit de analyse van de vragenlijsten blijkt dat een gemiddelde score van 3,7 op een schaal van 5 is behaald. De verbeterpunten zijn benoemd als actiepunten die onder meer in de leerlingenraad zijn besproken. De betrokkenen bij de examinering, dat wil zeggen de constructeurs, vaststellers en beoordelaars, zowel in de instelling als in de leerbedrijven, bezitten een toereikende mate van vakinhoudelijke en toetstechnische competentie in de door hen te verrichten taken. Hun deskundigheid is gebaseerd op scholing of ruime ervaring. Hoewel het exameninstrumentarium van enkele opleidingen niet voldoet aan de uitstroomeisen en toetstechnische kwaliteitseisen is het systeem van deskundigheidshandhaving en –bevordering dusdanig dat er ook voor deze opleidingen is geconstateerd dat de deskundigheid in voldoende mate aanwezig is. STC zorgt voor gerichte scholing en evalueert structureel waarbij deskundigheid één van de onderwerpen is. De examinering verloopt toereikend inzichtelijk, men weet waar men aan toe is. De procedures en taken en verantwoordelijkheden van betrokkenen zijn beschreven. Deze zijn bekend aan deelnemers, beroepenveld en beoordelaars. Een aandachtspunt is de richtlijnen voor beoordelaars die zijn opgenomen in de antwoordmodellen van vooral de praktijkopdrachten in de bpv helderder kunnen. De examinering is in het algemeen voldoende geborgd. Op verschillende niveaus wordt de examinering regelmatig geëvalueerd en op basis van deze evaluatie worden maatregelen genomen. Bij deze evaluatie zijn deelnemers, medewerkers en leden van de bedrijfstakcommissie of vertegenwoordigers van het bedrijfsleven betrokken. De actiepunten zijn opgenomen in sectorplannen. Verantwoording wordt afgelegd door middel van een jaarverslag. De instelling voldoet aan de wettelijke vereisten rondom examinering.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 20 van 23
3
CONCLUSIES EN VERVOLGTOEZICHT
Het onderzoek naar de kwaliteit van de examens bij Stichting STC-Group vond plaats op 26 maart 2008. De examinering van de volgende opleidingen is van onvoldoende kwaliteit: • Warehouse voorman (10666) BOL, omdat het exameninstrumentarium inhoudelijk niet voldoet aan de uitstroomeisen en niet voldoet aan de toetstechnische eisen. • Manager haven, vervoer en logistiek (10682) BBL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het eindtermendocument en voldoet niet aan de toetstechnische kwaliteitseisen. • Assistent-Expediteur (10686) BOL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het eindtermendocument. • Medewerker havenoperaties (93070) BBL. Het exameninstrumentarium voldoet inhoudelijk niet aan de uitstroomeisen van het kwalificatiedossier en voldoet eveneens niet aan de toetstechnische kwaliteitseisen. Van deze constateringen van onvoldoende examenkwaliteit 2007-2008 wordt melding gemaakt aan de minister van OCW. Volgend jaar zal een onderzoek plaatsvinden naar de kwaliteitsverbetering van de examinering bij deze opleidingen. Over de uitvoering zullen te zijner tijd nadere afspraken gemaakt worden. De examinering van de volgende onderzochte opleidingen is van voldoende kwaliteit: • Stuurman/Werktuigkundige zeevisvaart SW5 (10645) BOL • Matroos (10652) BBL • Chauffeur goederenvervoer (10678) BBL • Assistent operationeel medewerker transport en logistiek (10681) BOL • Matroos binnenvaart (91881) BOL • Bootman (93030) BBL Bij deze opleidingen vindt geen vervolgonderzoek plaats. De opleidingen kunnen overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden.
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 21 van 23
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 22 van 23
BIJLAGE 1: STANDAARDEN EN NORMERING De standaarden en normering zijn opgenomen in de Regeling standaarden examens beroepsonderwijs 2007-2008, gepubliceerd in de staatscourant 29 april 2008. DOMEIN A: VALIDERING DOOR BELANGHEBBENDEN· Standaard 1: Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Standaard 2: De deelnemer is tevreden over de kwaliteit van de examinering. DOMEIN B: DESKUNDIGHEID VAN BETROKKENEN· Standaard 3: De betrokkenen bij examinering zijn deskundig. DOMEIN C: EXAMENINSTRUMENTARIUM Standaard 4: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen. Standaard 5: Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen. DOMEIN D: PROCESSEN· Standaard 6: De examineringsprocessen zijn transparant.· Standaard 7: De examineringsprocessen zijn geborgd. DOMEIN E: WETTELIJKE VEREISTEN· Standaard 8: De instelling voldoet aan de wettelijke vereisten rondom examinering. De kwaliteit van de examinering is voldoende, wanneer zes van de acht standaarden minimaal voldoende zijn, waaronder in elk geval standaarden 4, 5 en 8. Voor een toelichting op de standaarden en de normering, zie het document ‘Toezichtkader examinering 2007-2008’ (te vinden op www.onderwijsinspectie.nl).
Rapportage kwaliteit examinering Stichting STC-Group 2007-2008 p. 23 van 23