Scholengemeenschap De Rooi Pannen ONDERZOEK KWALITEIT EXAMINERING

Scholengemeenschap De Rooi Pannen ONDERZOEK KWALITEIT EXAMINERING 2007-2008

Amersfoort, juli 2008

Rapportage kwaliteit examinering De Rooi Pannen 2007-2008

p.2 van 37

VASTSTELLING RAPPORT Dit rapport bevat de resultaten van het onderzoek naar de kwaliteit van de examinering dat op 15,17 en 22 april plaatsvond bij Scholengemeenschap De Rooi Pannen. Het rapport is vastgesteld op 4 juli 2008. Reproductie van het rapport zonder toestemming van de inspectie of de school vindt niet plaats anders dan in zijn volledige vorm.


p.3 van 37

INHOUDSOPGAVE SAMENVATTING 7 1

INLEIDING 9

2

KWALITEIT EXAMINERING BIJ HORECA TILBURG 11

3

KWALITEIT EXAMINERING BIJ TOERISME-RECREATIE TILBURG 15

4

KWALITEIT EXAMINERING BIJ HORECA BREDA 21

5

KWALITEIT EXAMINERING BIJ HORECA EINDHOVEN 23

6

KWALITEIT EXAMINERING BIJ TOERISME-RECREATIE EINDHOVEN 27

7

KWALITEIT EXAMINERING BIJ HANDEL TILBURG 31

8

CONCLUSIES EN VERVOLGTOEZICHT 35 BIJLAGE 1: STANDAARDEN EN NORMERING 37


p.5 van 37


p.6 van 37

SAMENVATTING Dit rapport bevat de resultaten van het onderzoek naar de kwaliteit van de examinering van een aantal opleidingen van Scholengemeenschap De Rooi Pannen. Tijdens het onderzoek waren het beoordelingskader en de normering van het Toezichtkader 2007-2008 van toepassing. De examinering van de volgende opleidingen is van voldoende kwaliteit: Afdeling Horeca Tilburg (onderzocht op 15 april 2008) • Horeca-assistent (10403) BBL; • Bedrijfsleider fastfoodsector (10875) BBL. Afdeling Horeca Toerisme Recreatie Breda (onderzocht op 15 april 2008) • Zelfstandig werkend gastheer/-vrouw (10394) BOL Afdeling Horeca Eindhoven (onderzocht op 17 april 2008) • Zelfstandig werkend kok (10395) BBL. Afdeling Handel Tilburg (onderzocht op 22 april 2008) • Commercieel medewerker marketing en communicatie (10036) BOL; • Verkoopchef (10847) BBL; • Filiaalbeheer (10849) BBL; • Vormgeving ruimtelijke presentatie en communicatie (medewerker productpresentatie) (91530) BOL. Afdeling Toerisme Recreatie Eindhoven (onderzocht op 22 april 2008) • Medewerker recreatie (10396) BOL. Bij deze opleidingen vindt geen vervolgonderzoek plaats. De opleidingen kunnen overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden. De examinering van de volgende opleiding is van onvoldoende kwaliteit: Afdeling Toerisme Recreatie Tilburg (onderzocht op 17 april 2008) • Zelfstandig werkend medewerker recreatie (10391) BOL. Het exameninstrumentarium voldoet niet aan de uitstroom- en de toetstechnische eisen. Bij deze opleiding vindt volgend jaar een vervolgonderzoek plaats. Over de uitvoering daarvan zullen te zijner tijd nadere afspraken worden gemaakt. Van deze constatering van onvoldoende examenkwaliteit 2007-2008 wordt melding gemaakt aan de minister van OCW.


p.7 van 37


p.8 van 37

1

INLEIDING

Opzet onderzoek Uitgangspunt voor het onderzoek bij Scholengemeenschap De Rooi Pannen waren de zelfbeoordelingen die de afdelingen hadden opgesteld voor de te onderzoeken opleidingen. Daarnaast leverden de voorlopige resultaten van de beoordeling van het exameninstrumentarium van de onderzochte opleidingen belangrijke informatie op. Deze resultaten en de zelfbeoordelingen zijn op locatie besproken met constructeurs, vaststellers, beoordelaars, vertegenwoordigers uit de examencommissies en het management. Tijdens deze gesprekken werd ook relevante aanvullende documentatie onderzocht. Ter afsluiting vond een gesprek plaats met het college van bestuur. Het exameninstrumentarium (of een deel daarvan) van een aantal opleidingen is niet onderzocht, omdat het is ingekocht bij examenleveranciers die in 20062007 zijn goedgekeurd door het Kwaliteitscentrum Examinering (KCE). Deze inkoop is in onderstaande tabel weergegeven per opleiding en per deelkwalificatie. Onderzochte eindtermgerichte opleidingen Crebo Naam opleiding Leerweg Deelkwalificatie(s) 10403 10875

Horeca-assistent Bedrijfsleider fastfoodsector

BBL BBL

10391

Zelfstandig werkend medewerker recreatie Zelfstandig werkend gastheer/-vrouw Zelfstandig werkend kok Medewerker recreatie

BOL

BOL

10847

Commercieel medewerker marketing en communicatie Verkoopchef

10849

Filiaalbeheer

BBL

10394 10395 10396 10036

BBL BBL BOL

BBL

Inkoop: 52884 Eigen product: 56039 Inkoop: 54535, 54536 Eigen product: 51380, 51381, 51383, 51385, 52888 Inkoop: 51441 Inkoop: 51444, 51446 Eigen product: 52884, 52885, 52886 Eigen product: 50102, 50110, 50113, 50144, 50160 Inkoop: 50028, 50029, 54004, 56039 Inkoop: 54019, 54020


Exameneenheid en locatie Horeca Tilburg Horeca Tilburg

ToerismeRecreatie Tilburg Horeca Breda Horeca Eindhoven ToerismeRecreatie Eindhoven Handel Tilburg

Handel Tilburg Handel Tilburg

p.9 van 37

Onderzochte competentiegerichte opleidingen Crebo Naam opleiding, naam Leerweg uitstroom 91530

Vormgeving ruimtelijke presentatie en communicatie (medewerker productpresentatie)

BOL

Inkoop / Eigen product Eigen product


Exameneenheid en locatie Handel Tilburg

p.10 van 37

2

KWALITEIT EXAMINERING BIJ HORECA TILBURG

Vertrouwen beroepenveld

Tevredenheid deelnemer

Deskundigheid betrokkenen

Instrumentarium: uitstroomeisen

Instrumentarium: toetstechnisch

Transparantie processen

Borging processen

Wettelijke vereisten

2

3

4

5

6

7

8

10403 Horeca-assistent BBL G 10875 Bedrijfsleider fastfoodsector BBL G O = onvoldoende/ V = voldoende/ G = goed

V V

V V

V V

V V

V V

V V

V V

Standaard

1

2.1. Beoordeling opleidingen bij Horeca Tilburg

2.2 Beschouwing Algemeen beeld De examinering van de opleidingen Horeca-assistent en Bedrijfsleider fastfoodsector is van voldoende kwaliteit. Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Deelnemers zijn tevreden over de examinering. De betrokkenen bij examinering zijn deskundig. Het exameninstrumentarium is van voldoende kwaliteit. De examinering is voldoende transparant en geborgd en voldoet aan de wettelijke vereisten. Toelichting beoordeling exameninstrumentarium De afdeling Horeca Tilburg koopt het volledige exameninstrumentarium van de opleiding Horeca-assistent in bij de door KCE erkende examenleverancier Kenwerk. Het exameninstrumentarium is van voldoende kwaliteit. De afdeling Horeca Tilburg koopt het exameninstrumentarium van op één na alle deelkwalificaties van de opleiding Bedrijfsleider fastfoodsector in bij de door KCE erkende examenleverancier Kenwerk. Het ingekochte exameninstrumentarium is van voldoende kwaliteit. Navolgende tekst bevat de beoordeling van de examinering die Horeca Tilburg zelf heeft ontwikkeld.


p.11 van 37

Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen

Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 5.

56039 Voorraad- en kassabeheer O = onvoldoende/ V = voldoende/ G = goed

4.

Standaard

Beoordeling exameninstrumentarium Bedrijfsleider fastfoodsector 10875 BBL

V

V

De onderzochte deelkwalificatie voldoet aan de uitstroomeisen en aan de toetstechnische eisen. Toelichting beoordeling examineringsprocessen Het beroepenveld heeft veel vertrouwen in de examinering. De samenwerking tussen het beroepenveld en de afdeling Horeca Tilburg is intensief en vindt plaats op verschillende niveaus. Het beroepenveld oordeelt positief over zijn betrokkenheid bij en de kwaliteit van de examinering. De deelnemer is voldoende tevreden over de examinering. Dit blijkt uit de JOBOdin enquête en de dit studiejaar opgestarte ‘enquête tevredenheid examinering’. De betrokkenen bij examinering zijn voldoende deskundig. Horeca Tilburg koopt vrijwel het volledige exameninstrumentarium van de onderzochte opleidingen in bij de door KCE erkende leverancier Kenwerk. De afdeling participeert in de scholingstrajecten die binnen De Rooi Pannen worden aangeboden. De afname van de examinering vindt in zijn geheel binnenschools plaats in samenwerking met het bedrijfsleven in de rol van medebeoordelaar. Deze is geschoold door Kenwerk. De examineringsprocessen zijn voldoende transparant en geborgd. In het handboek voor examinering zijn de procedures en beschrijvingen van taken en verantwoordelijkheden van betrokkenen weergegeven. Deelnemers ontvangen voldoende informatie over de examinering. Het contract met de examenleverancier is aanwezig. De ingekochte toetsen worden volgens procedure vastgesteld en waar nodig voorzien van commentaar. De subexamencommissie besteedt aandacht aan de kwaliteit van de ingekochte toetsen, waarna, indien nodig, terugkoppeling aan de leverancier wordt gegeven. Evaluatie van de examinering vindt plaats.


p.12 van 37

De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.13 van 37


p.14 van 37

3

KWALITEIT EXAMINERING BIJ TOERISMERECREATIE TILBURG







Borging processen


2

3

4

5

6

7

8

10391 Zelfstandig werkend medewerker V recreatie BOL O = onvoldoende/ V = voldoende/ G = goed

G

V

O

O

V

V

V

Standaard

1

3.1. Beoordeling opleidingen bij Toerisme-Recreatie Tilburg

3.2 Beschouwing Algemeen beeld De examinering van de opleiding Zelfstandig werkend medewerker recreatie is van onvoldoende kwaliteit. Reden hiervoor is dat twee van de onderzochte deelkwalificaties niet voldoen aan de uitstroomeisen en de toetstechnische vereisten. Het beroepenveld heeft wel voldoende vertrouwen in de kwaliteit van de examinering, en deelnemers zijn er tevreden over. De betrokkenen bij examinering zijn deskundig. De examinering is voldoende transparant en geborgd en voldoet aan de wettelijke vereisten.


p.15 van 37

Toelichting beoordeling exameninstrumentarium



51380 Frans 2 51381 Duits 2 51383 Activiteitenbegeleiding 51385 Administratie en beheer 52888 Recreatie 2 O = onvoldoende/ V = voldoende/ G = goed

4.

Standaard

Beoordeling exameninstrumentarium Zelfstandig werkend medewerker recreatie 10391 BOL

V V O G O

V V O G O

Deelkwalificatie: Activiteitenbegeleiding (51383) Het exameninstrumentarium van de deelkwalificatie Activiteitenbegeleiding voldoet inhoudelijk niet aan de uitstroomeisen. 14 van de 22 eindtermen zijn niet of onvoldoende vertegenwoordigd in het instrument. De eindtermen 1, 4, 7, 9, 11, 12, 13, 14, 15 en 19 tot en met 22 zijn onjuist of onvolledig in het exameninstrumentarium verwerkt. Van eindterm 18 is de examinering door de Hartstichting onvoldoende inzichtelijk gemaakt. Daarnaast is de cesuur onduidelijk. Weliswaar geldt voor alle toetsen dat 55% van de punten moet worden behaald voor een voldoende, maar hoe de toekenning van de onderliggende scores plaatsvindt, is niet transparant. Omdat eindtermen per opdracht geclusterd worden beoordeeld, is het mogelijk dat sommige eindtermen meer aan bod komen dan andere eindtermen. Ook dit doet afbreuk aan de mate waarin het instrumentarium de uitstroomeisen afdekt – het is de vraag, waarvan een deelnemer 55% moet beheersen voor een voldoende eindresultaat. De bevindingen roepen vragen op over de kwaliteit van de toetsvaststelling. De vaststelling richt zich onvoldoende op de inhoudelijk correcte en toereikende verwerking van de eindtermen in het toetsmateriaal. Het exameninstrumentarium van de deelkwalificatie Activiteitenbegeleiding voldoet ook niet aan de toetstechnische kwaliteitseisen. De algemene beoordelingscriteria die binnen de toetsing worden gehanteerd zijn onvoldoende concreet om een deelnemer 1) te informeren over de beoordeling en 2) aanknopingspunten te geven voor een eventueel bezwaar tegen een beoordeling.


p.16 van 37

Het voorschrift geeft ook de beoordelaar te weinig concrete informatie over de toekenning van punten. Een complicerende factor is dat deelnemers cijfers ontvangen voor de prestatie van de groep waaraan zij deelnemen, en alleen een individueel cijfer als hun inzet en prestatie onvoldoende bijdragen aan het groepsresultaat. Dit veronderstelt een beoordelingsmodel waarin de individuele prestatie van de deelnemer kan worden afgezet tegen de groepsprestatie. Hiervan is echter geen sprake. De beoordeling bevat geen waarborg, dat de individuele deelnemer het resultaat krijgt, dat hij verdient. Een excellente deelnemer zal op deze manier mogelijk het nadeel ondervinden van een gemiddeld of ondermaats presterende groep. Het ‘Beoordelingssysteem’ vermeldt abusievelijk dat een voldoende resultaat wordt behaald door een deelnemer die ‘bijna competent’ is, ‘matige beheersing van de kennis’ toont en ‘de materie [begrijpt] maar […] deze nog niet helemaal [kan] toepassen’. De feitelijke afname is onvoldoende beschreven. Tijdens het bezoek is besproken dat bepaalde (aspecten van) eindtermen ‘impliciet’ onderdeel uitmaken van de examinering. Naast het in te leveren werkstuk wordt de deelnemer ook beoordeeld op wat hij klassikaal laat zien. Dit onderdeel van de examinering is niet gespecificeerd in het exameninstrumentarium. Er is steeds sprake van één beoordelaar, de docent. Dit leidt tot een eenzijdige, onvoldoende betrouwbare beoordeling. Deelkwalificatie: Recreatie 2 (52888) Het exameninstrumentarium van de deelkwalificatie Recreatie 2 voldoet inhoudelijk niet aan de uitstroomeisen. 34 van de 76 eindtermen zijn niet of onvoldoende vertegenwoordigd in het instrument. De eindtermen 16, 18, 19, 21, 25, 27, 41, 50, 62 en 67 worden niet getoetst. De eindtermen 2, 6, 7, 10, 15, 17, 24, 26, 30, 31, 32, 33, 34, 35, 36, 44, 54, 55, 56, 59, 60, 63, 64 en 65 zijn onjuist of onvolledig in het exameninstrument verwerkt. Het meest voorkomende gebrek bestaat uit het schriftelijk toetsen van praktische vaardigheden (waardoor de toetsvorm incorrect is) in combinatie met een onjuiste of onvolledige vertaling van de eindterm in het toetsmateriaal. De bevindingen roepen ook bij deze deelkwalificatie vragen op over de kwaliteit van de toetsvaststelling. De vaststelling richt zich onvoldoende op de inhoudelijk correcte en toereikende verwerking van de eindtermen in het toetsmateriaal. Opvallend in dit verband is ook de parafering van bijvoorbeeld eindterm 54 op het vaststellingsformulier van toets RE2-06, terwijl deze eindterm niet voorkomt op het protocol, waar het vaststellingsformulier naar verwijst. Daarnaast is de cesuur onduidelijk. Weliswaar geldt voor alle toetsen dat 55% van de punten moet worden behaald voor een voldoende, maar hoe de toekenning van de onderliggende scores plaatsvindt, is niet transparant. Omdat eindtermen per opdracht geclusterd worden beoordeeld, is het mogelijk dat sommige eindtermen meer aan bod komen dan andere eindtermen. Ook dit doet afbreuk aan de mate waarin het instrumentarium de uitstroomeisen afdekt – het is de vraag, waarvan een deelnemer 55% moet beheersen voor een voldoende eindresultaat.


p.17 van 37

Het exameninstrumentarium van de deelkwalificatie Recreatie 2 voldoet ook niet aan de toetstechnische kwaliteitseisen. De algemene beoordelingscriteria die binnen de toetsing worden gehanteerd zijn onvoldoende concreet om een deelnemer 1) te informeren over de beoordeling en 2) aanknopingspunten te geven voor een eventueel bezwaar tegen een beoordeling. Het voorschrift geeft ook de beoordelaar te weinig concrete informatie over de toekenning van punten. Het ‘Beoordelingssysteem’ vermeldt abusievelijk dat een voldoende resultaat wordt behaald door een deelnemer die ‘bijna competent’ is, ‘matige beheersing van de kennis’ toont en ‘de materie [begrijpt] maar […] deze nog niet helemaal [kan] toepassen’. De feitelijke afname is onvoldoende beschreven. De kwaliteit van het exameninstrumentarium van de overige beoordeelde deelkwalificaties is voldoende of goed. Toelichting beoordeling examineringsprocessen Het beroepenveld heeft voldoende vertrouwen in de examinering. Meningen over de examinering worden gepeild bij stagebedrijven en via een klankbordgroep waarin het bedrijfsleven is vertegenwoordigd. Hierin is de examinering een vast agendapunt. Stagebiedende instellingen en bedrijven hebben een verklaring ondertekend waarin zij aangeven vertrouwen te hebben in de examinering van de afdeling Toerisme en Recreatie Tilburg. Ten slotte werken instellingen en bedrijven mee aan docenten- en managementstages. De deelnemer is zeer tevreden over de examinering. Dit blijkt uit de JOB-Odin enquête, het klassenvertegenwoordigersoverleg en resultaten uit de sinds drie jaar lopende enquête op het gebied van examinering. De resultaten van de studentenevaluaties worden stelselmatig aan de orde gesteld in het managementoverleg en studenten worden geïnformeerd over de uitkomsten. Verbeteracties worden met hen besproken. De betrokkenen bij examinering zijn voldoende deskundig. Toerisme en Recreatie Tilburg ontwikkelt het exameninstrumentarium zelf. De toetsen worden ontwikkeld door een vakdocent en vastgesteld door een sectiegenoot. Gelet op de bevindingen uit de beoordeling van het exameninstrumentarium verdienen de ontwikkeling en vaststelling van examens wat extra aandacht. Daarnaast neemt men aanvullende steekproeven om te beoordelen of de toetsen voldoen. Waar nodig vindt aanvullende scholing plaats. De afname van de examinering vindt geheel binnenschools plaats. Het bedrijfsleven is wel aanwezig bij een gedeelte van de examinering, maar niet in een actieve rol. De transparantie en borging van de examineringsprocessen zijn voldoende. In het handboek voor examinering zijn de procedures en beschrijvingen van taken en verantwoordelijkheden van betrokkenen helder weergegeven. Deelnemers ontvangen (los van de bevindingen die zijn gedaan over de toetstechnische kwaliteit van het exameninstrumentarium) voldoende informatie over de examinering. Evaluatie van de examinering vindt plaats.


p.18 van 37

De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.19 van 37


p.20 van 37

4

KWALITEIT EXAMINERING BIJ HORECA BREDA







Borging processen


2

3

4

5

6

7

8

10394 Zelfstandig werkend gastheer/G vrouw BBL O = onvoldoende/ V = voldoende/ G = goed

G

V

V

V

V

V

V

Standaard

1

4.1. Beoordeling opleidingen bij Horeca Breda

4.2 Beschouwing Algemeen beeld De examinering van de opleiding Zelfstandig werkend gastheer/gastvrouw is van voldoende kwaliteit. Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Deelnemers zijn tevreden over de examinering. De betrokkenen bij examinering zijn deskundig. Het exameninstrumentarium is van voldoende kwaliteit. De examinering is voldoende transparant en geborgd en voldoet aan de wettelijke vereisten. Toelichting beoordeling exameninstrumentarium De afdeling Horeca Breda koopt het volledige exameninstrumentarium van de opleiding Zelfstandig werkend gastheer/gastvrouw in bij een door KCE erkende examenleverancier. Het exameninstrumentarium is van voldoende kwaliteit. Toelichting beoordeling examineringsprocessen Het vertrouwen van het beroepenveld in de examinering is goed. Er vindt intensief overleg plaats met het beroepenveld in klankbordgroepvergaderingen, resonansgroepen en leermeesterbijeenkomsten. Er is een enquête onder praktijkexaminatoren en onder leermeesters. Daaruit blijkt dat de tevredenheid over de examinering groot is. Ten slotte is het bedrijfsleven actief betrokken bij de afname van de praktijkexamens binnen school als beoordelaar.


p.21 van 37

De deelnemer is zeer tevreden over de examinering. Dit blijkt uit de JOB-Odin enquête, de enquêtes naar aanleiding van de toetsweken en het alumnionderzoek. Bij signalen van deelnemers worden waar nodig verbeteringen getroffen. De betrokkenen bij examinering zijn voldoende deskundig. Binnen de afdeling wordt voornamelijk gewerkt met ingekochte toetsen van Kenwerk (Stichting Horeca Examinering). De ingekochte examenproducten worden door de afdeling beoordeeld en vastgesteld. De afname van de examinering vindt binnenschools plaats. Het bedrijfsleven is bij de praktijkexamens aanwezig als mede-beoordelaar en is geschoold door Kenwerk. De transparantie en borging van de examineringsprocessen zijn voldoende. In het handboek voor examinering zijn de procedures en beschrijvingen van taken en verantwoordelijkheden van betrokkenen helder weergegeven. Deelnemers ontvangen voldoende informatie over de examinering. Het contract met de examenleverancier is aanwezig. Evaluatie van de examinering vindt plaats. De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.22 van 37

5

KWALITEIT EXAMINERING BIJ HORECA EINDHOVEN







Borging processen


2

3

4

5

6

7

8

10395 Zelfstandig werkend kok BBL G O = onvoldoende/ V = voldoende/ G = goed

G

V

V

V

V

O

V

Standaard

1

5.1. Beoordeling opleidingen bij Horeca Eindhoven

5.2 Beschouwing Algemeen beeld De examinering van de opleiding Zelfstandig werkend kok is over het geheel genomen van voldoende kwaliteit. De borging van de examinering is evenwel onvoldoende. Een belangrijk verbeterpunt bestaat uit de volledige vaststelling van deelkwalificaties die de afdeling deels zelf inkoopt en deels zelf produceert. Ook zouden constructeurs feedback moeten krijgen op de kwaliteit van hun producten. Wel heeft het beroepenveld veel vertrouwen in de kwaliteit van de examinering, en zijn de deelnemers tevreden. De betrokkenen bij de examinering zijn deskundig. De transparantie van de examenprocessen voldoet. De examinering voldoet aan de wettelijke eisen.


p.23 van 37




51444 Operationeel werken 2/procesmatige productie organisatie 51446 Vaktechniek keuken 2 O = onvoldoende/ V = voldoende/ G = goed

4.

Standaard

Beoordeling kwaliteit exameninstrumentarium Zelfstandig werkend kok 10395 BBL

G

V

V

V

De beoordeelde deelkwalificaties voldoen aan de uitstroomeisen en aan de toetstechnische vereisten. Toelichting beoordeling examineringsprocessen Het vertrouwen van het beroepenveld in de examinering is goed. Er vindt intensief overleg plaats met het beroepenveld in klankbordgroepvergaderingen, resonansgroepen en leermeesterbijeenkomsten. Er is een enquête onder praktijkexaminatoren en onder leermeesters. Daaruit blijkt dat de tevredenheid over de examinering groot is. Ten slotte is het bedrijfsleven actief betrokken bij de afname van de praktijkexamens binnen school als beoordelaar. De deelnemer is zeer tevreden over de examinering. Dit blijkt uit de JOB-Odin enquête, de enquêtes naar aanleiding van de toetsweken en het alumnionderzoek. De afdeling werkt aan de invoering van een systeem van klassenvertegenwoordigers. De betrokkenen bij examinering zijn voldoende deskundig. Binnen de afdeling wordt veel gewerkt met ingekochte theorietoetsen van de door KCE erkende examenleverancier Kenwerk (Stichting Horeca Examinering). De constructeurs van praktijkexamens hebben in het verleden scholing gehad en participeren in de scholingstrajecten van De Rooi Pannen. De afname van de examinering vindt binnenschools plaats. Het bedrijfsleven neemt deel aan de examinering als mede-beoordelaar. Deze examinatoren zijn geschoold door Kenwerk. De transparantie van de examineringsprocessen is voldoende. Procedures en taken en verantwoordelijkheden van betrokkenen zijn voldoende inzichtelijk.


p.24 van 37

Deelnemers ontvangen voldoende informatie over de examinering. Het contract met de examenleverancier is aanwezig. De borging van de examineringsprocessen is onvoldoende. De afdeling Horeca Eindhoven besteedt geen aandacht aan de kwaliteit van de theorietoetsen die zij inkoopt. Deze theorietoetsen maken wel onderdeel uit van deelkwalificaties waarvoor de afdeling zelf praktijktoetsen ontwikkelt. Omdat de afdeling niets doet met het ingekochte product, is zij niet in staat de deelkwalificaties volledig vast te stellen. De borging is daardoor onvolledig. Dit elementaire verbeterpunt is niet gebleken uit evaluaties door de afdeling zelf. Constructeurs gaven ook aan, geen feedback te krijgen op de kwaliteit van hun producten. Een en ander maakt het toezicht op de uitvoering en borging van de examineringsprocessen in algemene zin tot een belangrijk verbeterpunt. De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.25 van 37


p.26 van 37

6

KWALITEIT EXAMINERING BIJ TOERISMERECREATIE EINDHOVEN




Instrumentarium: Uitstroomeisen



Borging processen


2

3

4

5

6

7

8

10396 Medewerker recreatie BOL V O = onvoldoende/ V = voldoende/ G = goed

G

V

V

V

V

V

V

Standaard

1

6.1. Beoordeling opleidingen bij Toerisme-Recreatie Eindhoven

6.2 Beschouwing Algemeen beeld De kwaliteit van de opleiding Medewerker recreatie is voldoende. Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. De deelnemers zijn tevreden en de betrokkenen bij de examinering zijn deskundig. Het exameninstrumentarium is van voldoende kwaliteit. De transparantie en borging van de examenprocessen zijn voldoende en de examinering van de opleiding voldoet aan de wettelijke vereisten.


p.27 van 37




52884 Horeca-assistent 52885 Verkooptechniek 52886 Frontoffice O = onvoldoende/ V = voldoende/ G = goed

4.

Standaard

Beoordeling exameninstrumentarium Medewerker recreatie 10396 BOL

V V V

V V V

Het exameninstrumentarium van de onderzochte deelkwalificaties voldoet aan de uitstroom- en de toetstechnische eisen en is daarmee van voldoende kwaliteit. Een verbeterpunt binnen de deelkwalificatie Frontoffice is correct Duits taalgebruik (zie toets FRO 10/ IRC 22). Toelichting beoordeling examineringsprocessen Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Er zijn verklaringen voorhanden waaruit het vertrouwen blijkt. De afdeling is actief om de praktijk meer de school in te halen; instructeurs van bedrijven verzorgen delen van het curriculum en beoordelen studenten bij praktijkopdrachten. BPVcoördinatoren bespreken de examinering tijdens bedrijfsbezoeken. De eerste enquête waarin bedrijven systematisch worden bevraagd op de kwaliteit van de examinering ligt in concept gereed. Deelnemers zijn zeer tevreden over de examinering. Dit blijkt uit de Job-Odin enquête. Daarnaast is de examinering driemaal per jaar agendapunt in het klassenvertegenwoordigersoverleg. Deelnemers worden geënquêteerd na de toetsweken. Aandachtspunten worden geanalyseerd in het managementteam en leiden waar nodig tot verbeteracties. Betrokkenen bij examinering zijn voldoende deskundig. Aangeleverde toetsen en examens worden vastgesteld. Toetsconstructeurs en controleurs ontvangen feedback. Praktijkbegeleiders en docenten bespreken praktijkbeoordelingen. De afdeling participeert in de scholing die De Rooi Pannen instellingsbreed organiseert.


p.28 van 37

De transparantie en borging van de examineringsprocessen zijn voldoende. In het handboek voor examinering zijn de procedures en beschrijvingen van taken en verantwoordelijkheden van betrokkenen helder weergegeven. Deelnemers ontvangen voldoende informatie over de examinering. Evaluatie van de examinering vindt plaats. De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.29 van 37


p.30 van 37

7

KWALITEIT EXAMINERING BIJ HANDEL TILBURG







Borging processen


2

3

4

5

6

7

8

10036 Commercieel medewerker V marketing en communicatie BOL 10847 Verkoopchef BBL V 10849 Filiaalbeheerder BBL V 91530 Vormgeving ruimtelijke V presentatie en communicatie (medewerker productpresentatie) BOL O = onvoldoende/ V = voldoende/ G = goed

V

V

V

V

V

V

V

V V V

V V V

V V V

V V V

V V V

V V V

V V V

Standaard

1

7.1. Beoordeling opleidingen bij Handel Tilburg

7.2 Beschouwing Algemeen beeld De kwaliteit van de examinering van de onderzochte opleidingen binnen Handel Tilburg is voldoende. Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering en de deelnemers zijn tevreden. De betrokkenen bij examinering zijn deskundig. Het exameninstrumentarium is van voldoende kwaliteit. De transparantie en de borging van de examenprocessen zijn voldoende. Ten slotte voldoet de examinering aan de wettelijke vereisten. Toelichting beoordeling exameninstrumentarium De afdeling Handel koopt het exameninstrumentarium van de opleidingen Verkoopchef en Filiaalbeheerder in bij een door KCE erkend examenleverancier, KC Handel.


p.31 van 37



50102 Zakelijke communicatie 50110 Zakelijke communicatie MVT 3-keuzetaal 1 50113 Maatschappelijk culturele vorming 3 50144 Bedrijfseconomische beroepsvormingkosten 3 50160 Commerciële beroepsvorming 3 O = onvoldoende/ V = voldoende/ G = goed

4.

Standaard

Beoordeling exameninstrumentarium Commercieel medewerker marketing en communicatie 10036 BOL

V V V V

V V V V

V

V

Het exameninstrumentarium van de onderzochte deelkwalificaties voldoet aan de uitstroomeisen en de toetstechnische eisen. Aandachtspunt in met name de deelkwalificatie Commerciële beroepsvorming 3 is een evenredige verdeling van te behalen punten per eindterm. Beoordeling exameninstrumentarium Vormgeving ruimtelijke presentatie en communicatie (medewerker productpresentatie) Het exameninstrumentarium voldoet aan de uitstroomeisen en de toetstechnische eisen. Toelichting beoordeling examineringsprocessen Sinds 1 januari 2008 is de afdeling Vormgeving, ontstaan uit de afdeling Handel Tilburg, een zelfstandige afdeling. Per 1 augustus 2008 is Vormgeving ook een zelfstandige exameneenheid. In deze rapportage wordt derhalve nog uitgegaan van één exameneenheid Handel. Waar nu reeds relevante verschillen bestaan worden deze benoemd. Het vertrouwen van het beroepenveld in de examinering is voldoende. Door middel van brieven heeft het beroepenveld aangegeven vertrouwen te hebben in de kwaliteit van de examinering. Tijdens de bezoeken van de BPV-docent wordt de examinering besproken. In een aantal opleidingen binnen handel is een vertegenwoordiger van het beroepenveld aanwezig bij het mondelinge examen. De afdeling oriënteert zich op manieren om het beroepenveld nadrukkelijker bij de examinering te betrekken.


p.32 van 37

De opleiding Vormgeving ruimtelijke presentatie en communicatie baseert zich voor haar beeldvorming over het vertrouwen van het beroepenveld op verslagen van kenniscentrum Savantis over de kwaliteit van stagebedrijven. Daarnaast onderhoudt men zelf contacten met stagebedrijven en organiseert praktijkopleidersavonden. Een meer zelfstandige actieve borging van het vertrouwen van het beroepenveld is een aandachtspunt. De deelnemers zijn voldoende tevreden over de examinering en worden hierover regelmatig bevraagd in enquêtes en interviews. Uitkomsten van deze onderzoeken zijn onderwerp van gesprek in management- en onderwijsteams. Een aandachtspunt is de terugkoppeling van de bevindingen en de ingezette verbeteracties naar de deelnemers zelf. De betrokkenen bij de examinering zijn voldoende deskundig. Examens worden ontworpen en vastgesteld in docententeams onder voorzitterschap van de examencommissie. De opleiding controleert examens steekproefsgewijs en geeft feedback aan constructeurs en vaststellers. De afdeling neemt deel aan scholing die De Rooi Pannen instellingsbreed verzorgt. De deskundigheid van beoordelaars in de praktijk is een aandachtspunt. De transparantie en borging van de examineringsprocessen zijn voldoende. Procedures en taken en verantwoordelijkheden van betrokkenen zijn voldoende inzichtelijk. Deelnemers ontvangen voldoende informatie over de examinering. Het contract met de examenleverancier is aanwezig. Evaluatie vindt plaats. De opleiding Vormgeving ruimtelijke presentatie en communicatie zal een evaluatie uitvoeren na de eerste volledige examencyclus van de opleiding. De uitvoering van inzichtelijke tussentijdse evaluaties van de examinering in nieuwe competentiegerichte opleidingen is een aandachtspunt. Daarnaast is het hanteren van eenduidige begrippen inzake competentiegericht examineren in de OER een aandachtspunt. De examinering van de opleidingen voldoet aan de wettelijke vereisten. Een verbeterpunt is dat artikel 47 van het examenreglement in de OER-en niet de wettelijke termijn (zie WEB artikel 7.5.2, lid 2) van twee weken vermeldt voor het indienen van een beroepsschrift bij de commissie van beroep voor de examens, maar 3 dagen.


p.33 van 37


p.34 van 37

8

CONCLUSIES EN VERVOLGTOEZICHT

De examinering van de volgende opleidingen is van voldoende kwaliteit: Afdeling Horeca Tilburg (onderzocht op 15 april 2008) • Horeca-assistent (10403) BBL; • Bedrijfsleider fastfoodsector (10875) BBL. Afdeling Horeca Toerisme Recreatie Breda (onderzocht op 15 april 2008) • Zelfstandig werkend gastheer/-vrouw (10394) BOL Afdeling Horeca Eindhoven (onderzocht op 17 april 2008) • Zelfstandig werkend kok (10395) BBL. Afdeling Handel Tilburg (onderzocht op 22 april 2008) • Commercieel medewerker marketing en communicatie (10036) BOL; • Verkoopchef (10847) BBL; • Filiaalbeheer (10849) BBL; • Vormgeving ruimtelijke presentatie en communicatie (medewerker productpresentatie) (91530) BOL. Afdeling Toerisme Recreatie Eindhoven (onderzocht op 22 april 2008) • Medewerker recreatie (10396) BOL. Bij deze opleidingen vindt geen vervolgonderzoek plaats. De opleidingen kunnen overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden. De examinering van de volgende opleidingen is van onvoldoende kwaliteit: Afdeling Toerisme Recreatie Tilburg (onderzocht op 17 april 2008) • Zelfstandig werkend medewerker recreatie (10391) BOL. Het exameninstrumentarium voldoet niet aan de uitstroom- en de toetstechnische eisen. Bij deze opleidingen vindt volgend jaar een vervolgonderzoek plaats. Over de uitvoering daarvan zullen te zijner tijd nadere afspraken worden gemaakt. Van deze constateringen van onvoldoende examenkwaliteit 2007-2008 wordt melding gemaakt aan de minister van OCW.


p.35 van 37


p.36 van 37

BIJLAGE 1: STANDAARDEN EN NORMERING De standaarden en normering zijn opgenomen in de Regeling standaarden examens beroepsonderwijs 2007-2008, gepubliceerd in de staatscourant 29 april 2008. DOMEIN A: VALIDERING DOOR BELANGHEBBENDEN· Standaard 1: Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Standaard 2: De deelnemer is tevreden over de kwaliteit van de examinering. DOMEIN B: DESKUNDIGHEID VAN BETROKKENEN· Standaard 3: De betrokkenen bij examinering zijn deskundig. DOMEIN C: EXAMENINSTRUMENTARIUM Standaard 4: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen. Standaard 5: Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen. DOMEIN D: PROCESSEN· Standaard 6: De examineringsprocessen zijn transparant.· Standaard 7: De examineringsprocessen zijn geborgd. DOMEIN E: WETTELIJKE VEREISTEN Standaard 8: De instelling voldoet aan de wettelijke vereisten rondom examinering. De kwaliteit van de examinering is voldoende, wanneer zes van de acht standaarden minimaal voldoende zijn, waaronder in elk geval standaarden 4, 5 en 8. Voor een toelichting op de standaarden en de normering, zie het document ‘Toezichtkader examinering 2007-2008’ (te vinden op www.onderwijsinspectie.nl).


p.37 van 37

Scholengemeenschap De Rooi Pannen ONDERZOEK KWALITEIT EXAMINERING

Recommend Documents