MANAGEMENTREVIEWS EXAMINERING ROC

Zelfevaluatie Examinering 2011-2012 MANAGEMENTREVIEWS EXAMINERING

ROC Eindhoven December 2012

CONCEPT

Bureau Beleidsevaluatie en Control

INHOUDSOPGAVE

Inleiding .........................................................................................................................3 Managementreview ROC Eindhoven.............................................................................4 Managementreview School voor Autobranche & Mobiliteit ............................................5 Managementreview School voor Bouwen en Wonen ................................................... 12 Managementreview School voor Techniek .................................................................. 21 Managementreview School voor Procestechniek… ..................................................... 31 Managementreview Scholen voor Handel, Marketing, Mode, Uiterlijks Verzorging, Transport & Logistiek, en MAKS/Marbiz ...................................... 41 Managementreview Cluster Brood & Banket, Facilitaire Dienstverlening, Horeca, Toerisme, Sport en Veiligheid ..................................................... 46 Managementreview Cluster Economie & Administratie - ICT ....................................... 54 Managementreview School voor de Zorgsector ........................................................... 60 Managementreview School voor Welzijn, Cultuur & Onderwijs .................................... 68 Managementreview School 23 .................................................................................... 76 Managementreview SterCollege - VAVO ..................................................................... 82

2

Inleiding De inspectie hanteert bij het toezicht op examinering de standaarden zoals opgenomen in het Toezichtkader BVE 2012. Op centraal niveau en op alle exameneenheden wordt jaarlijks zo’n managementreview gehouden. Voor schooljaar 2011-2012 is dat gebeurd in oktober en november 2012. Op ROC-niveau is dat uitgevoerd door de examenraad. Op de organisatorische eenheden heeft het MT van de exameneenheid samen met examencommissie en evt. examenbureau alle standaarden ten aanzien van examinering de revue laten passeren. ROC’s zijn verplicht om jaarlijks publieke verantwoording af te leggen over de kwaliteit van de examinering. De verslagen van al deze managementreviews zijn in dit document gebundeld en vormen tezamen de Zelfevaluatie Examinering van ROC Eindhoven voor 2011-2012. In het managementreview zijn ook vastgelegd: Resultaten van verbeteracties schooljaar 2011-2012 Voorgenomen beleid en verbeteracties voor schooljaar 2012-2013 op het gebied van examinering

Eindhoven, december 2012

MANAGEMENTREVIEW EXAMINERING 2011/2012 Op instellingsniveau

ROC EINDHOVEN

MOET NOG INGEVULD WORDEN

MANAGEMENTREVIEW EXAMINERING 2011/2012 VAN DE SCHOOL VOOR:

AUTOBRANCHE & MOBILITEIT

Autobranche & Mobiliteit

Managementreview Examinering in 2011-2012 van de School voor Autobranche & Mobiliteit Managementreview dd. 1 oktober 2012 Aanwezig: Roel Akkerman, Roel Burger, Hugo Evers, Claudie van Rulo, Rick van der Velden, Annemie van Oss (examencommissie A&M) Opmerking vooraf: voor een groot deel van de opleidingen worden goedgekeurde examens ingekocht, hieronder wordt voor standaarden m.b.t. examenproducten over zelf-ontwikkelde producten verantwoord. Het managementreview wordt gebruikt om de hoofdlijnen van het beleid en de verbeteracties voor schooljaar 2012-2013 te formuleren. Voor het cluster is het van belang prioriteiten te stellen en te focussen. EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering

1.2 Dekking van het kwalificatiedossier (volledigheid en passende complexiteit overeenkomstig kwalificatiedossier)

Omschrijving Er is een duidelijk onderscheid tussen ontwikkelgerichte toetsen en de examinering. Deze overgang is gemarkeerd.

Opmerkingen Ja.

Documenten Examenplan en onderwijsgids

De examencommissie geeft geëxpliciteerd aan op grond van welk examens en overige eisen het diploma wordt verstrekt.

Ja.

Examenplan

Studenten weten welke beoordeling meetelt voor het behalen van het diploma.

Ja.

Fronter:

Uit het examenplan blijkt dat de kwalificatie-eisen zijn opgenomen in de examens, waarbij meer dan driekwart van de werkprocessen per kerntaak - de essentie van het beroep inbegrepen – wordt geëxamineerd.

Ja. 100% van de werkprocessen wordt geëxamineerd, uitzonderingen worden verantwoord in het examenplan. Een deel van de afname van de PvB’s is uitbesteed bij IBKI. Een groot deel van de examens wordt ingekocht (STEM).Alle examenproducten worden voor afname vastgesteld. Ja. Bij de opleiding EAT is een probleem geconstateerd: door de manier en het tijdstip van afname (1 examen over meerdere kerntaken aan het einde van de opleiding) is een groot aantal studenten niet geslaagd en wordt de nominale studieduur overschreden. Ja. Voor examinering is voor het eerst deelgenomen aan de pilot voor COE. Er is gebruik gemaakt van gecertificeerde examens van Taalblokken en TOA.

Examenplan

Inhoud en toetsvorm zijn zodanig afgestemd op de vereisten, dat kennis, vaardigheden en houding in een goede balans passend worden beoordeeld.

De exameninstrumenten dekken de generieke kwalificatievereisten voor talen en rekenen zodanig af dat recht wordt gedaan aan het CEF-niveau dan wel het referentieniveau.

6

Verbeteracties

Voor schooljaar 2012-2013 wordt het examenprogramma gepubliceerd op fronter.

Examenplan

Bij het Team PA (EAT) wordt examinering (in overleg met Innovam) aangepast: meerdere examens, herkansing tijdens nominale opleidingsduur, doel is om het jaarresultaat en het aantal diploma’s te verhogen.

Examenplan Evaluatie COE

In schooljaar 2012-2013 wordt deelname COE met zoveel mogelijk studenten voortgezet.


1.3

Er is een verantwoorde procedure gevolgd voor het bepalen van de cesuur, zowel voor examenonderdelen als voor het examen als geheel.

Ja, een groot deel van de examens wordt ingekocht (STEM). Het streven is alle examenproducten voor afname vast te stellen, het afgelopen schooljaar is dat niet altijd gelukt. Ja.

Examenplan Overzicht vastgestelde examenproducten

Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning die recht doet aan het belang van kerntaken en werkprocessen.

Ja.

Examenplan en exameninstrument

Er is sprake van een weging van examens en examenopdrachten onderling, die geen afbreuk doet aan de genoemde cesuur.

Het gebruik van verschillende wegingsfactoren voor (onderdelen) van examens is weinig ontwikkeld. Alle kwalificerende examens moeten voldoende zijn, met uitzondering van Nederlands, Engels en rekenen (conform wettelijke regelingen).


Omschrijving Er is een beoordelingsvoorschrift dat voorzien is van richtlijnen die leiden tot een onafhankelijke beoordeling.

Opmerkingen Ja. Er zijn nieuwe formats voor exameninstrumenten (protos). Deze bevatten in beoordelings- en normeringsvoorschriften. Ja.

Documenten Examenbundel

Ja.

Examenbundel

De beoordelaar kan uit het beoordelingsvoorschrift halen welke eindwaardering gegeven moet worden.

Ja.

Examenbundel

De beoordelaar kan de gegeven waarderingen conform het beoordelingsvoorschrift herleidbaar onderbouwen.

Ja.

Examenbundel

Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier.

Ja.

Examenbundel

Als een examen(onderdeel) niet behaald wordt, wordt op het niveau van de prestatieindicator (of vergelijkbare beoordelingscriteria) verantwoord wat de oorzaak daarvan is.

Ja,

Examenbundel

Alle betrokkenen hebben een helder beeld van hoe het examen eruit ziet en hoe het wordt uitgevoerd en beoordeeld.

Ja. Er zijn nieuwe formats voor exameninstrumenten (protos). Deze bevatten in beoordelings- en

OER/opleidingsgids, Examenbundel, informatie leveranciers

Cesuur

De cesuur van het exameninstrumentarium ligt op het niveau waarop de student voldoet aan de vereisten. De cesuur is zodanig opgesteld dat de beoordeling (en daarmee de waardering van de kennis, vaardigheden en houding van de student) in totaal niet lager uitpakt dan voor de vakbekwaamheid voor het beroep en voor de generieke eisen voor taal en rekenen noodzakelijk is.

Indicator 1.4 Beoordelingswijze (zo objectief mogelijke beoordeling)

1.5 Transparantie

7

De prestatie-indicatoren (of vergelijkbare beoordelingscriteria) zijn herleidbaar in het beoordelingsvoorschrift opgenomen en er is een correct antwoordmodel of beoordelingsschema. De beoordelaar kan uit het beoordelingsvoorschrift opmaken welke (deel)waardering aan een prestatie van een student toegekend moet worden.

Verbeteren uitvoeren vaststellingsprocedure examens


Verbeteracties

Examenbundel

Op fronter wordt per opleiding een instructie geplaatst voor student en assessor.


Studenten en beoordelaars zijn geïnformeerd over de beoordelingscriteria en de wijze waarop het examen zal plaatsvinden en over de beoordeling.

Het exameninstrumentarium is voorzien van afnamecondities en aanwijzingen voor de beoordelaars en de studenten voor de uitvoering van het examen.

normeringsvoorschriften. Ja. Studenten worden door docent geïnformeerd in de klas, hij wordt daarbij verwezen naar de relevante documenten. Ja

Examencommissie 2-72012

De loopbaanbegeleider informeert de student over afname en herkansing van examens

Idem

Afname en beoordeling Examenstandaard 2: De examenprocessen van afname en beoordeling zijn deugdelijk. Indicator 2.1 Authentieke afname

Omschrijving Het examen bevat tenminste activiteiten die de student als beginnend beroepsbeoefenaar in het toekomstige beroep uitvoert, afgestemd op het kwalificatiedossier. De werkomstandigheden en de sociale context tijdens de beoordeling van het examen komen zoveel mogelijk overeen met die in het toekomstige beroep; onderdelen van het examen vinden in de reële beroepspraktijk plaats.

Het beroepenveld is betrokken bij de examinering en beoordeelt de afname en beoordeling als realistisch.

8

Opmerkingen Ja.

Ja. Voor alle opleidingen worden examenonderdelen e/o beoordelingen in de BPV uitgevoerd. Een deel van de examens wordt uitgevoerd in een examencentrum van Innovam, Electude of VOC. Ja, Het bedrijfsleven is vertegenwoordigd in de subexamencommissie A&M Bij de opleidingen AMB, TSP, TSB en VP wordt gebruik gemaakt van assessoren uit het bedrijfsleven. De legitimeringscommissie van STEM waarin vertegenwoordigd het bedrijfsleven is betrokken bij de ontwikkeling en vaststelling van de exameninstrumenten. BPV beoordeling wordt door de praktijkopleiders uitgevoerd De proeven worden bij IBKI door gecertificeerde leermeesters afgenomen. De proeven van autoschade en autospuiten niveau 2 en 3 worden bij VOC door erkende leermeesters afgenomen. Samenwerkingspartner Stem onderzoekt de tevredenheid beroepenveld. Daarnaast vullen assessoren een evaluatieformulier in. Tevredenheid van het beroepenveld is agendapunt op de leermeesteravond en op de regionale arbeidsmarktcommissie

Documenten Examenbundel

Examenbundel

Overeenkomst STEM Overeenkomst VOC Overeenkomst IBKI Samenwerkingsafspraken met Electude Notulen examencommissie.

Verbeteracties


In 2011-2012 is enquete bij BPVbedrijven uitgevoerd, de rapportage is nog niet beschikbaar. 2.2 Betrouwbaarheid

De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk.

Ja.

Protocollen zie Examencommissie 2-72012

Examenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van het examen of het examenprogramma, noch aan het niveau daarvan.

Ja.

Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student.

Ja, rollen in het proces van examinering zijn toebedeeld op basis van deskundigheid. Borging hiervan n de jaarlijkse gesprekscyclus Functioneren en Beoordelen. Klachten m.b.t. beoordeling bij examens worden besproken in de examencommissie. In 2011-2012 zijn 3 klachten ontvangen over examinering. Deze zijn volgens de klachtenprocedure afgehandeld.

Examenbundel Overzicht vastgestelde examens Protos (procedures en formats) Competentieprofielen in Protos. Notulen examencommissie.

Bij taalexamens wordt vastgelegd wat er moet gebeuren bij calamiteiten bij afname

Deskundigheid van beoordelaars uit het beroepenveld. Komend schooljaar is examinering onderwerp van een van de studiedagen.

Diplomering Examenstandaard 3: De diplomering is deugdelijk en geborgd. Indicator 3.1 Besluitvorming diplomering

Omschrijving De examencommissie besluit op basis van de examenresultaten van de student, afgezet tegen de exameneisen uit het kwalificatiedossier en het Examenbesluit, tot het verlenen van vrijstellingen voor delen van het examen en tot het verstrekken van diploma’s en (indien van toepassing) van certificaten. De examencommissie neemt deugdelijke besluiten op grond van de oordelen op de examenonderdelen en legt op basis van registratie van de besluitvorming verantwoording af.

3.2 Verantwoordelijkheid Examencommissie

9

De examencommissie vergewist zich met gepaste grondigheid en frequentie a.

van de kwaliteit van het exameninstrumentarium,

b.

de afname, de beoordeling, de besluitvorming betreffende de diplomering

Opmerkingen Ja. De examencommissie heeft veel voorkomende vrijstellingen vrijstellingen vastgelegd en gecommuniceerd naar de loopbaanbegeleiders Ja. De systemen voor registratie van resultaten bieden onvoldoende ondersteuning voor een diplomabeslissing. Veel controles moeten handmatig uitgevoerd worden, dit leidt tot overbelasting van de studentenadministratie. Beoordelingslijst kan niet gegenereerd worden uit P&S. Ja. a) Het beheer van vastgestelde examenproducten en examenplannen ligt nu bij één persoon van het examenbureau. De vaststelling van examenplannen en

Documenten Notulen examencommissie

Verbeteracties

Notulen examencommissie

Verbeteren, vervangen fronter/P&S

Jaarverslag Stem Jaarverslag Innovan, Jaarverslag IBKI, Managementreview examinering

Scholing deskundigheid alle medewerkers op het gebied van examinering: studiedag.


c.

van de deskundigheid van bij de examinering betrokken personen.

Om vast te stellen of de beoordeling adequaat verloopt, wordt gebruik gemaakt van bijvoorbeeld resultatenanalyses, studenttevredenheidevaluaties en gegevens uit (steekproefsgewijze) dubbele beoordelingen.

De examencommissie legt vast wanneer beoordelingsresultaten worden aangepast, en tot welke verbeteracties deze correcties leiden of hebben geleid. De examencommissie analyseert wat mogelijke oorzaken zijn als de beoordelingen niet naar wens verlopen.

10

examens door collega’s geeft een waarborg voor de kwaliteit van de examens. Echter, de planning en uitvoering hiervan behoeft aandacht. b) De afname van examens wordt regelmatig bezocht door een lid van de examencommissie. Aan het einde van het schooljaar is een steekproefsgewijze controle uitgevoerd op de diplomering. c) Jaarlijks wordt een evaluatie van het examenproces uitgevoerd door middel van een managementreview, het complete proces wordt doorgelicht incl. deskundigheid. Scholing gepland op studiedag voor schooljaar 2012-2013. Ja. Examinering maakt deel uit van studentenlunches, studentenpanel, JOB-Monitor. Er wordt incidenteel een evaluatie met studenten en beoordelaars uitgevoerd met een enquête. Bij EAT –bbl3 is –naar aanleiding van slechte resultaten- met verschillende klassegesprek uitgevoerd. Ja.

In elke examencomissie wordt, op basis van processen verbaal van de afname, een zelfevaluatie uitgevoerd over de voorafgaande periode.

Verslagen teamoverleg en MT. Resultaten onderzoek op verbeterbord en via fronter naar studenten. Notulen examencommissie



Resultaat van verbeteracties uit vorig schooljaar (2011-2012) Acties Uitvoering opleiding voor praktijkopleiders i.s.m. Innovam Ontwikkelen en bijstellen examens en bijbehorende documenten Gebruik FPS voor registratie kwalificerende resultaten. Deelname Pilot Centraal Ontwikkelde Examens (COE) Nederlands en Rekenen De studenten worden voorbereid op examinering door informatie over het examenprogramma, examentrainingen (bbl) Implementatie SPOOR-processen (examinering) RtE

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Deelname (pilot) COE met zoveel mogelijk studenten Deskundigheidsbevordering examinering medewerkers met studiedag Evaluatie en verbeteren processen rondom vaststelling examens Informatie voor studenten en docenten rondom examinering op fronter.

11

Gereed Gereed Gereed Gereed Gereed, tevredenheid studentenpanel > 6,5 Jaarplan 2012-2013 Gereed


BOUWEN & WONEN

Bouwen & Wonen

Managementreview Examinering in 2011-2012 van de School voor Bouwen & Wonen Managementreview dd. 2-10-2012 Aanwezig: Harm Deiman, Jolanda Snelders, Marty Willems, Annemie van Oss Voor een groot deel van de opleidingen worden goedgekeurde examens ingekocht, hieronder wordt voor standaarden m.b.t. examenproducten over zelf-ontwikkelde producten verantwoord. Het managementreview wordt gebruikt om de hooflijnen van het beleid en de verbeteracties voor schooljaar 2012-2013 te formuleren. Voor het cluster is het van belang prioriteiten te stellen en te focussen.

13

Bouwen & Wonen

EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering

1.2 Dekking van het kwalificatiedossier


Opmerkingen Ja

Documenten Examenplan en onderwijsgids


Ja

Examenplan en onderwijsgids


Ja Studenten worden in de klas geïnformeerd door de loopbaanbegeleider. Bij Fundeonopleidingen wordt gebruik gemaakt van de opleidingsboeken van Fundeon. Niet van alle opleidingen is een OER Light aanwezig. Informatie in de onderwijsgids is weinig toegankelijk. Ja. 100% van de werkprocessen wordt geëxamineerd, uitzonderingen worden verantwoord in het examenplan. Voor een groot deel van de opleidingen worden goedgekeurde examens ingekocht, hieronder wordt voor standaarden m.b.t. examenproducten over zelfontwikkelde producten verantwoord. Er wordt naar gestreefd alle examenproducten worden voor afname vast te stellen, nog niet in alle gevallen wordt dat jaarlijks gerealiseerd. Ja

Fronter P&S en Oer Light.

Ondersteun studenten en docenten in het gebruik van FPS en onderwijsgids.

Zie examenplan. Zie ook overzicht Examenplannen cohort 2011-2012 https://fronter.com/rocei ndhoven/links/structurep rops.phtml?temp=temp& init_load=1#

Actualiseer jaarlijks overzicht inkoop en uitbesteding.


(volledigheid en passende complexiteit overeenkomstig kwalificatiedossier)



14

Ja. Voor examinering talen en rekenen is voor het eerst deelgenomen aan de pilot voor COE. Er is gebruik gemaakt van gecertificeerde examens van TOA. Door de vele varianten

Verbeteracties

Leg afspraken mbt kwaliteit en verbetertrajecten(termijn) van ingekochte producten en diensten contractueel vast. Inmiddels is bij aanvang schooljaar in alle teams de problematiek rondom examinering taal en rekenen uitgebreid besproken.

Bouwen & Wonen

1.3


Cesuur De cesuur van het exameninstrumentarium ligt op het niveau waarop de student voldoet aan de vereisten. De cesuur is zodanig opgesteld dat de beoordeling (en daarmee de waardering van de kennis, vaardigheden en houding van de student) in totaal niet lager uitpakt dan voor de vakbekwaamheid voor het beroep en voor de generieke eisen voor taal en rekenen noodzakelijk is.


15

(verschillende eisen door variatie aan dossiers, cohorten) en gedetailleerde regelgeving van het Ministerie heeft de uitvoering problemen opgeleverd. Extra controles zijn uitgevoerd, sommige studenten hebben op het laatste moment nog extra examens moeten doen. In een paar gevallen is Meijerink geëxamineerd i.p.v. CEF, studenten hebben bij diploma een vertaaltabel ontvangen en taalverzorging heeft geen invloed gehad op de diplomabeslissing (besluit MT 28 juni 2012) Ja. De cesuur wordt vastgesteld bij de ontwikkeling van de examens. Ja.

Zie Protos

Zie examenplannen en exameninstrumenten.


Ja.

Zie examenplannen en exameninstrumenten.


Het gebruik van verschillende wegingsfactoren voor (onderdelen) van examens is weinig ontwikkeld.

Zie examenplannen en exameninstrumenten

Opmerkingen Ja. Er zijn nieuwe formats ontwikkeld voor exameninstrumenten (protos). Deze bevatten in beoordelings- en normeringsvoorschriften. Ja

Documenten Examenplan en bijhorende exameninstrumenten

De beoordelaar kan uit het beoordelingsvoorschrift opmaken welke (deel)waardering aan een prestatie van een student toegekend moet worden.

Ja

Beoordelingsinstrument bij examen


Ja



De prestatie-indicatoren (of vergelijkbare beoordelingscriteria) zijn herleidbaar in het beoordelingsvoorschrift opgenomen en er is een correct antwoordmodel of beoordelingsschema.


Verbeteracties

Bouwen & Wonen

1.5 Transparantie


Ja



Ja



Ja



Ja. Er zijn nieuwe formats ontwikkeld voor exameninstrumenten (protos). Deze bevatten informatie over de afname en beoordeling. Ja. Informatie is beschikbaar via fronter. Studenten worden door docent geïnformeerd in de klas. Ja



Zie exameninstrument


Omschrijving Het examen bevat tenminste activiteiten die de student als beginnend beroepsbeoefenaar in het toekomstige beroep uitvoert, afgestemd op het kwalificatiedossier.

Opmerkingen

Documenten Zie examenplan en exameninstrument

De werkomstandigheden en de sociale context tijdens de beoordeling van het examen komen zoveel mogelijk overeen met die in het toekomstige beroep; onderdelen van het examen vinden in de reële beroepspraktijk plaats.

Ja. Voor alle opleidingen worden examenonderdelen e/o beoordelingen in de BPV uitgevoerd.

Zie examenplan en exameninstrument


Ja, Bij bbl goed in voorzien, oa door inkoop en samenwerking bij constructie.

Contracten leveranciers; Bouw bol 4: Projectbeschrijving van afstudeerders.

Ja

Bij bol betrokkenheid bij afname van examens. Bouw BOL 4 en Interieur bol4: Studenten werken aan een projectopdracht van het BPV-bedrijf, deze opdracht wordt door school geaccordeerd om het niveau te waarborgen. Bij HMI bol beoordeelt het BPV-

16

Verbeteracties

Stimuleer betrokkenheid BPV: De opzet voor het betrekken van BPV-bedrijven bij de niveaubewaking van afstudeerprojecten uitvoeren.

Bouwen & Wonen

2.2 Betrouwbaarheid

17


bedrijf de student mbv een beoordelingslijst de projectopdracht van de student(eindtermen). Er is een opzet gemaakt om het bpvbedrijf te betrekken bij de niveaubewaking van de afstudeerprojecten, maar door tijdsdruk bij de bedrijven komt dit niet goed uit de verf. Deels. Praktijk: examinering bbl is grotendeels uitbesteed. Bij Bouw is er een controle door CBG voor de examinering in de BPV; jaarlijkse audit door Fundeon. De examinering PvB van SH&M is uitbesteed aan de exameninstelling. Bij aanvraag van het examen treedt vertraging op door de financiële afhandeling van SH&M, en door geringe beschikbaarheid treedt bij planning nogmaals vertraging op., Theorie-examens worden bij Bouw bbl via het systeem van Fundeon afgenomen, individueel, in de klasse-situatie tijdens de les en zonder aanmelding vooraf.(beeldschermtoetsing). Alle andere theorie-examens worden aangevraagd door de docent bij het examenbureau. Het examenbureau signaleert dat soms examens te laat worden aangevraagd; protocollen en presentielijsten worden onvoldoende getekend; Bij Bouw bol4 wordt het CGI afgenomen volgens de methode STARR. Er is collegiale afstemming. Er is een verschil in aanpak tussen docenten (kennisgericht vs. competentiegericht). De examinering met PvB en CGI vindt zonder medewerking van het examenbureau plaats, gebruik van alleen vastgestelde examens is niet geborgd..

Protocollen, presentielijsten. Rapportage Savantis mbt examinering praktijk. Rapportages CBG mbt examinering in de BPV door gecertificeerde leermeester. Rapportage Fundeon mbt beeldschermtoetsing. Goedkeurende verklaring Fundeon. Rapportage SH&M mbt examencentrum.

Beeldschermtoetsing Fundeon meer gestructureerd uitvoeren, 1x per maand. Voor afname van examens worden uitdrukkelijk gestuurd op het werken volgens de afgesproken procedures.

Bouwen & Wonen


Ja


Ja Rollen in het proces van examinering zijn toebedeeld op basis van deskundigheid. Borging hiervan n de jaarlijkse gesprekscyclus Functioneren en Beoordelen. Klachten m.b.t. beoordeling bij examens worden besproken en afgehandeld in de examencommissie. In 2011-2012 zijn 5 klachten ontvangen over examinering. Deze zijn volgens de klachtenprocedure afgehandeld.

Examenbundel Overzicht vastgestelde examens Protos (procedures en formats) Competentieprofielen in Protos. Notulen examencommissie.



18

Omschrijving De examencommissie besluit op basis van de examenresultaten van de student, afgezet tegen de exameneisen uit het kwalificatiedossier en het Examenbesluit, tot het verlenen van vrijstellingen voor delen van het examen en tot het verstrekken van diploma’s en (indien van toepassing) van certificaten.

Opmerkingen Ja. Student wordt altijd schriftelijk en mondeling geïnformeerd na een verzoek tot vrijstelling

Documenten Verzoeken aan examencommissie Notulen examencommissie

Verbeteracties

De examencommissie neemt deugdelijke besluiten op grond van de oordelen op de examenonderdelen en legt op basis van registratie van de besluitvorming verantwoording af.

Ja. De systemen voor registratie van resultaten bieden onvoldoende ondersteuning voor een diplomabeslissing. Veel controles moeten handmatig uitgevoerd worden, dit leidt tot overbelasting van de studentenadministratie. Beoordelingslijst kan niet gegenereerd worden uit P&S. Ja. In 2011-2012 zijn verbeteringen ingezet door het maken van afspraken. In de teams wordt de noodzaak van het handhaven van deze afspraken nog onvoldoende gevoeld. Betrokken docenten zijn weinig op


Verbeteren, vervangen fronter/P&S

Managementreview examinering. Goedkeurende verklaring Fundeon, licentie examencentra Savantis en SH&M. Jaarlijks onderzoek door de Inspectie.

Het beleid richt zich op het behalen van basisniveau: - Bevorderen deskundigheid van de betrokken (examinering en onderwijsinhoudelijk) - Er is overzicht over de hoeveelheid te ontwikkelen en



b.

van de afname, de beoordeling, de besluitvorming betreffende de diplomering

c.


Bouwen & Wonen



19

de hoogte van de kwaliteitseisen aan de examinering. Het beheer van examenproducten en examenplannen is onvoldoende belegd. Er zijn geen vaste afspraken over aanlevering en opslag van examenproducten. Er is onduidelijkheid over de status van examenproducten. Vaststelling van examenplannen en examenproducten verloopt ad hoc. Het vaststellen van resultaten en de diplomeringsbeslissing is weinig gestandaardiseerd en de kwaliteit is onvoldoende geborgd. Jaarlijks wordt een evaluatie van het examenproces uitgevoerd door middel van dit managementreview (onder verantwoordelijkheid van de examencommissie) Ja. Evaluatie van examinering d.m.v. enquête bij student. Examinering maakt deel uit van studentenlunch, studentenpanel, JOB Monitor. Bij beeldschermtoetsing en bij afname in examencentra worden resulaatanalyses uitgevoerd door de leveranciers. Ja.

Ja.

vast te stellen examenproducten; er is een planning; vastgestelde examenplannen en examens zijn tijdig gereed en worden gebruikt - Voor afname van examens worden uitdrukkelijk gestuurd op het werken volgens de afgesproken procedures. De vaststelling van examenproducten verloopt volgens de vastgestelde processen; de examenproducten voldoen aan de gestelde eisen

Rapportage enquête Notulen examencommissie


Bouwen & Wonen

Resultaat van verbeteracties uit vorig schooljaar (2011-2012) Examinering en onderwijs van alles wat niet in het KD staat opnemen als keuzeruimte in de onderwijsgids (bv. CNC, HBO-doorstroom module) Aangehouden in afwachting van nieuwe regelgeving op het gebied van keuzeruimte in de nieuwe kwalificatiedossiers. Onderzoek ingekochte examens: past dit binnen visie ROC-Eindhoven? ROC Eindhoven heeft deelgenomen aan de kwaliteitscontrole van examenproducten bij Fundeon. (Rapportage verwacht in oktober 2012). Beoordeling door 2e assessor (niet uitgevoerd) Alle kwalificerende toetsing wordt geëvalueerd. Rapportage daarover naar de examencommissie. Gerealiseerd: rapportage wordt besproken in MT van november 2012 Zie flexam: - Examenplannen zijn geaccordeerd door de onderwijsteams, vastgesteld door de examencommissie en verwerkt in de onderwijsgids (zodanig dat de onderwijsgids uitsluitsel geeft voor de beslissing over diplomering) deels uitgevoerd, is voor schooljaar 2012-2013 opnieuw opgepakt. - Examens zijn vastgesteld voor afname Deels gerealiseerd - Moedermodel van Examens (compleet met beoordelingsmodel, cesuur en normeringsvoorschrift zijn gearchiveerd bij het bedrijfsbureau Vertraagd - Gemaakt examenwerk van studenten wordt door assessor ingeleverd bij het examenbureau Gerealiseerd

Voorgenomen beleid Het beleid richt zich op het behalen van basisniveau: - bevorderen deskundigheid van de betrokken (examinering en onderwijsinhoudelijk) - er is overzicht over de hoeveelheid te ontwikkelen en vast te stellen examenproducten; er is een planning; vastgestelde examenplannen en examens zijn tijdig gereed en worden gebruikt - Voor afname van examens worden uitdrukkelijk gestuurd op het werken volgens de afgesproken procedures. De vaststelling van examenproducten verloopt volgens de vastgestelde processen; de examenproducten voldoen aan de gestelde eisen Daarnaast extra aandacht op de volgende punten: - stimuleren betrokkenheid BPV-bedrijven door inbreng van bedrijven bij de niveaubewaking van eindopdrachten (bol4) - bij inkoop van examenproducten wordt uitdrukkelijk bekeken of de producten passen bij de onderwijsvisie van de school voor B&W

20


TECHNIEK

Techniek

Managementreview Examinering in 2011-2012 van de School voor Techniek Managementreview dd. 1 oktober 2012 Aanwezig: MT school voor Techniek / stafmedewerker KWZ en Toezicht T&E Gedurende het schooljaar 2012-2013 zal de school zich binnen de teams bezig houden met de ontwikkeling van het onderwijs. Dit zal als direct gevolg hebben dat processen en procedures ook worden bijgesteld. Het management review examinering zal dan ook aan verandering onderhevig zijn gedurende het schooljaar 2012-2013. EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1


Onderscheid ontwikkelgerichte toetsen en examinering De examencommissie geeft geëxpliciteerd aan op grond van welk examens en overige eisen het diploma wordt verstrekt.



22


Opmerkingen Elke opleiding (en eventuele variant) beschikt over een onderwijsgids. Hierin is het verschil aangegeven tussen ontwikkelingsgerichte en examinerende toetsen, dit met bijbehorende normering, waardering etc. Elke opleiding (en eventuele variant) beschikt, naast een onderwijsgids, over een examenplan. Hierin is aangegeven welke onderdelen op welke manier worden geëxamineerd. Studenten hebben allemaal inzage in de onderwijsgids waarin duidelijk het onderscheid tussen ontwikkelingsgericht en examinerend wordt gemaakt. Verder worden resultaten aan de student gerapporteerd en ook in deze rapportage wordt het onderscheid ontwikkelingsgericht en examinerend gemaakt Elk exameninstrument, genoemd in het examenplan, beschikt over een verantwoordingsdocument waarin precies wordt aangegeven welke werkprocessen (KT) worden afgetoetst. Al deze instrumenten worden opgenomen in het examendeel van de onderwijsgids en in het examenplan van de opleiding. Hier vindt de controle

Documenten Onderwijsgids

Verbeteracties Heldere communicatie student, ook bij flexibele instroom

Onderwijsgids Examenplan

Onderwijsgids Rapportage student

Verantwoordingsmatrix per exameninstrument Examenplan Onderwijsgids

Scherpere controle op examinering van 100% van de werkprocessen

Techniek



1.3


Cesuur



23

plaats op examinering van voldoende werkprocessen. Het cluster Techniek gaat in principe uit van 100%. Elk exameninstrument wordt vastgesteld door een subexamencommissie en met behulp van een checklist. Hierin zijn kennis, vaardigheden etc. opgenomen. De school maakt gebruik van ingekochte exameninstrumenten van Deviant en Toa. Deze exameninstrumenten worden beoordeeld door de inspectie. De school neemt verder deel aan de pilot centrale examinering.

Alle exameninstrumenten worden voorzien van een verantwoordingsdocument en een beoordelingsprotocol. Dit wordt, voor afname, formeel vastgesteld door de sub-examencommissie. De sub-examencommissie wordt vooraf formeel benoemd door de examencommissie, hun taken, bevoegdheden en verantwoordelijkheden zijn duidelijk vastgelegd. Alle exameninstrumenten worden voorzien van een verantwoordingsdocument en een beoordelingsprotocol. Dit wordt, voor afname, formeel vastgesteld door de sub-examencommissie De sub-examencommissie wordt vooraf formeel benoemd door de examencommissie, hun taken, bevoegdheden en verantwoordelijkheden zijn duidelijk vastgelegd. Alle exameninstrumenten worden voorzien van een verantwoordingsdocument en een beoordelingsprotocol. Dit wordt, voor afname, formeel vastgesteld door de sub-examencommissie De

Checklist exameninstrument

Toetsen Rek / Ned / MVT Regelingen COE

Verantwoordingsdocument Beoordelingsprotocol Samenstelling examencommissies Verslagen subexamencommissie



Vanuit de pilot door evalueren naar volledige examinering COE. Wb. nstellingsexamens kijken naar de mogelijkheden om dit te integreren in reguliere opdrachten Jaarlijkse bijstelling examencommissies en vaststelling in MT

Jaarlijkse bijstelling van de exameninstrumenten

Techniek


Indicator 1.4 Beoordelingswijze


(zo objectief mogelijke beoordeling)

Opmerkingen Alle aandachtspunten behorende bij indicator 1.4 zijn structureel onderdeel van het vaststellingsdocument (checklist) en worden vooraf formeel vastgelegd. De vaststellingscommissie stelt elk exameninstrument formeel vast. Verder beschikt elk assessment of PvB over een beoordelingsprotocol.


Documenten Vaststellingsdocument Exameninstrument Beoordelingsprotocol PvB Samenstelling examencommissies Verslagen subexamencommissie

Verder beschik elk onderwijsteam over een eigen sub-examencommissie waarin de beoordeling wordt beoordeeld en geëvalueerd. Dit alles wordt vastgelegd in het verslag van de subexamencommissie Idem

Idem


Idem

Idem


Idem

Idem


24

sub-examencommissie wordt vooraf formeel benoemd door de examencommissie, hun taken, bevoegdheden en verantwoordelijkheden zijn duidelijk vastgelegd. Alle exameninstrumenten worden voorzien van een verantwoordingsdocument en een beoordelingsprotocol. Dit wordt, voor afname, formeel vastgesteld door de sub-examencommissie De sub-examencommissie wordt vooraf formeel benoemd door de examencommissie, hun taken, bevoegdheden en verantwoordelijkheden zijn duidelijk vastgelegd.

Verbeteracties Jaarlijkse bijstelling exameninstrumenten

Techniek

1.5 Transparantie


Idem

Idem


Idem

Idem


Idem

Idem


Elk exameninstrument (PvB) is samengesteld conform een vooraf vastgestelde procedure.Hierin zijn een aantal vaste onderdelen opgenomen-

Instructies student, docent, praktijkopleider, assessor Beoordelingsprotocol Gestelde eisen Leidraad eindgesprek Instructie vastst.comm Opdracht Melding opdracht Checklist opdracht Beoordelingsformulier praktijkopleider Toezichtformulier school Beoordelingsprotocol Eindbeoordeling PvB Eindbeoordeling kwalificatie Zie hierboven

-



Ruim voor start PvB ontvangt elke student, docent en praktijkopleider een volledige set PvB. Ruim voor start PvB ontvangt elke student, docent en praktijkopleider een volledige set PvB.

Betere communicatie naar student en praktijkopleider

Toelichting bij PvB

Zie hierboven


25


Opmerkingen Prestatieindicatoren, werkprocessen en kerntaken zijn uitgangspunt voor het exameninstrument. Elk instrument wordt beoordeeld aan de hand van een checklist en door de vaststellingscommissie

Documenten Verantwoordingsinstrument per exameninstrument Checklist exameninstrument

Verbeteracties Jaarlijks bijstellen checklist

Techniek



2.2 Betrouwbaarheid

De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk. Examenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van het examen of het examenprogramma, noch aan het niveau daarvan. Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student.

26

De school neemt waar mogelijk de PvB af in het bedrijf waar de student werkzaam is of stage loopt. Op die manier worden de reële werkomstandigheden optimaal gebruikt bij de uitvoering van afname en beoordeling. Tijdens de PvB wordt de student bezocht door zijn/haar begeleider, wordt de proeve afgesloten met een eindgesprek in het bijzijn van student, praktijkopleider, docent en assessor. Het format PvB is samengesteld in nauwe samenwerking met het beroepenveld, de zg. praktijkopleiderscommissies. Verder wordt het format door student en praktijkopleider ingevuld, uitgaande van de reële bedrijfssituatie. Om te borgen dat de inhoud van de af te nemen PvB wel voldoet aan de criteria wordt een PvB eerst aangemeld en beoordeeld voordat tot uitvoering kan worden overgegaan. Afname verloopt volgens de instructies surveillanten. Medewerkers van het examenbureau bezoeken de afname locaties om bij eventuele calamiteiten te kunnen inspringen. Eventuele onjuistheden worden opgenomen in het proces verbaal en in het jaarverslag examenbureau. Ook de studenten vullen direct na afname een enquête formulier in waarin zij aangeven hoe zij denken over inhoud, afname, beoordeling, etc. Daar waar nodig worden direct verbeteracties ondernomen of de verbeteracties worden opgenomen in de P&C cyclus van de scholen. Afname van de

Volledige set PvB

Jaarlijks bijstellen PvB

Volledige set PvB

Instructie surveillant Proces verbaal Verslagen examen bureau Enquêteformulier student. Draaiboek VG, procedure Pvb en EG Beoordelingsprotocol Vaststellingsverslagen sub examencommissie Handboek T&E Samenstelling/taken examencommissies Docentenhandleiding T&E

Jaarlijks bijstellen handboek T&E Jaarlijks bijstellen interne processen en procedures Jaarlijks bijstellen samenstelling/taken examencommissies Jaarlijks bijstellen studentenhandleiding

Techniek

instrumenten VG, PvB en EG verloopt volgens een vaste procedure. Tijdens de PvB, die op locatie wordt afgenomen, wordt het examen begeleid en gecontroleerd op inhoud en proces door de instelling. Na het EG worden de betrokkenen geënquêteerd. De op en aanmerkingen worden meegenomen in de P&C cyclus. Naast de centrale examencommissie beschikt elk team over een eigen sub examencommissie. In beide commissies wordt de beoordeling beoordeeld en geëvalueerd. De commissies bepalen of bijstelling noodzakelijk is.



27

Opmerkingen Naast de centrale examencommissie beschikt elk team over een eigen sub examencommissie. In beide commissies wordt de beoordeling beoordeeld en geëvalueerd. De commissies bepalen of bijstelling noodzakelijk is. Resultaten van studenten worden besproken tijdens de studentbesprekingen met betrokken docenten. Resultaten van deze studentbesprekingen worden vastgelegd en voorgelegd aan de sub examencommissie. Deze bepaald of een student is geslaagd/gezakt/ gecertificeerd is.

Documenten Evaluatieverslagen Jaarverslag T&E Verslagen werkgroep bijeenkomsten. KWZ cyclus Format verbeteracties Evaluatie toetsperiode

Verbeteracties

Techniek

3.2 Verantwoorde-lijkheid Examencommissie



b.


c.


Om vast te stellen of de beoordeling adequaat verloopt, wordt gebruik gemaakt van bijvoorbeeld resultatenanalyses, studenttevredenheidevaluaties en gegevens uit (steekproefsgewijze) dubbele beoordelingen. De examencommissie legt vast wanneer beoordelingsresultaten worden aangepast, en tot welke verbeteracties deze correcties leiden of hebben geleid.

28

De examencie is ingericht conform het ROC brede handboek T&E. De examencie delegeert een deel van haar taken naar de subexamencommissies. Deze taken zijn vastgelegd. Van alle evaluaties zijn verslagen voorhanden. Na elke toetsperiode wordt er een evaluatieverslag gemaakt door het examenbureau. Hierin worden alle op- aanmerkingen meegenomen en daar waar nodig als verbeteractie geformuleerd. Er is verder een jaarverslag T&E waarin een totale evaluatie per schooljaar plaatsvindt. Er zijn diverse werkgroepen met externen waarbij de kwaliteit van examinering wordt bepaald, geëvalueerd eb verbeterd Evaluatie en bijstelling van processen is een structureel onderdeel van de KWZ cyclus. Verbeteracties worden geformuleerd in het format verbeteracties. Verder vindt er na elke toetsperiode een evaluatie plaats. Jaarlijks worden de evaluatieverslagen en het jaarverslag besproken in de examencommissie. Beide documenten worden door hen formeel vastgesteld. T&E is eveneens een regelmatig terugkerend agendapunt op het managementoverleg van de scholen, ook hierin komt de voortgang aan de orde. De school maakt gebruik van tevredenheidsmetingen, ROC breed (studentenpanel en job odin) en interne metingen (SPOMM) Resultaten hiervan zijn onderdeel van de pdca cyclus van de school.

ROC brede handboek T&E Docentenhandleiding Samenstelling commissies Verslagen commissies

Meer overleg examencommissie naast sub-examencie.

Resultaten metingen Analyses metingen Verbeteracties KWZ rapportage Toetsenquete Verslagen sub-examencie Resultaten 2e beoordeling

Terugkoppeling resultaten naar studenten, praktijkopleiders en medewerkers ROC

Techniek

De examencommissie analyseert wat mogelijke oorzaken zijn als de beoordelingen niet naar wens verlopen.

29

Alle resultaten tussen 5 en 6 worden voorgelegd voor een tweede beoordeling. Minimaal 25% van de toetsen wordt door een tweede beoordelaar beoordeeld. Bij afwijkende resultaten wordt dit voorgelegd aan de subexamencommissie en zij maken de uiteindelijke beslissing. Deze worden opgenomen in het verslag van de examencommissie. Verder wordt bij minimaal 25% van de toetsen een enquête voor de student toegevoegd. Zij kunnen hierin hun mening geven over de toets, de beoordeling, de afnamecondities, enz. Wanneer hiertoe aanleiding is worden deze resultaten voorgelegd aan de subexamencommissie. Zij bepalen of verdere maatregelen nodig zijn en leggen dit vast in hun verslag.

Techniek

Resultaat van verbeteracties schooljaar 2011-2012 Verbeteracties / actiepunten

Voor Wie

Veran Indicator tw

Evaluatie Febr.2012

Evaluatie Juli 2012

TP

MO

Alle kwalificaties zijn vorm gegeven in de owg waarin examinering is opgenomen, hierbij uitgaande van het ROC brede format.

Handboek T&E

TP

MB

T&E conform de in spoor omschreven processen

OWG 2012-2013 zijn ingericht. Hierin zijn de examenprogramma’s opgenomen. Er zijn binnen het cluster duidelijke afspraken gemaakt over de inrichting en beoordeling. Het handboek T&E ROC Eindhoven is leidend .

Examenprofielen / Examenservice

T

MB

Deelname landelijke initiatieven Inrichten examinering conform de gegeven indicatoren

Toetsing: Kwalificatiedossier is uitgangspunt voor examinering waarbij de indicatoren, geformuleerd in de RtE, in acht worden genomen.

Examinering wordt uitgevoerd conform de ROC brede processen. Examenprofiel MEI is klaar en kan vanaf 12-13 worden gebruikt. Op welke manier deel genomen gaat worden aan examenservice moet nog worden bekeken.

Het cluster heeft enkele van haar examenproducten ter beoordeling ingezonden aan examenservice. Gewacht wordt op hun beoordeling om te kijken of en wat bijgesteld zou moeten worden.

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 De inzette verbeteractie ’s, zie voorgaande pagina’s, zijn geëvalueerd in juli 2012 en worden, waar nodig, opgenomen in de pdca cyclus van de school. Verder beschikt de school over een jaarplan 2012-2013 waarin het beleid van de school is geformuleerd, examinering is onderdeel van het jaarplan. Het jaarplan is gepubliceerd binnen het cluster en beschikbaar voor externen wanneer nodig.

30


PROCESTECHNIEK

Procestechniek

Managementreview Examinering in 2011-2012 van de School voor Procestechniek (SvP) Managementreview dd. 01-10-2012 Aanwezig: MO SvP, Kwaliteitsmedewerker SvP, Subexamencommissie SvP EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1


Onderscheid ontwikkelgerichte toetsen en examinering

De examencommissie geeft geëxpliciteerd aan op grond van welke examens en overige eisen het diploma wordt verstrekt.


32

Opmerkingen Binnen de operatoropleidingen zijn de volgende ontwikkelingsgerichte toetsen: kennistoets, deel/themaopdrachten, praktijkchecks, portfolio en beoordelingsopdrachten. Het examenprogramma bestaat uit een Proeve van Bekwaamheid (PvB) en een criteriumgericht interview (CGI). In de onderwijsgids is per onderwijsproduct aangegeven of het een onderdeel is van het onderwijsprogramma (OP) of het examenprogramma (EP). In de examenwijzer staan de voorwaarden beschreven om aan het examen te mogen deelnemen. De student krijgt, bij het aanvragen van de PVB en het CGI, een overzichtslijst van de eisen waaraan hij moet voldoen om aan deze examens te mogen deelnemen. Het betreft hier zowel de eisen uit het kwalificatiedossier als de generieke eisen voor taal, rekenen en loopbaan en burgerschap. De docent en de student ondertekenen beide dit formulier indien aan de voorwaarden is voldaan. In de onderwijsgids is aangegeven welke onderdelen van het onderwijsloopbaan-en examenprogramma worden beoordeeld. Daarnaast is op het portfoliobeoordelingsformulier exact aangegeven welke onderdelen beoordeeld worden.

Documenten Examenwijzer Werkend Leren in de Procestechniek (WLP) Leerwijzers WLP niveau 1-2-3-4 Onderwijsgids Brochure Werkend Leren in de Procestechniek niveau 1-2-3-4

Verbeteracties In de leerwijzer voor de student kan het verschil tussen ontwikkelgerichte toetsing en examinering scherper aangegeven worden. Deze feedback is doorgegeven aan het consortium WLP.

Examenwijzer WLP Leerwijzers Werkend Leren in de Procestechniek (WLP) niveau 1-2-3-4 Formulier portfoliobeoordeling

Het formulier portfoliobeoordeling opnemen in de intakeprocedure.

Examenwijzer WLP Leerwijzers Werkend Leren in de Procestechniek (WLP) niveau 1-2-3-4 Onderwijsgids Brochure Werkend Leren in de Procestechniek niveau

Een blanco cijferlijst toevoegen aan de intakeprocedure.

Procestechniek



(volledigheid en passende complexiteit overeenkomstig kwalificatiedossier) Inhoud en toetsvorm zijn zodanig afgestemd op de vereisten, dat kennis, vaardigheden en houding in een goede balans passend worden beoordeeld.


1.3


Cesuur


33

In de examenwijzer WLP is voor iedere opleiding een examenformulier opgenomen met daarin een examenplan en een scoreformulier. Hierin is aangegeven welke kerntaken, werkprocessen en competenties/criteria worden beoordeeld. Alle kerntaken met bijbehorende werkprocessen worden geëxamineerd (100%). De examinering bestaat uit een methodemix: een PvB en een CGI. Door middel van een integrale werkopdracht wordt op competentieniveau getoetst/beoordeeld. Voor lezen, luisteren en schrijven wordt gebruik gemaakt van de TOAtoetsen waarmee aan de generieke kwalificatie-eisen wordt voldaan.

In samenwerking met het Consortium WLP is de examenwijzer met daarin het scoreblad opgesteld en vastgesteld; hierbij is ook het bedrijfsleven betrokken geweest. In de examenwijzer WLP is in het scoreblad per werkproces de cesuur aangegeven. De beoordelingscriteria op het scoreblad (uit de examenwijzer) waaraan voldoen moeten worden volgens de cesuur, zijn direct gekoppeld aan de prestatieindicatoren uit het

1-2-3-4 Formulier portfoliobeoordeling Examenwijzer WLP

Examenwijzer WLP Document PvB met daaraan gekoppeld de werkopdracht

TOA-toetsen (www.toets.nl)

Examenwijzer WLP

Examenwijzer WLP

Op dit moment loopt de actie om het “schrijven” uit de TOA-toets te halen. Hiervoor in de plaats komt een schrijfopdracht waarmee zowel de generieke als de KD-eisen worden beoordeeld. Daarnaast loopt de actie om “spreken“ en “gesprekken voeren” te beoordelen tijdens de opleiding .

Procestechniek

kwalificatiedossier. Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning die recht doet aan het belang van kerntaken en werkprocessen.

Alle werkprocessen worden beoordeeld en moeten voldoende zijn. Per werkproces is een aantal beoordelingscriteria geformuleerd gerelateerd aan de prestatieindicatoren uit het KD. Per werkproces is een scoreblad waarop de beoordelingscriteria en de cesuur vermeld staan. Tevens staat aangegeven welke beoordelingscriteria cruciaal zijn en altijd voldoende moet zijn. Het examen bestaat uit twee instrumenten: een Proeve van Bekwaamheid (PvB) en een Criteriumgericht interview (CGI) Bij het opstellen van het examenplan wordt aan de hand van de werkplek van de student vooraf aangegeven of de beoordelingscriteria met een PvB en/of CGI worden afgetoetst.

Examenplan School voor Procestechniek niveau 1-2-3-4


Opmerkingen In de examenwijzer is een “Toelichting beoordeling werkprocessen” opgenomen waarin is aangegeven wanneer een beoordelingscriterium onvoldoende is.

Documenten Examenwijzer WLP


Idem

Examenwijzer WLP

Verbeteracties Vanaf schooljaar 20122013 is er een nieuwe versie van de examenwijzer WLP. Voor deze examenwijzer moet nav een algemene herschikking van de beoordelingscriteria, op basis van voorgaande evaluaties, de “Toelichting beoordeling werkprocessen” nog aangepast worden (actie Consortium WLP). Idem


Idem

Examenwijzer WLP

Idem


Op het scoreblad is aangegeven wat de cesuur is van de competenties/beoordelingscriteria. In

Examenwijzer WLP

Idem



34

Examenwijzer: handleiding voor het examen behorend bij WLPoperatoropleidingen

Vastleggen welke beoordelingscriteria uitsluitend met een PvB óf CGI beoordeeld worden.

Procestechniek

De beoordelaar kan de gegeven waarderingen conform het beoordelingsvoorschrift herleidbaar onderbouwen. Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier.


1.5 Transparantie




35

de “Toelichting beoordeling werkprocessen” van de examenwijzer is aangegeven wanneer een beoordelingscriteria onvoldoende is. Idem In de “Toelichting beoordeling werkprocessen” van de examenwijzer en op het scoreblad van het examenplan staan per werkproces de beoordelingscriteria aangegeven. Deze beoordelingscriteria zijn direct gerelateerd aan de prestatieindicatoren uit het KD. In het examenplan is tevens aangegeven welke werkprocessen bij een kerntaak behoren. In het examenplan is het formulier “Rapportage examen” opgenomen waarin omschreven moet worden waarom het desbetreffende criterium onvoldoende is. Het examineringsproces staat beschreven in de examenwijzer en het examenplan. Deze examenwijzer/examenplan wordt besproken met studenten voorafgaand aan het examen en is beschikbaar op Fronter. Idem

Dit is opgenomen in de examenwijzer hoofdstuk 3: het uitvoeren van het examen.

Examenwijzer WLP

Idem

Examenwijzer WLP Examenplan School voor Procestechniek niveau 1-2-3-4

Idem

Examenplan School voor Procestechniek niveau 1-2-3-4 Rapportage examen Examenwijzer WLP Examenplan School voor Procestechniek niveau 1-2-3-4

Examenwijzer WLP Examenplan School voor Procestechniek niveau 1-2-3-4 Examenwijzer WLP

Procestechniek

Afname en beoordeling Examenstandaard 2: De examenprocessen van afname en beoordeling zijn deugdelijk. Opmerkingen Documenten

Indicator

Omschrijving

2.1 Authentieke afname

Het examen bevat tenminste activiteiten die de student als beginnend beroepsbeoefenaar in het toekomstige beroep uitvoert, afgestemd op het kwalificatiedossier.



2.2 Betrouwbaarheid




36

De PvB bevat een werkopdracht waarmee de student op zijn werkplek opdrachten moet uitvoeren waarbij alle kerntaken/werkprocessen aan bod komen. Alle PvB’s/CGI’s vinden plaats in de praktijk, op het bedrijf. De School voor Procestechniek heeft enkel bblopleidingen, iedere student heeft een arbeidsovereenkomst bij een bedrijf waardoor het examen op de werkplek kan plaatsvinden. Een van de assessoren is altijd een inhoudsdeskundige vanuit de praktijk. De inhoudsdeskundige evalueert na afloop de PvB/CGI. Uit de evaluatieformulieren blijkt dat de afname en beoordeling realistisch is. Op het scoreblad is aangegeven wat de cesuur is van de competenties/beoordelingscriteria. In de “Toelichting beoordeling werkprocessen” van de examenwijzer is aangegeven wanneer een beoordelingscriteria onvoldoende is. Dit document wordt door de assessor gebruikt om objectief te beoordelen. De examencommissie stelt het examenplan vast met daarin de voorbereidingen voor PvB en CGI inclusief de werkopdracht en de werkplekcheck. Leidraad in dit proces is de examenwijzer WLP. De leadassessor is een bevoegd docent die geen loopbaanbegeleider is geweest tijdens de opleiding van de student. Iedere leadassessor is een gecertificeerd assessor. Naast de leadassessor is altijd een tweede assessor aanwezig die inhoudsdeskundig is op de desbetreffende werkplek.

Verbeteracties

Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4 Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4

Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4 Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4

Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4 Examenwijzer Certificaten leadassessoren

Vragen in evaluatieformulier scherper formuleren.

Procestechniek



Opmerkingen Na de afname van een PvB/CGI dient de leadassessor het volledig ingevulde examenplan in bij de sub-examencommissie van de School voor Procestechniek. De sub-examencommissie controleert of aan de gestelde exameneisen uit het kwalificatiedossier is voldaan. Als aan alle eisen is voldaan wordt een diploma verstrekt.

Documenten Kwalificatiedossiers Examenwijzer Examenplan School voor Procestechniek niveau 1-2-3-4

Als een student het examen niet heeft behaald kan de student een herkansing aanvragen voor de PvB/CGI.

De examencommissie neemt deugdelijke besluiten op grond van de oordelen op de examenonderdelen en legt op basis van registratie van de besluitvorming verantwoording af. 3.2 Verantwoordelijkheid Examencommissie

37



b.


c.


De operatoropleidingen bestaan uit niet-certificeerbare eenheden waardoor er geen vrijstellingen worden verleend op basis van een gedeeltelijk behaald examen. Idem

De examencommissie van het cluster Techniek is ingericht conform het ROC-brede handboek T&E. De examencommissie delegeert een deel van haar taken naar de sub-examencommissies. Deze taken zijn vastgelegd. De sub-examencommissie komt maandelijks bij elkaar. De sub-examencommissie neemt direct kennis van de evaluatieformulieren van de afgenomen PvB’s/CGI’s. Indien nodig leidt dit tot een bijstelling van het examenplan. Twee keer per jaar staat de review examinering op de agenda van de sub-examencommissie. Tijdens

Notulen subexamencommissie Lijst geslaagden ROC brede handboek T&E Samenstelling commissies Notulen subexamencommissie Management review examinering

Verbeteracties

Procestechniek


De examencommissie legt vast wanneer beoordelingsresultaten worden aangepast, en tot welke verbeteracties deze correcties leiden of hebben geleid.

38

deze review wordt het hele proces van examinering geëvalueerd (toezichtkader BVE). Gewenste aanpassingen en of noodzakelijke veranderingen worden doorgevoerd in de examenwijzer/examenplan en worden tevens doorgegeven aan het Consortium WLP. Actie van de managementreview examinering worden ook in de Procesmanagementtool genoteerd. De School voor Procestechniek peilt op drie niveaus de tevredenheid rondom examinering: Evaluatie examinering voor studenten (direct na PvB/CGI) Studenttevredenheidsonderzoek (jaarlijks) Evaluatie examinering voor assessoren (direct na PvB/CGI) Evaluatiegesprekken (klant-relatiegesprekken) bedrijven (jaarlijks) De evaluaties van de student en de assessoren direct na de PvB/CGI worden door de subexamencommissie bekeken. Over de resultaten van de studenttevredenheid en de evaluatiegesprekken met het bedrijf wordt een totaalanalyse gemaakt. Deze wordt besproken in de teamvergadering waarbij verbeteracties worden geformuleerd. Deze verbeteracties worden opgenomen in de procesmanagementtool. Naar aanleiding van de evaluaties en studenttevredenheidsenquêtes worden beoordelingsformulieren aangepast. Dit kan leiden tot een nieuwe versie van de Examenwijzer en Examenplan. De meest recente versie staat

Examenplan School voor Procestechniek niveau 1-2-3-4 Studenttevredenheidsenquêtes in ROC spiegel met analyse Klantrelatiegesprekken met analyse Procesmanagementtoo l

Idem

Procestechniek

altijd op het netwerk van de school. De examencommissie analyseert wat mogelijke oorzaken zijn als de beoordelingen niet naar wens verlopen.

39

Idem

Idem

Procestechniek

Resultaat van verbeteracties uit schooljaar 2010-2011 In schooljaar 2010-2011 diverse enquêtes/evaluaties uitbreiden met vragen over afstemming, lesstof en kwalificerende examinering. In de enquête wordt een vraag toegevoegd die deze indicator nog specifiek weergeeft. Actieplannen van de projectleider op basis van de enquête worden na zes maanden opnieuw in de teamvergadering geëvalueerd en bijgesteld. Dit overzicht moet jaarlijks bijgesteld worden. Is gerealiseerd. Deze verbeteractie is tevens uitgebreid met een evaluatie van elke enquête. Deze evaluatie wordt in het team besproken en acties krijgen vervolg in de Procesmanagementtool (PMT) van de school. Relevante documenten: diverse enquêtes o.a.: studenttevredenheidsenquête en klantrelatiegesprekken met bijbehorende analyse en PMT. De evaluatie en eventuele bijstelling van de PvB. Is gerealiseerd maar dit blijft in samenspraak met het Consortium WLP een terugkerend proces. Zie ook 3.2 Er is een klant relatiegespreksleidraad dat jaarlijks in een persoonlijk gesprek met een bedrijf ingevuld dient te worden door de projectleider. Verbeterpunt is om dit proces beter te structureren en te beschrijven in een procedure. Het relevante beroepenveld is tevreden over de kwaliteit van de net gediplomeerde nieuwe werknemers van ROC Ehv. In het klantrelatiegesprek moet dit item worden toegevoegd. Analyse van deze evaluatie dient te worden omgezet in concrete verbeteracties en indien noodzakelijk bijstelling van het examenproduct. Is gerealiseerd. Relevante documenten: PMT, procedure klant-relatiegesprekken, klantrelatiegesprekken en analyse. Om daadwerkelijk tot certificering over te gaan dient na de training een certificeringstraject te worden ingezet (portfolio-opbouw, en assessment). Ontwikkelen competentieprofiel praktijkopleider. Is lopend, van alle praktijkopleiders is in beeld hoever zij inmiddels zijn. De school verzorgt inmiddels zelf de praktijkopleiderstrainingen via de WLP methodiek. Documenten: lijst praktijkopleiders In samenwerking met het Consortium de kwalificerende beoordeling uitbreiden (methodenmix). Is gerealiseerd: zie 1.1 Toetsenquête bij afname invoeren. Procesverbaal verloop PvB toevoegen. Intervisie vastleggen op procesverbaal PvB. Is gerealiseerd. Zie document evaluatieformulier van de PvB/CGI en totaal evaluatie PvB/CGI Jaarlijks bijstellen van de OER / onderwijsgids Is gerealiseerd: zie Fronter P&S

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Red Orka: continueren uitvoering beleidsplan School voor Procestechniek De school voor Procestechniek heeft in juni 2011 haar missie, visie en strategie geüpdatet. De bevindingen zijn samengevat in het rapport “Red Orca”. De school is op dit moment bezig om de strategische doelstellingen in dit rapport verder uit te voeren. Binnen de school lopen doorlopend verbeteracties voortkomend uit: o.a. de zelfevaluatie, review examinering, diverse enquêtes en EVC-audits. De verbeteracties t.a.v. examinering staan in dit document benoemd, zoals: in de leerwijzer het verschil tussen ontwikkelgerichte toetsing en examinering scherper aangeven, het toevoegen van het formulier portfoliobeoordeling en een blanco cijferlijst aan de intakeprocedure, vastleggen welke beoordelingscriteria uitsluitend met een PvB óf CGI beoordeeld worden, etc. De acties, voortkomend uit deze processen, worden gevolgd in de procesmanagementtool van de school. Roadmap to Excellence Specifieke aandacht hierin voor de implementatie van Nederlands en Engels in de huidige organisatie van het onderwijs.

40

MANAGEMENTREVIEW EXAMINERING 2011/2012 VAN DE SCHOLEN VOOR:

HANDEL & MARKETING MODE UITERLIJKE VERZORGING TRANSPORT & LOGISTIEK MAKS/MARBIZ

Handel & Marketing, Mode Uiterlijke Verzorging Transport & Logistiek MAKS/Marbiz

Managementreview Examinering in 2011-2012 van de Scholen voor Handel & Marketing, Mode, Uiterlijke Verzorging, Transport & logistiek en MAKS/Marbiz Managementreview dd. 24 september 2012 Aanwezig: A. van Doremalen, P. Looijmans, H. de Haas EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1


Opmerkingen Voldoet


Wordt verantwoord in de opleidingsgids


Wordt verantwoord in de opleidingsgids


Ja, verantwoord in examenplan en onderwijsgids. Examencommissie keurt alle examenplannen goed. In alle opleidingen gegarandeerd door toepassing methodemix. Examencommissie checkt de examen-plannen hierop. Voldoet



1.3


De exameninstrumenten dekken de generieke kwalificatievereisten voor talen en rekenen zodanig af dat recht wordt gedaan aan het CEF-niveau dan wel het referentieniveau. Er is een verantwoorde procedure gevolgd voor het bepalen van de cesuur, zowel voor examenonderdelen als voor het examen als geheel.

Vastgelegd in de examens a.d.h.v. vast format


Wordt gecheckt door de vaststellings-commissie en de examencommissie.

Cesuur

42

Documenten Handboek examinering Procedure toetsing en examinering Onderwijsprogramma + examenprogramma in onderwijsgids Werkplan examencommissie Regeling diploma en resultatenlijst voor ROC Eindhoven, versie 2.1 Opleidingsgids Examenplan in opleidingsgids Examenplan in onderwijsgids Examenplan Onderwijsgids

Verbeteracties

Periodisering aangeven in examenplan.

Examenplannen Werkplan examencommissie Examenplannen Regeling diploma en resultatenlijst voor ROC Eindhoven, versie 2.1 Format exameninstrumenten Beoordelingsmodellen Examenplannen Beoordelingsmodellen

Aanpassen checklist ontwikkeling en vaststelling examens

Handel & Marketing, Mode Uiterlijke Verzorging Transport & Logistiek MAKS/Marbiz Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning die recht doet aan het belang van kerntaken en werkprocessen.


1.5 Transparantie

Wordt gecheckt door de vaststellings-commissie

Checklist ontwikkeling en vaststelling examens


Wordt gecheckt door de vaststellings-commissie

Checklist ontwikkeling en vaststelling examens


Opmerkingen Voldoet

Documenten Beoordelingsmodellen

De prestatie-indicatoren (of vergelijkbare beoordelingscriteria) zijn herleidbaar in het beoordelingsvoorschrift opgenomen en er is een correct antwoordmodel of beoordelingsschema. De beoordelaar kan uit het beoordelingsvoorschrift opmaken welke (deel)waardering aan een prestatie van een student toegekend moet worden. De beoordelaar kan uit het beoordelingsvoorschrift halen welke eindwaardering gegeven moet worden.

Voldoet

Beoordelingsmodellen

Voldoet


Voldoet



Voldoet


Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier. Als een examen(onderdeel) niet behaald wordt, wordt op het niveau van de prestatieindicator (of vergelijkbare beoordelingscriteria) verantwoord wat de oorzaak daarvan is. Alle betrokkenen hebben een helder beeld van hoe het examen eruit ziet en hoe het wordt uitgevoerd en beoordeeld. Studenten en beoordelaars zijn geïnformeerd over de beoordelingscriteria en de wijze waarop het examen zal plaatsvinden en over de beoordeling.

Voldoet


Voldoet

Beoordelingsmodellen Checklist ontwikkeling en vaststelling examens Instructie model voor student en docent Instructie model voor student en docent


Voldoet

Omschrijving


Het examen bevat tenminste activiteiten die de student als beginnend beroepsbeoefenaar in het toekomstige beroep uitvoert, afgestemd op het kwalificatiedossier. De werkomstandigheden en de sociale context tijdens de beoordeling van het examen komen zoveel mogelijk overeen met die in het toekomstige beroep; onderdelen van het examen vinden in de reële beroepspraktijk plaats.

Moet opgenomen worden in de checklist

Instructie model voor student en docent


Indicator

43

Voldoet

Verbeteracties

Voldoet

Examenplannen

Op de meeste scholen vindt beoordeling gedeeltelijk plaats in de reële beroepspraktijk

Examenprofielen

Verbeteracties

Handel & Marketing, Mode Uiterlijke Verzorging Transport & Logistiek MAKS/Marbiz Het beroepenveld is betrokken bij de examinering en beoordeelt de afname en beoordeling als realistisch.

2.2 Betrouwbaarheid

In de arbeidsmarkt-commissies wordt het examenplan voorgelegd en besproken Beroepenveld is bij alle opleidingen betrokken zodat er meer zicht is op gelijke beoordeling

De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk. Examenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van het examen of het examenprogramma, noch aan het niveau daarvan. Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student.

Examenprofielen Examenplannen


Scholing constructeurs

Scholingsplan

Assessoren worden geschoold

Scholingsplan

Overleg tussen assessoren faciliteren en inplannen




Opmerkingen Voldoet

Documenten Werkplan examencommissie

Resultaten worden in de teams vastgesteld, de teamleider is gedelegeerd verantwoordelijke namens de examencommissie

Werkplan examencommissie

De examencommissie vergewist zich met gepaste grondigheid en frequentie

Wordt gedaan in de examencommissie overleggen

Vaste agenda

van de kwaliteit van het exameninstrumentarium, de afname, de beoordeling, de besluitvorming betreffende de diplomering c. van de deskundigheid van bij de examinering betrokken personen. Om vast te stellen of de beoordeling adequaat verloopt, wordt gebruik gemaakt van bijvoorbeeld resultatenanalyses, studenttevredenheidevaluaties en gegevens uit (steekproefsgewijze) dubbele beoordelingen.

Deze punten opnemen op de vaste agenda

a. b.


44

Verbeteracties

Studenttevredenheids-evaluatie.

Studenttevredenheids-evaluatie en resultaten analyse worden besproken in examencommissie Studenttevredenheids-evaluatie en resultaten analyse worden besproken in examencommissie

Starten met resultatenanalyses Starten met steekproef dubbele beoordelingen

Handel & Marketing, Mode Uiterlijke Verzorging Transport & Logistiek MAKS/Marbiz

Resultaat van verbeteracties uit vorig schooljaar 2011-2012 Werkplan is opgesteld en in werking gezet. Veel scholing gedaan door constructeurs en assessoren Examencommissie heeft scholing gehad Arbeidsmarktcommissies zijn in gang gezet.

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Draaiboek uit werkplan volgen en monitoren, uitvoeren opgesteld beleid, scholing van assessoren en constructeurs.

45

MANAGEMENTREVIEW EXAMINERING 2011/2012 VAN HET CLUSTER:

BROOD & BANKET FACILITAIRE DIENSTVERLENING HORECA TOERISME, SPORT EN VEILIGHEID

Brood & Banket Facilitaire Dienstverlening Horeca Toerisme, Sport en Veiligheid

Managementreview Examinering in 2011-2012 van de Scholen voor Brood & Banket, Facilitaire Dienstverlening, Horeca, Toerisme, Recreatie en Luchtvaart Dienstverlening, Sport & Bewegen, Beveiliging, Defensie. En Handhaving Toezicht & Veiligheid (HTV). Managementreview dd. 30 oktober 2012 Aanwezig: MT. (Mevr. E.Loos , dhr. W.Rops en dhr. M.Bruggeman Dit cluster brede review is tot stand gekomen middels input van bovenstaande Onderwijsteams en Examencommissie van het Onderwijs Cluster BFHTSV. Een uitzondering is HTV. Deze opleiding is gestart in 2012-2013 en hebben dus in 2011-2012 geen examens afgenomen. EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering



1.2 Dekking van het kwalificatiedossie r (volledigheid en passende complexiteit overeenkomstig kwalificatiedossie r) 1.3

47

Opmerkingen +/(bij een aantal opleidingen verbeteringen aanbrengen)

+

Documenten Kwalificatiestructuur Examenplan Onderwijsgids Oer BPV handboek Toets boom Opleidingsgids Oeren/examenprogra mma onderwijsgids

Verbeteracties Onderscheid duidelijker aangeven. Nog verder optimaliseren. Inzichtelijker maken ontwikkelingsgerichte toetsen.

Kwalificatiestructuur Introductie programma Oer Toets plan Opleidingsgids Examenplan Examenbank SHE BPV-werkboek SVBP examens

Verder uitwerken Nogmaals studenten informeren. Toevoegen LB


+/(bij een aantal opleidingen verbeteringen aanbrengen)

Uit het examenplan blijkt dat de kwalificatie-eisen zijn opgenomen in de examens, waarbij meer dan driekwart van de werkprocessen per kerntaak de essentie van het beroep inbegrepen – wordt geëxamineerd.



+

Examenopdrachten Toets matrijs TOA


+

Examenopdrachten (TOA) Vaststellingsdocument


+/(bij een aantal opleidingen

Vaststellingsdocument

Examenplan aanvullen/optimaliser en.

Functioneren van vaststellers

Brood & Banket Facilitaire Dienstverlening Horeca Toerisme, Sport en Veiligheid Cesuur

Examenbank SHE Angerenstein Examens SVBP Examenopdrachten Examenbank SHE Angerenstein Examens SVBP Cesuur

verbeteren.

+/(bij een aantal opleidingen verbeteringen aanbrengen) +

Beoordelingscriteria Normering Examenbank SHE Beoordelingscriteria Normering Examenbank SHE

Dit beter in kaart brengen.

Er is een beoordelingsvoorschrift dat voorzien is van richtlijnen die leiden tot een onafhankelijke beoordeling.

+





Richtlijnen voor beoordeling. Werkprocessen Prestatie indicatoren Examenwerk ”4 ogen” principe Antwoord model Richtlijnen voor beoordeling. Werkprocessen Prestatie indicatoren Examenwerk Richtlijnen voor beoordeling. Examenwerk

De cesuur van het exameninstrumentarium ligt op het niveau waarop de student voldoet aan de vereisten. De cesuur is zodanig opgesteld dat de beoordeling (en daarmee de waardering van de kennis, vaardigheden en houding van de student) in totaal niet lager uitpakt dan voor de vakbekwaamheid voor het beroep en voor de generieke eisen voor taal en rekenen noodzakelijk is. Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning die recht doet aan het belang van kerntaken en werkprocessen. Er is sprake van een weging van examens en examenopdrachten onderling, die geen afbreuk doet aan de genoemde cesuur. 1.4 Beoordelingswijze

verbeteringen aanbrengen) +


De beoordelaar kan uit het beoordelingsvoorschrift halen welke eindwaardering gegeven moet worden. De beoordelaar kan de gegeven waarderingen conform het beoordelingsvoorschrift herleidbaar onderbouwen.

48

+ +/(bij een aantal opleidingen verbeteringen aanbrengen)

Richtlijnen voor beoordeling Examenwerk Richtlijnen voor beoordeling

Moet voor een aantal examenvormen nog geoptimaliseerd worden(b.v. werkstukken). Moet voor een aantal examenvormen nog geoptimaliseerd worden(b.v. werkstukken).

Moet voor een aantal examen vormen nog geoptimaliseerd worden(b.v. werkstukken).

Brood & Banket Facilitaire Dienstverlening Horeca Toerisme, Sport en Veiligheid Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier.

1.5 Transparantie


Als een examen(onderdeel) niet behaald wordt, wordt op het niveau van de prestatie-indicator (of vergelijkbare beoordelingscriteria) verantwoord wat de oorzaak daarvan is.







+

Richtlijnen voor beoordeling. KD’s Werkprocessen Prestatie indicatoren Beoordelingscriteria Examenwerk

In kaart brengen en eventueel aanvullen.

Proefexamens Opdrachten Voorbespreking Instructies vooraf Inzage recht bij SVPB Lessenplan Instructie boekje voor student en beoordelaar. Voor bespreken bij examenstukken. Instructie vooraf Beoordelingscriteria. toegevoegd bij examen. Lessenplan Voorblad examenopdracht. Toelichting voor student. Instructie beoordelaars. Examenbank SHE

Optimaliseren van studenteninfo.

In kaart brengen en eventueel aanvullen.

Optimaliseren van studenteninfo.


49


Opmerkingen +

Documenten Examenopdracht Examenbank SHE KD


+

Examenopdracht (vorm) BPV PvB Examinering in de praktijk.

Verbeteracties

Brood & Banket Facilitaire Dienstverlening Horeca Toerisme, Sport en Veiligheid BPV werkboek Het beroepenveld is betrokken bij de examinering en beoordeelt de afname en beoordeling als realistisch.

2.2 Betrouwbaarheid


De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk. Examenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van het examen of het examenprogramma, noch aan het niveau daarvan.

Handleiding Onderwijscluster BFHTSV Examinering (H.O.E.) Verslagen van aanwezige externen tijdens examen. CEC verslagen Examinering in de praktijk. AMC verslagen Protocollen Examenplan ”4 ogen” principe Examens SVBP

Uitnodigen externen bij examens. Inzet materiaal mede ontwikkelt door beroepenveld. Opnemen beroepenveld in vaststelling commissie.

Examenopdrachten Examenbank SHE Methode mix ”4 ogen” principe Examens SVBP Correctie model Scholingsprogramma. Personeelsdossier.

In kaart brengen en aanvullen.

Documenten Verslagen examen commissie. Vrijstellingsdocumenten

Verbeteracties In- en externe audits en bespreken management review examinering.

+

Verslagen van Examen commissie en protocollijsten.

In- en externe audits en bespreken management review examinering.

+

Eigen toets analyses alsmede die van de landelijke toets banken.

In- en externe audits en bespreken management review examinering.

+



+

Verdere scholing van beoordelaars. Meer praktijkmensen scholen tot assessor.


3.2 Verantwoordelijkheid Examencommissi

50

Omschrijving De examencommissie besluit op basis van de examenresultaten van de student, afgezet tegen de exameneisen uit het kwalificatiedossier en het Examenbesluit, tot het verlenen van vrijstellingen voor delen van het examen en tot het verstrekken van diploma’s en (indien van toepassing) van certificaten. De examencommissie neemt deugdelijke besluiten op grond van de oordelen op de examenonderdelen en legt op basis van registratie van de besluitvorming verantwoording af. De examencommissie vergewist zich met gepaste grondigheid en frequentie a.


Opmerkingen +

Brood & Banket Facilitaire Dienstverlening Horeca Toerisme, Sport en Veiligheid e b. c.

de afname, de beoordeling, de besluitvorming betreffende de diplomering van de deskundigheid van bij de examinering betrokken personen.


+


+


51

+

Quick scans Vaststellingsdocumen ten ROC. Bewijzen van gevolgde en behaalde scholing. Resultaat Analyses. Meting student tevredenheid. Verslagen externe beroepenveld. Verslagen/ besluitenlijst examen commissie.

Verslagen/ besluitenlijst examen commissie.

In- en externe audits en bespreken management review examinering. Beoordelaars uitnodigen in vergadering examencommissie om zaken toe te lichten en te verantwoorden waarop de examen commissie tot besluitvorming kan komen. In- en externe audits en bespreken management review examinering. In- en externe audits en bespreken management review examinering.


Resultaat van verbeteracties uit schooljaar 2011-2012 1. Het verder optimaliseren van de deskundigheid van constructeurs, vaststellers en assessoren. Uiterlijk eind cursusjaar 2011-2012 zijn er minimaal twee geschoolde constructeurs, 2 geschoolde vaststellers en 2 geschoolde assessors per onderwijsteam Resultaat: Deels BEHAALD Nagenoeg in alle teams zijn nu geschoolde constructeurs, vaststellers en assessoren, maar nog niet in alle teams 2. Voldoen aan de Inspectie Standaarden Resultaat: BEHAALD. Alle Crebo’s (5 stuks) die afgelopen jaar in de steekproef van de Onderwijs Inspectie zaten waren in orde; hebben een goedkeurende verklaring gekregen

3. De respons van het studentenpanel waarin studenten hun mate van tevredenheid geven m.b.t. examinering dient minimaal 75% te zijn. Resultaat: Deels BEHAALD De doelstelling m.b.t.de respons van studentenpanel meting 1 is behaald. Het respons percentage lag rond de 75%. Voor de afgenomen JobMonitor lag dit aanzienlijk lager (rond de 45%) De meting II in juni j.l. van het studentenpanel gaf een respons van rond de 60% (een aantal klassen waren op BPV/stage)

4. Examens inzetten die gegenereerd worden uit door de inspectie goedgekeurde examenbanken/-leveranciers, dan wel zelf geconstrueerde examens aan te bieden aan deze examenbanken/-leveranciers ter validering om ze dan vervolgens ongewijzigd in te zetten. Daar waar er (nog) geen examenbanken/-leveranciers zijn de examens te laten beoordelen op de inspectie standaarden 3 en 4 door Cito/SPL. Resultaat: Deels BEHAALD Veel toetsen m.n. die van Horeca, Brood & Banket, Toerisme en Veiligheid komen uit goedgekeurde Toets banken (SHE, SLEBB, LTTR) of worden afgenomen bij erkende Exameninstellingen (NBC en SVPB). Bij een aantal opleidingen worden zelf geconstrueerde ter validering aangeboden aan de Toets Banken. Bij een aantal opleidingen worden de toetsen nog zelf geconstrueerd en vastgesteld. 5. Het verder werken aan het optimaliseren van een uniforme, efficiënte en kwalitatief betere examenorganisatie waarbij de inspectie portretten en examenprofielen uitgangspunt zijn Resultaat: Deels Behaald De examenorganisatie is op orde, maar zal komend jaar In het kader van Team Support m.b.t. ondersteuningstaken een andere organisatie vorm gaan krijgen 6. (examen)Reviews op team niveau organiseren en rapporteren Resultaat: BEHAALD Inmiddels is ROC breed de review structuur ingevoerd. Dus ook binnen ons onderwijscluster

52


Voorgenomen beleid en verbeteracties schooljaar 2012-2013 1. Voldoen aan de inspectie standaarden (opgenomen in Cluster jaarplan 2012-2013) 2. a. kennis van weten regelgeving moet op orde zijn bij alle betrokkenen b. Verder optimaliseren van de deskundigheid van betrokken bij examinering d.m.v. organiseren van drie trainingen, te weten: - Maken van examenprogramma’s (Dienst O&S) - Construeren van exameninstrumenten (Cinop en Cito) - Vaststellen van exameninstrumenten (Cinop en Cito) Deze trainingen zijn opgenomen in het scholingsprogramma 2012-2013 (onderdeel van het ClusterJaarplan 2012-2013) 3. Reviewstructuur als zelfevaluatie instrument beschouwen om de kwaliteit van exameninstrumenten te bepalen en te monitoren 4. Interne audit om de examinering van de generieke examendelen (rekenen, Ned, MVT) vanaf de cohorten 2009 te bepalen en eventueel bij te sturen incl. instellingsexamens (2014-2015) 5. Examenprofielen als basis te beschouwen (naast het toetsingskader van de inspectie). Voor het bepalen van beleidsvoornemen nr. 1 6. Vaststellingscommissie opleidingen breed vormgeven en inzetten 7. Het managementreview examinering is bottum-up opgebouwd vanuit de teams → Portefeuillehouders → TL’ers → MT. Deze komt structureel terug in de Reviewgesprekken in het kader van de nieuwe review structuur. (PDCA-cyclus)

53

MANAGEMENTREVIEW EN EXAMINERING 2011/2012 VAN HET CLUSTER:

ECONOMIE & ADMINISTRATIE ICT

Economie & Administratie ICT

Managementreview Examinering in 2011-2012 van het cluster Economie & Administratie - ICT Managementreview 31 oktober 2012 Aanwezig: P. Lavrijssen (directeur), H. Schats (kwaliteitszorgmedewerker) EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering


1.3


Opmerkingen Er is onderscheid gemaakt tussen ontwikkelingsgerichte beoordelingen en examens


Examenprogramma + voorwaarden diplomering zijn beschreven


Examenprogramma + voorwaarden diplomering zijn beschreven


In examenplan zijn de te examineren kerntaken en werkprocessen, beschreven in het kwalificatiedossier, opgenomen. De vaststellingscommissie beoordeelt inhoud en toetsvorm op basis van de checklisten uit het handboek T&E van ROC Eindhoven In het examenplan zijn examens opgenomen die de generieke taalen rekeneisen dekken


De exameninstrumenten dekken de generieke kwalificatievereisten voor talen en rekenen zodanig af dat recht wordt gedaan aan het CEF-niveau dan wel het referentieniveau. Er is een verantwoorde procedure gevolgd voor het bepalen van de cesuur, zowel voor examenonderdelen als voor het examen als geheel.

De vaststellingscommissie beoordeelt exameninstrumenten en stelt deze vast, waaronder de cesuurbepaling.



Cesuur

55

Documenten Onderwijsgids; opleidingsgids/OER; visiedocument ontwikkelingsgericht meten Examenplan; opleidingsgids/OER; onderwijsgids Examenplan; opleidingsgids/OER; onderwijsgids Kwalificatiedossier; examenplan; opleidingsgids/oer; onderwijsgids Handboek T&E; verantwoordingsmatrix; checklisten Examenplan; opleidingsgids/OER; onderwijsgids Handboek T&E; Verantwoordingsmatrix; checklisten; servicedocument “bepaling van cesuur, normering en weging bij examinering” Handboek T&E; Verantwoordingsmatrix; checklisten; servicedocument “bepaling van cesuur, normering en weging bij examinering”

Verbeteracties








Opmerkingen De vaststellingscommissie beoordeelt exameninstrumenten en stelt deze vast op basis van de checklist voor het ontwikkelen en vaststellen van examenistrumenten. De vaststellingscommissie beoordeelt of in het beoordelingsvoorschrift wordt gewerkt met de prestatie-indicatoren uit het kwalificatiedossier Deelscores zijn opgenomen in het beoordelingsvoorschrift





Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier. Als een examen(onderdeel) niet behaald wordt, wordt op het niveau van de prestatieindicator (of vergelijkbare beoordelingscriteria) verantwoord wat de oorzaak daarvan is.

56

De vaststellingscommissie beoordeelt het beoordelingsvoorschrift op basis van de checklisten uit het Handboek T&E van ROC Eindhoven De vaststellingscommissie beoordeelt het beoordelingsvoorschrift op basis van de checklisten uit het Handboek T&E van ROC Eindhoven De vaststellingscommissie beoordeelt de beoordelingsrichtlijnen op basis van de checklisten uit het Handboek T&E van ROC Eindhoven De assessor vermeldt en verantwoordt op een beoordelingsformulier de beoordeling van ieder werkproces

Handboek T&E; Verantwoordingsmatrix; checklisten; servicedocument “bepaling van cesuur, normering en weging bij examinering” Handboek T&E; Verantwoordingsmatrix; checklisten; servicedocument “bepaling van cesuur, normering en weging bij examinering” Documenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Beoordelingsformulier.

Verbeteracties


1.5 Transparantie




op het niveau van de prestatieindicator. De vaststellingscommissie beoordeelt de instructie voor kandidaten en assessoren op basis van de checklisten uit het Handboek T&E van ROC Eindhoven De vaststellingscommissie beoordeelt de instructie voor kandidaten en assessoren op basis van de checklisten uit het Handboek T&E van ROC Eindhoven. De vaststellingscommissie beoordeelt de instructie voor kandidaten en assessoren op basis van de checklisten uit het Handboek T&E van ROC Eindhoven.

Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten Checklist voor het ontwikkelen en vaststellen van exameninstrumenten



Opmerkingen Er wordt gewerkt met de prestatieindicatoren uit het kwalificatiedossier

Documenten Kwalificatiedossier


Onderdelen van het examen vinden plaats op basis van de SPLprocedure “Kwalificerend beoordelen in de praktijk” Beroepenveld, betrokken bij afname pvb, wordt bevraagd over de kwaliteit van het examen

Procedure “Kwalificerend beoordelen in de praktijk”


2.2 Betrouwbaarheid

57


Examens worden afgenomen conform de procedures van ROC Eindhoven.


Examens worden afgenomen conform de procedures van ROC Eindhoven.

Enquête onder bpvbedrijven; enquête onder vertegenwoordigers beroepenveld, betrokken bij afname pvb. Servicedocument “Deskundigheid en onafhankelijkheid van betrokkenen bij examinering” Servicedocument “Deskundigheid en onafhankelijkheid van betrokkenen bij examinering”

Verbeteracties

PvB voorleggen aan (feedback vragen) beroepenveld (EBR), waardoor oordeel vooraf wordt verkregen.

Economie & Administratie ICT Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student.

Scholing van assessoren en vaststellingscommissie

Scholingsplan

Certificaten van scholingstrajecten.



Opmerkingen Examencommissie is verantwoordelijk voor het proces van examineren en werkt conform de door ROC Eindhoven beschreven procedures Examencommissie is verantwoordelijk voor het proces van examineren en werkt conform de door ROC Eindhoven beschreven procedures Alle examineringsprocessen worden vier keer per jaar besproken in de examencommissie

Documenten Handboek T&E van ROC Eindhoven; verslagen vergaderingen examencommissie Handboek T&E van ROC Eindhoven; verslagen vergaderingen examencommissie Verslagen van vergaderingen examencommissie; enquêtes; scholingsplan

Verbeteracties Jaarlijkse bijstelling van Handboek T&E, waaronder checklisten, op basis van opgedane ervaringen


Examens worden steekproefsgewijs geëvalueerd door betrokkenen

Enquêtes

Terugkoppeling van de resultaten van de diverse onderzoeken naar studenten, teams en bedrijfsbureau


Alle examineringsprocessen worden vier keer per jaar besproken in de examencommissie

Verslagen van vergaderingen examencommissie


Alle examineringsprocessen worden vier keer per jaar besproken in de examencommissie

Verslagen van vergaderingen examencommissie



58



b.


c.


Structurele monitoring van de competentieontwikkeling op deskundigheid m.b.t. examinering. Nagaan of en hoe betrokkenen hun bekwaamheid onderhouden.


Resultaat van verbeteracties uit schooljaar 2011-2012 Jaarverslag Toetsing & Examinering van de school, waarin de processen en procedures met betrekking tot toetsing en examinering zijn geëvalueerd, waarin de uitvoering van de geformuleerde verbeteracties is geëvalueerd en waarin aanbevelingen en verbeteracties worden beschreven met betrekking tot toetsing en examinering in schooljaar 2012-1-2013.

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Implementatie van de processen T&E, vastgelegd in het Handboek T&E van ROC Eindhoven Implementatie van de SPL-procedure “Kwalificerend beoordelen in de praktijk”

59


DE ZORGSECTOR

de Zorgsector

Managementreview Examinering in 2011-2012 van de School voor de Zorg Managementreview dd. 3 oktober 2012 Aanwezig: Examencommissie: Hilde Meijs, Willy Ickenroth, Willy van Rijn, Irene Habraken Secretaresse: Linda Bartels Extern: Nico van Luijtelaar (coördinator verpleegkundig onderwijs Catharinaziekenhuis) EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1



Opmerkingen De opleidingen DA, TA. AA, VZ en VP maken gebruik van ontwikkelings-gerichte toetsen en examens. Voor Nederlands en Rekenen (en evt Engels) zijn er ontwikkelingsgerichte toetsen en examens.




61


Elke opleiding heeft het format Studiegids gekregen en gaat het vullen. De studenten ontvangen deze studiegids. Bovendien staat het CAP bij VP en VZ in een studentversie op Fronter. De studiewijzer/CAP wordt door de docenten in een les besproken met de studenten. Doorstromers krijgen een vrijstellingenbrief, waarin precies beschreven staat welke examens en ontwikkelingsgerichte toetsen ze nog moeten doen. Bij de AG, HZW en V&V-opleidingen worden 100% van de werkprocessen geëxamineerd. Dit wordt in een CAP beschreven, waaruit een examenplan wordt

Documenten -CAP (Competentie Assessment Programma) -Onderwijsgids

-CAP -Onderwijsgids -Examenplan -Checklist vaststellen examenplan -Servicedocument Overzicht diplomeren student -CAP -Onderwijsgids -Studiegids -Boekjes Consortium Beroepsprestaties -Evt. vrijstellingenbrief

-CAP -Examenplan

Verbeteracties

Verbetering van de communi-catie mbt het CAP

de Zorgsector

(volledigheid en passende complexiteit overeenkomstig kwalificatiedossier)



1.3


Cesuur


gemaakt. Alle opleidingen maken gebruik van een methodemix. Voor een gedeelte van de examinering van V&V, AG en HZW (Beroepsprestaties en evt. assessment-gesprek) wordt gebruik gemaakt van materiaal van de Stichting Consortium Beroepsonderwijs HZW maakt voor Rekenen en Nederlands-lezen-luisteren-schrijven gebruik van de TOA-toetsen. De overige opleidingen maken hiervoor gebruik van de Deviant kwalificerende toetsen. Voor Nederlands Spreken en Gesprekken voeren wordt gebruik gemaakt van het Consortiummateriaal of de Devianttoetsen. De school maakt voor het bepalen van de cesuur gebruik van het instrument Score-cijfertransformatie. Cesuur kan worden aangepast o.g.v. toetsbetrouwbaarheid, leergedrag studenten en gegeven onderwijs De school hanteert een cesuur van 55%. In uitzonderlijke gevallen wordt hiervan afgeweken. De Deviantexamens kennen een hogere cesuur.

Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning die recht doet aan het belang van kerntaken en werkprocessen. Er is sprake van een weging van examens en examenopdrachten onderling, die geen afbreuk doet aan de genoemde cesuur. Indicator 1.4 Beoordelingswijze




62

Alle examens dienen met een voldoende te worden afgesloten. Opmerkingen

-CAP + Examenplan -Examen-instrumenten -Verantwoordings-matrix -Servicedocument Hoe kom ik tot een ‘methodemix’?

Exameninstrumenten

-Servicedocument Het bepalen van cesuur, normering en weging bij examinering. -Instrument Scorecijfertransformatie -Instrument Scorecijfertransformatie -Onderwijsgids

-Scoringsvoorschrift exameninstrumenten -Onderwijsgids -Onderwijsgids -Exameninstrumenten Documenten Exameninstrumenten – beoordelingslijsten - antwoordmodel Exameninstrumenten – beoordelingslijsten - antwoordmodel

Verbeteracties

de Zorgsector



In zowel het examen als het beoordelingsvoorschrift wordt aangegeven hoeveel punten een student kan behalen per onderdeel (vraag). Hoe de eindwaardering tot stand komt staat aangegeven op het voorblad of in de beoordelingslijst

Exameninstrumenten – beoordelingslijsten – antwoordmodel -scoringsvoorschrift

Dit staat beschreven in de exameninstrumenten

-Exameninstrumenten -Checklist ontwikkelen en vaststellen van exameninstrumenten Exameninstrumenten -voorblad -beoordelingslijsten -scoringsvoorschrift Exameninstrumenten -voorblad -instructie studenten / beoordelaars -Examenreglement ROC Eindhoven

De beoordelaar kan de gegeven waarderingen conform het beoordelingsvoorschrift herleidbaar onderbouwen. Uit de beoordelingsrichtlijnen blijkt dat de beoordeling plaatsvindt op het niveau van kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier. Als een examen(onderdeel) niet behaald wordt, wordt op het niveau van de prestatie-indicator (of vergelijkbare beoordelingscriteria) verantwoord wat de oorzaak daarvan is. 1.5 Transparantie





Indicator

Omschrijving



Beroepsprestaties, PvB’s en afstudeerprojecten zijn gekoppeld aan de beroepspraktijk.


Beroepsprestaties, PvB’s en afstudeerprojecten zijn gekoppeld aan de beroepspraktijk en vinden (gedeeltelijk) plaats in die praktijk

63

Exameninstrumenten – beoordelingslijsten – antwoordmodel -voorblad -scoringsvoorschrift Exameninstrumenten – beoordelingslijsten - antwoordmodel Exameninstrumenten – beoordelingslijsten – antwoordmodel -verantwoordings-matrix Exameninstrumenten – beoordelingslijsten - antwoordmodel

-Exameninstrumenten -Onderzoek kwaliteit e exameninstrumenten Consortium 2009 Exameninstrumenten

Verbeteracties

de Zorgsector

2.2 Betrouwbaarheid


Het beroepenveld is betrokken bij de constructie van het Consortiummateriaal en bij de afname en beoordeling van de examinering in de praktijk. Tevens wordt er 2-jaarlijks een BPVenquête gehouden, waarin ook vragen over examinering worden gesteld.


De afname vindt plaats op grond van de instructies in het exameninstrument. De beoordeling vindt plaats op grond van de beoordelingslijst / antwoordmodel. N.a.v. bijzonderheden op de registratielijst volgen er sancties en/of verbeteracties. Alle exameninstrumenten worden gescreend en vastgesteld op grond van vaststaande criteria. Examens worden continue verbeterd en aangepast. Meerdere docenten hebben een assessorentraining gevolgd. Het is de bedoeling dat alle docenten op termijn deze training hebben gevolgd. Ook beoordelaars in de praktijk hebben een assessorentraining gevolgd.

Examenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van het examen of het examenprogramma, noch aan het niveau daarvan. Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student.

64

-Exameninstrumenten -Resultaten BPV- enquête maart /april 2012 -Samenvatting analyse tevredenheidsonderzoek zorgorganisatie 2009 -Sectoraal Examenprofiel ZWS -Servicedocument Examenprofielen -Servicedocument Examineren in en beoordelen van de bpv. Exameninstrumenten -beoordelingslijst -instructie student en beoordelaar

-Exameninstrumenten -Checklist ontwikkelen en vaststellen van exameninstrumenten. -Scholingsplannen School voor de Zorg -Vaardigheidstraining ‘Beoordelen’ voor praktijkopleiders -Servicedocument Deskundigheid en onafhankelijkheid van de betrokkenen bij examinering

Twee groepen docenten volgen de assessoren-training in 2012-2013 Docenten volgen, indien nodig, een scholing Nederlands.

de Zorgsector



Opmerkingen Vijstellingen worden op basis van vaststaande criteria (EVK’s ) verleend en geregistreerd door het examenbureau.



65

De examencommissie vergewist zich met gepaste grondigheid en frequentie a. van de kwaliteit van het exameninstrumentarium, b. van de afname, de beoordeling, de besluitvorming betreffende de diplomering c. van de deskundigheid van bij de examinering betrokken personen. Om vast te stellen of de beoordeling adequaat verloopt, wordt gebruik gemaakt van bijvoorbeeld resultatenanalyses, studenttevredenheidevaluaties en gegevens uit (steekproefsgewijze) dubbele beoordelingen.

De examencommissie stelt formeel de exameninstrumenten vast nadat de vaststellingscommissie daartoe een advies heeft gegeven. Tevens worden punten a, b en c in de examencommissie besproken. Studenten nemen deel aan JOB-ODIN en een studentenpanel, waarin ook vragen over examinering worden gesteld. Resultaten worden besproken in de examencommissie. Geregeld worden kennistoetsen nogmaals nagekeken door een andere docent.

Documenten -Onderwijsgids -Jaarverslag examinering -Servicedocument Overzicht diplomeren student -Proces SPOOR Kwalificerend examineren van studenten -Verantwoordingsdocument Leren Loopbaan & Burgerschap SvZ 20-06-2011 -Onderwijsgids -Jaarverslag examinering -Managementreview examinering Servicedocument Evalueren van exameninstrumenten -Servicedocument Gespreksleidraden en evaluaties examenprocessen -Notulen examencommissie

Verbeteracties

-Resultaten studentenpanel -Resultaten analyse fase 1 Op2s0a en b -Resultaten evaluaties kennistoetsen fase 1 VP BOL en BBL -Resultaten evaluaties kennistoetsen fase 2 VZ BBL -Verzoeken examencommissie -Klachtenregistratie -Notulen examencommissie

- Evaluatie en analyse op een aantal ntb kennistoetsen (msmh, AG en fase 2 VP) in schooljaar 2012-2013.

de Zorgsector



66

Het examenbureau doet een voorstel tot aanpassing van de cesuur bij de examencommissie. Dit geldt voornamelijk voor kennistoetsen. Bij de AG-opleidingen is een weging tussen de exameninstrumenten bepaald. Het examenbureau analyseert iov de examencommissie de oorzaken van slechte beoordelingen.

-Verzoeken examencommissie

-Verzoeken examencommissie -Klachten-registratie + analyse

de Zorgsector

Resultaat van verbeteracties uit vorig schooljaar (2011-2012) 1. Vervangen van de OER door de Onderwijsgids. Een aantal oudere cohorten hebben nog een OER. Voor alle cohorten vanaf september 2011 van alle opleidingen is de Onderwijsgids ingericht. 2. Afnemen van een BPV-enquête in schooljaar 2011-2012. In maart/april 2012 is er een schoolbreed tevredenheidsonderzoek bij zorgorganisaties afgenomen. 3. Afnemen van een studenttevredenheidsonderzoek naar exameninstrumenten. In februari 2012 zijn bij de VP BOL en BBL en VZ BBL de kennistoetsen Fase 1 en Fase 2 middels een enquêteformulier geëvalueerd. Op basis daarvan worden kennistoetsen aangepast. 4. Assessorentraining Meerdere docenten hebben een assessorentraining gevolgd. 5. Scholing Nederlands docenten, indien nodig Deze scholing is verplaatst naar schooljaar 2012-2013. Deze scholing geldt voor docenten die niet het 3F-niveau behalen bij een 0-meting. 6. Ontwikkelen exameninstrumenten AG, Maatwerk + kennistoetsen De exameninstrumenten van AG zijn ontwikkeld. De exameninstrumenten van Maatwerk zijn ontwikkeld. De kennistoetsen worden continue, indien nodig, aangepast en verbeterd. 7. Evaluatie subprocessen Evaluatie van toetsconstructie en vaststelling heeft plaatsgevonden in februari 2012 Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Alle opleidingen, behalve de opleiding AMV, zijn gestart met het CGO-kwalificatiedossier. De school voor de Zorgsector maakt daarbij gebruik van het door de Stichting Consortium Beroepsonderwijs ontwikkelde materiaal. Ook de kwalificerende toetsing is hierin opgenomen. De AG-opleidingen maken gebruiken van een mix van Consortiumen STEAG-examens. De opleidingen MSMH en PO gebruiken zelf ontwikkelde exameninstrumenten. De onderwijsgids wordt in Planning & Scores ingericht, waardoor de competentieontwikkeling van de student wordt gevolgd. De onderwijsgids wordt geïmplementeerd Het registratie- en leerlingvolgsysteem voor het CGO in een elektronische leeromgeving wordt verder ontwikkeld. De informatievoorziening ten aanzien van de examinering wordt verbeterd. Studenten worden via een studiegids/studiewijzer geïnformeerd over het CAP. Dit wordt ook op Fronter geplaatst. Alle docenten hebben een assessorentraining gevolgd, waardoor zij deskundig zijn in het beoordelen van het CGO. Alle docenten beheersen het Nederlands op minimaal 3Fniveau. Het examenbureau ontwikkelt een scholing toetsconstructie. Deze scholing wordt aangeboden aan de teams.

67


WELZIJN, CULTUUR & ONDERWIJS

Welzijn, Cultuur & Onderwijs

Managementreview Examinering in 2011-2012 van de School voor WC&O Managementreview dd. 2 oktober 2012 (concept); 30 oktober 2012 (definitief) Aanwezig: Examencommissie WC&O: HOTH, STLI, BAHA, ABTO, HUCA, VSMA, QUDI EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1



De examencommissie geeft geëxpliciteerd aan op grond van welke examens en overige eisen het diploma wordt verstrekt. Studenten weten welke beoordeling meetelt voor het behalen van het diploma.





69

Opmerkingen Examenplan met alleen examentoetsen. In onderwijsgids en OER- light wordt onderscheid gemaakt in ontwikkelingsgerichte toetsen en examentoetsen (examenproducten) d.m.v. codering

Documenten Examenplan, onderwijsgids, OER-light

Examenplannen worden voor elk cohort vastgesteld. Examenbureau controleert volledigheid In het examenplan staat per examenonderdeel het niveau of min. cijfer dat behaald moet worden

Examenplannen/ examenprogramma’s Opleidingsgids Examenplan

Uitgangspunt is 100% van de werkprocessen per kerntaak te examineren. In uitzonderlijke gevallen kan hier, in overleg met de ex. cie. Van afgeweken worden, bijv omdat de een werkproces in de BPV niet getoetst kan worden. In alle gevallen wordt meer dan 75% van de werkprocessen geëxamineerd. Er wordt minimaal één kennisexamen afgenomen per cohort en minimaal twee praktijkexamens waarin vaardigheden en houding worden geëxamineerd. Er is sprake van een methodemix. TOA examens talen (ICE) zijn goedgekeurd door de inspectie.

Examenplan en verantwoordingsmatrix per exameninstrument

Format examenplan

Verbeteracties Soms verwarring tussen TOA instaptoetsen en TOA examens. Er wordt vanaf september daarom alleen gesproken van examens op de computer in plaats van TOA-examens.

Studenten vaker informeren over wat te doen om een diploma te behalen

Examenplan Verantwoordingsmatrix per examen

Er worden goedgekeurde digitale TOA examens gebruikt waar mogelijk. Examens spreken en gesprekken voeren worden vastgesteld door de

Procedure afname mondelinge examens evalueren in schooljaar 2012-2013


vaststellingscommissie 1.3


Cesuur






Na consultatie van het werkveld heeft de schoolbrede werkgoep samen met examenbureau een verantwoorde procedure opgesteld. Bij kennistoetsen wordt de voorl. cesuur door constructeurs bepaald en na afname volgt een statistische toetsanalyse (methode Wijnen) om de cesuur zonodig bij te stellen (en ter verbetering van het examen bij een volgend cohort) Methode van cesuurbepaling garandeert een voldoende beheersing van alle werkprocessen en dus van kerntaken Vaststellingscommissie bewaakt dat er niet meer wordt vereist dan in het KD gevraagd wordt. Beoordeling kerntaken/ werkprocessen is weergegeven in 4puntsschaal waarbij de complexiteit van de prestatie-indicatoren in het KD correspondeert met het aantal beoordelingsindicatoren in de examenproducten. KD (praktijk)examens worden onderling niet gewogen. Elk werkproces of kennis-examen moet met een voldoende beoordeeld worden. Opmerkingen Onafhankelijkheid is belangrijk, maar geen doel op zich. Het gaat erom dat sprake is van een betrouwbare en dus van een zo objectief mogelijke beoordeling. (FAQ Inspectie, vr 23) Er zijn richtlijnen ontwikkeld waaraan praktijkbeoordelingen moet voldoen. Deze worden in elk praktijkexamen beschreven.

70

Document cesuur bij praktijkexamens Standaardomzettingstab ellen Documenten statistische toetsanalyse

Document cesuur bij praktijkexamens

Document cesuur praktijkexamens Handleiding voor het construeren en verantwoorden van examentoetsen Document cesuur praktijkexamens

Documenten Procedure beoordeling van praktijkexamens

Verbeteracties





In elk examen is een omzettingstabel voor score/cijfer aanwezig


De individuele beoordelingsindicatoren zijn te herleiden naar de prestatieindicatoren van de werkprocessen In het examen staan de beoordelingsindicatoren gerangschikt naar kerntaak en werkproces. Elke beoordelingsindicator verwijst naar een prestatie-indicator


1.5 Transparantie

71

Beoordelingscriteria of indicatoren zijn rechtstreeks afgeleid van de prestatieindicator. Bij de beoordelingscriteria wordt altijd verwezen naar de competentie Elk kennisexamen heeft een verantwoordingsmatrix waarin verwezen wordt naar de werkprocessen en Kenniscomponenten uit het KD Beoordelingsvoorschift wordt in elk examen uitgewerkt


Per prestatie-indicator wordt een score toegekend volgens de vastgestelde regeling (4puntsschaal)


In elke examenopdracht staat informatie over plaats, tijd, de betrokkenen, beoordeling en het herexamen. In de examenopdracht staat beschreven wat er van de student, assessor en begeleider verwacht wordt

Handleiding voor het construeren en verantwoorden van examentoetsen Document cesuur bij praktijkexamens Verantwoordingsmatrix per exameninstrument Beoordelingsvoorschriften examens Handleiding voor het construeren en verantwoorden van examentoetsen Evaluatievragen opgenomen bij elk praktijkexamen Document cesuur bij praktijkexamens Programma score/cijfertransformatie Standaardomzettingstabellen Handleiding voor het construeren en verantwoorden van examentoetsen Handleiding voor het construeren en verantwoorden van examentoetsen Verantwoordingsmatrix per exameninstrument Praktijkexamens Handleiding voor het construeren en verantwoorden van examentoetsen Praktijkexamens Handleiding voor het construeren en verantwoorden van examentoetsen Verantwoordingsmatrix per exameninstrument Praktijkexamens

Ruimte voor het plaatsen van opmerkingen structureel in model opnemen




De student en beoordelaar krijgen voordat het examen begint de examenopdracht met de beoordelingsindicatoren ter beschikking waarin genoemde onderdelen uitgewerkt zijn In de examenopdracht is het genoemde uitgewerkt

Omschrijving



De examenopdracht is gebaseerd op taken die de student in de beroepspraktijk uitoefent als beginnend beroepsbeoefenaar of de benodigde kennis daarvoor


Praktijkexamen vinden plaats in de beroepspraktijk. Alleen in uitzonderlijke gevallen wordt gebruikt gemaakt van een simulatie, alleen wanneer een situatie zich niet in de BPV voordoet In klankbordgroepen wordt het werkveld betrokken bij het ontwikkelen van praktijkexamens Per examenblok wordt minimaal een toets geëvalueerd door begeleiders en assessoren uit het beroepenveld Praktijkexamens: bij het beoordelen van (begeleidings)processen wordt minimaal 2X beoordeeld. Kennisexamens: elk examen heeft een antwoordmodel met scoringsvoorschiften. Tijdens afname van schriftelijke en computerexamens zijn bekwame surveillanten aanwezig


72

Praktijkexamens Handleiding voor het construeren en verantwoorden van examentoetsen Praktijkexamens


Indicator

2.2 Betrouwbaarheid

Handleiding voor het construeren en verantwoorden van examentoetsen


Verbeteracties

Handleiding voor het construeren en verantwoorden van examentoetsen Examens Verslagen praktijkbijeenkomsten Handleiding voor het construeren en verantwoorden van examentoetsen

Evaluatie vragen in de praktijkexamens Verslagen praktijkbijeenkomsten Handleiding voor het construeren en verantwoorden van examentoetsen Document: instructie voor surveillanten Kennisexamens: document: algemene beoordelingsinstructie Kennisexamens met antwoordmodel en scoringsvoorschriften

Verslaglegging beroepenveld bijeenkomsten op het gebied van examinering verbeteren




Om de betrouwbaarheid van praktijkexamens te verhogen worden (begeleidings)processen minimaal 2X beoordeeld/wordt er op verschillende momenten beoordeeld tijdens de uitvoering van begeleidingstaken De assessoren zijn vakbekwaam, onafhankelijk en geschoold. Iedere opgeleide docent is geschoold tot assessor. De school biedt herhalings- of opfriscursus aan.

In de examentoets zijn beoordelingsformulieren met richtlijnen opgenomen per beoordelingsmoment

Verslagen werkveldbijeenkomsten

Voortzetten scholing assessoren.

Scholingsplan WC&O assessoren 2011-2012




Opmerkingen Vrijstellingen worden volgens vaste procedures aan individuele studenten verleend


Examencommissie maakt gebruik van een betrouwbaar registratiesysteem. Alle examenresultaten worden door de examencommissie vastgesteld a. De examencommissie delegeert taken aan onderwijskundig medewerkers van het examenbureau/ vaststellingscommissie Er worden evaluaties op alle soorten examenproducten uitgevoerd b. Genoemde items zijn agendapunten tijdens vergaderingen examenbureau en examencommissie c. Examencommissie bewaakt scholingsplan Result. analyses: methode Wijnen Studenten kunnen na inzage een herbeoordeling aanvragen van een kennisexamen Assessoren van de opleiding komen bij ca 10% van de parktijkbeoordelingen als



b.


c.



73

Documenten Procedures / portfolio EVK traject en doorstroom Overzicht standaardvrijstellingen Vaststellingsdocumenten Jaarlijks managementreview

Verbeteracties

Verslag evaluatie examens/ toepassen antwoordmodel Verslagen examencommissie Management-review examinering Scholingsplan Scholingsovereenkomsten

Evaluaties examenproducten (theorie en praktijk) Procedure aanvragen herbeoordeling JOB-Odin Studentenpanel

Loopbaan-begeleiders gaan resultaten onderzoeken bespreken in de loopbaan-groepen.


onafhankelijke beoordelaar



74

Resultaten studenttevredenheidsonderzoeken: Tijdig weten wanneer er een toets/ examen is: Job: 7,2 Sp: 6,0 Tijdig weten waar toets/ examen over gaat: Job: 6,9 Sp: 6,6 Tijdig uitslag te horen krijgen: Job: 5,4 Sp: 5,2 Toetsen sluiten aan op wat studenten geleerd hebben: Job: 7,3 Zelfde beoordeling medestudent: Job: 7,0 Vooraf duidelijk hoe resultaten toetsen/ examens worden vastgesteld: Sp: 5,3 Ongestoord werken tijdens toets/ examen: Sp: 6,8 Inzage in gemaakte toetsen/ examens: Sp: 6,2 Herbeoordelingen worden geregistreerd in de managementrapportage examinering Evaluaties worden besproken in examencommissie en teruggekoppeld aan teams/toetsconstructeurs

Management-rapportage Vaststellings-formulieren examens Notulen examencommissie


Resultaat van verbeteracties uit schooljaar 2011-2012 1. Aangepaste uitgangspunten In het kader van het ROC-brede traject roadmap to excellence zijn de uitgangspunten voor competentiegericht examinering zoals die door WC&O waren vastgelegd geëvalueerd en bijgesteld. In de komende schooljaren worden deze bijgestelde uitgangspunten geïmplementeerd. Medewerkers van het examenbureau zullen hierin een actieve, stimulerende rol spelen. Dit is gerealiseerd. Het examenbureau heeft een document opgeleverd waarin de nieuwe richtlijnen voor constructie zijn weergegeven. Hierin zijn alle door de examencommissie vastgestelde aanpassingen opgenomen. Het implementatietraject loopt en wordt continu door het examenbureau begeleid. 2. Aangepaste planning/roostering Vanwege de toegenomen complexiteit wordt getracht te komen tot een beter beheersbare, eenvoudigere manier van examenplanning. Nadrukkelijk wordt hierin ook het uitgangspunt meegenomen dat iedereen zijn of haar eigen verantwoordelijkheid neemt. (dus ook de student) Dit is niet gerealiseerd. Het nog steeds toenemend aantal examens zorgt voor een moeilijk beheersbare situatie en gezondheidsklachten bij medewerkers van het examenbureau. Onderwijsteams moeten in het stimuleren van verantwoordelijkheid van studenten een grotere/actievere rol krijgen. Verder zal de examencommissie de frequentie van afname van examens gaan evalueren. 3. Procedures De binnen de school voor WC&O gebruikte procedures zullen op efficiëntie worden onderzocht. Het streven is om de (routing van de) formulierenstroom in te perken en automatisering van procedures verder door te voeren, zonder aan zorgvuldigheid en betrouwbaarheid in te boeten. Dit is niet gerealiseerd. Er is geen capaciteit aanwezig om dit op te pakken. Bovendien ontbreekt de technische ondersteuning (DMS) 4. Structurele evaluatie examens in de praktijk De in de praktijk afgenomen examens gaan structureel geëvalueerd worden op basis van de in de examenbijlage gestelde vragen. Tot op heden is hier (te) weinig mee gebeurd. Ook in de (ROC-brede) BPV-enquête zullen structureel vragen betreffende examinering worden opgenomen. Dit is gerealiseerd. Evaluaties worden uitgevoerd, geanalyseerd en besproken met constructeurs en de examencommissie. De BPV-enquête bevat nu gerichte vragen over examinering. De eerstvolgende afname van de enquête staat gepland voor januari 2013. 5. Continuering deskundigheidsbevordering Gedurende schooljaar 2011-2012 zal opnieuw een scholing voor assessoren plaatsvinden Dit is gerealiseerd (Cinop). Verdere scholing staat gepland voor 2012-2013. Voorgenomen beleid en verbeteracties schooljaar 2012-2013 1. Scholing examenfunctionarissen volgens actieplan Focus op vakmanschap. Dit wordt opgenomen in het scholingsplan 2. Professionele inrichting van de organisatie en borging van de centraal ontwikkelde examens Nederlands, rekenen en Engels. (COE)

75

MANAGEMENTREVIEW EXAMINERING 2011/2012 VAN:

SCHOOL 23

School 23

Managementreview Examinering 2011-2012 van School 23 (opleiding Arbeidsmarkt geKwalificeerd Assistent; AKA 90440) Managementreview d.d. 30 oktober 2012 (vastgesteld door de Examencommissie) Aanwezig: Nan Bennis, Jetje Jung, Erni van Bijnen, Monique van der Kleijn EXAMINERING EN DIPLOMERING Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering


1.3


Opmerkingen Ja


Ja


Ja

OER AKA 2011-2012, studiegids


Ja

Examenplan 2011-2012 Verantwoordingsdocum enten per proeve.


Ja, betreft een proeve van bekwaamheid

Examenplan 2011-2012 Verantwoordingsdocumenten per proeve.


Ja

Examenplan 2011-2012 Verantwoordingsdocum enten per proeve.


Ja


Ja

Beoordelingsboekje per beoordelaar Eindbeoordeling per proeve Uitslag per leerling Verantwoordingsdocum enten per proeve Beoordelingsboekje per beoordelaar en eindbeoordeling per proeve Uitslag per leerling Verantwoordingsdocum enten per proeve Resultaten evaluatie externe observatoren juni 2012

Cesuur

77

Documenten OER AKA 2011-2012, studiegids Examenplan 2011-2012 OER AKA 2011-2012, studiegids

Verbeteracties

Spreken en Gesprekken als examens vooraf aan de proeve tijdens praktijklessen.

School 23


1.5 Transparantie

78


Ja

Beoordelingsboekje per beoordelaar en eindbeoordeling per proeve Uitslag per leerling Verantwoordingsdocum enten per proeve Beoordelingsboekje per beoordelaar Eindbeoordeling per proeve Uitslag per leerling Verantwoordingsdocum enten per proeve

De competenties en gedragsvoorbeelden nog een keer goed nalopen.


Ja Beoordelaars beoordelen over verschillende proeven heen en zij geven onder andere aan proeven gelijkwaardig te vinden.


Opmerkingen Ja

Documenten Beoordelaarsboekje per proeve. Eindbeoordeling per proeve 2011-2012 Beoordelaarsboekje per proeve.

Verbeteracties


Ja


Ja

Beoordelaarsboekje per proeve.


Ja

Eindbeoordeling per proeve 2011-2012


Ja



Ja



Ja



Ja

Beoordelaarsboekje Leidinggevende boekje Instructie voor klanten en zorgvragers Boekje externe observanten Leerlingenboekje

School 23


Ja


Ja

Exameninstrumenten Resultaten studententevredenheid onderzoek examinering juni 2012 Evaluatie proeven juni 2012 Exameninstrumenten Resultaten studententevredenheid onderzoek examinering juni 2012


2.2 Betrouwbaarheid


Opmerkingen Ja Externe observatoren (bedrijven en instellingen) geven aan dat het examen realistische opdrachten, rollen en settings omvat.

Documenten Exameninstrumenten 2011-2012 Evaluatie externe observatoren juni 2012


Ja, zie boven.

Ja, zie boven.

Het beroepenveld is betrokken bij de examinering en beoordeelt de afname en beoordeling als realistisch. De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk.

Ja, zie boven.

Ja, zie boven.

Ja Beoordeling vindt plaats door 2 beoordelaars. Beoordelaar is niet de mentor van de examenkandidaat. Ook worden beoordelaars over proeven verdeeld (en kennen kandidaten deze docenten niet). Examencommissie doet altijd finale check. Ja Alles in de proeven is uitgebreid omschreven waardoor condities zo veel als mogelijk gelijk zijn bij elke afname.

Exameninstrumenten 2011-2012 Planning examens 2011-2012 Verslagen examencommissie 2011-2012


79

Exameninstrumenten 2011-2012

Verbeteracties We hebben zelf geconstateerd dat de eisen in de arbeidsmarkt een meer productiegericht Techniekexamen vraagt. De proeve zal hierop aangepast worden.

Protocol voor bespreking examen achteraf (voor diegene die gezakt zijn).

School 23


Ja, Eerder zijn scholingen uitgevoerd door KPC, Cito en LOOV (beoordelen van competenties). Beoordelaars zijn geschoold en door middel van afstemming vooraf aan examens (zie ook verslagen 29 mei 2012) houdt men elkaar scherp.

Exameninstrumenten 2011-2012 Verslagen 29 mei 2012.



80

Omschrijving De examencommissie besluit op basis van de examenresultaten van de student, afgezet tegen de exameneisen uit het kwalificatiedossier en het Examenbesluit, tot het verlenen van vrijstellingen voor delen van het examen en tot het verstrekken van diploma’s en (indien van toepassing) van certificaten. De examencommissie neemt deugdelijke besluiten op grond van de oordelen op de examenonderdelen en legt op basis van registratie van de besluitvorming verantwoording af. De examencommissie vergewist zich met gepaste grondigheid en frequentie

Opmerkingen Ja

Documenten Zie verslagen examencommissie 2011-2012

Ja

Zie verslagen examencommissie 2011-2012

Ja



Ja

Management-review 2011-2012 (op basis van evaluaties)


Ja



Ja


a.


b.


c.


Verbeteracties

School 23

Resultaat van verbeteracties uit schooljaar 2011-2012 Proeven aanpassen a.h.v. evaluaties teams, opmerkingen externen. Dit is gerealiseerd. Wijzigingen in proeven zijn ook nog eens uitgebreid aan bod gekomen tijdens de evaluatie van de proeven voor de examens (zie verslagen 29 mei 2012); De rollen van de chefs opnieuw bespreken, afstemmen en vastleggen (scholing). Dit is gerealiseerd. Chefs hebben onderling voor de proeven afgestemd en er zijn concrete afspraken gemaakt (zie verslagen 29 mei 2012); In examencommissie nog duidelijker de leerlingen bespreken die extra hulp nodig hebben bij het examen (bijvoorbeeld autistische en/of zeer faalangstige jongeren). Dit is gerealiseerd (zie verslagen examencommissie school 2011-2012); Minder taalvaardige leerlingen (met spreekangst) beter voorbereiden op het voeren van gesprekken. Dit is gerealiseerd in simulatie/rollenspel in de verschillende praktijksettingen. Samen met Bureau ICE een instrument ontwikkelen om Spreken en Gesprekken tijdens de proeve te kunnen beoordelen. Dit is gerealiseerd. Er is een instrument ontwikkeld door bureau ICE samen met de taalcoach en de taaldocenten. Dit instrument is als pilot in juni uitgeprobeerd bij de proeve van Techniek. Het instrument bleek te voldoen alleen bleek de tijdsinvestering te groot. Door deze ervaring is het idee ontstaan om hetzelfde instrument in te zetten voor de afname van de vaardigheden Spreken en Gesprekken voeren, tijdens praktijklessen.

Voorgenomen beleid en verbeteracties schooljaar 2012-2013 Proeven aanpassen aan de hand van de evaluaties (juni 2012) uit teams en met externen (maart 2013). Grotere aanpassingen zijn: • Proeve Techniek: meer een proeve gericht op productie/assemblage; • Proeve Horeca: 1 ronde gasten in plaats van 2 ronden; • Proeve Winkel: retourbonnen systeem makkelijker maken (meer aanpassen aan realiteit winkel); • Proeve Zorg en Welzijn: geen aanpassingen; • Proeve kantoor/facilitair: in rollen kantoor meer personeel gebruiken dat leerling niet kent/of van een afstand. Ontwikkelen van examens Spreken en Gesprekken voor alle praktijkvakken (maart 2013); Deelnemen aan de pilot centrale examinering (COE) voor Nederlands en rekenen op niveau 1 (maart 2013); Er moet een duidelijker protocol komen over hoe het examen besproken kan worden (na het zakken en vooraf aan herexamen).

81

MANAGEMENTREVIEW EXAMINERING 2010/2011 VAN:

STERCOLLEGE, afdeling VAVO

School 23

Managementreview Examinering in 2011-2012 van het Ster College - VAVO Managementreview (september/oktober 2012) d.d. 26-10-2012 Aanwezig: Jack Heesterbeek EXAMINERING EN DIPLOMERING VAVO Exameninstrumentarium Examenstandaard 1: Het exameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen. Indicator 1.1 Onderscheid ontwikkelgerichte toetsen en examinering


Opmerkingen

Documenten nvt


Reglement en programma schoolexamen en centraal examen PTA en Reglement en programma schoolexamen en centraal examen nvt


1.2 Dekking van het kwalificatiedossier (volledigheid en passende complexiteit overeenkomstig kwalificatiedossier) 1.3

Uit het examenplan blijkt dat de kwalificatie-eisen zijn opgenomen in de examens, waarbij meer dan driekwart van de werkprocessen per kerntaak - de essentie van het beroep inbegrepen – wordt geëxamineerd. Inhoud en toetsvorm zijn zodanig afgestemd op de vereisten, dat kennis, vaardigheden en houding in een goede balans passend worden beoordeeld.

PTA en leerstofschema


Nog nvt, Vanaf mrt pilot-examens CITO


SE: Toetskaders vavo, d.d. april 2012 + checklist kwaliteit schriftelijke en praktische schoolexamentoetsen CE: conform CITO idem

Cesuur

De cesuur van het exameninstrumentarium ligt op het niveau waarop de student voldoet aan de vereisten. Er is sprake van een evenwichtige en niet oneigenlijke puntentoekenning

idem


O:\d_com-m\Jocé\Info algemeen\Managementreview examinering 2011-2012 ROCCONCEPT 20130109.docx

pagina 83

Verbeteracties

School 23

Indicator 1.4 Beoordelingswijze




Beoordelingsvoorschrift per SE-toets








nvt




Toetskaders vavo, d.d. april 2012





1.5 Transparantie

Opmerkingen

Documenten Beoordelingsvoorschrift per SE-toets


Indicator

Omschrijving



nvt


nvt


pagina 84

Verbeteracties

Verbeteracties

School 23

2.2 Betrouwbaarheid


nvt


Beoordelingsvoorschrift per SE-toets Examenrooster per toetsweek Beoordelingsvoorschrift per SE-toets Examenrooster per toetsweek Regeling ‘gehandicapten’ – b.v. verlenging Beoordelingsvoorschrift per SE-toets






Opmerkingen

Documenten Reglement en programma schoolexamen en centraal examen


Reglement en programma schoolexamen en centraal examen

De examencommissie vergewist zich met gepaste grondigheid en frequentie

Bij CE: altijd dubbele beoordeling

a.


b.


c. van de deskundigheid van bij de examinering betrokken personen. Om vast te stellen of de beoordeling adequaat verloopt, wordt gebruik gemaakt van bijvoorbeeld resultatenanalyses, studenttevredenheidevaluaties en gegevens uit (steekproefsgewijze) dubbele beoordelingen.


Regelmatige consultatie studenten middels studentenraad

pagina 85

Evaluatie onderwijsleerproces (elke november) Kengetallen verschillen SE-CE Gemiddelden CE Bij CE: altijd dubbele

Verbeteracties

School 23

beoordeling De examencommissie legt vast wanneer beoordelingsresultaten worden aangepast, en tot welke verbeteracties deze correcties leiden of hebben geleid.

(Elk jaar een nieuw) Reglement en programma schoolexamen en centraal examen + PTA Bij bezwaar/beroep student


Resultaat van verbeteracties uit schooljaar 2011-2012 Ontwikkeling toetskaders vavo (april 2012).

Voorgenomen beleid en verbeteracties schooljaar 2012-2013


pagina 86

MANAGEMENTREVIEWS EXAMINERING ROC

Recommend Documents