EXAMENJAARVERSLAG 2010 Inleiding Binnen ROC Aventus is in 2010 in het kader van het organisatie verbetertraject ‘Koersvast’ gewerkt aan het verbeterplan “Examinering en kwalificering”. Dit project is intussen afgerond en heeft geleid tot heldere beschrijvingen van de taken , bevoegdheden en verantwoordelijkheden van de betrokkenen bij de examinering. Het nieuw opgestelde Handboek Examinering en het document waarin de kwaliteitsstandaarden zijn verwoord zijn in mei 2010 door het college van bestuur vastgesteld. Deze documenten dienen door de sectoren te worden gehanteerd en geven richting aan opleidingsteams om de kwaliteit te borgen. Op de portal van de medewerkers zijn alle werkprocessen rond examinering in procesbeschrijvingen in beeld gebracht. Om te kijken in hoeverre er gewerkt wordt conform de eigen standaarden zijn er op alle sectoren interne audits uitgevoerd. De bevindingen hebben geresulteerd in het formuleren van verbeteracties. In het najaar van 2010 is een ROC brede Beleidscommissie geïnstalleerd, die het college van bestuur adviseert over Examinering. De commissie telt een voorzitter (lid college van bestuur) en drie leden (een sectordirecteur, een extern lid, een secretaris). Het externe lid, de heer Wouter Schoonman, arbeids- en organisatiepsycholoog, is als lector Assessment verbonden aan Saxion Hogescholen en de Hogeschool van Rotterdam. De commissie wordt ondersteund door een secretaris ( senior onderwijskundig adviseur van de centrale dienst Marketing en Innovatie). Elke sector 1 heeft haar werkzaamheden verantwoord in een sectoraal jaarverslag. Deze sectorale jaarverslagen zijn gebundeld in dit ROC Examenjaarverslag. Op de volgende pagina’s treft u de informatie aan van: • • • • • • •
Sector Sector Sector Sector Sector Sector Sector
Gezondheid Welzijn Economie Ondernemen Horeca, Toerisme & Recreatie Mobiel Training & Educatie
In de bijlagen staan ter illustratie: -
1
Een uitwerking van een verbeterplan van een opleidingsteam binnen sector Gezondheid Een globaal overzicht van de resultaten van de interne audit bij opleidingen E&O Evaluatie onder cursisten VAVO m.b.t. afname centraal examen in Apeldoorn en Deventer
er is geen examenjaarverslag van de sector Techniek beschikbaar. 1
SECTOR :
GEZONDHEID
Algemeen Het jaar 2010 heeft in het teken gestaan van het project Exam en de invoering van de voorstellen die daaruit voortvloeiden middels de invoering van het handboek MBO examinering. Een van onze teammanagers (Marian Fieren) was lid van de werkgroep examinering en direct betrokken bij dit proces. Binnen de sector is een sectorale werkgroep examinering waarin al deze voorstellen worden gecommuniceerd. Via de invoering van het handboek examinering zijn de voorstellen geïmplementeerd binnen onze sector en hebben we de examinering aangepast aan onze competentiegerichte opleidingen. Binnen de CGL-opleidingen is het proces van examinering weliswaar gewijzigd (werken met proeves,examendossiers), maar zaken als constructie, vaststelling, rol van subexamencommissies e.d. blijven onverminderd belangrijk. De eerste helft van 2010 hebben we voorbereidingen getroffen. Zo zijn er afspraken en planningen gemaakt rondom: taken,frequentie in inhoud examencommissie; taken en inhoud subexamencommissies; relatie sectorale examencommissie – subexamencommissie; inzoomen op onderscheid tussen het proces van de examinering (inclusief standaarden) en de vaststelling van de geslaagden (diplomering). Dit heeft voor schooljaar 2010-2011 geresulteerd in: een duidelijke kalender: na afloop van iedere (10-weekse) periode komt de subexamencommissie bijeen en 4 weken daarna de sectorale examencommissie; het aanleggen van mappen per opleiding, waarin per standaard bewijzen worden verzameld; een hernieuwde aandacht voor vaststelling van de exameninstrumenten, zowel bij de zelfgemaakte als de ingekochte exameninstrumenten. In het najaar van 2010 heeft voor bijna alle opleidingen binnen de sector een interne audit plaats gevonden. We vonden dit belangrijk om goed in beeld te krijgen waar we goed op scoren en waar we nog kunnen verbeteren. We WETEN nu waar de sterke en zwakke punten liggen. Na lezing van het auditrapport constateren we, dat we tevreden kunnen zijn over: het proces rondom examinering/diplomering; de relatie examens en kwalificatiedossier. Sectorbreed verdienen de volgende punten onze extra aandacht: de betrokkenheid werkveld bij de examinering; het vaststellen van de exameninstrumenten; de monitoring vanuit sector op de behaalde resultaten; het opstellen verbeterplannen. De verbeterpunten uit de audits worden/zijn meegenomen in jaarplan examinering 2011 van de sectorbrede werkgroep examinering, het sectorplan en de teamplannen. Ter illustratie is bijlage 1 toegevoegd. Inspectieonderzoek In het kalenderjaar 2010 heeft er inspectiebezoek plaatsgevonden bij de opleiding Helpende Zorg Welzijn (crebo 10745). Het bezoek vond plaats op 5 maart en op 8 juli 2010.
De inspectie beoordeelt 6 van de 7 standaarden met een voldoende. Over standaard 5: examenprocessen, afname en beoordeling oordeelt de inspectie, dat de onafhankelijkheid van de praktijkbeoordelaars onvoldoende is geborgd, omdat deze in dienst zijn bij de instelling waar de beoordeelde werkt. Op basis van deze bevindingen is de werkwijze aangepast en wordt er nu gewerkt met onafhankelijke beoordelaars.
2
Interne audit Examinering
De auditoren hebben hun bevindingen vastgelegd in de auditrapportage. Hieronder staan de bevindingen beknopt weergegeven. Standaard
Bevindingen
1. Tevredenheid en betrokkenheid beroepenveld
Het vertrouwen van het beroepenveld wordt nog onvoldoende met bewijzen aangetoond. De Enquête Examinering Bedrijfsleven (EEB) wordt (voorzichtig) uitgezet. De inzet van de Verklaring van Vertrouwen (VV) wordt nog te weinig ingezet. Het beroepenveld is niet vertegenwoordigd in de examencommissie. Het beroepenveld is direct of indirect betrokken bij de ontwikkeling van het exameninstrumentarium en wordt sterk betrokken bij de afname. Er wordt veelal extern examenmateriaal ingekocht.
2. Deskundigheid van betrokkenen bij examinering
Het handboek MBO beschrijft de benodigde competenties van de betrokkenen bij de examinering. In enkele gevallen is er sprake van een degelijk scholingsplan, specifiek voor examinering. Er zijn individuele bewijzen van deskundigheid. Medewerkers zijn op de hoogte van de standaarden examinering en de bijbehorende instrumenten.
3. Kwaliteit exameninstrumenten (inhoud / dekking)
De auditoren constateren dat het exameninstrumentarium voldoet aan de kwalificatievereisten. De cesuur is op orde. Opm. De auditoren hebben geen productbeoordeling uitgevoerd.
4. Kwaliteit exameninstrumenten (toetstechnisch)
De instructie voor de student is duidelijk en volledig. De afnamecondities zijn op orde. Er is een degelijk beoordelingsvoorschrift, dat overigens niet door iedere beoordelaar op dezelfde wijze gehanteerd wordt. Een goede beoordelingsinstructie kan hier uitkomst bieden.
5. Examenprocessen (afname, beoordeling)
Er zij degelijke examenplannen en –protocollen. Studentenevaluaties en structurele examenanalyses ontbreken. De rol van de examencommissie schiet hierin tekort. Er is veelal sprake van het vierogenprincipe. De afgiftesystematiek van de diploma’s is op orde.
6. Examenkwaliteit is voldoende geborgd
Er is een duidelijk Handboek Examinering. Ingekochte examens worden niet opnieuw vastgesteld. Examendossiers worden vastgesteld. Verstrekking van diploma’s gebeurt gecontroleerd. Er is sprake van een structurele procesverbetering. De archiveringsprocedure zweeft. Er worden geen onafhankelijke deskundigen ingezet om een beeld te krijgen van de examinering. Het jaarverslag examinering ontbreekt.
7. Naleving wettelijke vereisten
Er is een verantwoordingsdocument dat tijdig is vastgesteld. Er is een functionerende examencommissie die haar taak explicieter kan invullen en opeisen. Er dient een jaarverslag examinering opgeleverd te worden.
Tevredenheidenquêtes onder studenten In het kalenderjaar 2010 zijn op alle locatie enquêtes gehouden. Helaas is de opleiding niet op de enquête vermeld, waardoor de verbeterpunten niet altijd in relatie gebracht kunnen worden met een specifieke opleiding.
3
De studenten scoren positief op het examenproces. Voor het competentiegerichte onderwijs lijken alle vragen uit de gestandaardiseerde ROC vragenlijst niet langer relevant. De sector neemt het initiatief om de vragenlijst meer up to date te maken. Bijeenkomsten examencommissies en subexamencommissies De sectorale examencommissie heeft in 2010 twee keer in de voltallige setting vergaderd. Hierin zijn de voorstellen vanuit de werkgroep exam formeel vastgesteld, verbeteracties besproken, klachten formeel afgehandeld en de besluiten vanuit de subexamencommissies geaccordeerd. Alle opleidingen hebben een subexamencommissie. Hierin worden de activiteiten rond examinering voor de opleiding geagendeerd In alle gevallen komen deze samen om volgens vaste protocollijsten vast te stellen wie er wel of niet geslaagd is. Daarna vindt de formele vaststelling plaats. Hieronder staan de aantallen uitgegeven diploma’s vermeld. Aantallen diploma’s 2010: Niv
Crebo
Opleiding
4
10426
Verpleegkundige
2010 98
4
93510
Verpleegkundige
14
3
92650
Maatschappelijke zorg
16
4
92661
Medew. Gehandic.zorg
16
4
92662
Maatsch. zorg volwass.
10
3
10427
Verzorgende
26
3
93260
Verzorgende
55
3
94830
Verzorgende IG
34
2
10428
Helpende
2
10745
Helpende Welzijn
2
92640
Helpende Zorg/Welzijn
1
91420
Zorghulp
32
4
10774
Apothekersassistent
31
4
10776
Doktersassistent
41
4
91410
Tandartsassistent
16
4
10775
Tandartsassistent
2
10745g Totaal 2010
Gastouder project
7 37 172
81 686
Scholingsplan Binnen de opleidingen op de sector Gezondheid heeft een flink aantal docenten een assessortraining gevolgd. De afspraak is gemaakt, dat ieder opleidingsteam aan het eind van het cursusjaar 20102011 voldoende assessoren in het team heeft.
EVC Er komen binnen alle teams cursisten met EVC procedure binnen; sommigen kunnen direct overgaan tot verzilveren, terwijl anderen na maatwerkscholing het diploma behalen. Klachten/bezwaren Er zijn twee gevallen van fraude geconstateerd. Deze zijn naar behoren afgewikkeld.
4
SECTOR :
WELZIJN
Algemeen Het jaar 2010 heeft in het teken gestaan van de invoering van het nieuwe Handboek Examinering. Alhoewel examinering één van de meest wezenlijke onderdelen van de beroepsopleidingen is, heeft de invoering van dit handboek toch geleid tot de nodige aanpassingen.. De eerste jaren van werken met experimentele competentiegerichte opleidingen wekten de indruk dat het proces van de examinering sterk zou gaan wijzigen. Er wordt gewerkt met Proeven van bekwaamheid, portfoliobewijzen en het samenstellen van examendossiers. Het nieuwe Handboek Examinering laat zien dat ook bij deze nieuwe examenvormen de constructie en vaststelling van het exameninstrumentarium van belang is en aan kwaliteitseisen moet voldoen. De examencommissie op de sector heeft dit opgepakt en gewerkt aan aanpassingen van de manieren van werken. In de eerste helft van 2010 zijn voorbereidingen getroffen om in lijn te kunnen werken met het nieuwe Handboek Examinering. Er zijn afspraken en planningen gemaakt rondom: taken, frequentie en inhoud bespreekpunten examencommissie taken en inhoud subexamencommissies relatie sectorale examencommissie -- subexamencommissie inzoomen op onderscheid tussen het proces van de examinering (inclusief standaarden) en de vaststelling van geslaagden(diplomering) Dit heeft voor schooljaar 2010-2011 geresulteerd in: een duidelijke kalender: na afloop van iedere (10-weekse) periode komt de subexamencommissie bijeen en 4 weken daarna (sectorale) examencommissie. het aanleggen van mappen per opleiding, waarin per standaard bewijzen worden verzameld; een hernieuwde aandacht voor vaststelling van de exameninstrumenten, zowel bij de zelfgemaakte als de ingekochte exameninstrumenten. In het najaar van 2010 heeft voor bijna alle opleidingen een interne audit plaatsgehad. We WETEN nu nog beter waar onze sterke en zwakke punten liggen. Na lezing van het auditrapport constateren we, dat we tevreden kunnen zijn over: het proces rondom examinering/diplomering; de relatie examens en kwalificatiedossier. Sectorbreed verdienen de volgende punten onze extra aandacht: de betrokkenheid werkveld bij de examinering; het vaststellen van de exameninstrumenten; de monitoring vanuit sector op de behaalde resultaten; De verbeterpunten uit de audits worden/zijn meegenomen in het jaarplan examinering 2011 voor opleiding en team (uitgewerkt in sectorplan en teamplannen). Inspectieonderzoek In het kalenderjaar 2010 heeft er geen inspectiebezoek plaatsgevonden bij opleidingen Welzijn. Tevredenheidonderzoek d.m.v. enquête voor studenten In het kalenderjaar 2010 zijn op alle locaties enquêtes gehouden. Helaas stond de naam van de opleiding niet op de enquête vermeld, waardoor de verbeterpunten niet altijd in relatie konden worden gebracht met een specifieke opleiding. De studenten scoren positief op het examenproces. Voor het competentiegerichte onderwijs lijkt een deel van de vragen uit de gestandaardiseerde ROC vragenlijst niet langer relevant. De sector neemt het initiatief om de vragenlijst meer up to date te maken.
5
Audit Examinering
De auditoren hebben hun bevindingen vastgelegd in de auditrapportage. Hieronder staan de bevindingen beknopt weergegeven. Standaard 1. Tevredenheid en betrokkenheid beroepenveld
Bevindingen Het beroepenveld is wisselend tevreden over de examinering. De opleidingen kunnen dit met verschillende documenten onderbouwen. De Enquête Examinering Bedrijfsleven (EEB) wordt (voorzichtig) uitgezet. Het beroepenveld is betrokken bij de ontwikkeling van de toetsen en bij de afname van de examens. In hoeverre er gewerkt wordt met de Verklaring van Vertrouwen (VV) is niet helder. Het beroepenveld is niet vertegenwoordigd in de examencie. PW3 en 4 kopen m.i.v. schooljaar 2010-2011 het exameninstrumentarium in; de andere opleidingen construeren zelf.
2. Deskundigheid van betrokkenen bij examinering
In het Handboek Examinering staan de benodigde competenties van de betrokkenen bij de examinering beschreven. In 2010 is aandacht besteed aan deskundigheidsbevordering, maar behoeft nog verdere implementatie. Er is scholingsplan voor examinering aanwezig, maar de formuleringen zijn niet erg concreet. Er zijn bij alle teams bewijzen van deskundigheid aangetroffen door de auditoren.
3. Kwaliteit exameninstrumenten (inhoud / dekking)
Bij de gecontroleerde opleidingen lijken cesuur en beoordelingscriteria op orde. Vaststelling van exameninstrumenten is op één plaats binnen de sector aangetroffen. De vaststelling vindt daar overigens niet plaats conform het vastgestelde format. Opm. Er zijn geen productbeoordeling uitgevoerd door de auditoren.
4. Kwaliteit exameninstrumenten (toetstechnisch)
Voor de studenten is er over het algemeen adequate informatie over het examen. Studenten geven aan goed te weten wat ze moeten doen om een voldoende te halen. Ze krijgen duidelijke instructies; de afname is op orde. Bij de opleiding Sport en Bewegen zijn verbeteracties gewenst. Bij de portfoliobeoordeling wordt door assessoren nagenoeg geen gebruikgemaakt van een criteriumgericht interview.
5. Examenprocessen (afname, beoordeling)
Er is een examenplan. De analyse van de deelnemerevaluaties laat te wensen over. Bij de afname van de examens worden protocollen getekend. Er is geen sprake van structurele analyse, hetgeen door de inspectie als voor de komende tijd als speerpunt is benoemd. De uitgifte van diploma’s gebeurt volgens een vaste systematiek.
6. Examenkwaliteit is voldoende geborgd
Het Handboek beschrijft de examenorganisatie, taken en verantwoordelijkheden van de betrokkenen bij de examinering. Er is een actueel examenplan. De richtlijnen voor de constructie worden ontleend aan het kwalificatiedossier. Resultatenanalyse vindt niet plaats. Examendossiers van studenten worden formeel vastgesteld. De verstrekking van diploma’s gebeurt gecontroleerd en er is een duidelijke archiveringsprocedure. De opleidingen zetten geen onafhankelijke deskundigen in om zich een beeld te vormen van de examinering.
7. Naleving wettelijke vereisten
Er zijn opleidingsgidsen. Er is een examencommissie. De studenten zijn niet op de hoogte van de kennen de Commissie van beroep voor de examens. Er is geen jaarverslag examinering.
6
Bijeenkomsten examencommissies en sub-examencommissies De sectorale examencommissie kwam in de eerste helft van 2010 nog bij elkaar als onderdeel van het reguliere overleg van het Managementteam (alleen met aanvulling van secretaris examenzaken). Vanaf de 2e helft 2010 komt de examencommissie op geplande data bij elkaar. Alle opleidingen hebben een subexamencommissie. In alle gevallen komen deze samen om volgens vaste protocollijsten vast te stellen wie er wel of niet geslaagd is. De volgende aantallen diploma’s zijn uitgegeven: Onderwijsassistent Sport en Bewegen Welzijn, niveau 3 Welzijn, niveau 4
58 67 242 131
diploma’s diploma’s diploma’s diploma’s
(10710, (10873, (10742, (10743,
91362, 93500) 91380, 91390) 92620) 10746, 91370, 92631, 92632)
Scholingsplan Binnen de opleidingen Welzijn zijn redelijk veel geschoolde assessoren. Afspraak is dat ieder opleidingsteam na afloop van schooljaar 2010-2011 voldoende assessoren in het team heeft. EVC Met name binnen het team Welzijn niveau 3 komen cursisten met EVC procedure binnen. De ene helft kan direct overgaan tot verzilveren, terwijl de andere helft na het volgen van een maatwerktraject het diploma behaalt. Klachten/bezwaren Bij de opleiding Sport en Bewegen zijn twee gevallen van fraude geconstateerd. Deze zijn naar behoren afgewikkeld. Binnen de opleiding Welzijn niveau 3 is een geval van fraude onderzocht, maar dit gedrag kon uiteindelijk niet worden bewezen. Verbeterpunten: Afgesproken is dat in het sectorplan en de teamplannen 2011 de verbeterpunten die uit de audit naar voren zijn gekomen, verwerkt worden.
7
Sector:
Economie
Algemeen In de sector economie zijn in het schooljaar 2009-2010 in een groot deel van de opleidingen voor het eerst competentiegerichte examens afgenomen. Hierbij werd gebruikgemaakt van de exameninstrumenten van de Stichting Praktijkleren. Dit gold voor de volgende clusters van opleidingen: administratief, secretarieel, juridisch en ICT opleidingen. De opleidingen voor beveiliging werden geëxamineerd door de brancheorganisatie SVPB. De opleidingen Veiligheid en Vakmanschap werden in nauwe samenwerking met Defensie afgesloten. Resultaten laatste Inspectieonderzoek De inspectie heeft tijdens dit kalenderjaar de secretariële beroepen onderzocht en vervolgens vastgesteld dat de examinering van deze opleiding op ROC Aventus van voldoende kwaliteit is. Zes van de zeven kwaliteitsstandaarden werden met een voldoende beoordeeld, met uitzondering van de standaard “Borging examinering”. Voor deze standaard kreeg de onderzochte opleiding een onvoldoende omdat de examencommissie zich niet met regelmaat heeft vergewist van de integrale kwaliteit van de examinering. De examens voor Nederlands en MVT waren van voldoende kwaliteit. Resultaten interne audit In de interne audit zijn de volgende opleidingen onderzocht: Medewerker ICT Bedrijfsadministrateur (Apeldoorn en Deventer) Juridisch medewerker openbaar bestuur In bijlage 2 staan de bevindingen uit de audit overzichtelijk weergegeven. Tevredenheidonderzoek onder studenten Er is een beperkte steekproef gehouden met het afnemen van de gestandaardiseerde enquête onder studenten. Hieruit kwam naar voren dat er meer aandacht besteed kan worden aan informatievoorziening naar studenten. Daarnaast zijn er in een paar opleidingen studentenevaluaties uitgevoerd met behulp van vragenlijsten. Verslag bijeenkomsten sectorale examencommissie De sectorale examencommissie vergaderde vier keer op basis van de standaardagenda. Een belangrijk aandachtspunt was de logistiek van de examinering en de afstemming van de uit te voeren werkzaamheden op de examenbureaus van de sector op de verschillende locaties. De examencommissie stelde voor 536 examenkandidaten de behaalde eindresultaten vast. Scholing 25 medewerkers volgden een assessorentraining. Voor de meesten was dit de assessorentraining georganiseerd vanuit de ROC Academie. Daarnaast was er een branchegerelateerde training bij ICT. Eén medewerker heeft deelgenomen aan de assessorentraining van Celbe. Inmiddels zijn vrijwel alle docenten die de rol van assessor vervullen intern geschoold. In het komende jaar zullen alle docenten die actief betrokken zijn bij de afname van examens een training hebben gevolgd. Verbeteracties In het kader van de kwaliteitscyclus zijn de volgende verbeterpunten geformuleerd: -
Informatie aan studenten Informatie aan betrokken bedrijven Afstemming examenbureau, resp. verbetering van het proces van examinering registratie van examenplanning
Het monitoren van deze acties berust bij de werkgroep Herinrichting Examinering
8
Overzicht uitgegeven diploma’s In 2010 werden in totaal 536 diploma’s uitgegeven. Hieronder staan deze gegevens geordend per opleiding en leerweg. De extraneuskandidaten betreffen studenten die vertraagd zijn en die de opleiding alsnog afronden zonder daarvoor verder lessen te hoeven volgen.
10025 10026 10039 10040 10044 10049 10811 10876 10904 10909 90222 90230 90360 90431 90432 90433 90434 90435 90462 90471 90472 90473 90490 90500 90511 90541 90580 90592 93191 93192 93200 93212 93232 93233 93251 93252 93280 94810 94850 94860
niv. 4 Sociaal Juridisch Medewerker-SZ 4 Sociaal Juridisch Medewerker-AP 4 Administrateur 4 Dir.secretaresse/Managementass. 3 Commercieel mdw. Binnendienst 3 Boekhoudkundig Medewerker 3 ICT Beheerder 2 Beveiliger 3 Medewerker Beheer ICT 4 Adm.Jur.Mdw. Openbaar Bestuur 4 ICT-Beheerder (Servicedesk) 3 Medewerker Beheer ICT 2 Medewerker ICT 4 Juridisch mdw. Arb.voorz.pers. 4 Juridisch mdw. Openbaar Bestuur 4 Juridisch mdw. Soc.Zekerheid 4 Juridisch mdw. Zakelijke dienst 4 Juridisch mdw. Pers.en Arbeid 4 Bedrijfsadministrateur 2 Administratief medewerker bedr 2 Administratief medewerker secr 2 Administratief medewerker telef 3 Boekhoudkundig Medewerker 4 Comm.Mdw.Bank- en Verz.wezen 4 Managementassistent (Dir.secr.) 1 Particulier Beveiliging 2 Mdw. Vrede en Veiligheid 3 Juridisch secretaresse 4 ICT beheer (ICT-beheerder) 4 ICT beheer (Netwerkbeheerder) 3 Administrateur (Boekhoudk.mdw) 4 Financiële beroepen 3 Medisch secretaresse 3 Secretaresse 4 Directiesecretaresse 4 Managementassistent 2 Mdw. Toezicht en Veiligheid 3 Handhaver Toezicht en Veiligh. 2 Particulier Bev. (Beveiliger) 2 Medewerker Vrede en Veiligheid
totaal
BOL M V
BBL M V
DTBOL Extraneus M V M V 3 5 2 1 5 9 1 1 5 1 1 1 1 1 3
1 1 2 23 32 5 4 4 3 1 32 3 1 9 12 2
1
1 1 2
1 2
22 15 5 3 23 33 3
3
3 1 1 1 1
4 5 1
1
2 3
4 1 1
2
3 7 2
1 4
1
1 28 5 8 25
1 2 34
2 3 7 17 1 6 26 4
1
3 2 1 1
1
1 5 3 6
237 182
2
1
8
10
12
28
31
28
9
Sector:
Ondernemen
Algemeen In de sector Ondernemen zijn in het schooljaar 2009-2010 in de meeste opleidingen voor het eerst competentiegerichte examens afgenomen. Een groot deel van deze examens werd ingekocht bij het Kenniscentrum Handel (KC Handel). In de opleidingen schoonheidsverzorging werd gewerkt met examens van Philyra. De opleiding Mediavormgever ontwikkelde zelf de exameninstrumenten. Resultaten laatste Inspectieonderzoek Door de inspectie zijn drie opleidingen onderzocht: Medewerker Design, Verkoper en Mediavormgever. Voor wat betreft de opleiding Mediavormgever betrof het een Onderzoek Kwaliteitsverbetering (OKV). De inspectie heeft vastgesteld dat bij deze drie opleidingen de examinering van voldoende kwaliteit is. Zes van de zeven kwaliteitsstandaarden werden met een voldoende beoordeeld. Voor de standaard “Borging van de kwaliteit van de examinering” kregen de onderzochte opleidingen een onvoldoende omdat de examencommissie zich niet met regelmaat vergewist van de integrale kwaliteit van de examinering. De examens voor Nederlands en MVT waren van voldoende kwaliteit. Resultaten interne audit In de interne audit zijn de volgende opleidingen onderzocht: Specialist mode maatkleding Verkoper Commercieel medewerker binnendienst Voor een overzicht van de bevindingen zie bijlage 2. Tevredenheidonderzoek onder studenten Er is een beperkte steekproef gehouden met het afnemen van de gestandaardiseerde enquête onder studenten. Hieruit kwam naar voren dat er meer aandacht besteed kan worden aan informatievoorziening naar studenten. Daarnaast zijn er in een paar opleidingen studentenevaluaties uitgevoerd met behulp van vragenlijsten. Verslag bijeenkomsten sectorale examencommissie De sectorale examencommissie vergaderde vier keer op basis van de standaardagenda. Een belangrijk aandachtspunt was de logistiek van de examinering en de afstemming van de examenbureaus op de verschillende locaties van de sector Ondernemen. Scholing 20 medewerkers volgden een assessorentraining. Voor de meesten was dit de assessorentraining van de ROC Academie. Daarnaast waren er branchegerelateerde trainingen bij Mode en INTA. Inmiddels zijn vrijwel alle assessoren intern geschoold. In het komende jaar zullen alle assessoren die actief zijn bij examenafname, een training hebben gevolgd. Klachten/bezwaren In totaal zijn er vier klachten afgehandeld in de opleiding Kapper. Verbeteracties
In het kader van de kwaliteitscyclus zijn de volgende verbeterpunten geformuleerd: -
Informatie aan studenten Informatie aan betrokken bedrijven Afstemming examenbureaus: verbetering proces examinering Registratie van examenplanning
Het monitoren van deze acties berust bij de werkgroep Herinrichting Examinering.
10
Overzicht uitgegeven diploma’s In 2010 werden in totaal 541 diploma’s uitgegeven. Hieronder staan deze gegevens geordend per opleiding en leerweg. De extraneuskandidaten betreffen studenten die vertraagd zijn en die de opleiding alsnog afronden zonder daarvoor verder lessen te hoeven volgen.
10002 10007 10011 10012 10013 10014 10021 10036 10362 10507 10508 10847 10849 10850 10851 10853 90112 90191 90201 90252 90290 90383 90390 90413 90531 90532 90534 90910 90951 91240 91250 91260 93492 93494 93732 93751
niv. 4 Ondernemer Groothandel 4 Hoofd Magazijn 3 Groepsleider Magazijn 3 Vertegenwoordiger 3 Medewerker Inkoop 3 Commercieel Medewerker Binnend 2 Magazijn Medewerker 4 Commercieel Medewerker Marketi 4 Middenkader Medewerker Commercie 3 All-Round Kapper 2 Kapper 3 Verkoopchef 4 Filiaalbeheerder 4 Ondernemer/Manager Detailhandel 3 Eerste Verkoper 2 Verkoopmedewerker 3 Commercieel Medewerker Binnend 3 Allround DTP-er KC GOC 3 Logistiek teamleider KC Handel 2 Logistiek medewerker 4 Ondernemer detailhandel 2 Verkoopspecialist detailhandel 2 Verkoper 4 Mediavormgever 4 Assistent Communicatiemedewerker 4 Marketing Medewerker 4 Medewerker Evenenementenorg. 1 Aankomend verkoopmedewerker 4 Filiaalbeheerder detailhandel 2 Basismdw. Mode/maatkleding 3 Allround mdw Mode/maatkleding 4 Specialist mode/maatkleding 4 Filiaalmanager 4 Vestigingsmanager Groothandel 1 Assistent Logistiek medewerker 2 Verkoper detailhandel
totaal
BOL M V 7 2
BBL M V 1 1 4 10
DTBOL M V
EXTRANEUS M V
1 2 8 2 2 2
9 6 3 1 2
8 9 7 16 11 7
5 1
6 1 9 3 1 1
4 2 5 2 3
1 7 1
1 6 29
8 3 15 3 7
19
11
149 100
2 10 1 6 3 2
1 2 2
3
1 1 1
1 3
1 1
17 43 35 8
12 7 1
6 4
1 1
1 5
1
1 4 3 10
1
2 2 1 19 1
4 2 3 7
22
64 149
1
5
1
27
46
11
Sector:
Horeca, Toerisme & Recreatie
Algemeen Door organisatieveranderingen in het ROC, is ook de structuur van de examencommissie in januari 2010 aangepast. De examencommissie is ingericht naar de laatste versie van het Handboek examinering, versie mei 2009. De examencommissie bestaat nu uit sectordirecteur HTR en de teammanagers van de teams Horecamanagement + Horeca vakopleidingen en het team Toerisme & Recreatie. De examencommissie wordt functioneel ondersteund door de secretaris Examinering op de sector. Iedere teammanager geeft leiding aan in de teams benoemde examenconstructeurs, de vaststellers van de examenproducten en de samenstellers van de opleidingsgidsen. Daarnaast zijn medewerkers van de studentenadministratie betrokken bij resultatenverwerking, diplomering en archivering. Resultaten laatste Inspectieonderzoek In 2010 is de opleiding 94110 Horeca-assistent benoemd als te onderzoeken opleiding wat betreft examinering. Het vooronderzoek vindt plaats in januari 2011, terwijl het vervolgonderzoek in maart 2011 zal plaatsvinden. Resultaten interne audit De opleidingen voldoen in algemene zin aan de kwaliteitsstandaarden. De documenten die als vaste en variabele actiepunten toegevoegd kunnen worden, moeten meer worden toegevoegd. De resultaten zijn besproken in de sectorale examencommissie. Resultaten afgenomen enquêtes De gestandaardiseerde enquêtes voor studenten en bedrijven zijn niet structureel afgenomen, maar dit gebeurt wel regelmatig. Bij de Vakopleidingen Horeca is gebruikgemaakt van enquêtes die door medewerkers van het opleidingsteam zijn ontwikkeld. De enquêtes worden uitgereikt bij afname van de beroepsexamens. Resultaten van de vaststellingscommissie(s) De gebruikte exameninstrumenten zijn in dit schooljaar geactualiseerd. In het najaar van 2010 is een start gemaakt met het vaststellen van al deze exameninstrumenten, zowel de nieuw ontwikkelde examens als de geactualiseerde versies.
Verslag bijeenkomsten sectorale examencommissie De examencommissie heeft in 2010 vier keer volgens de afgesproken procedures vergaderd over examentechnische zaken. Dit gebeurt standaard met een agenda en aan de hand van de onderwerpen die in de examencyclus zijn vastgelegd. Besproken onderwerpen zijn onder andere de volgende punten; • • •
• •
Examenresultaten Vergaderresultaten vanuit de teams zijn besproken, waaronder de aantallen te diplomeren studenten van de opleidingen. Te starten opleidingen Er is vastgesteld in juni 2010 met welke opleidingen gestart zal worden; hiervan is per team een overzichtsschema beschikbaar. Opleidingsgidsen Stand van zaken voor wat betreft de opgeleverde opleidingsgidsen en de kwaliteit van de opleidingsgidsen per team. Er is specifiek aandacht besteed aan de aanpassingen voor wat betreft het werken met de taalniveaus van Meijerink. Meijerink-systematiek Bij alle opleidingen die in 2010 zijn gestart, is ook de Meijerink-systematiek voor Nederlands en Rekenen in de opleidingsgids opgenomen. Examenconstructie Er is per team een overzicht gemaakt wie verantwoordelijk is voor de samenstelling van de examens. De beroepsexamens worden in hoofdlijnen aangeleverd door de secretaris van de examencommissie; in het voorjaar 2011 zullen alle beroepsexamens geactualiseerd zijn.
12
•
• • •
•
Eindtermen/competentiegericht Van de aangeboden opleidingen op de sector is nog slechts nog één opleiding eindtermgericht. De overige opleidingen zijn alle competentiegerichte experimentele opleidingen. Afgesproken wordt om gebruik te maken van de nieuwste crebolicenties die beschikbaar zijn. Vanaf 2011 zullen er op deze sector geen eindtermgerichte opleidingen meer starten. Examenvaststelling Er zijn workshops gegeven om de examenvaststelling te organiseren en uit te voeren per team. Klachten Er zijn op examengebied geen klachten geconstateerd. Enquetes Er zijn afspraken gemaakt over het uitzetten van vragenlijsten om de examens te evalueren. Het betreft hier vragen die betrekking op tevredenheid van studenten en bedrijven over de wijze waarop examinering plaatsvindt, de kwaliteit van de exameninstrumenten, etc. Het examenbureau draagt er zorg voor dat een enquête deelnemerstevredenheid en een enquête tevredenheid beroepenveld wordt toegevoegd aan examens die worden afgenomen in het werkveld. Handboek examinering Het Handboek examinering is besproken en geïmplementeerd in alle teams; de taken zijn verdeeld en vastgelegd via de organisatie van het werk.
Scholingsplan Op het gebied van examinering is in 2010 een start gemaakt met het verzorgen van workshops voor de vaststellers van de beoepsexamens. EVC Er is geen gebruik gemaakt van EVC-procedures. Klachten/bezwaren Er zijn op examengebied geen klachten ingediend door studenten. Verbeteracties Het meer structureel inzetten van enquêtes. Daarnaast worden de beroepsexamens op hoofdlijnen volgens een vast examenconcept geactualiseerd.
13
Sector:
Mobiel
Algemeen In de Sector Mobiel is de inzet van de opleidingsteams er op gericht om voor alle opleidingen te voldoen aan de kwaliteitseisen geformuleerd in de examenstandaarden. Bij twee opleidingsteams in de sector Mobiel zijn er intussen mappen samengesteld waarbij “bewijsmateriaal” is verzameld waarmee kan worden aangetoond dat er wordt voldaan om aan de zeven kwaliteitsstandaarden. Bij de overige teams is dit nog in ontwikkeling. Om adequaat te kunnen sturen zijn alle in het managementteam te bespreken zaken in een “planning en control” cyclus gezet. Dit om verrassingen zoveel mogelijk uit te sluiten. Kenmerkend voor de examinering binnen de sector is: Team Autotechniek: De examinering wordt uitbesteed bij IBKI, een onderdeel van het Kenniscentrum Beroepsonderwijs Bedrijfsleven voor de autobranche. Voor de niveau 1 opleiding heeft het opleidingsteam de examinering in eigen hand gehouden. Zij hebben hiervoor een Proeve van bekwaamheid ontwikkeld. Team Automanagement: Binnen dit team worden zowel examenproducten ingekocht als zelf ontwikkeld. De keuze voor zelf ontwikkelen is met name ingegeven door het feit dat er niet altijd examenproducten beschikbaar zijn. Team Landbouwtechniek: Voor de BOL opleiding worden door docenten vanuit het opleidingsteam zelf exameninstrumenten ontwikkeld. De BBL opleiding besteedt de examinering geheel uit aan KENTEQ, een Kenniscentrum Beroepsonderwijs Bedrijfsleven. Team Transport en Logistiek: De examenproducten worden ingekocht bij een examenleverancier. Er wordt daarbij gebruikgemaakt van de systematiek van portfoliobeoordeling. Resultaten laatste Inspectieonderzoek Kort verslag van de verklaringen: In november 2009 is de inspectie op bezoek geweest om de examinering te onderzoeken van twee opleidingen, t.w. -
Landbouwtechniek BOL 4 crebo 10072 Technisch specialist autotechniek BBL 4.
De opleiding Landbouwtechniek is afgekeurd op basis van een onvoldoende voor standaard 3. Het exameninstrumentarium voldeed inhoudelijk niet aan de gestelde eisen. De opleiding Autotechniek is goedgekeurd met daarbij de kanttekening dat de vakken Nederlandse taal en Engels zijn afgekeurd. Bij beide opleidingen werd vastgesteld dat niet voldaan wordt aan kwaliteitsstandaard 6 (borging kwaliteit). In 2010 zijn op alle punten van afkeuring verbeterpunten ingezet en doorgevoerd. In januari en maart 2011 komt de inspectie opnieuw met een onderzoek om de kwaliteit van de examinering vast te stellen. Resultaten interne audit Het vaststellen van examenproducten is in feite alleen van toepassing voor de examenonderdelen van Nederlandse taal en Engels. De vaststeller waarmee de auditoren hebben gesproken, kon hier niets over zeggen, maar wist indirect veel van de examinering bij IBKI, waaraan de examinering is uitbesteed. De auditoren hebben desondanks de indruk gekregen, dat de opleiding Autotechnicus goed in elkaar zit, maar constateren tevens - daar de examinering uitbesteed is – dat de gesprekspartners tijdens deze audit weinig zicht hebben op de examinering in zijn geheel.
14
Door het ontbreken van documentatie betreffende de examinering blijkt het lastig vast te stellen in hoeverre de opleiding voldoet aan de kwaliteitsstandaarden van ROC Aventus. Er is overigens een goede samenwerking met IBKI op het gebied van de examinering. Klachten over de examinering worden teruggekoppeld. Met opmerkingen van de opleiding wordt rekening gehouden; wanneer de kritische opmerkingen goed onderbouwd zijn, volgen aanpassingen. In het contract met IBKI is ook opgenomen dat de opleiding kan bepalen wanneer de examens plaatsvinden. Als er in de structuur van de examens wat verandert, wordt de opleiding betrokken om te adviseren waar het best het accent kan liggen. De samenwerking is heel goed zonder dat de objectiviteit van de beoordeling in gevaar komt. Resultaten afgenomen enquêtes Met de invoering van het competentiegerichte onderwijs zijn in de sector de toetsweken in feite vervallen. Deze weken boden een goede mogelijkheid om ook ervaringen van studenten te verzamelen. We waren gewend om de studenten te bevragen via enquêtes. In de nieuwe situatie moet er nog een modus gevonden worden op welke momenten het beste gevraagd kan worden naar hun ervaringen. Het afnemen van enquêtes, zowel voor deelnemers als bedrijven waar examinering heeft plaats gevonden, zit nog te weinig in de genen. Hier wordt in de komende tijd extra aandacht aan gegeven. Resultaten van de vaststellingscommissie(s) Vanaf medio 2011 wordt er een sectorale vaststellingscommissie gevormd die voor alle opleidingen binnen sector Mobiel de summatieve (= examinerings)producten gaat vaststellen. Elk team en vakonderdeel is hierin vertegenwoordigd. Verslag bijeenkomsten sectorale examencommissie Qua tools zijn er goede dingen neergezet. Hele examinering zit nog niet in onze genen. Het doorlopen van de cyclus (plan – do – check – act) is geen vanzelfsprekendheid. Het is (nog) geen geborgd proces. Er gebeurt nog te veel ad hoc. Structuur aanbrengen, processen moeten nog benoemd en gepland worden. Op dit moment wordt hard gewerkt om het nieuwe handboek te implementeren in de teams. Scholingsplan Het scholingsplan is in gang gezet. Voor de leden van de vaststellingscommissie zal een passende scholing ingezet worden. Klachten/bezwaren Geen klachten ingediend. EVC aanvragen EVC aanvragen zijn afgehandeld door de betreffende Kenniscentra Kenteq en VTL. Verbeteracties In het verleden liep een overleg van het managementteam naadloos over in de bijeenkomst van de examencommissie, waardoor een duidelijke leidraad met agenda, verslaglegging en verbeteracties niet goed zichtbaar werd voor het terrein van examinering. De examencommissie is met ingang van 2010 in uitvoering losgekoppeld van reguliere overleg van het managementteam. Tijdens de examencommissievergadering komt de contactpersoon examinering/kwaliteitscoördinator aanschuiven als secretaris examencommissie. Tijdens het overleg wordt nu gebruik gemaakt van een vergaderformat waarbij tevens een beoordeling van examenproducten en examenprocessen plaatsvindt. Structureel komt de examencommissie na afloop van een tienweekse onderwijsperiode bij elkaar. Dit betekent vier bijeenkomsten per jaar. Los hiervan komt de examencommissie bij elkaar om inhoudelijke punten verder uit te diepen.
15
Aanleiding voor extra bijeenkomsten van de examencommissie zijn geweest: -
de resultaten uit de JOB-monitor
het overleg met leden van de beroepenveldcommissie het inbedden van de standaarden in de teams de rapportage van de inspectie (2009).
Met ingang van januari 2011 zal een delegatie van de examencommissie structureel overleg hebben met twee of meer leden uit de beroepenveldcommissie. De onderwerpen die aan de orde zullen komen zullen betrekking hebben op zowel het onderwijs als de examinering. Met de nadruk op de processen en producten die bij examinering spelen wil de examencommissie graag feedback hebben.
16
Sector:
Training & Educatie - VAVO
Algemeen Jaarlijks wordt door de examencommissie VAVO van de sector Training en Educatie een examenjaarverslag opgesteld, waarin verantwoording over de behaalde examenresultaten, over de genomen besluiten bij onregelmatigheden en over het examenbeleid binnen het VAVO wordt afgelegd. Voor het vierde achtereenvolgende jaar presenteren wij hiermee een dergelijk examenjaarverslag. In het kader van een betere borging van de kwaliteit van toetsing en examinering bij het VAVO komt dit verslag tot stand op basis van de richtlijnen, die hiervoor zijn opgesteld in het handboek toetsing & examinering van de sector Training en Educatie voor het VAVO conform bijlage 4.22 “Format examenjaarverslag VAVO”. Resultaten Hieronder treft u de slagingspercentages aan over het schooljaar 2009 – 2010, uitgesplitst naar opleiding (VMBO – HAVO – VWO). In het overzicht zijn de slagingspercentages niet uitgesplitst naar de vestigingen in Apeldoorn en Deventer, maar als geheel opgenomen.
uitstroom Certificaat behaald Diploma HAVO Diploma VMBO Theor. Leerweg Diploma VWO Onvoldoende resultaat Eindtotaal
Atheneum 22
60 14 96
HAVO MAVO Eindtotaal 100 17 139 147 147 28 28 60 61 16 91 308 61 465
In vergelijking tot de rendementen van het schooljaar 2008 – 2009 van ROC Aventus zijn de resultaten op het VWO met 85% precies gelijk gebleven, op het HAVO met 80% 1% gestegen, maar op het VMBO met 74% behoorlijk gedaald met 9%. Gemiddelde cijfers Op de volgende pagina vindt u een overzicht van de gemiddeld behaalde schoolexamencijfers (SE) en die van de gemiddeld behaalde eindexamencijfers (CSE). Deze gemiddelden zijn door de examencommissie met elkaar vergeleken en door de VAVO teamleider met het team als geheel als ook met individuele teamleden besproken. Met name de afwijkingen bij het VWO vragen om een verklaring (gemiddelde afwijking – 0,64), maar zijn t.o.v. het schooljaar 2008-2009 wel “gedaald” met gemiddeld 0,23 (was toen -0,87) In een geval is de (te) grote afwijking wellicht aan de vervanging i.v.m. zwangerschapsverlof van een docent, toe te schrijven. Verder kan in zijn algemeenheid worden gesteld, dat door het vrijstellingenbeleid voor onderdelen van het schoolexamen, de gemiddelde schoolexamencijfers naar boven toe worden bijgesteld. S Studenten kunnen immers hun eerder (en hoger) behaalde resultaten laten staan of meenemen van hun vorige school. Tenslotte is het aantal kandidaten bij sommige vakken dermate klein, dat hieraan geen vergaande conclusies mogen worden verbonden. Dit geldt bijvoorbeeld voor de vakken Economie 1, M&O en Wiskunde A1 De afwijkingen bij het VMBO en HAVO blijven met gemiddeld -0,44 over het algemeen binnen de “toegestane” marges.
17
Gemiddelden totaal Schoolexamen – Centraal schriftelijk Examen te Apeldoorn / Deventer Deventer/Apeldoorn Opleidingssoort
30-6-2011
Vakcode
Omschrijving
aantal cursisten
Gem. SE
Totaal CE
Gem. CE
CSE CE
VMBO
AK131 BI191 DU063 EC233 EN071 FA053 GS125 CK418 NSK10173 NE011 WI153
Aardrijkskunde Biologie Duits Economie Engels Frans Geschiedenis Kunstvakken NaSk 1 Nederlands Wiskunde
A A A A A D A D A A A
12 19 9 23 28 3 12 9 3 22 17
6,17 6,36 5,77 5,93 6,64 6,27 6,42 6,99 7,10 6,13 5,79
68,40 109,70 55,90 113,80 173,00 19,20 69,40 60,50 15,10 140,20 81,20
5,70 5,77 6,21 4,95 6,18 6,40 5,78 6,72 5,03 6,37 4,78
-0,47 -0,59 0,44 -0,98 -0,46 0,13 -0,63 -0,27 -2,07 0,25 -1,02
HAVO
AK131 AK131 BI1018 BI1018 DU1004 DU1004 EC1022 EC1022 EN1002 EN1002 FA1003 FA1003 GS1021 GS1021 MW1034 MW1034 MO251 MO251 NA1023 NA1023 NE1001 NE1001 SK1028 SK1028 TE270 WA1024 WA1024 WB1025 WB1025
Aardrijkskunde Aardrijkskunde Biologie Biologie Duitse taal en literatuur Duitse taal en literatuur Economie 12 Economie 12 Engelse taal en literatuur Engelse taal en literatuur Franse taal en literatuur Franse taal en literatuur Geschiedenis Geschiedenis Maatschappijwetenschappen Maatschappijwetenschappen M&O M&O Natuurkunde Natuurkunde Nederlandse taal en literatuur Nederlandse taal en literatuur Scheikunde Scheikunde Tekenen Wiskunde A Wiskunde A Wiskunde B Wiskunde B
D A D A D A D A D A D A D A D A D A D A D A D A D D A D A
19 38 21 36 23 41 38 68 61 86 12 12 40 61 24 38 13 19 13 19 53 73 15 28 40 39 62 14 16
6,02 5,94 5,71 5,73 5,75 5,87 5,94 5,79 6,70 6,28 6,71 5,89 5,51 5,92 6,13 5,93 6,15 6,27 6,44 6,18 5,97 5,84 6,63 6,07 6,92 5,75 6,51 5,97 5,83
106,10 200,40 138,30 223,60 135,90 228,70 186,20 328,10 369,50 518,50 71,90 71,00 235,00 347,40 132,50 193,90 72,70 106,70 84,50 105,20 292,90 396,50 93,40 163,10 219,00 216,00 369,00 73,90 83,80
5,58 5,27 6,59 6,21 5,91 5,58 4,90 4,83 6,06 6,03 5,99 5,92 5,88 5,70 5,52 5,10 5,59 5,62 6,50 5,54 5,53 5,43 6,23 5,83 5,48 5,54 5,95 5,28 5,24
-0,43 -0,67 0,88 0,48 0,16 -0,29 -1,04 -0,96 -0,64 -0,25 -0,72 0,03 0,37 -0,22 -0,60 -0,83 -0,56 -0,66 0,06 -0,65 -0,44 -0,41 -0,41 -0,24 -1,44 -0,21 -0,56 -0,69 -0,59
VWO
AK131 BI1018 DU1004 EC231 EC1022
Aardrijkskunde Biologie Duitse taal en literatuur Economie 1 Economie
D A A D D
15 19 14 4 23
6,47 6,33 6,09 6,35 5,77
84,00 111,30 72,10 23,20 128,10
5,60 5,86 5,15 5,80 5,57
-0,87 -0,47 -0,94 -0,55 -0,20
18
EN1002 FA1003 GS1021 MO251 NA171 NA1023 NE1001 SK181 SK1028 TE270 WA141 WA1024 WB152 WB1025
Engelse taal en literatuur Franse taal en literatuur Geschiedenis M&O Natuurkunde 1 Natuurkunde Nederlandse taal en literatuur Scheikunde 1 Scheikunde Tekenen/Kunstge Wiskunde A1 Wiskunde A Wiskunde B1 Wiskunde B
D A A D A D A A A D A A D A
28 7 21 5 18 13 18 13 12 7 1 25 18 8
6,65 5,70 6,39 7,04 6,48 6,41 6,69 6,48 6,01 7,64 6,00 5,35 5,52 5,36
153,00 38,40 111,90 29,70 107,40 76,20 98,00 77,40 65,70 44,00 5,70 129,60 96,80 42,90
5,46 5,49 5,33 5,94 5,97 5,86 5,44 5,95 5,48 6,29 5,70 5,18 5,38 5,36
-1,19 -0,21 -1,06 -1,10 -0,51 -0,55 -1,24 -0,52 -0,53 -1,35 -0,30 -0,16 -0,14 0,00
Deelnemerstevredenheid Regelmatig worden er gedurende het schooljaar enquêtes afgenomen om hiermee de deelnemerstevredenheid te meten. Zo ook over de organisatie van de schoolexamens en het CSE. De uitkomsten van deze metingen vindt u in bijlage 3. Daar waar een score onder 80% uitkomt, wordt door het team een verbeteractie geformuleerd. Deze actie wordt zo spoedig mogelijk uitgevoerd, doch uiterlijk in het schooljaar erna. Opvallend is, dat er zowel in Apeldoorn als in Deventer minder tevredenheid bestaat over de gebruikte ruimtes (stelling 4). Hiervoor is voor het komende CSE dus extra aandacht nodig. Ook aan de beperking van geluidsoverlast (stelling 5) moet aandacht worden besteed, met name in Deventer. Uit de enquêtes komt naar voren dat kandidaten over het algemeen tevreden tot zeer tevreden zijn over de organisatie en het verloop van de (school)examens. Onregelmatigheden, bezwaar en beroep Onregelmatigheden Tot onze spijt bleek - via een terugmelding vanuit de IB-groep/inspectie - dat een kandidaat aan het eind van het schooljaar 2008-2009 ten onrechte een diploma heeft ontvangen; een verplicht profielvak ontbrak. De betreffende student is hiervan tweemaal telefonisch en eenmaal schriftelijk op de hoogte gesteld. Naar aanleiding van dit incident zijn door ons verbeteracties geformuleerd, waarvan de belangrijkste is, dat in ons nieuwe studentenvolgsysteem (Tribe) een waarschuwingssignaal is opgenomen voor onvolledige of onjuiste vakkenpakketten. Tevens is bepaald, dat er altijd nog een handmatige controle van de uitslagen moet plaatsvinden door twee medewerkers, alvorens de resultaten bekend te maken. Tijdens SE1 had een groep kandidaten HAVO economie te weinig tijd toegekend gekregen van de surveillant. Al deze studenten hebben een “extra” herkansing gekregen. Ditzelfde overkwam een dyslectische kandidaat, die recht had op verlenging van de toetstijd. Ook zij heeft een “extra” herkansing gekregen. Tijdens SE2 werden zowel bij een toets van Duits als economie kandidaten betrapt op spieken. In beide gevallen is het cijfer 1 toegekend. Tijdens de inhaal- en herkansingsweek wordt tijdens de correctie van een toets wiskunde A fraude ontdekt; vier kandidaten krijgen het cijfer 1 toegekend. Tijdens de afname van het CSE HAVO Maatschappijwetenschappen (2e tijdvak) is verzuimd een erratumblad uit te delen, waardoor de kandidaten van dit erratum dus niet op de hoogte waren. De examinator heeft verklaard, dat deze omissie echter geen enkele invloed heeft gehad op het resultaat; de vraag was ook gewoon te beantwoorden zonder kennisname van het erratum. Van deze onregelmatigheid is mededeling gedaan bij de inspectie. Als verbeteractie is geformuleerd, dat de envelop met opgave + de eventuele envelop met erratumbladen d.m.v. een elastiekje aan elkaar worden vastgemaakt en worden voorzien van een opvallend gekleurde sticker.
19
Bezwaar Bezwaarprocedures hebben zich in het schooljaar 2009-2010 niet voorgedaan. Beroep Beroepszaken hebben zich in het schooljaar 2009 – 2010 niet voorgedaan. Beleid In het schooljaar 2009-2010 heeft de samenwerking met het ROC Regiocollege verder zijn beslag gekregen in de vorm van nadere afspraken. In het schooljaar 2010-2011 zullen deze afspraken verder geïmplementeerd moeten worden. De uitwisseling en vaststelling van toetsen zal geïntensiveerd worden, opdat uiteindelijk 100% van de schoolexamentoetsen voor afname extern is vastgesteld.
20
Bijlage 1:
VERBETERPLAN EXAMINERING van opleiding Helpende Zorg/Welzijn
Standaard 1: Het beroepenveld heeft vertrouwen in de examenkwaliteit 1. Bij de eerst volgende metingen wordt gebruik gemaakt van enquête uit het Handboek. 2. Door het uitvoeren van de enquête wordt de tevredenheid van het werkveld gemeten. 3. De mening van het werkveld over de definitieve keuze van de examenproducten voor de cohorten 2010-2012 e.v. wordt meegenomen in de besluitvorming. Deze meningen worden gepolst in de vergaderingen van het WAC Kinderopvang en de opleidingscommissie V enV. Dit heeft ertoe geleid dat de sectorale examencommissie van de Sector Gezondheid voor de examenproducten van de Examenbank van RBA4 heeft gekozen. 4. Verklaring van vertrouwen wordt ingezet als standaard meetinstrument voor het peilen van het vertrouwen. Het is de bedoeling dat dit ingevuld wordt na het beoordelingsgesprek van proeve B vanaf de cohorten 2010-2012 5. Vertegenwoordiging van het beroepenveld in de examencommissie is niet geregeld. Maar RBA4 maakt gebruik van klankbordgroepen uit het beroepenveld bij het ontwikkelen van haar examenproducten 6. Beleidscommissie Aventus denkt na over participatie werkveld bij examinering. Standaard 2: De deskundigheid van alle betrokkenen is geborgd 1. Het format scholing uit het Handboek Examinering zal voortaan gebruikt worden en opgenomen worden in het scholingsplan van het team 2. Voortaan worden de deelnemersevaluaties afgenomen m.b.t. examinering aan de hand van de daarbij behorende formulieren uit Handboek Examinering Standaard 3: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen 1. Geen verbeteringen nodig. Standaard 4: Het exameninstrumentarium voldoet aan de toetstechnische eisen 1. De informatievoorziening aan de student wordt helder en transparant gemaakt aan de hand van niet alleen een degelijk toetsplan maar ook een duidelijke en eenduidige uitleg Standaard 5: De examenprocessen van afname, beoordeling en diplomering zijn deugdelijk 1. De PDCA-cyclus wordt voortaan ook toegepast op het proces en product van examinering 2. Bij dit proces worden studenten en werkveld betrokken ( zie ook standaard 1) 3. Voor de student staat helder in de opleidingsgids c.q. hoofdstuk 5 omschreven hoe het examenproces eruit ziet evenals de beoordeling Standaard 6: De examenkwaliteit is voldoende geborgd 1. Er wordt een examenplan op 1 A-4tje voor de cohorten 2009-2011 en 2010-2012 gemaakt, dat vastgesteld wordt in de subexamencommissie 2. De inhoud van het examendossier voor cohort 2010-2012 wordt vastgesteld door de VC van de sector Gezondheid. De examenproducten van RBA 4 voor de oudere cohorten zijn vastgesteld in de vergadering van de Sectorale Examencommissie bij de keuze voor het werken met de RBA4 examenproducten 3. In 2011 wordt een bijdrage geleverd door opleidingsteam aan jaarverslag examinering 4. De archiveringsprocedure wordt gevolgd volgens het Handboek Examinering Standaard 7: Naleving wettelijke vereisten 1. De opleidingsgids wordt formeel vastgesteld in de Sectorale Examencommissie van de Sector 2. Het nieuwste Handboek Examinering Aventus wordt geïmplementeerd en uitgevoerd 3. Klachtenprocedure t.a.v. examinering wordt duidelijk met student gecommuniceerd
21
Mode en maatkleding
Verkoper
Commercieel medewerker binnendienst
Medewerker ICT
Juridisch medewerker openbaar bestuur
Administrateur Deventer
Globaal overzicht resultaten interne audits sectoren E&O
Administrateur Apeldoorn
Bijlage 2:
Standaard 1: Het beroepenveld heeft vertrouwen in de examenkwaliteit Criterium 1.1 De tevredenheid van het beroepenveld over de examinering
V
V
V
?
V
V
V
Criterium 1.2 De betrokkenheid van het beroepenveld bij de ontwikkeling van exameninstrumenten
V
V
V
?
V
V
V
Criterium 1.3 De betrokkenheid van het beroepenveld bij de afname van examens
O
?
V
V
V
V
V
Criterium 1.4 Het vertrouwen van het beroepenveld in de kwaliteit van het onderwijsconcept en de bijbehorende examinering
V
V
V
?
V
V
V
Criterium 1.5 De participatie van vertegenwoordigers van het beroepenveld in de examencommissie(s)
?
V
O
O
V
V
O
Criterium 1.6 De inkoop van gecertificeerde examenproducten
?
V
?
V
V
V
V
Standaard 2: De deskundigheid van de betrokkenen is geborgd Criterium 2.1 Het definiëren van de benodigde competenties van de betrokken medewerkers
V
V
V
V
O
O
O
Criterium 2.2 Het opstellen van een scholingsplan voor de betrokken medewerkers
?
?
V
O
O
O
O
Criterium 2.3 De afname van studentevaluaties m.b.t. de examinering
O
O
V
O
O
O
V
Criterium 2.4 De bekendheid van de deskundigheid van de betrokken medewerkers
V
V
?
?
V
V
V
22
Standaard 3: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen Criterium 3.1: Dekkingsgraad
V
V
V
V
V
V
V
Criterium 3.2: Cesuur
V
V
O
V
V
v
V
Standaard 4: Het exameninstrumentarium voldoet aan de toetstechnische eisen Criterium 4.1: Informatie student
?
V
V
?
?
V
V
Criterium 4.2: Afnamecondities
V
V
V
V
V
V
V
Criterium 4.3: Beoordelingsvoorschrift
?
?
?
V
V
V
V
Standaard 5: De examenprocessen van afname, beoordeling en diplomering zijn deugdelijk Criterium 5.1 Deugdelijke afname
V
V
V
V
?
V
?
Criterium 5.2 Deugdelijke beoordeling
O
V
?
V
?
?
V
Criterium 5.3 Afgifte van diploma’s en certificaten op deugdelijke gronden
V
V
V
V
V
V
V
Standaard 6: De examenkwaliteit is voldoende geborgd Criterium 6.1 De inrichting van de examenorganisatie
V
V
V
V
V
V
V
Criterium 6.2 Het verloop van het proces van examinering
?
?
?
V
?
?
V
Criterium 6.3 De inzet van onafhankelijke deskundigen
?
O
O
O
O
O
O
Criterium 6.4 De verantwoording over de kwaliteit van de examinering
V
V
V
V
V
V
V
Standaard 7: De instelling voldoet aan de wettelijke vereisten rondom examinering Criterium 7.1 De informatie over het examen
V
V
V
V
V
V
V
Criterium 7.2 De examencommissie
V
V
V
V
V
V
V
23
Criterium 7.3 De commissie van beroep
V
V
V
V
V
V
V
Criterium 7.4 De openbare verantwoording
V
V
V
V
V
V
V
24
Bijlage 3. Evaluatie CSE VAVO
1
Het examenrooster (tijd en plaats) wordt tijdig bekend gemaakt.
Locatie Apeldoorn 2009-2010 eens
oneens
opmerkingen
(112)
(9)
93%
7%
2
3
4
De exameninstructie is duidelijk
(118)
(3)
Geef aan w at je niet duidelijk vond of miste aan informatie
97%
3%
•
Ik weet lang genoeg van tevoren welke stof ik moet beheersen voor het eindexamen.
(95)
(26)
78%
22%
Geef de vakken aan waar je niet goed op de hoogte wordt gesteld
Ik ben tevreden over de ruimte (lokaal) waar de examens worden afgenomen.
(88)
(33)
73%
27%
Er is voldoende rust tijdens de examens
e
e
CKV, eerst alleen examenkatern 19 eeuw, later ook 20 eeuw. Economie 5x. Maatschappijwetenschappen, tekenen. Biologie 2x. Via internet te weten gekomen. Wiskunde, natuurkunde, scheikunde Aardrijkskunde was het verwarrend met nieuwe en oude stijl. Exacte stofomschrijving Alle vakken: ned, eng, ak, wis, mw, eco. Was per vak een beetje onduidelijk. Geef aan wat je niet prettig vond
5
De lokalen waren onbekend dus moest je vaak zoeken. In Deventer waren de lokalen waar het examen plaatsvond niet vermeld. Mag op zich ook wel eerder. Wel op tijd, maar niet terug te vinden op blackboard (2x). Af en toe zaten we in een ander lokaal, niet tijdig doorgegeven. Indeling werd 5 minuten van te voren aangekondigd.
Allemaal te dicht op elkaar Te warm, muf, benauwd (14x) Groot, soms wat rumoerig. Mensen die op het laatste binnenkomen onrust. Liever grotere ruimte als je met velen bent , te druk (5x) C1.07 is te groot, te veel mensen en ramen. C1.13 is heel prettig. Zaten op een plek waar beneden alle leerlingen die de school verlaten veel lawaai maken. Vooral als ramen open zijn, tegen oververhitting (3x) Geluiden, licht, veel ramen, dus afleiding. Te kleine tafels, bijvoorbeeld natuurkunde examen (3x) Lokaal D3.26 is te warm. Er staat de hele dag de zon op en er kan geen raam open. Slim is als er een ander lokaal gegeven wordt. Te weinig ventilatie (2x) Niet fijn: de ramen langs de weg.
(97)
(24)
Geef aan wat de rust verstoorde
80%
20%
Af en toe openen mensen hun blikjes Te veel mensen Als personen weggaan met redelijk wat kabaal
25
6
Ik heb geen klachten over de surveillanten.
(107)
(14
Geef aan wat je klacht is
88%
12%
• • • • • • •
7
“De docenten bereiden mij prima voor op het eindexamen”
WC mensen die weggaan / te laat binnenkomen Veel gehoest Leraren die praten Veel heen en weer geloop Geluid van buiten, brommers (7x) Sommige leerlingen zijn nogal zenuwachtig of spastisch en kunnen niet stil zitten (meer ruimte tussen tafels!) Donderdag (Deventer) lichten knipperen Geluid van vrouwen met hakken
Door de surveillanten wordt vrij veel gelopen en gefluisterd onderling (4x) Sommigen waren niet bekend met de regels Sommigen mogen eens leren normaal te doen Bij bio moesten we te lang wachten na de compex Een zat met pen te klikken Steeds koffie halen Sommige surveillanten bieden koffie aan, dat is heel aardig, maar stoort ontzettend Soms wordt er tussendoor naar ID –kaart gevraagd, dat is afleidend
(106)
(15)
Leg uit waarom je het niet eens bent met de stelling
88%
12%
Mag voor sommige vakken meer zijn, bijvoorbeeld economie, biologie. CKV Ze zullen vast hun best gedaan hebben, als ik er wat vaker was geweest Kan wat meer op examen gerichte schoolexamens Niet alle docenten begeleiden voldoende nar het halen van je diploma Aangeven wat je moet weten Betere examentraining, nu moet je zelf maar vragen stellen Weinig oefeningen Bij vakken als Nederlands en Engels gingen we alleen maar oefenen en kregen we geen examen tips Niet alle onderwerpen besproken in de les Sommige stof werd niet behandeld Kan beter, meer oefen examens houden (2x)
Ruimte voor opmerkingen • •
Weinig contact tussen leerlingen en docenten Organisatie was goed
26
Evaluatie CSE VAVO Locatie Deventer
1
2
2009-2010
eens
oneens
Het examenrooster (tijd en plaats) wordt tijdig bekend gemaakt.
(51)
(4)
93%
7%
De exameninstructie is duidelijk
(52)
(3)
95%
5%
opmerkingen
Geef aan w at je niet duidelijk vond of miste aan informatie •
3
Ik weet lang genoeg van tevoren welke stof ik moet beheersen voor het eindexamen.
(44)
(11)
80%
20%
Geef de vakken aan waar je niet goed op de hoogte wordt gesteld
4
Ik ben tevreden over de ruimte (lokaal) waar de examens worden afgenomen.
Wanneer je wel of niet geslaagd bent
Kunstgeschiedenis Ik had altijd wel een vraag te stellen Biologie, natuurkunde Van veel vakken wordt niet precies verteld wat je moet leren Economie
(41)
(14
Geef aan wat je niet prettig vond
75%
25%
Storend / afleidend Te kleine lokalen Te kleine ruimtes, te veel mensen Liever in gymzaal, niet boven fietsenstalling Benauwd, druk Klein en ‘niet officieel’ Veel herrie van buiten Te veel leerlingen in 1 lokaal Te smal Te dicht op elkaar Veel lawaai van buiten Veel lawaai op de gang en buiten (brommers)
27
5
Er is voldoende rust tijdens de examens
(42)
(13)
Geef aan wat de rust verstoorde
76%
24%
6
7
Gekraak, gesnotter, getik, gezucht, etc Teveel mensen Surveillanten die soms lopen en praten Dat de deuren te vaak open gaan. Ook door leraren. Teveel mensen die naar de wc gaan. De deur gaat te vaak open. Onrust op de gang. Veel mensen naar de wc? Mensen lopen, deuren. Veel lawaai buiten. Herrie van buiten. Veel geluid van buiten het lokaal. Buitenaf veel geluiden, mensen, brommers.
Ik heb geen klachten over de surveillanten.
(43)
(12
Geef aan wat je klacht is
78%
22%
• • • •
“De docenten bereiden mij prima voor op het eindexamen”
(43)
(12)
78%
22%
Geen klacht. G. is hyper. Te druk door aanwezigheid van mevrouw G. Alleen dat ze vaak in en uit lopen. Ze maken teveel geluid, zoals het open maken van zakjes, etc. • Hoge hakken dragende, hoestende, lachende leraren. Leg uit waarom je het niet eens bent met de stelling
Niet echt examentraining gehad. Tijdens examentraingen dingen behandeld die niet voor het CSE nodig waren. Er is gebrek aan begeleiding. Te weinig training. Het is niet duidelijk wat je wel en niet moet weten. Economie, een hele slechte examentraining. Sommige dingen hebben we niet eens gehad tijdens de lessen.
Ruimte voor opmerkingen • • •
Chaos vooraf aan de examens. Twee enquetes, stroom valt uit, woordenboeken regelen, in tien minuten!(klacht van docent) Je moet 15 minuten van te voren aanwezig zijn, sta je 13 minuten te wachten om 2 minuten voordat het examen begint pas naar binnen te kunnen.
28
