Onderwijskwaliteit: onze zorg

Onderwijskwaliteit: onze zorg

Rapportage auditcommissie facultaire onderwijskwaliteitszorg Juli 2012

Rapportage Auditcommissie

2


3

Voorwoord In de eerste maanden van 2012 heeft de auditcommissie facultaire onderwijskwaliteitszorg de onderwijskwaliteitszorg bij de twaalf VU-faculteiten in kaart gebracht. Voor de commissieleden was het een leerzame ervaring om bij twaalf zeer verschillende faculteiten “in de keuken” te mogen kijken. Naar het oordeel van de commissie is er op het gebied van de onderwijskwaliteitszorg binnen de VU nog het nodige te verbeteren. Maar goede raad en goede oplossingen zijn niet ver weg: voor nagenoeg ieder aspect dat verbetering behoeft, is er wel een faculteit te vinden waar een min of meer kant en klare oplossing voor handen is. Het is daarom wenselijk dat faculteiten beter van elkaars doen en laten op de hoogte zijn dan nu het geval is. Gebruik maken van elkaars ervaring voorkomt dat iedere faculteit zelf het wiel (opnieuw) moet uitvinden. Graag maak ik van de gelegenheid gebruik om alle faculteiten te danken voor de medewerking aan de activiteiten van de commissie. Ook alle gesprekpartners bij de faculteiten zeg ik daarvoor hartelijk dank. In het bijzonder geldt dat voor de medewerkers die bij de faculteiten belast zijn met de onderwijskwaliteitszorg en die de commissie steeds opnieuw moesten voorzien van alle gevraagde documentatie. Namens de auditcommissie facultaire onderwijskwaliteitszorg, Peter Hollander


4

Inhoudsopgave 3 4

Voorwoord Inhoudsopgave 1 2 3 4

Inleiding Commissie en werkwijze Resultaten Audit Onderwijskwaliteitszorg Het vervolg

5 8 11 21

Referenties

24

Bijlage I Bijlage II Bijlage III Bijlage IV A Bijlage IV B Bijlage IV C Bijlage IV D Bijlage IV E Bijlage IV F Bijlage IV G Bijlage IV H Bijlage IV I Bijlage IV J Bijlage IV K Bijlage IV L Bijlage V

Brief CvB aan faculteiten van 20 december 2011 Brief commissie facultaire audits aan faculteiten van 26 januari 2012 Uitgewerkte auditkader Beoordeling onderwijskwaliteit Aard- en Levenswetenschappen Beoordeling onderwijskwaliteit Bewegingswetenschappen Beoordeling onderwijskwaliteit Economische wetenschappen en Bedrijfskunde Beoordeling onderwijskwaliteit Exacte wetenschappen Beoordeling onderwijskwaliteit Geneeskunde Beoordeling onderwijskwaliteit Godgeleerdheid Beoordeling onderwijskwaliteit Letteren Beoordeling onderwijskwaliteit Pedagogische en Psychologische wetenschappen Beoordeling onderwijskwaliteit Rechten Beoordeling onderwijskwaliteit Sociale wetenschappen Beoordeling onderwijskwaliteit Tandheelkunde Beoordeling onderwijskwaliteit Wijsbegeerte Overzicht onderwijsorganisatie faculteiten

25 27 29 31 39 48 58 66 74 81 89 97 105 113 121 129


5

1. Inleiding Context Met ingang van 2011 is het accreditatiestelsel voor het hoger onderwijs gewijzigd. Vanaf 2011 geldt dat accreditatie, die plaats vindt op het niveau van de opleiding, kan plaats vinden in de vorm van een “beperkte opleidingsbeoordeling” of in de vorm van een “uitgebreide opleidingsbeoordeling”. Ook voor nieuwe opleidingen geldt een vergelijkbare optie: een “beperkte toets nieuwe opleiding” of een “uitgebreide toets nieuwe opleiding” De “uitgebreide opleidingsbeoordeling” en de “uitgebreide toets nieuwe opleiding” zijn gelijk aan de tot voor kort gebruikelijke beoordeling van opleidingen door visitatiecommissies. Het verschil tussen de “beperkte” en de “uitgebreide” opleidingsbeoordeling betreft het beoordelingskader. Bij de beperkte beoordeling wordt niet meer apart stilgestaan bij de personele inzet ten behoeve van een opleiding, de beschikbare voorzieningen en het systeem van kwaliteitsborging (NVAO, 2010a) Als een instelling in aanmerking wil komen voor een “beperkte opleidingsbeoordeling” of een “beperkte toets nieuwe opleiding” van haar opleidingen, dient eerst een “instellingstoets kwaliteitszorg” door de Nederlands-Vlaamse accreditatieorganisatie (hierna afgekort als NVAO) plaats te vinden met een positief resultaat. De NVAO stelt in een beschrijving van het (gewijzigde) stelsel: “wanneer door de NVAO bij een dergelijke grondige doorlichting is vastgesteld dat de kwaliteitszorg van een instelling zó goed op orde is dat de kwaliteit van de opleidingen stelselmatig en waar nodig verbeterd wordt, komt de instelling in een ander accreditatieregime terecht” en “in dit regime beoordeelt een visitatiepanel van onafhankelijke deskundigen een opleiding op een klein aantal standaarden die het hart van de onderwijskwaliteit betreffen, en accrediteert de NVAO op basis daarvan al dan niet een opleiding” (NVAO, 2010b; pagina 6). De Vrije Universiteit heeft per 28 februari 2011 aan de NVAO laten weten in aanmerking te willen komen voor de “instellingstoets kwaliteitszorg” en daarmee voor de optie van een “beperkte opleidingsbeoordeling” dan wel “beperkte toets nieuwe opleiding”. Naar verwachting zal een auditcommissie van de NVAO in de loop van 2013 de “instellingstoets kwaliteitszorg” uitvoeren. Met het invoeren van dit gewijzigde accreditatiestelsel (Wijziging WHW, art 18.32, 24 juni 2010) geldt tevens dat voor instellingen die zich hebben aangemeld voor de “instellingstoets kwaliteitszorg” vanaf 1 januari 2011 beoordelingen van opleidingen van de betreffende instelling plaats vinden volgens de “beperkte opleidingsbeoordeling” of de “beperkte toets nieuwe opleiding”. Mocht echter de “instellingstoets kwaliteitszorg” niet met een positief resultaat plaats vinden, dan zal een aanvullende beoordeling alsnog dienen plaats te vinden. Bovenstaande houdt in dat vanaf 2011 de VU de kwaliteitzorg voor de opleidingen die zij verzorgt zelf dient te bewaken en, waar nodig, zorg dient te dragen voor verbeteringen. Bij de beoordeling van opleidingen door visitatiepanels komen deze aspecten niet meer aan de orde. In dat kader heeft het College van Bestuur een commissie ingesteld met als opdracht het uitvoeren van een audit, in de eerste helft van 2012, die zich met name richt op de beoordeling van de kwaliteitszorg voor de opleidingen binnen de faculteiten. Een dergelijke auditprocedure moet het College van Bestuur informeren over de stand van zaken met betrekking tot de kwaliteitszorg voor de opleidingen en de eventueel gewenste


6

verbeteringen daarvan. Daarnaast kan de commissie voorstellen doen over de wijze waarop de kwaliteitszorg in de toekomst gewaarborgd dient te worden. De rapportage van deze auditcommissie kan tevens van dienst zijn wanneer de VU in 2013 aan een NVAO-auditcommissie dient te tonen hoe het bij de VU is gesteld met de bewaking en bevordering van de kwaliteitszorg voor het onderwijs. Het gehanteerde auditkader Voor het te hanteren kader waarop de kwaliteitszorg voor het onderwijs is gebaseerd, is de commissie uitgegaan van de 5 standaarden zoals die door de NVAO zijn geformuleerd (NVAO, 2010b): 1. Visie op de kwaliteit van het onderwijs De instelling beschikt over een breed gedragen visie op de kwaliteit van haar onderwijs en op het ontwikkelen van een kwaliteitscultuur. 2. Beleid De instelling beschikt over adequaat beleid om de visie op de kwaliteit van haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied. 3. Resultaten De instelling heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. 4. Verbeterbeleid De instelling kan aantonen dat zij de kwaliteit van haar opleidingen waar nodig systematisch verbetert. 5. Organisatie- en beslissingsstructuur De instelling heeft een effectieve organisatie- en beslissingsstructuur met betrekking tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Op basis van de 5 hierboven genoemde standaarden heeft de commissie 46 beoordelingsaspecten geformuleerd door de min of meer algemeen geformuleerde NVAO-standaarden te vertalen naar het facultaire niveau en van een meer concreet op de VU toegespitste invulling te voorzien. De wijze van nummeren maakt het mogelijk om de gehanteerde criteria te herleiden tot de NVAO-standaard doordat het eerste getal van een beoordelingsitem overeenkomt met de betreffende NVAO-standaard. De gehele lijst met gehanteerde criteria is opgenomen als bijlage III. Onderwijskwaliteitszorg in het verleden Tot 2011 werd de onderwijskwaliteitszorg per opleiding periodiek beoordeeld door visitatiecommissies. Naast deze decentrale beoordeling van de onderwijskwaliteitszorg heeft de VU een aantal centrale initiatieven ontplooid om de kwaliteit van het onderwijs op een hoger plan te brengen. Een van de eerste initiatieven op dit gebied, daterend uit het eind van de negentiger jaren, was het Handboek Kwaliteitszorg. In dat Handboek kwamen een aantal centrale thema’s zoals toetsing, evaluaties, stage- en scriptiebegeleiding, aan de orde. De achterliggende gedachte van het Handboek was dat er een kwaliteitsverhogende werking zou uitgaan van


7

het publiceren van aanbevelingen en voorschriften. De meeste faculteiten hebben indertijd een of meer voorgeschreven handleidingen geïmplementeerd, maar vanuit de VU is te weinig op invoeren, verbeteren en handhaven van de handleidingen aangedrongen. Bij faculteiten was niet altijd voldoende capaciteit aanwezig om hadleidingen in te voeren of te actualiseren. Inmiddels is een vernieuwde versie van dit handboek onder de naam Handboek Onderwijskwaliteit vrijwel gereed. Het implementeren, onderhouden en actualiseren van facultaire handleidingen naar de voorschriften in het Handboek Onderwijskwaliteit, zou een gemeenschappelijke kwaliteitszorgactiviteit van de VU en de faculteiten moeten zijn. Een ander initiatief om de onderwijskwaliteit naar een hoger plan te brengen was het in stellen van de Stuurgroep Onderwijskwaliteit (STOK), een universiteitsbrede groep van deskundigen en betrokkenen die het College van Bestuur en de faculteiten al vele jaren voorziet van adviezen over de onderwijskwaliteit. Vooruitlopend op de wijzigingen in het accreditatiestelsel is in 2008 de Werkgroep Interne Kwaliteitszorg (WIKZ) ingesteld, met als taak voorstellen te formuleren voor een instellingsbrede kwaliteitszorgsystematiek voor het onderwijs. Voorstellen van deze werkgroep resulteerden o.a. in het hanteren van een “Check- & Actlist interne kwaliteitszorg” waarin faculteiten de belangrijkste elementen van het kwaliteitszorgsysteem voor zichzelf van een score voorzien. Deze zelf toegekende scores werden vervolgens weer gehanteerd in het bestuurlijke overleg, tussen College van Bestuur en de faculteitsbesturen, en in het viermaandelijkse overleg tussen de portefeuillehouder uit het CvB en de faculteitsbesturen.


8

1. Commissie en werkwijze Samenstelling auditcommissie De commissie die de audits over de onderwijskwaliteitszorg heeft uitgevoerd kende de volgende samenstelling: - S.C. van Dokkum, student Rechtsgeleerdheid - F. Elsenburg, MSc. projectsecretaris Instellingsaudit - Prof.dr. A.P. Hollander, voorzitter laatste VU-functie: hoogleraar Bewegingsfysiologie en decaan van de faculteit der Bewegingswetenschappen. Beëindiging dienstverband 1 oktober 2007. - Drs. E.J. Kok, secretaris senior beleidsadviseur onderwijs, afdeling Onderwijs en Kwaliteitszorg, Dienst Studentenzaken VU - R.H. van Nie RE RA directeur Auditdienst VU-VUmc - Prof.dr. H.A. Verhoef, laatste VU-functie: hoogleraar Bodemecologie, directeur afdeling Ecologische Wetenschappen, faculteit der Aard- en Levenswetenschappen. Beëindiging dienstverband 1 juni 2011 - Dr. E. Vester, laatste VU-functie: onderwijsdirecteur faculteit der Letteren. Beëindiging dienstverband 1 augustus 2011 De meeste commissieleden hebben een grote affiniteit met het onderwijsproces zoals zich dat binnen het WO afspeelt, hetgeen blijkt uit een diversiteit aan facultaire en universitaire functies die zij in het verleden in dat kader hebben vervuld. Vier commissieleden hebben een zekere affiniteit met een faculteit waarvan zij eerder deel uit hebben gemaakt en beschikten derhalve mogelijk ook over voorkennis met betrekking tot de onderwijskwaliteitszorg aldaar. In verband daarmee is afgesproken dat zij zich bij het voorbereiden van de gesprekken, tijdens de gesprekken en bij de beoordeling van “hun” faculteit zeer terughoudend opstellen. Werkwijze In eerste instantie heeft de commissie zich bezig gehouden met het opstellen van de criteria die gehanteerd zouden gaan worden bij de beoordeling van de onderwijskwaliteitszorg bij de 12 faculteiten, gebaseerd op de richtlijnen aangaande onderwijskwaliteitszorg van de NVAO. Uiteindelijk heeft dit geresulteerd in het “auditkader” zoals opgenomen in de volgende paragraaf. De faculteiten zijn door het College van Bestuur per brief van 20 december 2011 op de hoogte gesteld van de op handen zijnde auditprocedure (zie bijlage I). Omdat kwaliteitszorg gerealiseerd wordt binnen de diverse opleidingen, dient een beoordeling van de kwaliteitszorg plaats te vinden aan de hand van de zorg binnen die opleidingen. Daarom is de kwaliteitszorg per faculteit steeds beoordeeld in relatie tot twee opleidingen (een op bachelorniveau en een op master/researchmasterniveau). De betreffende opleidingen zijn door de auditcommissie geselecteerd uit het totale aanbod van de betreffende faculteit. De auditcommissie heeft de faculteiten hierover per brief van 26 januari 2012 nader geïnformeerd (zie bijlage II) De brief gaat in op de procedure, de beoordelingsaspecten zoals die voorkomen in het auditkader en de twee geselecteerde opleidingen. Tevens werd


9

ingegaan op de wijze waarop faculteiten (bestaande) documenten konden aanleveren aan de hand waarvan beoordelingen van de diverse aspecten zoals voorkomend in het auditkader konden plaatsvinden. Voorts werd bij deze brief een lijst gevoegd van documenten waarover de commissie reeds beschikte. In deze brief is beschreven dat er per beoordelingsitem slechts sprake kan zijn van het “voldoen” (komt overeen met een beoordeling “1” of “2”) aan de diverse criteria wanneer dat aangetoond kan worden in de beschikbare documenten. Dit uitgangspunt is tijdens de gesprekken met de faculteiten nog eens herhaald. Aan de hand van de ontvangen documenten werd vervolgens door de commissie per faculteit een eerste concept-invulling van het auditkader gemaakt. Daarbij werd tevens vastgesteld welke punten bij het gesprek van de commissie met de diverse facultaire vertegenwoordigingen aan de orde dienden te komen. In de periode van 31 januari tot en met 24 april 2012 heeft de commissie de 12 faculteiten bezocht. Daarbij sprak de commissie met a) de portefeuillehouder onderwijs, de onderwijsdirecteur en kwaliteitszorgmedewerker; b) de opleidings- en examencommissies; c) een vertegenwoordiging van de studenten uit de betreffende opleidingscommissie(s) en de facultaire studentenraad en d) een vertegenwoordiging van het faculteitsbestuur. Voor elk gesprek was 45 minuten beschikbaar. Daarnaast was tijd ingeruimd om docenten en/of studenten, die daar behoefte aan hadden, te ontvangen. Van alle gesprekken is voor intern gebruik een verslag gemaakt. In voorkomende gevallen is tijdens deze gesprekken overeengekomen dat de faculteit nog relevante documenten zou nazenden. Op basis van de beschikbare documentatie (waarvan steeds een lijst werd gevoegd bij het ingevulde kader) en de inhoud van de gevoerde gesprekken heeft de commissie voor iedere faculteit het auditkader ingevuld en daaraan een algemene indruk en de in de ogen van de commissie “best practice” van de faculteit toegevoegd. Dit ingevulde kader werd aan de faculteit toegezonden. Vervolgens heeft per faculteit een gesprek plaatsgevonden met een delegatie van de commissie over het ingevulde kader om eventuele misverstanden in de beoordeling te corrigeren. Daarna werd de beoordeling door de commissie definitief vastgesteld en toegezonden aan de faculteit. De resultaten zowel per faculteit als voor de gehele VU en de conclusies, die daaruit volgens de commissie getrokken kunnen worden, zijn beschreven in hoofdstuk 3 van dit rapport. Aanbevelingen zowel voor verbeteringen in de onderwijskwaliteitszorg bij de faculteiten als voor een vervolgprocedure voor de bewaking van de onderwijskwaliteitszorg zijn opgenomen in hoofdstuk 4. Verantwoording De beoordeling van de onderwijskwaliteitszorg per faculteit heeft plaats gevonden aan de hand van twee door de commissie geselecteerde opleidingen uit het facultaire aanbod. Daarbij kan de vraag gesteld worden in hoeverre de keuze van deze opleidingen van invloed is geweest op het uiteindelijke resultaat. Die vraag is niet relevant waar het de faculteiten betreft die slechts een klein aantal opleidingen verzorgen, zoals ACTA, VUmc en de FBW. In die gevallen moet de uitkomst wel representatief zijn.


10

Verder geldt dat de faculteiten die veel opleidingen aanbieden dat allen doen binnen eenzelfde facultaire onderwijsorganisatie. Bovendien is de organisatie van de diverse opleidingen binnen een faculteit nagenoeg identiek. Zowel in de gesprekken van de commissie met de diverse facultaire delegaties als in de bespreking van het ingevulde kader is slechts eenmaal gewezen op een opleiding waarbij zaken beter in orde zouden zijn dan bij de twee beoordeelde opleidingen. De commissie concludeert op bovenstaande gronden dat de uitkomst van deze audit representatief is voor de onderwijskwaliteitszorg van de faculteit als geheel. De commissie heeft zich ook afgevraagd in hoeverre de uitgebrachte beoordeling afhankelijk is van de samenstelling van de commissie. Uitgaande van de gekozen aanpak (de 46 items van het beoordelingskader, de 5 beoordelingscategorieën, en de regel dat door middel van documenten aangetoond diende te worden of aan een bepaald aspect is voldaan) bleek er in de commissie niet of nauwelijks discussie te bestaan over de toe te kennen beoordeling. Een en ander wijst erop dat ook een anders samengestelde commissie tot een vergelijkbaar oordeel zou zijn gekomen, althans op voorwaarde dat een vergelijkbare systematiek gehanteerd zou zijn.


11

3. Resultaten Audit Onderwijskwaliteitszorg Het beoordelingskader Voor het beoordelen van de onderwijskwaliteitszorg is de commissie uitgegaan van de 5 standaarden zoals die door de NVAO zijn geformuleerd. Omdat deze NVAO-standaarden een algemene formulering kennen heeft de commissie de 5 standaarden van een meer concrete invulling voorzien. Een en ander resulteert in een auditkader, waarbij steeds eerst de NVAO-standaard wordt genoemd, waarna de uitwerking van de commissie van de betreffende standaard is geformuleerd. Dit uitgewerkte auditkader is als bijlage III toegevoegd. Additioneel aan de beoordeling van bovenstaande aspecten van onderwijskwaliteitszorg werd nagegaan in hoeverre de faculteiten te werk gaan overeenkomstig de geldende weten regelgeving. De beoordeling De commissie heeft per faculteit aan de hand van twee door de commissie geselecteerde opleidingen (steeds een bacheloropleiding en een (research)masteropleiding) alle hiervoor genoemde aspecten beoordeeld. Daarbij is steeds het criterium gehanteerd dat een faculteit door middel van bestaande documenten diende aan te tonen dat aan het betreffende aspect wordt voldaan. Daarbij zijn de volgende beoordelingen gehanteerd: 1 de faculteit voldoet op voorbeeldige wijze aan dit aspect 2 de faculteit voldoet aan dit aspect 3 de faculteit voldoet nog niet aan dit aspect, maar een reparatie kan naar het oordeel van de commissie eind 2012 hebben plaats gevonden 4 de faculteit voldoet niet aan dit aspect en dient eind 2012 een herstelplan voor dit aspect gereed te hebben 5 de faculteit voldoet niet aan dit aspect, reparatie in 2012 is niet te verwachten evenmin als een herstelplan. In een aantal gevallen blijkt geen beoordeling van een aspect te kunnen plaats vinden. Wanneer er bij faculteit X geen visie op onderwijs en kwaliteit(scultuur) voorhanden is (aspect 1.1) dan kan niet vastgesteld worden of de onderwijsvisie van de betreffende faculteit bijdraagt aan “betrokkenheid en verbetering” (aspect 1.3). In dit geval is aspect 1.3 niet beoordeelbaar (NB). Zo geldt eveneens dat wanneer er door een faculteit geen beleid is geformuleerd met betrekking tot de bacheloropleiding (aspect 2.1a), en de beoordeling derhalve “3” of “4” luidt, er geen sprake kan zijn van zicht op realisatie van dat beleid (aspect 3.1a) waardoor dit dit laatste aspect als niet beoordeelbaar (NB) wordt aangemerkt. Evenzo geldt dat wanneer een faculteit (nog) geen zicht heeft op resultaten als gevolg van het beleid met betrekking tot toetsen en beoordelen (aspect 3.1d) er ook geen maatregelen genomen kunnen worden op basis van resultaten (aspect 4.1d). Ook dan is een “NB” vermeld. In twee gevallen moest worden afgeweken van bovenstaande beoordelingsmogelijkheden en is de beoordeling “nvt” (niet van toepassing) toegekend. Dit betreft aspect 4.5 bij de beoordeling van FALW (omdat er zicht is op de resultaten en deze bovendien positief zijn beoordeeld is er geen reden tot maatregelen ter verbetering) en aspect 4.6 bij de beoordeling van het VUmc (omdat het onderwijsprogramma gebaseerd wordt op het landelijk vastgestelde Raamplan Geneeskunde, waarover o.a. de KNMG zich uitspreekt, is er geen behoefte aan adviezen van een “locale” veldadviesraad).


12

De resultaten Voor de 12 faculteiten van de VU (inclusief VUmc en ACTA) is door de commissie een auditkader vastgesteld, waarin alle 46 aspecten zijn beoordeeld, dan wel voorzien van “NB”. Daarbij is per beoordeeld aspect tevens aangegeven op welk(e) document(en) dit oordeel is gebaseerd. In voorkomende gevallen is het oordeel per aspect van een korte toelichting voorzien. Aan de hand van deze beoordelingen kunnen de faculteiten een gerichte verbeteractie ondernemen. De afzonderlijke beoordelingen zijn in dit rapport opgenomen als bijlage IV-A tot en met IV-L. In tabel 1 zijn de beoordelingen van de 12 faculteiten samengevat. In de linkerkolom zijn de beoordelingsaspecten vermeld door middel van een nummer dat correspondeert met de nummering in het auditkader zoals toegelicht in de eerste paragraaf van dit hoofdstuk. In de rechter kolom wordt aangegeven hoeveel van de 12 faculteiten aan dit aspect hebben voldaan (beoordeling “1” of “2”). In de onderste rij ist per faculteit vermeld het aantal aspecten van de 46 waaraan is voldaan. Uit deze onderste rij volgt dat sommige faculteiten redelijk gevorderd zijn met betrekking tot het realiseren van de zorg voor onderwijskwaliteit, maar dat er ook faculteiten zijn die een zeer sterke verbeterpotentie hebben en deze ook dringend behoeven.


13

Tabel 1. Overzicht van de beoordeling van 46 aspecten voor onderwijskwaliteitszorg 1. Visie

2. Beleid

3. Zicht op resultaat

4. Adequate maatregelen

5. Organisatie

1.1 1.2 1.3 2.1a 2.1b 2.1c 2.1d 2.2a 2.2b 2.3a 2.3b 2.3c 2.3d 2.4 2.5a 2.5b 2.6 3.1a 3.1b 3.1c 3.1d 3.2a 3.2b 3.3a 3.3b 3.3c 3.3d 3.4 3.5a 3.5b 3.6 4.1a 4.1b 4.1c 4.1d 4.2a 4.2b 4.3a 4.3b 4.3c 4.3d 4.4 4.5 4.6 5.1 5.2 1, 2

FALW 3 2 NB 2 2 2 2 4 2 3 2 2 2 3 3 2 4 2 2 3 4 NB NB NB 4 4 3 NB 2 2 NB 3 3 NB NB NB NB NB NB NB NB NB nvt NB 3 3 13

FBW 1 2 2 2 2 3 2 3 2 2 2 2 2 2 3 3 3 2 2 3 3 3 3 3 3 3 3 3 NB NB 3 3 3 3 3 4 3 NB NB NB 3 NB NB 4 2 2 16

FEWEB 3 3 NB 3 3 3 2 4 3 4 4 3 3 4 4 4 3 4 4 3 3 NB 2 NB NB NB 2 NB NB NB 4 NB NB 4 4 NB NB NB NB NB 3 NB NB NB 3 3 3

FEW 2 4 4 2 2 3 3 4 2 3 2 2 3 4 4 4 3 3 3 3 4 3 2 NB NB NB 2 NB NB NB NB 2 3 3 3 3 3 NB NB NB 3 NB NB NB 3 3 9

GEN 2 2 2 2 2 2 2 4 2 3 3 3 2 4 3 3 2 1 1 1 1 3 2 NB 2 NB 2 NB 3 3 2 2 2 2 2 3 2 NB NB NB 2 NB NB nvt 2 2 25

FGG 2 2 2 3 2 3 3 4 3 3 3 3 3 3 3 3 4 NB 4 2 NB NB NB NB NB NB 3 NB NB NB NB NB NB NB NB NB NB NB NB NB NB NB NB NB 3 3 5

LET 2 2 2 2 2 2 2 2 3 3 3 3 2 3 4 2 4 3 4 2 4 4 3 NB NB NB 3 NB 4 4 NB NB NB 3 2 NB NB NB NB NB NB NB NB NB 3 3 12

FPP 3 3 NB 2 2 3 2 4 2 3 3 3 2 4 4 4 4 2 2 1 3 NB 3 NB NB NB 3 NB NB NB NB 2 2 2 NB NB NB NB NB NB NB NB NB NB 3 3 11

RCH 2 3 2 3 3 2 2 4 1 3 3 3 3 2 4 4 2 2 2 3 2 5 3 4 3 3 3 3 3 3 4 3 3 NB 3 NB 2 NB NB NB NB NB 3 NB 3 3 11

FSW 2 3 2 2 3 3 2 3 3 3 3 3 3 3 4 2 3 2 2 4 2 NB 4 NB NB NB NB NB NB NB NB 4 4 NB 4 NB NB NB NB NB NB NB NB NB 3 3 7

ACTA 2 3 3 2 2 3 2 3 1 3 3 3 3 2 3 3 2 2 2 2 2 NB 2 NB NB NB NB 3 NB NB 2 2 2 2 2 NB 2 NB NB NB NB NB NB NB 3 2 19

WIJS 2 2 2 2 2 2 2 4 3 3 3 3 2 4 3 2 4 4 4 4 4 NB 2 NB NB NB 4 NB NB NB NB 2 NB NB NB NB NB NB NB NB NB NB NB NB 3 3 11

1,2 9 6 7 9 9 4 10 1 6 1 3 3 6 3 0 3 3 7 7 5 4 0 5 0 1 0 3 0 1 1 2 5 3 3 3 0 3 0 0 0 1 0 0 0 2 3


14

Nadere beschouwing De beoordeling op de 46 gehanteerde aspecten van onderwijskwaliteitszorg bij 12 faculteiten levert 142 maal de beoordeling “voldaan” (oordeel “1” of “2”) op; een score van 25%. Daaruit kan de conclusie worden getrokken dat het met de aantoonbare onderwijskwaliteitszorg aan de VU zorgelijk gesteld is. Daarbij passen echter wel enige nuanceringen. Als eerste nuancering dient vermeld te worden dat de commissie haar oordeel steeds heeft gebaseerd op aanwezige documenten. Wanneer de betreffende documenten, waarin het beleid, de resultaten van het beleid en de maatregelen om de resultaten te verbeteren zijn beschreven, niet voorhanden waren, is door de commissie steeds geconstateerd dat aan de betreffende aspecten (nog) niet is voldaan. Uit de gesprekken met de diverse vertegenwoordigers uit de faculteiten is gebleken dat in vele gevallen wel sprake is van een soort beleid etc. op het gebied van de zorg voor onderwijskwaliteit, maar dat dit beleid voornamelijk bestaat in de hoofden van sleutelfiguren in de facultaire onderwijsorganisatie en bij een aantal docenten. Zo komt het bijvoorbeeld voor dat een examencommissie wel aandacht besteedt aan de kwaliteit van toetsen, maar de regels dienaangaande niet heeft vastgelegd en van eventuele bevindingen ook geen melding maakt in een jaarverslag. Mede op basis van de gesprekken heeft de commissie een schatting gemaakt van het aantal aspecten dat op betrekkelijk korte termijn wel als “voldaan” beoordeeld zou kunnen worden, mits de faculteit de moeite neemt om het bestaande informele beleid vast te leggen in documenten en deze volgens de geëigende weg formeel vast legt. Wanneer een dergelijke operatie voor het begin van 2013 zou zijn uitgevoerd, stijgt het aantal aspecten dat met “voldaan” wordt beoordeeld naar 304 of wel ruim 55 %. De commissie heeft inmiddels voorstellen gedaan om faculteiten behulpzaam te zijn bij het zetten van dergelijke stappen en bovendien voorgesteld om, met als peildatum 1 januari 2013, een aanvullende beoordeling te laten plaats vinden. Een tweede nuancering heeft betrekking op het aantal malen dat in tabel 1 “NB” is ingevuld. Bij de beoordeling van de aspecten in het blok “beleid” (genummerd van 2.1 tot en met 2.6) komen er geen aspecten als “niet beoordeelbaar” voor. In het blok aspecten die betrekking hebben op “zicht op resultaat” (aspecten 3.1 tot en met 3.6) komt “NB” voor in 45% van de gevallen. Behoudens wellicht een enkele uitzondering is aantal “NB” te herleiden tot het nog ontbreken van adequaat beleid: immers waar geen beleid is geformuleerd kunnen de resultaten van een dergelijk beleid ook niet zichtbaar worden. Eveneens geldt dat als er geen zicht is op resultaat, er ook geen sprake kan zijn van adequate maatregelen om de resultaten te verbeteren. Dit betreft de aspecten 4.1 tot en met 4.6, waarin totaal in 65 % van de gevallen een “NB” is ingevuld. Wanneer zoals hierboven voorgesteld in de komende 6 maanden een “reparatietraject” ter hand wordt genomen en daardoor een ruim aantal aspecten op het gebied van beleid (aspecten 2.1 tot en met 2.6) met “voldaan” kan worden beoordeeld, zal tevens het aantal malen dat een “NB” is toegekend bij de aspecten 3.1 tot en met 4.6 aanzienlijk afnemen. Het feit dat er geen NB’s voorkomen in het blok “beleid” (aspecten 2.1 tot en met 2.6), maar dat dit in het blok “zicht op resultaten” (aspecten 3.1 tot en met 3.6) en het blok “maatregelen” (aspecten 4.1 tot en met 4.6) in respectievelijk 45 en 65 % van de beoordeelde aspecten het geval is, kan er op wijzen dat er van een planmatige aanpak van de onderwijskwaliteitszorg nog weinig sprake is bij hen die daarvoor zorg moeten dragen. Bij een dergelijke aanpak zou eerst beleid geformuleeerd moeten worden waarna er bij de


15

uitvoering van dat beleid nagegaan wordt welke resultaten het oplevert om vervolgens aan de hand van de resultaten het beleid weer bij te stellen (PDCA-cyclus). Kennelijk zijn de onderwijsorganisaties van de meeste faculteiten nog onvoldoende bekend met het hanteren van een dergelijke aanpak, ondanks het feit dat deze benadering in andere sectoren binnen de VU inmiddels een goed gebruik is geworden. Het verdient derhalve aanbeveling om een dergelijke cyclische aanpak ook in de onderwijsorganisatie meer aandacht te geven. Drie faculteiten kennen een combinatie van een klein aantal opleidingen dat verzorgd wordt en een relatief hoge score bij deze auditoperatie (VUmc, ACTA en FBW). Toch kan op basis van de beschikbare gegevens niet geconcludeerd worden dat er een verband bestaat tussen het aantal opleidingen dat wordt verzorgd en de resultaten van de huidige beoordeling van de onderwijskwaliteitszorg (r= -0,35).

Specifieke aspecten Hieronder wordt kort ingegaan op de afzonderlijke aspecten (of groepen daarvan) die zijn beoordeeld. Vanwege de samenhang die er bestaat tussen het (al of niet aanwezige) beleid, de beschikbaarheid van resultaten en (de daaruit voortvloeiende wens tot) maatregelen, en hetgeen daarover reeds is opgemerkt onder “nadere beschouwing”, komen de diverse aspecten slechts eenmaal aan de orde. Visie Driekwart van de faculteiten heeft een expliciet geformuleerde visie op het onderwijs, waarin ook wordt ingegaan op de kwaliteitszorg. Bij de helft van de faculteiten sluit deze visie aan op de visie dienaangaande van de VU en het instellingsplan. Een punt van aandacht daarbij is nog het gebruikte concept, dat niet in alle gevallen uniform gehanteerd wordt. In bijna de helft van de faculteiten is duidelijk hoe vanuit de gehanteerde visie betrokkenheid en verbeteringen worden gestimuleerd. Voor de faculteiten die niet beschikken over een (uitgeschreven) onderwijsvisie en voor de faculteiten waarbij de aansluiting op de onderwijsvisie van de VU nog niet is gerealiseerd, kunnen de betreffende paragrafen over de onderwijsvisie van de VU (Handboek Onderwijskwaliteit, Inleiding par. 3 en Programma par 2.1.1 en 4) uitkomst bieden. Adequaat beleid met betrekking tot de onderwijskwaliteit Voor driekwart van de faculteiten geldt dat er sprake is van een duidelijk beleid ten aanzien van de kwaliteitsbewaking en –verbetering van zowel de bachelor- als de masteropleiding. Meer aandacht dan tot nu toe behoeft het beleid ten aanzien van onderwijsevaluaties (slechts 4 faculteiten voldoen). Daarentegen is het beleid met betrekking tot toetsen en beoordelen bij 10 faculteiten duidelijk vastgelegd. Opvallend is dat bij de meeste faculteiten wel evaluaties van cursussen plaats vindt, maar evaluaties op het niveau van jaarprogramma’s en van complete bachelor- of masterprogramma’s zijn aanzienlijk zeldzamer. Evaluaties op een cursusoverstijgend niveau verdienen meer aandacht. In een enkel geval werd cursusoverstijgend evalueren niet nodig geacht omdat de uitkomsten van de NSE hierin zouden voorzien. Naar de mening van de commissie echter ligt de verantwoordelijkheid van onderwijsevaluaties bij de opleidingen en dus bij de faculteiten. Een verwijzing naar NSE-uitkomsten is een onvoldoende invulling van deze verantwoordelijkheid. Bovendien is door de aard van de NSE een inhoudelijk specifieke


16

invulling van een evaluatie niet mogelijk, terwijl die voor de kwaliteitsbewaking van de inhoud van het onderwijs wel noodzakelijk is. Personeelsbeleid Een VU-brede slechte beoordeling betreft het aspect “adequaat beleid met betrekking tot formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken en loopbaanbegeleiding” (aspect 2.2a). Met uitzondering van één faculteit ontbreekt het aan plannen waarin de toewijzing van personele formatie ten behoeve van het onderwijs inzichtelijk wordt gemaakt. Eveneens ontbreekt informatie waaruit blijkt dat onderwijstaken een belangrijk element vormen bij werving en benoeming van personeel. Hetzelfde kan gezegd worden over de rol die onderwijstaken spelen bij inwerktrajecten, scholing, jaargesprekken en loopbaanbegeleiding. Voor een organisatie waarin onderwijs een wezenlijk aandeel vormt van het takenpakket is dit eigenlijk een onaanvaardbare situatie. Zo is onbekend of in jaargesprekken met docenten of met leidinggevenden van clusters van docenten gesproken wordt – naast de kwaliteit van het gegeven onderwijs – over de uitvoering van het onderwijsbeleid en onderwijsvernieuwing. Voor een deel kan deze situatie verklaard worden doordat persoonlijke informatie als regel als vertrouwelijk wordt behandeld en om die reden niet in overzichten zal/kan worden opgenomen. Op dit punt dient in samenspraak met de dienst HRM een procedure ontwikkeld te worden waardoor het mogelijk is om dit soort informatie, ontkoppeld van persoonlijke informatie, beschikbaar te krijgen. Basiskwalificatie Onderwijs Min of meer gerelateerd aan het vorige punt verdient ook het beleid met betrekking tot de basiskwalificatie onderwijs (BKO) aandacht. Weliswaar geldt dat er bij de helft van de faculteiten aan dit aspect (2.2b) is voldaan, maar dat neemt niet weg dat uit de plannen blijkt dat dit duidelijk beleid vooral jong en net aangesteld wetenschappelijk personeel betreft. Dit personeel wordt als regel verplicht deel te nemen aan de beschikbare scholing en aan deze verplichting wordt redelijk voldaan. Vanwege deze aanpak neemt het aantal personeelsleden met een onderwijskwalificatie ook geleidelijk toe. Desondanks blijft het aantal personeelsleden met een dergelijke kwalificatie duidelijk achter bij de centrale afspraken, en beleid om hier verandering in aan te brengen ontbreekt bij de meeste faculteiten. Dit houdt naar alle waarschijnlijkheid verband met het ontbreken van een aanpak voor “zittende docenten”. Voor deze categorie docenten, vaak met meerdere jaren ervaring is het aanbieden van een beginnerscursus geen acceptabele optie. Maar alternatieve trajecten waarbij rekening gehouden wordt met reeds verworven competenties op het gebied van het verzorgen van onderwijs zijn tot op heden niet voortvarend ingevoerd. De commissie stelt voor dat de VU op korte termijn aan de docenten met ervaring een aangepast traject gaat aanbieden voor het behalen van een (aangepaste) onderwijskwalificatie. Voorzieningen Speciale aandacht behoeven de aspecten die verband houden met de voorzieningen ten behoeve van het onderwijs (aspect 2.3a – bibliotheek-, aspect 2.3b – onderwijsruimten en studieplekken-, aspect 2.3c - ICT-voorzieningen-).Voor de VU geldt dat de verantwoordelijkheid voor deze voorzieningen is ondergebracht bij centrale diensten. Bij het merendeel van de faculteiten heerst de opvatting dat zij met betrekking tot deze aspecten dan ook ook geen verantwoordelijkheden hebben, en dat er dus ook geen beleid op deze punten nodig is.


17

Deze opvatting acht de commissie niet terecht: de behoefte aan voorzieningen van deze aard (zouden moeten) stoelen op wensen/vereisten vanuit de opleidingen. Mede op basis van de wensen/vereisten vanuit de opleidingen zou het beleid van de betreffende centrale diensten geformuleerd en uitgevoerd dienen te worden. Daarom behoort er vanuit de opleidingen, en dus vanuit de faculteiten, wel degelijk beleid in de vorm van wensen en behoeften te worden geformuleerd. Faculteiten zijn verantwoordelijk voor de kwaliteit van de opleidingen en moeten de centrale diensten ook kunnen aanspreken op tekortkomingen. Daarvoor is vereist dat faculteiten zicht hebben op de resultaten van het (centraal gevoerde) beleid. Indien dat ontbreekt, ontbreekt ook de kracht van argumenten voor eventuele bijstelling van het (centrale) beleid. Anderzijds geldt dat beperkingen voortvloeiend uit de mogelijkheden van de centrale diensten op het gebied van bibliotheekvoorzieningen, onderwijsruimten en werkplekken en ICT-voorzieningen randvoorwaarden vormen voor de vormgeving van onderwijsprogramma’s. Ook om deze reden behoren deze onderwerpen deel uit te maken van het facultaire beleid. Indien van toepassing behoren faculteiten ook op hun verplichtingen in dezen gewezen te worden. Ten aanzien van het beleid op het gebied van de studiebegeleiding is het beter gesteld. De helft van de faculteiten heeft dit formeel op orde. Voor de andere faculteiten geldt dat wel ruime aandacht wordt geschonken aan studiebegeleiding, maar dat één en ander nog nadere explicitering, formalisering en verantwoording behoeft. Een punt van zorg betreft de “nieuwe” wijze van huisvesting van de wetenschappelijke staf zoals die inmiddels bij ACTA en Rechten gestalte heeft gekregen. Doordat de zitwerkplekken van het wetenschappelijk personeel niet toegankelijk is voor studenten, komt het (spontane) contact tussen student en docenten (essentieel voor de “community of learners”) onder druk te staan. Toegankelijkheid voor studenten met een beperking Min of meer vergelijkbaar met het aspect “voorzieningen” is het aspect “toegankelijkheid” voor studenten met een beperking (aspect 2.4). In het (recente) verleden is er centraal beleid geformuleerd, dat mede richtinggevend kan zijn voor de maatregelen die op facultair niveau genomen kunen worden. Vanwege het bestaande centrale beleid zijn sommige faculteiten van mening dat er voor hen geen taak meer is weggelegd. Toch geldt dat studenten, en dus ook de studenten met een beperking, afhankelijk zijn van voorzieningen die rechtstreeks verbonden zijn aan de betreffende opleiding. Voor al die voorzieningen ten behoeve van de studenten met een beperking behoren faculteiten adequaat beleid te ontwikkelen. Verankering onderzoek Met de verankering van het onderzoek in het onderwijs is het nog niet best gesteld. Het lijkt erop dat vrijwel alle faculteiten uitgaan van de veronderstelling dat deze verankering naar behoren wordt gerealiseerd via een personele unie, docenten die tevens onderzoeker zijn. Van expliciet beleid dienaangaande is niet of nauwelijk sprake. Het is hoog tijd dat faculteiten zich beraden hoe de koppeling van het onderwijs aan het onderzoek dat bij die faculteiten wordt uitgevoerd gestalte dient te krijgen. In dit verband kan nogmaals gewezen worden op de onderwijsvisie van de VU, waarin deze verankering wel gestalte krijgt. Veldadviesraad, alumnibeleid Tot nu toe heeft het instellen van veldadviesraden voor het onderwijs nog geen hoge prioriteit gekregen. Dit is in tegenstelling tot de veldadviesraden ten behoeve van de onderzoeksinstituten die in vrijwel alle gevallen binnen de VU gerealiseerd zijn. Slechts


18

bij 3 van de faculteiten is een veldadviesraad actief. Bij 4 faculteiten is er sprake van een plan om een dergelijke adviesraad in te stellen, bij de overige 5 faculteiten dient er zelfs nog een plan gemaakt worden. Met betrekking tot het alumnibeleid tekent zich een vergelijkbaar beeld af. Ook ten aanzien van dit aspect zijn er 3 faculteiten die beschikken over een duidelijk beleid ten aanzien van haar alumni. Bij 4 faculteiten leven er wel ideeën en gebeurt er wel het een en ander, maar laat een plan nog op zich wachten. Bij 5 faculteiten moet het hele alumnibeleid nog vorm gegeven worden. Onderwijsorganisatie De beschrijving van de onderwijsorganisatie, zowel voor de faculteiten als geheel als voor de afzonderlijke opleidingen, behoeft een aanzienlijke verbetering. In het algemeen geldt dat de sleutelfiguren in het facultaire onderwijs in hun hoofd wel een beeld hebben van de manier waarop het onderwijs georganiseerd is, maar een duidelijke beschrijving van een en ander werd slechts bij 2 faculteiten aangetroffen. Meestal is er weinig meer dan een organogram dat de organisatie weergeeft, maar vaak laat een dergelijk organogram aan duidelijkheid te wensen over, zeker voor outsiders. Bovendien blijkt dat de in een organogram beschreven situatie soms de dagelijkse praktijk beschrijft, maar daarbij voorbij gaat aan de wettelijke regels met betrekking tot die organisatie. Zo lijken opleidingscommissies hun advies nog al eens uit te brengen aan een opleidingsdirecteur of een portefeuillehouder onderwijs en niet, zoals voorgeschreven, aan het faculteitsbestuur. Ook komt het voor dat (een deel van de) opleidingscommissies (mede) belast zijn met de verantwoordelijkheid voor de uitvoering van het onderwijs en/of het ontwikkelen van het onderwijsprogramma. De wettelijke taken van de opleidingscommissie, namelijk adviseren over onderwijsprogramma’s en de uitvoering daarvan, moeten voldoende onafhankelijk worden uitgevoerd. Medeverantwoordelijkheid voor de uitvoering van het onderwijs zal dit in de weg staan. Ook plaatst de commissie vraagtekens bij combinaties van functies. Het combineren van de functie portefeuillehouder Onderwijs met die van onderwijsdirecteur maakt dat het toezicht op het functioneren van de onderwijsdirecteur discutabel wordt. Wanneer hoofden van afdelingen tevens belast zijn met het leiding geven aan een opleiding kan de vraag rijzen of de belangen van een opleiding nog voldoende gescheiden worden van belangen op het gebied van onderzoek en/of personeelszorg. De commissie is van oordeel dat het scheiden van dergelijke verantwoordelijken noodzakelijk is. Een overzicht van de thans voorkomende situaties is samengevat in bijlage V. Examencommissie/opleidingscommissie Zoals eerder gemeld is door de commissie tevens nagegaan of de wetgeving op het gebied van het onderwijs correct wordt nageleefd. Dit heeft geleid tot de volgende constateringen. In enkele Onderwijs- en Examenregelingen is een passage opgenomen waarin de geldigheidsduur van tentamens wordt beperkt. Navraag leert dat dit meestal is opgenomen om studievertraging te voorkomen. De vraag is of dit strookt met de bedoeling van de wetgever die bepaalt dat in de OER “per opleiding de geldende procedures en rechten en plichten vastgelegd worden met betrekking tot het onderwijs en de examens. Daaronder worden ten minste begrepen.....waar nodig, de geldigheidsduur van met goed gevolg afgelegde tentamens, behoudens de bevoegdheid van de examencommissie die geldigheidsduur te verlengen” (WHW, art 7.13 lid 2 sub k).


19

In vrijwel alle OER-en wordt een nakijktermijn genoemd. Er vanuitgaande dat een dergelijke termijn genoemd wordt om te voorkomen dat studenten langer dan noodzakelijk in het ongewisse worden gelaten over hun tentamenuitslag, hebben sommige van de genoemde termijnen meer het karakter van het sanctioneren van een lange nakijktermijn (soms tot 25 werkdagen) dan het beperken van de duur van onzekerheid van de student. Heroverweging van deze termijnen dient plaats te vinden. In sommige gevallen heeft deze (te) lange termijn te maken met activiteiten van de onderwijsadministratie. Docenten die de studenten dan toch niet te lang in onzekerheid willen laten, publiceren dan soms de “voorlopige” uitslagen op BlackBoard, evenwel zonder de rechtmatigheid van de cijfers te controleren. Aanpassing van de publicatietermijn in de OER en de verplichting tot slechts één wijze van publiceren van tentamenuitslagen is noodzakelijk. Hoewel thans wettelijk is bepaald dat examencommissies de kwaliteit van tentamens behoren te bewaken, wordt in een aantal gevallen niet duidelijk hoe dat (kwalitatief en kwantitatief) gebeurt. Ook uit de verslaglegging van de examencommissies is lang niet altijd duidelijk wat er op dit gebied is ondernomen en wat voorgenomen acties zijn. In de reglementen van de faculteiten moet voorzien zijn hoe opleidingscommissies zijn samengesteld. Het wettelijk criterium is dat een opleidingscommissie bestaat uit een gelijk aantal docenten en studenten van de betreffende opleiding(en). Niet in alle gevallen wordt dit nageleefd. In sommige gevallen blijken ook (vaste) adviseurs te worden benoemd, hetgeen niet in overeenstemming is met de wet. Dit laat onverlet de bevoegdheid van de opleidingscommissie om adviseurs uit te nodigen. Toetsing van de samenstelling en de activiteiten van zowel de examen- als de opleidingscommissies door de betreffende faculteitsbesturen acht de commissie dringend gewenst. Best practices Naast de beoordeling van de 46 onderscheiden aspecten van onderwijskwaliteitszorg en de naleving van de wettelijke bepalingen inzake het onderwijs, heeft de commissie zich per faculteit ook afgevraagd welke zaak rondom onderwijskwaliteitszorg zo goed op orde was dat dit als voorbeeld voor andere faculteiten kon dienen. Onderstaand een lijst van deze “best practices” met een verwijzing naar de faculteit waar ze werd aangetroffen en het nummer van de relevante documenten zoals die voorkomen in het auditverslag. 1. Een expliciete formulering van de doelstellingen op het gebied van onderwijskwaliteit en verslagen waaruit de stand van zaken met betrekking tot de onderwijskwaliteit per opleiding wordt gepresenteerd (Aard- en Levenswetenschappen, 12, 21 en 24). 2. Korte geformaliseerde vragenlijst die docenten direct na afronding van een cursus invullen te behoeve van de opleidingscommissie (Bewegingswetenschappen). 3. De aanpak in het project studiesucces (rendementsverbeterende maatregelen (Exacte wetenschappen, 23, 24 en 25). 4. Het jaarverslag van de facultaire studieadviseurs (Economische wetenschappen en Bedrijfskunde, 15). 5. Duidelijke en consequente lijnen vastgesteld en uitgevoerd door faculteitsbestuur en het onderwijsinstituut gezamenlijk met daarbij een bewuste en gemotiveerde keuze voor de fasering van de aandachtpunten (Geneeskunde, G1). 6. Een gedetailleerde beschrijving van alle taken die door het onderwijsbureau van de faculteit (moeten) worden uitgevoerd (Godgeleerdheid en Wijsbegeerte, 21). 7. De scriptiehandleiding, inclusief scriptiecontract en beoordelingsschema; een breed onderwijsinformatiepakket voor studenten en docenten (Letteren, 20, 21 en 22).


20

8. Op zeer overzichtelijke wijze worden cursusevaluaties gepresenteerd. Daarin zijn opgenomen de belangrijkste scores en commentaar van jaarvertegenwoordigers, cursusverantwoordlijken (zoals docenten, coördinatoren), opleidingscommissie(s), examencommissie(s) en indien van toepassing ook van het faculteitsbestuur (Psychologie en Pedagogiek, 14 t/m 23). 9. De decaan wil de afstand tussen de bestuurlijke bovenlaag en de studenten overbruggen. Dat wordt gedaan door een column van decaan op de facultaire website en maandelijks een spreekuur voor studenten (Rechtsgeleerdheid 30). 10. Samenvoeging van de diverse examencommissies tot een centrale examencommissie. De overdrachtsdossiers voor (studenten van) de opleidingscommissie (Sociale wetenschappen, 17, 18 en 19; 24). 11. De aandacht voor de Basiskwalificatie Onderwijs en het percentage WP-ers dat die kwalificatie reeds heeft behaald verdient navolging (Tandheelkunde, 34, 35). 12. Intervisie als methode om de professionele kwaliteit van docenten te verhogen (Wijsbegeerte, 00, punt 8). Door het gedeelde faculteitsbureau met Godgeleerdheid geldt ook hier item 6.

Samenvatting van de resultaten/aanbevelingen 1. In 25% van de uitgebrachte beoordelingen (46 aspecten x 12 faculteiten) luidt de beoordeling “voldaan” (beoordeling 1 of 2). 2. Wanneer faculteiten in de loop van 2012 het impliciete beleid (aanwezig in de hoofden van sleutelfiguren) schriftelijk vastleggen en formaliseren, kan het percentage beoordelingen “voldaan” stijgen tot boven de 55%. 3. De visie op onderwijskwaliteit kan worden aangescherpt, waarbij ook de verbinding met de VU-visie en het instellingsplan aandacht verdient. 4. Kwaliteitszorg voor de afzonderlijke cursussen binnen de opleidingen is redelijk op orde. Het beleid ten aanzien van cursusoverstijgende evaluaties (per studiejaar, van het gehele curriculum) laat te wensen over. 5. Met betrekking tot personeelsbeleid (formatieplanning, taaktoedeling, werving, benoeming, inwerken, professionalisering, jaargesprekken, loopbaanbegeleiding) is het moeilijk een afgewogen oordeel te vormen. De huidige procedures en de vereiste vertrouwlijkheid vragen om een herziene aanpak. 6. De wijze van het behalen van een basiskwalificatie onderwijs dient voor zittende (en ervaren) docenten te worden aangepast. 7. De verankering van het onderzoek aan het onderwijs verdient een ruimere aandacht dan tot nu toe. 8. Met betrekking tot de instelling van veldadviesraden en het alumnibeleid dienen de plannen omgezet te worden in concrete daden. 9. De beschrijving van de onderwijsorganisatie dient zowel op het niveau van de faculteit als op het niveau van de opleidingen aanzienlijk verbeterd te worden. 10. Binnen de onderwijsorganisatie dienen de wettelijke regels correct te worden uitgevoerd. 11. Uit jaarverslagen van examencommissies zou ook het voorgenomen beleid en de resultaten daarvan moeten blijken. Duidelijke centrale voorschriften over samenstelling, taken en bevoegdheden en de verslaglegging door opleidings- en examencommissie zijn nodig.


4.

21

Het vervolg In hoofdstuk 3 zijn de uitkomsten beschreven van het audittraject dat tot doel had de stand van zaken met betrekking tot de onderwijskwaliteitszorg bij de 12 VU-faculteiten, zoals die in het begin van 2012 was, te beschrijven. Die uitkomsten laten zien dat er in ruime mate mogelijkheden tot verbetering zijn. In dit hoofdstuk wordt ingegaan op de vraag hoe het vervolgtraject er in de visie van de commissie uit dient te zien. In dat vervolgtraject onderscheidt de commissie 3 fasen. In de eerste fase, die loopt tot het einde van 2012, zijn het de faculteiten die aan het werk moeten, of dat inmiddels al zijn. Op alle aspecten van het auditkader waarvoor de beoordeling een “3” was, dienen faculteiten stappen te ondernemen om de beoordeling “3” te wijzigen in een beoordeling “2” of wellicht zelfs een beoordeling “1”. Veelal kan de “3” in een “2” veranderen door gericht op de betreffende aspecten het, veelal impliciet reeds aanwezige beleid, expliciet te formuleren, schriftelijk vast te leggen en door de verantwoordelijke instanties te laten formaliseren. Tevens dient door de faculteiten te worden nagegaan en te worden gedocumenteerd welke resultaten in 2012 zijn behaald. Uit overleg met kwaliteitszorgfunctionarissen is gebleken dat men niet in alle gevallen helder voor ogen heeft hoe een verbetering van “3” naar “2” vorm gegeven kan worden. Daarom hebben leden van de auditcommissie zich bereid verklaard faculteiten die daar prijs op stellen behulpzaam te zijn door middel van het verstrekken van gerichte adviezen. Dit aanbod is inmiddels bij de kwaliteitszorgfunctionarissen bekend. Als in de komende maanden een dergelijke verbeterslag door de faculteiten wordt gerealiseerd, dient dat ook zichtbaar gemaakt te worden. Dat kan door per 1 januari 2013, of kort daarna, te laten vaststellen wat op dat moment de stand van zaken is. Aan de hand van de beoordeling die thans heeft plaats gevonden moet nagegaan worden voor welke aspecten op dat moment de beoordeling “3” gewijzigd is in een “2”. De resultaten per 1 januari 2013 kunnen vervolgens worden toegevoegd aan dit rapport. Uit het verschil tussen de huidige beoordeling en die per 1 januari 2013 kan worden afgeleid dat een gerichte actie om de onderwijskwaliteitszorg te beoordelen tevens kan leiden tot een verbeterde onderwijskwaliteitszorg Fase 1 is slechts een stap op weg naar verbeterde onderwijskwaliteitszorg. Nu de VU gekozen heeft om als instelling de toets kwaliteitszorg te ondergaan, dient het proces van het beoordelen en bewaken van de onderwijskwaliteitszorg meer handen en voeten te krijgen. In fase 2 dient ook de universiteit in actie te komen. Dat kan door op het gebied van de onderwijskwaliteitzorg, nog duidelijker dan voorheen gebeurde, bijvoorbeeld in de vorm van het Handboek Onderwijskwaliteit, richtlijnen op dit gebied ten behoeve van de faculteiten te formuleren en de verslaglegging van de te nemen maatregelen, van de bereikte resultaten en van de voorgenomen verbeteringen te faciliteren. Omdat onderwijskwaliteitszorg bij alle 12 faculteiten de aandacht blijft vragen en omdat daardoor meer overeenkomsten dan verschillen tussen de afzonderlijke faculteiten zullen zijn, verdient een centrale aansturing de voorkeur boven een gedecentraliseerde benadering. Daarbij kunnen overigens de “best practices” zoals die bij de faculteiten zijn aangetroffen gebruikt worden als uitgangspunt. Op het gebied van onderwijskwaliteitszorg zijn inmiddels enkele (centrale) ontwikkelingen in voorbereiding. Zo is er op dit moment een notitie over het beleid ten aanzien van studenten met een beperking in voorbereiding. Zodra dit “centrale” document beschikbaar is, kunnen faculteiten het documentn gebruiken als uitgangspunt voor de facultaire uitwerking ervan.


22

Daarnaast dient gestreefd te worden naar centrale richtlijnen/handleidingen voor (de inhoud van) onderwijsjaarverslagen en standaard jaarverslagen van examen- en opleidingscommissies. Door dergelijke “voorschriften” wordt het de faculteiten makkelijker gemaakt om het College van Bestuur, dan wel een door het College in te stellen auditcommissie, inzicht te verschaffen in de stand van zaken waar het onderwijskwaliteitszorg betreft. Zeker ten opzichte van het dit jaar gehanteerde systeem waarbij iedere faculteit min of meer “zelf maar moest uitzoeken” met welke documenten aangetoond kon worden dat aan de diverse aspecten van onderwijskwaliteitszorg voldaan is, kan dat een verbetering en een vereenvoudiging betekenen. Een bijzonder punt van aandacht verdient in dit kader het format van de facultaire jaarplannen zoals die nu ook al een rol spelen in het bestuurlijk overleg met de faculteiten. In deze facultaire jaarplannen komen slechts geaggregeerde cijfers voor de faculteit als geheel aan de orde. Deze geaggregeerde cijfers zouden inzichtelijk afgeleid moeten zijn van de gegevens van de afzonderlijke opleidingen. Aanpassing van de tot nu toe gebruikte systematiek is gewenst, omdat onderwijskwaliteitszorg zich immers in eerste instantie richt op de afzonderlijke opleidingen. Door de wijziging in het accreditatiestelsel is de VU vanaf 2011 zelf verantwoordelijk voor de bewaking van de onderwijskwaliteitszorg. In dit gewijzigde stelsel moet het College van Bestuur erop toezien dat de faculteiten de onderwijskwaliteitszorg ook daadwerkelijk leveren. Een eerste vereiste daarbij is dat het College van Bestuur op de hoogte is van het stand van zaken dienaangaande en de daarvoor noodzakelijke verbeteringen. Het College van Bestuur dient daarvoor de kaders te verschaffen. In 2012 heeft het College van Bestuur door middel van het instellen van de auditcommissie hiermee een begin gemaakt. Door de rapportage van deze commissie is de stand van zaken op het gebied van de onderwijskwaliteitszorg geïnventariseerd. Tevens zijn acties voorgesteld om op korte termijn aan deze eerste inventarisatie een vervolg te geven in de vorm van een aanvullende beoordeling per 1 januari 2013 (fase 1) en door het op betrekkelijk korte termijn verstrekken van centrale richtlijnen over (enkele aspecten van) onderwijskwaliteitszorg en door het uniformeren van de facultaire verslaglegging ervan (fase 2). Voorts dient de VU te besluiten hoe in de toekomst het bewaken van de onderwijskwaliteitszorg structureel gestalte moet krijgen (fase 3). Op basis van de ervaringen, waarvan in dit rapport verslag wordt gedaan, heeft de commissie zich beraden over de wijze waarop de onderwijskwaliteitszorg in de toekomst kan plaats vinden. De commissie is van oordeel dat een beoordeling van de onderwijskwaliteitszorg, zoals die door de faculteiten wordt geleverd, met enige regelmaat dient plaats te vinden. Een jaarlijkse beoordeling ligt om twee redenen niet voor de hand. In de eerste plaats geldt dat het onderwijs dat de faculteiten verzorgen als regel een jaarlijkse cyclus kent: de meeste studie-onderdelen worden eenmaal per jaar aangeboden, dus worden die onderdelen ook eenmaal per jaar geëvalueerd en wordt er ook eenmaal per jaar nagegaan welke verbeteringen gewenst dan wel noodzakelijk zijn. Om na te gaan of dergelijke cycli met de gewenste effectiviteit voor de onderwijskwaliteit naar behoren plaats vinden is een overzicht over meerdere cycli noodzakelijk. Daarnaast geldt dat de thans gehanteerde systematiek veel tijd (en aandacht) van betrokkenen vraagt. Dit geldt zowel voor de commissie die de beoordeling uitvoert als voor alle betrokkenen in de faculteiten die de commissie van informatie moeten voorzien. Mede gelet op de termijn waarvoor een instellingsaccreditatie geldt (6 jaar) stelt de commissie voor een systematische beoordeling van de stand van zaken op het gebied van onderwijskwaliteitszorg eens per 3 jaar te laten plaats vinden. Daarbij dient het tijdstip


23

waarop een en ander plaats vindt zodanig te worden gekozen dat er steeds tweemaal een onderwijskwaliteitszorgaudit heeft plaats gevonden voordat een instellingsaudit zijn beslag krijgt. In de ogen van de huidige auditcommissie heeft de gekozen systematiek naar behoren gewerkt: zij heeft duidelijk inzicht verschaft over de mate waarin de verschillende faculteiten de aan hen toevertrouwde onderwijskwaliteitszorg op orde hebben. Daarom kan de nu gebruikte wijze van beoordelen ook weer de grondslag vormen bij een volgende beoordeling. Een aspect dat verbetering behoeft zijn de instructies aan de faculteiten met betrekking tot de aard en de vorm waarin relevante documentatie aan de auditcommissie verstrekt moet worden. In het voorgaande werden daarvoor reeds suggesties gedaan.


24

Referenties NVAO. Beoordelingskaders accreditatiestelsel hoger onderwijs. Toets nieuwe opleiding (beperkt/uitgebreid). (6 december 2010a) NVAO. Beoordelingskaders accreditatiestel hoger onderwijs. Instellingstoets kwaliteitszorg. (6 december 2010b)


25

Bijlage I Aan de faculteitsbesturen van de Vrije Universiteit Amsterdam

DATUM

ONS KENMERK

UW BRIEF VAN

UW KENMERK

20.10.2011

CvB/EK/dv/2011/2 795

FAX

BIJLAGE(N)

E-MAIL

[email protected]

Betreft: Facultaire audits

TELEFOON

020 598 9250

2

Geacht faculteitsbestuur,

Zoals ongetwijfeld bekend zal er voor onze universiteit in 2013 een instellingsvisitatie plaats vinden. Een belangrijk aspect dat bij deze instellingsvisitatie een rol zal spelen is de kwaliteitszorg voor de opleidingen die de VU verzorgt. Door de voorzitter van de NVAO, Karl Dittrich, is dat aspect alsmede de relevantie voor de instellingsvisitatie als volgt onder woorden gebracht: “Een intern kwaliteitszorgsysteem functioneert goed als het instellingsbestuur tijdige signalen krijgt over mogelijke problemen met de kwaliteit van een opleiding en daar vervolgens iets mee blijkt te (laten) doen”. Ter voorbereiding op deze instellingsvisitatie zal in opdracht van het College van Bestuur een commissie in de periode tussen eind januari en eind april bij alle 12 faculteiten een audit uitvoeren die zich met name richt op de kwaliteitszorg binnen de faculteit. Deze commissie bestaat uit de volgende leden: prof.dr. A.P. Hollander (voorzitter), drs. E.J. Kok (secretaris), R.H. van Nie, RE, RA, prof.dr. H.A. Verhoef en dr. E. Vester. De commissie zal nog aangevuld worden met (een) student(en).

Deze facultaire auditcommissie zal alle faculteiten bezoeken volgens bijgaand datumschema. De commissie kan beschikbaar zijn op maandagmiddag, dinsdagochtend of dinsdagmiddag. U gelieve een keus te maken uit een van deze opties en deze door te geven aan de secretaris van de TSOB, Dorothé Voet ([email protected]; tel: 85347). Mocht de voor uw faculteit gekozen data problemen opleveren, dan kunt u in overleg met een andere faculteit data ruilen. Het bezoek beslaat in totaal 4 uur en zal volgens bijgevoegd tijdschema worden ingevuld. Het is uiteraard aan de faculteit om de diverse delegaties zoals aangeduid in het schema samen te stellen.


26

Een open spreekuur voor zowel studenten als docenten is een onderdeel van de procedure. Het faculteitsbestuur wordt gevraagd dit in de faculteit bekend te maken.

Voor deze auditprocedure worden van U geen nieuwe documenten gevraagd. De commissie zal haar oordeel baseren op reeds bestaande documenten. Wel wordt U verzocht zo spoedig mogelijk een contactpersoon voor uw faculteit aan te wijzen en de naam van de betreffende persoon eveneens door te geven aan Dorothé Voet. Via deze contactpersoon kan de commissie in het bezit komen van de documenten die de commissie noodzakelijk acht voor haar oordeel. In de loop van januari zal de commissie U het te hanteren beoordelingskader doen toekomen. Wanneer de commissie na het bezoek dit kader geheel heeft ingevuld, wordt het concept U toegezonden, zodat U commentaar kunt leveren op het oordeel van de commissie. Gelet op het belang van deze facultaire audit voor de instellingsaudit, rekent het College van Bestuur op uw medewerking. Hoogachtend, namens het College van Bestuur Prof. dr. Lex M. Bouter Rector magnificus


27

Bijlage II

Aan de faculteitsbesturen van de Vrije Universiteit Amsterdam

DATUM

ONS KENMERK

26.01.2012

CvB/EK/APH/2012/

E-MAIL

TELEFOON

[email protected]

020 598 9236

UW BRIEF VAN

UW KENMERK

FAX

BIJLAGE(N)

3

Betreft: Facultaire audits Geacht faculteitsbestuur, Per brief d.d. 20 december 2012 (kenmerk: CvB/EK/dv/2011/2795) bent u ingelicht over een uit te voeren audit naar de kwaliteitszorg van het onderwijs die in de eerste maanden van 2012 zal plaats vinden. Zoals eerder gemeld vindt deze audit plaats als voorbereiding op de instellingsaudit door de NVAO die in 2013 zal plaats vinden. Met (vrijwel) alle faculteiten zijn inmiddels afspraken gemaakt over het tijdstip waarop het bezoek van onze interne auditcommissie aan de faculteit zal plaats vinden. In deze brief wl de commissie u nader informeren over het doel, de procedure en de wijze van rapporteren. Het doel van de interne facultaire audit is om per faculteit te kunnen beschikken over een overzichtslijst waaruit blijkt: 1. Aspecten waaraan de faculteit op voorbeeldige manier voldoet. 2. Aspecten waaraan de faculteit voldoet. 3. Aspecten waar de faculteit tekort schiet en die gerepareerd moeten zijn per uiterlijk dec. 2012. 4. Aspecten waar de faculteit tekort schiet, die niet gerepareerd kunnen worden in 2012. Een herstelplan met tijdpad ligt per uiterlijk dec 2012 klaar. 5. Aspecten waar de faculteit tekort schiet, die niet gerepareerd kunnen worden in 2012 en waarvoor geen herstelplan klaar zal liggen. (“Voldoen” aan houdt ook in dat het zichtbaar is en aangetoond kan worden in documenten die beschikbaar zijn. Als bijvoorbeeld cursus- of curriculumevaluatie geregeld plaatst vindt maar er zijn geen verslagen beschikbaar dan is niet “voldaan” aan het geregeld meten van kwaliteit – één van de aspecten van belang in een kwaliteitszorgsysteem.) Kwaliteitszorg vindt plaats in een directe relatie met het onderwijs zoals dat door de verschillende faculteiten wordt verzorgd. Bij de beoordeling van de kwaliteitszorg dient die relatie betrokken te worden. Daarom heeft de auditcommissie per faculteit twee opleidingen geselecteerd: een opleiding op bachelorniveau en een opleiding op master/researchmasterniveau. De beoordeling van de kwaliteitszorg zal door de commissie


28

gegeven worden als kwaliteitszorg in het kader van de twee genoemde opleidingen. Een overzicht van de geselecteerde opleidingen is te vinden in bijlage I. Om een beoordeling van de kwaliteitszorg te geven heeft de commissie een “auditkader” opgesteld, zie bijlage II, dat door de commissie per faculteit zal worden ingevuld. De commissie begint met het invullen van het kader al voordat er een bezoek aan de faculteit wordt gebracht.De commissie baseert zich bij die eerste invulling op de stukken die eerder door de faculteiten zijn verstrekt en die genoemd worden in bijlage III. Indien nodig vraagt de commissie aan de contactpersoon van de faculteit nog andere stukken te verstrekken. Zoals reeds eerder gemeld gaat het daarbij steeds om reeds bestaande stukken; voor deze auditronde hoeft de faculteit geen nieuwe stukken aan te leveren. Het spreekt voor zich dat de auditcommissie alle ter beschikking staande stukken vertrouwelijk zal behandelen. Aan de hand van het gesprek met de faculteit tijdens het bezoek, zal de commissie de invulling van het auditkader completeren. Ook kan tijdens het bezoek afgesproken worden dat de faculteit nog andere stukken ter beschikking van de commissie stelt, waarvan de inhoud betrokkenen zal worden bij de invulling van het auditkader. Wanneer de commissie de invulling van het auditkader heeft afgerond, zal het ingevuld kader aan het faculteitsbestuur worden voorgelegd, zodat er eventueel nog correcties kunnen worden aangebracht. Nadat de commissie de auditkaders voor alle faculteiten heeft voltooid zullen deze worden gebundeld en voorzien van een VU-brede conclusie over de kwaliteitszorg voor het onderwijs zo mogelijk met aanbevelingen voor de (nabije) toekomst. In de hoop u voldoende te hebben geïnformeerd, verblijft met vriendelijke groet, Namens de commissie facultaire audits

Prof.dr. A.P. Hollander, voorzitter


29

Bijlage III

Het gehanteerde beoordelingskader 1.

1.1 1.2 1.3 2.

2.1a 2.1b 2.1c 2.1d 2.2a

2.2b 2.3a 2.3b 2.3c 2.3d 2.4 2.5a 2.5b 2.6 3.

3.1a 3.1b 3.1c 3.1d 3.2a

Visie De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar onderwijs en op het ontwikkelen van een kwaliteitsculttur de faculteit heeft een visie op onderwijs en kwaliteit(scultuur) deze visie sluit aan op het instellingsplan en –profiel van de VU de visie bevordert betrokkenheid en verbetering Adequaat beleid De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied. adequaat beleid met betrekking tot de bacheloropleiding(en) adequaat beleid met betrekking tot de (research)masteropleiding(en) adequaat beleid met betrekking tot onderwijsevaluaties adequaat beleid met betrekking tot toetsen en beoordelen adequaat beleid met betrekking tot formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken en loopbaanbegeleiding adequaat beleid met betrekking tot de basiskwalificatie Onderwijs adequaat beleid op het gebied van de bibliotheekvoorzieningen adequaat beleid met betrekking tot onderwijsruimten en studieplekken adequaat beleid ten aanzien van informatica en computervoorzieningen adequaat beleid met betrekking tot studiebegeleiding adequaat beleid voor studenten met beperkingen (SCHIB) adequaat beleid met betrekking tot de verankering van onderzoek door docenteninzet adequaat beleid met betrekking tot de verankering van onderzoek door middel van onderwijsvorm adequaat beleid met betrekking tot een veldadviesraad en alumni Zicht op resultaat De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. zicht op realisatie van het beleid met betrekking tot de bacheloropleiding(en) zicht op realisatie van het beleid met betrekking tot de (research)masteropleiding(en) zicht op realisatie van het beleid met betrekking tot onderwijsevaluaties zicht op realisatie van het beleid met betrekking tot toetsen en beoordelen zicht op realisatie van het beleid met betrekking tot formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken en loopbaanbegeleiding

Rapportage Auditcommissie 3.2b 3.3a 3.3b 3.3c 3.3d 3.4 3.5a 3.5b 3.6 4

4.1a 4.1b 4.1c 4.1d 4.2a

4.2b 4.3a 4.3b 4.3c 4.3d 4.4 4.5 4.6 5

5.1 5.2

30

zicht op realisatie van het beleid met betrekking tot de basiskwalificatie Onderwijs zicht op realisatie van het beleid op het gebied van de bibliotheekvoorzieningen zicht op realisatie van het beleid met betrekking tot onderwijsruimten en studieplekken zicht op realisatie van het beleid ten aanzien van informatica en computervoorzieningen zicht op realisatie van het beleid met betrekking tot studiebegeleiding zicht op realisatie van het beleid voor studenten met beperkingen zicht op de mate waarin het onderzoek in het bacheloronderwijs is verankerd en de kwaliteit daarvan zicht op de mate waarin het onderzoek in het masteronderwijs is verankerd en de kwaliteit daarvan zicht op realisatie van het beleid met betrekking tot een veldadviesraad en alumni Adequate maatregelen De faculteit kan aantonen dat zij de kwaliteit van haar opleidingen waar nodig systematisch verbetert. Deze NVAO-standaard is als volgt geoperationaliseerd: de faculteit neemt adequate maatregelen om de kwaliteit van haar opleidingen te verbeteren. maatregelen met betrekking tot de bacheloropleiding(en) maatregelen met betrekking tot de (research)masteropleiding(en) maatregelen met betrekking tot onderwijsevaluaties maatregelen met betrekking tot toetsen en beoordelen maatregelen met betrekking tot formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken en loopbaanbegeleiding maatregelen met betrekking tot de basiskwalificatie Onderwijs maatregelen op het gebied van de bibliotheekvoorzieningen maatregelen met betrekking tot onderwijsruimten en studieplekken maatregelen ten aanzien van informatica en computervoorzieningen maatregelen met betrekking tot studiebegeleiding maatregelen voor studenten met beperkingen maatregelen met betrekking tot de verankering van onderzoek in onderwijs maatregelen met betrekking tot een veldadviesraad en alumni Organisatie De faculteit heeft een effectieve organisatie- en beslissingsstructuur met betrekking tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Er is een duidelijke beschrijving van de onderwijsorganisatie van de faculteit Er is een duidelijke beschrijving van de onderwijsorganisatie van de opleiding(en).


31

Bijlage IV A VERSLAG Interne facultaire audit Aard- en Levenswetenschappen, 19 april 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 32 – 35), de documentenlijst (pagina 36 en 37) en het bezoekschema (pagina 38). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van FALW en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Gezondheidswetenschappen en researchmaster Lifestyle and Chronic Disorders. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De faculteit is goed op weg om het onderwijs centraal te organiseren, hetgeen niet altijd rijmt met de autonomie van de afdelingen. Kwaliteitscultuur: Alle regelgeving is volstrekt helder en op orde, maar niet iedereen in de organisatie conformeert zich hieraan. Best practice: Doelstellingen onderwijskwaliteit en de verslagen Stand van zaken Onderwijskwaliteit per opleiding.(stuknrs 12, 19 en 21)


32

Ingevuld auditkader FALW, bezoek dd 19 april 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en Geen documenten over visie aangetroffen 3 kwaliteit(scultuur) 22, p.16 Koppeling visie FALW en VU behoeft 2 Visie sluit aan op IP en profiel. nadere uitwerking Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert betrokkenheid NB en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van haar EVALUATIEBELEID onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, 2.1 - 2.6 personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 12 2 Adequaat beleid mbt BA: Streefdoelen gerelateerd aan verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 12 2 Adequaat beleid mbt MA: Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 13, 14 2 Adequaat beleid mbt onderwijsevaluatie (conform de eisen in Handboek hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 15, 26 2 Adequaat beleid Toetsen en beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID Geen documentatie over aangetroffen 4 Adequaat beleid mbt formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) 05, H5 2 Adequaat beleid mbt BKO 32 (Handboek hoofdstuk professionalisering van

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel

Rapportage Auditcommissie Std

2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6 2.6a 3

3.1 3.1a

3.1b

3.1c 3.1d 3.2 3.2a

3.2b

(Deel)onderwerp

33 Document

Toelichting

Oordeel

docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid Geen documentatie over aangetroffen 3 17, 30 2 Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid 17, 30 2 16 2 Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor studeren Geen documentatie over aangetroffen 3 met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Geen documentatie over aangetroffen 3 Adequaat beleid mbt verankering onderzoek dmv docenteninzet 22, p.17, 2 Adequaat beleid mbt p.21 verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt Geen documentatie over aangetroffen 4 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van 3.1 – 3.6 haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Zicht op realisatie in BA van 19, 21 2 streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 24, 25 2 Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Zicht op realisatie van 19, 20, 23 Systematische weergave van resultaten 3 evaluatiekwaliteit zoals beoogd ontbreken Zicht op realisatie van kwaliteit 26 Geen resultaten aangetroffen, wel 4 Toetsen en beoordelen procesbeschrijvingen PERSONEEL NB Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO NB


3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6 3.6a 4

4.1 4.1a

4.1b

4.1c

4.1d 4.2 4.2a

4.2b

(Deel)onderwerp

34 Document

Toelichting

Oordeel

beleid VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid 17, 30 Uitwerking nog niet ter hand genomen 4 Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT 17, 30 Nog geen resultaten bekend 4 Zicht op resultaten van Geen resultaten aangetroffen 3 studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK 22 2 BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. 25 2 MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van NB betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Adequate maatregelen in BA: 21 Formulering maatregelen te afstandelijk 3 verhogen kwaliteit, verhogen en te vrijblijvend studierendement, verhogen kosteneffectiviteit. Adequate maatregelen in MA: 24 Formulering maatregelen te afstandelijk 3 Instroom vergroten, ook en te vrijblijvend internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking NB Adequate maatregelen op het terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav NB toetsen en beoordelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid)


35

Std

(Deel)onderwerp

4.3 4.3a

VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav ICT NB Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK Gezien beoordeling bij 3.5a en 3.5b geen nvt Adequate maatregelen voor reden tot maatregelen verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden 5.1 – 5.2 en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 18 Organogram gewenst 3 onderwijsorganisatie faculteit 3 18 Vraagtekens bij de combinatie van taken Beschrijving van van afdelingshoofd en oc-voorzitter in één onderwijsorganisatie persoon. Nader uit te zoeken. opleidingen

4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6 4.6a 5

5.1 5.2

Document

Toelichting

Oordeel

Rapportage Auditcommissie Overzicht documenten FALW, bezoekdatum 19 april 2012

36

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 FALW Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan 2011_FALW.pdf Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 TSOB input 2e PO FALW Met instemming van faculteit afgeleide lijst van “smart” 20110630.docx geformuleerde actie punten 03 03 2900 verslag PO FALW 30 juni Verslag van het gehele PO. Het gaat met name over punt 4, 2011.doc (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 2900achtmaands 2011 def.pdf voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 2900 Jaarplan 2012 versie 7 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. oktober.docx H2d –onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 TSOB input 3e PO FALW.docx TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 2900 verslag PO FALW 16 Verslag over het gehele PO. september 2011.doc Realisatie instellingsplan, invoering richtlijn PCU 08 08 20111005PIDfalw.pdf en 08 De eerste versie plus de maart 2012 – definitieve - versie 20120301VoortgangFWgFALW.pdf Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs ALW 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstat istiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht FALW.pdf 11 11 20111128 FALW Waarderingen bij de meest recente accreditatiewaarderingen.xlsx opleidingsaccreditaties, samengesteld vanaf rapporten op NVAO site Door faculteit opgestuurde facultaire stukken faculteit 12 12 Doelstellingen Onderwijskwaliteit FALW 2011.pdf 13 13 Evaluatieplan bacheloropleidingenFALW_okt2009.pdf 14 14 Stage- en scriptieregeling Life Sciences_2011 NL.pdf 15 15 Toetsen en Beoordelen beleidsdocument FALW 2011.pdf 16 16 Beleidsdocument Studiebegeleiding_FALW_2011 vastgesteld FB.pdf 17 17 Plan onderwijsruimtes FALW.docx 18 18 Fac regelement Onderwijsorganisatie.pdf Door faculteit opgestuurde stukken over de gekozen opleidingen 19 19 Jaarverslag 2009-2010 Bsc Gezondheidswetenschappen.pdf 20 20 notulen oplcie GZW vanaf februari 2011.pdf 21 21 BSc GZW Stand van zaken KPI's feb 2012.docx 22 22 Zelfevaluatie gwzbachelor versie10april.docx 23 23 Notulen OLC LCD juni en dec 2011.pdf

Rapportage Auditcommissie 24 24 MSc Lifestyle and Chronic Disorders Stand van zaken KPI's maart 2012.docx 25 25 Zelfevaluatierapport VvE_Lifestyle and Chronic Disorder VU November 2011.pdf 26 26 Jaarverslag Excie GZW HS LCD 2010- 2011.pdf Door faculteit nagezonden stukken 27 27 Regels en richtlijnen excies falw 2011_final_tcm19-235617.pdf 28 28 20110102 615 FBs modelregeling opleidingscommissies.pdf 29 29 Regeling voor opleidingscommissies FALW.docx 30 30 Tussen verslag ICT voor Onderwijs.docx 31 31 FALW hooglerarenbeleid.pdf 32 32 falw richtlijn benoeming ud en uhd.pdf 33 33 FALW opleidingsbeleid 2007.pdf

37


38

Bezoek Aard- en Levenswetenschappen Interne Auditcommissie Datum : 19 april 2012 Tijd : 10:00 – 14:00uur Plaats : C-161 Doel : ter voorbereiding op Instellingsaudit ca. maart 2013 Opleidingen : B-Gezondheidswetenschappen en M-Lifestyle and Chronic Disorders (resma) ======================================================

Leden interne audit-commissie: Prof.dr. Peter Hollander (voorzitter), Drs. Eveline Kok (secretaris), Rob van Nie, RE, RA (Accountantsdienst VU), Prof.dr. Herman Verhoef; Dr. Elseline Vester; Sybren van Dokkum (studentlid); Floor Elsenburg MSc (notuliste) Tijdschema bezoek: 19-04-2012 10:00-10:45

Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteitszor gmedewerker

10:45-11:30

Studentvertegenwoordiging:

11:30-12:00

Spreekuur voor docenten en studenten Pauze / Commissieberaad

12:00-12:30

12:30-13:15

Opleidingscommissies en Examencommissie(s)

13:15-14:00

Faculteitsbestuur: Decaan, pfh Onderwijs, dir BV

Namen gesprekspartners GZW: dr. I.H.M. (Ingrid) Steenhuis LCD: prof. dr. ir. J.C. (Jaap) Seidell (plaatsvervangend) Dr. N. (Nellie) Harms Dr. PACM (Pamela) de Boer Luc Jansen (voorzitter), Anne Wichmann (secretaris), Sterre Verdonk (vice voorzitter), Tiemen Gordijn (SterC), Ivan Shelep (SterC), Valerie van der Meij (PR). Oplcie GZW: Maartje Ridder, Kirsten Evenblij, Stephan Wapperom. Oplcie LCD: Anne Rutte, Fleur Huijsman, Jennifer Meessen. Bekendgemaakt hoe? Docenten zijn op de hoogte gebracht via de docentennieuwsbrief. Studenten worden via een melding op de portal ingelicht Examencommissie (gezamenlijk): prof. dr. M. (Margot) van Eck van der Sluijs - van de Bor (vz) dr. ir. M. R. (Margreet) Olthof dr. F.R.M. (France) Portrait Opleidingscommissie GZW: Dr. L. (Lidewij) Henneman Dr. W. (Willemieke) Kroeze Dr. L. (Lothar) D.J. Kuijper Dr. M. (Marjolein) B.M. Zweekhorst Opleidingscommissie MSc LCD: Dr. M. (Mireille) van Poppel Dr. R.W.J.G. (Raymond) Ostelo Prof. dr. B.(Bauke) Oudega Dr. N. (Nellie) Harms, Onderwijsdirecteur (plaatsvervangend portefeuillehouder) Dr. Y.K.M (Yvonne) Kops


39

Bijlage IV-B VERSLAG Interne facultaire audit Faculteit der Bewegingswetenschappen, 13 februari 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde auditkader (pagina 40 44), de documentenlijst (pagina 45 en 46) en het bezoekschema (pagina 47) De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus binnen de Faculteit der Bewegingswetenschappen en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Bewegingswetenschappen en master Human Movement Sciences: Sport, Exercise and Health. Uitgangspunt daarbij is dat de bevindingen binnen de faculteit te generaliseren zijn naar de andere opleidingen. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: Er is een flinke slag gemaakt met het opzetten van de kwaliteitszorgsystematiek. Volgehouden verslaglegging van resultaten, maatregelen en aanpassingen zal het geheel completeren en maakt de aanpak van hardnekkige problemen (rendement, beroepsperspectief) handelbaarder. Kwaliteitscultuur: De faculteit toont zelfkritiek op het gebied van de kwaliteitszorg en inzet om te verbeteren. Best practice: Het geformaliseerde vragenlijstje dat docent direct na afronding van een vak invult voor de opleidingscommissie.


40

Ingevuld auditkader FBW, bezoek dd 13 februari 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 05H2, De visie is bij de tijd en samenhangend 1 kwaliteit(scultuur) 08, beschreven in de verschillende stukken 11 Teksten gaan in op IP en PCU richtlijn. 2 05H2a, Visie sluit aan op IP en 08, profiel. Concreet: de 11 kernwaarden verantwoordelijk, open en persoonlijk komen terug. 11 pag 1,2 Verantwoordelijkheid studenten en 2 Visie bevordert docenteninzet in eerste jaren betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van haar EVALUATIEBELEID onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, 2.1 - 2.6 personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 2 H2 Facultair niveau en bachelor niveau is in dit Adequaat beleid mbt BA: 11 geval hetzelfde, want er is maar één bachelor. Streefdoelen gerelateerd aan verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) Adequaat beleid mbt MA: H2, Er is geen zusteropleiding bij de UvA 2 Streefdoelen gericht op 11 pag 5 instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) Adequaat beleid mbt 13, De drie documenten in samenhang 3 onderwijsevaluatie (conform 14, beschrijven het evaluatiesysteem. Stage en de eisen in Handboek 15 scriptie ontbreekt. hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 2 23 Als beleidsstuk bij de tijd. Bovendien is een Adequaat beleid Toetsen en plan voor samenwerking met Groningen in de beoordelen (conform het maak. overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID Adequaat beleid mbt 05H5 80/20 methodiek 3 formatieplanning, 11 pag 5/6 Niet duidelijk is in hoeverre de deelname aan taaktoedeling, werving, 27 het VU-brede project de personele inzet benoeming, specifiek ten aanzien van het onderwijs inwerkprocedures, bevordert. professionalisering, In 27, par 7 is er iets over opgenomen, maar jaargesprekken, dat alléén is niet genoeg. loopbaanbegeleiding

1.1

1.2

1.3

2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

Document

Toelichting

Oordeel


2.2b

2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

(Deel)onderwerp

Document

(Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Adequaat beleid mbt verankering onderzoek dmv docenteninzet

2.5b

Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm

2.6

VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt veldadviesraad en alumni

2.6a

ZICHT OP RESULTATEN 3.1 – 3.6

3.1 3.1a

ONDERWIJS Zicht op realisatie in BA van streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Zicht op realisatie van

3.1c

Toelichting

05H5 11 pag 5

Oordeel

2

11 par 4 11 par 4

Staat expliciet beschreven Idem

2 2

11 par 4 11, 18

Idem

2 2

18 pag 9

11 27 par 7

11

2

Uit de teneur van het stuk blijkt wel dat de koppeling onderwijs en onderzoek van belang wordt geacht, maar hoe e.e.a. concreet uitgewerkt wordt, wordt niet aangegeven. FBW geeft aan hierin te gaan voorzien, ook in relatie met punt 2.2a Uit de teneur van het stuk blijkt wel dat de koppeling onderwijs en onderzoek van belang wordt geacht, maar hoe e.e.a. concreet uitgewerkt wordt, wordt niet aangegeven.

3

3

3 FBW geeft zelf aan dat Intensivering is 22 aangewezen, mede in verband met het 14, par 4, beroepsperspectief 5 De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld.

3

3.1b

41

H2, 11

Er is onduidelijkheid over de realiteit van de hoogte van de streefcijfers.

2

H2, 11

Idem Amsterdamse samenwerking niet van toepassing

2

19

Geen resultaten in opgenomen

3


3.1d

3.2 3.2a

3.2b 3.3 3.3a

3.3b

3.3c 3.3d

3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

(Deel)onderwerp

evaluatiekwaliteit zoals beoogd Zicht op realisatie van kwaliteit Toetsen en beoordelen PERSONEEL Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO beleid VOORZIENINGEN Zicht op resultaten van bibliotheekbeleid

Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT Zicht op resultaten van studiebegeleiding

42 Document

Toelichting

Oordeel

24

Intervisie vooraf wordt verplicht gesteld (pag 4), maar niet gecontroleerd. Nog geen systematische controle op toetskwaliteit.

3

--

Gedocumenteerde vastlegging ontbreekt. Alhoewel beleid nog niet beschikbaar is (zie 2.2a) kan realisatie gedocumenteerd worden, vandaar de score 3 ipv 4.

3

05, H5.6 27

Kan de realisatie van 48% in 2010 cijfermatig onderbouwd worden?

3

De faculteit is weliswaar niet autonoom in het bepalen van het beleid, maar dient wel aantoonbaar zicht te hebben op de uitwerking van het bibliotheekbeleid voor haar onderwijs. Idem

3

--

Idem Jaarlijkse evaluatie van mentoraat en resultaten studiebegeleiding niet gedocumenteerd

3

TOEGANKELIJKHEID Zicht op realisatie van SCHIB -De commissie heeft geen documentatie 3 beleid aangetroffen VERANKERING ONDERZOEK NB Omdat geen concrete uitwerking van beleid BA: Zicht op de mate waarin -beschikbaar is, kan er ook geen zicht op de het onderzoek in het resultaten bestaan. De commissie verwacht bij bachelor onderwijs is de uitwerking van het beleid tegelijkertijd een verankerd en de kwaliteit plan voor de monitoring van het resultaat. daarvan. -idem NB MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van 22 Resultaten van alumni-enquête nog toe te 3 betrokkenheid voegen aan documentatie veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 3 De commissie miste bijvoorbeeld nog Adequate maatregelen in BA: 19 verslagen van de opleidingscommissie, verhogen kwaliteit, verhogen overzicht van tentamenuitslagen, toedeling studierendement, verhogen


4.1b

4.1c

(Deel)onderwerp

kosteneffectiviteit. Adequate maatregelen in MA: Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Adequate maatregelen op het terrein van onderwijsevaluatie en beleid

4.1d

Adequate maatregelen tav toetsen en beoordelen

4.2 4.2a

PERSONEEL Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen professionalisering(sbeleid)

4.2b

4.3 4.3a 4.3b

4.3c 4.3d

4.4 4.4a 4.5 4.5a

4.6

4.6a 5

VOORZIENINGEN Adequate maatregelen tav bibliotheekbeleid Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav ICT Adequate maatregelen tav studiebegeleiding

43 Document

Toelichting

Oordeel

21

onderwijsformatie aan onderwijsonderdelen Idem

3

Voorbeelden waaruit dit zou kunnen blijken zijn: Evaluatieverslagen, verslagen evaluatieverslagjes docenten, verslag curriculumevaluaties, jaarverslag opleidingscommissie Voorbeelden waaruit dit zou kunnen blijken zijn: Tentamenanalyse, verslag analyses examencommissie

3

Bijvoorbeeld: verslaglegging over gehouden jaargesprekken

4

Niet gedocumenteerd, maar uit het gesprek met de studenten kwam naar voren dat didactische bijscholing en bijscholing taalvaardigheid docenten meer aandacht behoeft.

3

3

NB NB

NB Dit zou bijvoorbeeld kunnen blijken uit: Lijstje tutoren, spelregels tutoraat en studiebegeleiding

3

TOEGANKELIJKHEID Adequate maatregelen NB SCHIB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen tgv Bijvoorbeeld: Verslaglegging bijeenkomsten 4 functioneren veldadviesraad zodra die geweest zijn ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden 5.1 – 5.2 en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt.


44

Std

(Deel)onderwerp

Document

5.1

Beschrijving van onderwijsorganisatie faculteit Beschrijving van onderwijsorganisatie opleidingen

26

2

26

2

5.2

Toelichting

Oordeel

Rapportage Auditcommissie Overzicht documenten FBW def – auditdatum 20120213 Code Bestandsnaam

45

Inhoud Algemeen facultair Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 FBW Check&Act list.docx Check-&Actlist; De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan 2011_FBW.pdf Facultair verbeterplan; Idem Bovendien is het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg dikwijls onduidelijk. 02 02 TSOBinput 2e PO FBW 20110711.docx Input kwaliteitszorg 2e PO; Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten 03 03 Conceptverslag 2e PO FBW 11 juli 2011.doc (concept) Verslag 2e PO; Verslag van het gehele PO. Het gaat met name over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 achtmaandsrapportage fbw 2011.pdf 8-maandsrapportage; voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 jaarplan 2012 fbw.pdf Jaarplan 2012 faculteit; 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 TSOB-input 3e PO FBW.docx Input 3e PO; 2 A4tjes TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 Verslag 3e PO FBW 2 november 2011.doc Concept verslag 3e PO; Verslag over het gehele PO. Realisatie instellingsplan, invoering richtlijn PCU 08 08 PID fbw.doc Project Identificatie Document (concept);Definitieve versies van PID per 1 maart 2012 Algemeen kwaliteit en kwaliteitszorg 09 09 20111128 FBW Waarderingen bij de meest recente accreditatiewaarderingen.xlsx opleidingsaccreditaties, van NVAO site 10 10 NSE 2011 rapportage en overzicht FBW.pdf NSE 2011, interne VU rapportage vanaf Intranet 11 onderwijsbeleidsplan FBW.pdf Onderwijsbeleid, visie, doelen, organisatie en verantwoordelijkheden januari 2012 (laatste paragraaf 5 over interne kwaliteitszorg ontbrak in de eerder toegezonden versie) 12 Beleidsplan Internationalisering.pdf Doelen, betrokkenen en taken 13 tabel_streefdoelen FBW.pdf Streefdoelen interne kwaliteitszorg per kwaliteitsaspect omschreven plus frequentie en verantwoordelijkheden 14 evaluatieplan FBW.pdf Januari 2012


46

15 kalender evaluatieplan.docx Kalender volgens WIKZ De twee opleidingen: B Bewegingswetenschappen en M Human Movement Sciences: Sport, Exercise and Health 16 eindtermen_leerdoelen_werkvormen_toetsvor Overzicht hoe in de onderdelen van het men_Ba.docx programma gewerkt wordt aan het realiseren van de 16 eindtermen van het programma 17 eindtermen_leerdoelen_werkvormen_toetsvor Idem voor de 21(?) eindtermen van de master men_Ma.docx Studenten en studiebegeleiding 18 Beleidsnotitiestudiebegeleiding.pdf Uit 2010, doelstellingen, BSA, bijzondere groepen (pagina 9) Opleidingscommissie en examencommissie 19 Bacheloropleidingscommissie Jaarverslag 2010- Feitelijk verslag. Geen zelfevaluatie, noch 2011.pdf aparte actie of adviespunten 20 Bachelor_jaarplan_2011-2012_def.docx Werkplan voor kalenderjaar 2012 21 Masteropleidingscommissie Jaarverslag 2010Idem baOC verslag, zij het explicieter in de 2011.pdf adviezen 22 Master_jaarplan_2011-2012_def.docx Werkplan voor kalenderjaar 2012 23 toetsbeleid FBW.pdf 24 Jaarverslag Examencommissie 2010-2011.pdf Feitelijk verslag; kloppen de taken en verantwoordelijkhden nog wel? (pagina 3/4) Faculteitsbestuur en organisatie 25 realisatie_VUvisie_FBWonderwijs.docx Datering en status van stuk niet aangegeven. Niet duidelijk hoe belegd 26 onderwijsorganisatieFBW.pdf Nagekomen na vorig overzicht 27 FBW Meerjarenplan 2012-2016.pdf 28 Examencie_jaarplan_2011-2012.docx


47

Bezoek Interne Auditcommissie Faculteit der Bewegingswetenschappen Datum Tijd Plaats Doel Opleidingen and Health

: 13-02-2012 : 13:00-17:00 uur : G602 (bestuurskamer, 6e verdieping MF) : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Beweginswtenschappen en M-Human Movement Sciences: Sport, Exercise

=======================================================

Leden interne audit-commissie: Prof.dr. A.P. Hollander, voorzitter; Drs. E.J. Kok, secretaris; R.H. van Nie, RE, RA (Accountantsdienst VU); Prof.dr. H.A. Verhoef; Dr. E. Vester; Sybren van Dokkum, studentlid Tijdschema bezoek: 31-01-2012 13:00-13:45 13:45-14:30

14:30-15:00 15:00-15:30 15:30-16:15

16:15-17:00

Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteitszor gmedewerker Studentvertegenwoordiging:

Spreekuur voor docenten en studenten Pauze / Commissieberaad Examencommissie(s) en Opleidingscommissies


Namen gesprekspartners Dr. Kirsten Bijker (onderwijsdirecteur) Annemarie Baaijens, MSc (onderwijscoördinator) FSR Anne Spitse (voorzitter FSR) OLC’s Leontien Leijdekkers (studentlid Ba-opleidingscie) Hester van Donkersgoed (studentlid Ma-opleidingscie) Miek de Dreu (studentlid RM-opleidingscie) Bekendgemaakt via mail en nieuwsbrief

Prof. dr. Jaap van Dieën (voorzitter examencie) Prof. dr. DirkJan Veeger (voorzitter Ba-opleidingscie) Prof. dr. Thomas Janssen (voorzitter Ma-opleidingscie) Prof. dr. ir. Dick Stegeman (voorzitter RM-opleidingscie) Prof. dr. Peter Beek (decaan, portefeuillehouder onderzoek) Prof. dr. Jeroen Smeets (portefeuillehouder onderwijs) [directeur bedrijfsvoering kan i.v.m. ziekte niet aanwezig zijn]


48

Bijlage IV-C VERSLAG Interne facultaire audit Economische Wetenschappen en Bedrijfskunde, 19 maart 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 49 – 52), de documentenlijst (pagina 53 - 56) en het bezoekschema (pagina 57). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van de Faculteit der Economische Wetenschappen en Bedrijfskunde en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Economie en Bedrijfseconomie en de master Accounting and Control. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De kwaliteitszorg voor het onderwijs lijkt wat ontregeld. Dit wordt mede veroorzaakt door de grootte en complexiteit van het onderwijsaanbod. Het volledig vernieuwen van de opleidingscommissies heeft een goede kwaliteitszorg niet bevorderd. Kwaliteitscultuur: Zowel de faculteit als geheel, als de afdelingen en opleidingen die eronder vallen stellen zich teveel als een eiland op. Dat wil niet zeggen dat er geen individuele of groepsgewiize kwaliteit geleverd wordt, wel dat een algemene (met de universiteit gedeelde) kwaliteitscultuur ontbreekt. Best practice: verslag studieadviseurs (stuk nr 15)


49

Ingevuld auditkader FEWEB, bezoek 19 maart 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 08, 16, p.23, Strategienota aanwezig, maar samenhangende 3 kwaliteit(scultuur) mail 06/1-3 onderwijsvisie daarin niet aangetroffen 3 08, 16, p.23, IP en profiel: referentie aan VU-kernwaarden in 3, Visie sluit aan op IP en mail 06/1-3, extra doelstellingen afdelingen, geen uitgewerkte profiel. Concreet: de mail 03/1-2 visie elders, wel verwijzing naar en uitwerking van kernwaarden activerend onderwijs (08, 16, p.23) verantwoordelijk, open en persoonlijk komen terug. NB Visie bevordert betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van haar EVALUATIEBELEID onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, 2.1 - 2.6 personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 3 08 Geen duidelijke documentatie over verhoging Adequaat beleid mbt BA: mail 03/1-2 studierendement, streefdoelen en Streefdoelen gerelateerd kosteneffectiviteit, muv van BSA-invoering aan verhogen kwaliteit, Stukken bij de mail dateren van 2001 en 2002 en verhogen studierendement, lijken niet af. verhogen kosteneffectiviteit. (zie IP) Her en der opmerkingen, geen samenhangend 3 05, H1 en Adequaat beleid mbt MA: beleidsplan H2b; Streefdoelen gericht op mail 06/1-3 instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 3 Stukken blijven beperkt tot problemen rond digitaal 05, H2d; Adequaat beleid mbt afnemen evaluaties, maar er is geen evaluatieplan of 12, onderwijsevaluatie –procedure, welvoornemens 13 (conform de eisen in [3 omdat in het gesprek gezegd is dat er wel actie is, Handboek hoofdstukken maar er zijn nog geen schriftelijke bewijzen] Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 2 Adequaat beleid Toetsen en 16 pag 24 Zgn “gele kaart”, bevat duidelijke facultaire ev beoordelen (conform het richtlijnen mail 10 overeenkomstig Handboekhoofdstuk par 3.1) mail 02/1-3 De stukken bij mail 2 bevatten geen facultair beleid. PERSONEELSBELEID mail 07/1 Bevat de tenure track voorwaarden 4 Adequaat beleid mbt Verder geen documentatie aangetroffen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1)

1.1 1.2

1.3

2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

Document

Toelichting

Oordeel


50

Std

(Deel)onderwerp

Document

Toelichting

2.2b

Adequaat beleid mbt BKO (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid

--

Geen documentatie over aangetroffen (toch 3 omdat vermoedt wordt dat dergelijk beleid er wel is)

3

---

Geen documentatie over aangetroffen Geen documentatie over aangetroffen

4 4

mail 06/1-3

Als onderwerp genoemd in strategic plan, geen beleid aangetroffen

3

Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1)

16 pag 35 ev 23 pag 31 ev mail 16/03

2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

Oordeel

3 Niet duidelijk in hoeverre de actielijst tutoraat daadwerkelijk tot beleid is gemaakt

TOEGANKELIJKHEID Adequaat beleid voor -Geen documentatie over aangetroffen 4 studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK 4 -Geen documentatie aangetroffen. (het stuk mail 04 Adequaat beleid mbt betreft de invulling van een practicum academische verankering onderzoek dmv vaardigheden) docenteninzet -idem 4 Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt 16 pag 43 is in opbouw 3 veldadviesraad en alumni mail 12, 15 ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar 3.1 – 3.6 opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Zicht op realisatie in BA van 17-22 De voorbeelden in de documentatie geven geen blijk 4 streefdoelen mede gericht van systematisch zicht op realisatie van blijk van op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 4 Idem Zicht op realisatie in MA van 24-28 mail 18 De stukken uit mail 18 laten zien hoe middels het streefdoelen mede gericht zgn “matrix overleg” sturing en zicht op de op instroom vergroten, ook (deeltijdvariant) master en het de postinitiële internationaal, verscherpte onderwijs gehouden wordt. Zicht op realisatie van toelatingseisen, streefdoelen aangaande de geaccrediteerde master Amsterdamse (vt en dt) blijkt er niet uit. samenwerking 3 12, 13 De stukken zijn tamelijk oud, de verwachting is dat Zicht op realisatie van er zowel qua beleid (zie ook 2.1c) als resultaten evaluatiekwaliteit zoals inmiddels rapportage eenvoudig beschikbaar kan beoogd worden gemaakt


51

Std

(Deel)onderwerp

Document

Toelichting

3.1d

Zicht op realisatie van kwaliteit Toetsen en beoordelen

29 mail 09/1-6

Het jaarverslag bevat geen informatie over de beoordeelde kwaliteit van toetsen of naleving van de regels in de “gele kaart”. Verslag over de pilot ontbreekt nog.

3.2 3.2a

PERSONEEL Zicht op realisatie van NB formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO mail 08/1-4 De faculteit heeft zicht op welke docenten welke 2 beleid professionaliseringscursus gevolgd heeft. VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid NB Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van 15 Duidelijke rapportage, dat aanknopingspunten geeft 2 studiebegeleiding voor vervolgmaatregelen TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK NB BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. NB MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van 16 pag 43 4 betrokkenheid mail 12, 15 veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS NB Adequate maatregelen in BA: verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit.

3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

Oordeel

3


52

Std

(Deel)onderwerp

4.1b

Adequate maatregelen in MA: NB Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Tegelijk met het documenteren van evaluatiebeleid, 4 Adequate maatregelen op het zicht op resultaten wordt een plan verwacht hoe terrein van onderwijsevaluatie vanaf 2013 maatregelen te effectueren en -beleid Adequate maatregelen tav Mail Uitsluitend voorbeelden, geen indicatie van 4 toetsen en beoordelen 09/1-6 maatregelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen Geen maatregelen aangetroffen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav ICT NB Adequate maatregelen tav Geen documentatie aangetroffen over vervolg op 3 studiebegeleiding rapportage in document nr 15 TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen tgv NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met betrekking ORGANISATIE tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden en 5.1 – 5.2 verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 14 Het document is wording en behoeft verbetering op 3 onderwijsorganisatie inzichtelijkheid, precisie (ook in naamgeving van faculteit opleidingen), duidelijkheid (ook in terminologie). 3 -Aansluitend op stuk nr 14 uit te werken. Beschrijving van De positionering van het matrix overleg tov FB, onderwijsorganisatie mastercommissie Accountancy& Control, opleidingen opleidingscommissie MAC ontbreekt bijvoorbeeld (zie ook 3.1b)

4.1c

4.1d 4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6 4.6a 5

5.1

5.2

Document

Toelichting

Oordeel

Rapportage Auditcommissie Documenten overzicht FEWEB

53

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 FEWEB Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan Idem. 2011_FEWEB.pdf Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 TSOB input 2e PO FEWEB Met instemming van faculteit afgeleide lijst van “smart” 20110627.docx geformuleerde actie punten 03 03 20110627_Conceptverslag Verslag van het gehele PO. Het gaat met name over punt 4, 2e PO FEWEB.doc (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 8-maandsrapportage voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 2700 Jaarplan 2012 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – FEWEB_incl progn-11.pdf onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 Input 3e PO TSOB input, tijd voor afstemmen met faculteit ontbrak e 07 07 Concept verslag 3 PO Verslag over het gehele PO. Realisatie instellingsplan, invoering richtlijn PCU 08 08 Conceptplan PCU FEWEB Definitieve versies van PID per 1 maart 2012 1.4.doc Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht .pdf 11 11 20111128 Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Opgestuurd door faculteit 12 12 digitaal evalueren MEMO.pdf Datum ws juli 2007 13 13 digitaal evalueren procedure.pdf Status van het stuk? 14 14 OPLEIDINGSORGANISATIE FEWEB (2).doc 15 15 Jaarverslag studieadviseurs FEWEB 2010-2011.pdf 16 16 FEWEB Bachelor Economie (augustus2009).pdf 17 17 voorbeeld agenda OLC Economie en bedrijfseconomie.doc Datum? 18 18 Evaluatie werkvormen OLC Economie en bedrijfseconomie.doc 19 19 OC rapport derde jaar economie&bedrijfseconomie.doc 20 20 Voorbeeld klacht individuele student aan OLC Economie en bedrijfseconomie.doc 21 21 Economie&Bedrijfseconomie_Notulen opleidingscommissie 2de bijeenkomst 6 februari 2012.docx 22 22 ADVIESOLCBachEconenBedrijfseconaanFaculteitsbestuur.pdf Wat gebeurt ermee? 23 23 FEWEB Master Zelfstudie Accounting (Engels 15-9-09).pdf 24 24 Evaluation_Report_2009-2010_Master Accounting & Control.doc 25 25 Year report PC MAC 2010-2011.doc 26 26 Notulen 1e vergadering Accounting&Control.pdf Datum ws nov 2011

Rapportage Auditcommissie 27 27 Notulen 12 januari 2012 Opleidingscommissie Master Accounting and Control-1.docx 28 28 Advies OC Accounting en Control def(1).doc 29 29 Jaarverslag ECO 2010-2011 .doc

54

Datum? Wat gebeurt ermee?

Overzicht van de door FEWEB nagezonden mails met het aantal bijlagen. In deze bijlage is niet het volledige overzicht, zoals teruggerapporteerd aan de faculteit opgenomen. Hieronder worden alle items samengevat weergegeven, met weglaten van informatie over personen die in dit kader niet relevant is. Het aantal in de meest rechter kolom staat voor het aantal bijlagen bij de betreffende mail. nr 1

2

3

Onderwerp mail jaarverslag en jaarverslag opleidingscommissie instructies decaan inzake taken examencommissie. wetswijziging WHW en toetsbeleid oorspronkelijke visiedocument BSc EBE

Tekst Bijlagen bevatten opzet jaarverslag en voorbeeldverslag (van STREEM) van een opleidingscommissie dat daar onderdeel van uit maakt.

#bijl 3

In het gesprek met het bestuur kwam aan de orde dat de decaan de examencommissies “geïnstrueerd” had. De vraag was waar hij deze instructies op baseerde. Dat is op de documenten in de bijlage, en als vervolg op de door de examencommissie zelf ingezette weg naar veranderde taakopvatting.

3

Het betreft de oorspronkelijke visie op onderwijs waarmee de opleiding BSc Economie en bedrijfseconomie is opgezet.

2

Kernwoorden zijn: Brede basis van de economie, dus zowel algemene economie zoals micro- en macro, als bedrijfseconomie zoals marketing, accounting, organisatie, IT etc. Want studenten kunnen op hun 18e nog niet kiezen Geïntegreerd aanbieden om samenhang te laten zien: dus 4 vakken afgestemd in een periode Activerend onderwijs, dus naast de hoorcolleges kleine groepen waarin opdrachten verstrekt en uitgevoerd moeten worden. Ook herhaling hoort hierbij: elk vak wordt in jaar 1 en 2 aangeboden om de stof terug te laten komen: dus 2x3 punten micro in jaar 1 en 3 punten micro in jaar 2. Anders vergeten ze het maar. Verworven kennis kunnen toepassen, en vaardigheden ontwikkelen. Zie als voorbeeld de studiewijzer in separate mail over verankering onderzoek in onderwijs Dat toepassen en vaardigheden ontwikkelen gaat aan de hand van thema's, waarbij studenten een werkstuk schrijven olv een onderzoeker. Thema's waaruit studenten kunnen kiezen zijn de onderwerpen waarop de onderzoeker onderzoek doet. Dit gebeurt in jaar 1 en 2 in de practicumperiodes in januari en juni, in het derde jaar in het werkcollege en de scriptie.

4

verankering onderzoek in onderwijs &

En tot slot: economie gaat over verdelen. Als je wilt verdelen, hoort daarbij altijd je eigen opvatting van eerlijk delen. Dus wordt aandacht besteed aan ethiek, je moet op je eigen handelen kunnen reflecteren, maar ook aan ontwikkelingseconomie, milieueconomie etc. Voorbeeld verankering onderzoek in onderwijs. Maar ook illustratie van toepassing van kennis en ontwikkelen vaardigheden

1


55

toepassing leerstof en vaardigheden OLC Rapportage periode 6 en het verslag voor collegejaar 2010-11

Dit voorbeeld heeft betrekking op de allereerste practicumperiode van de opleiding, in januari van het eerste jaar. Twee voorbeelden van de opleidingscommissie Economie en Bedrijfseconomie: 1: verslag van de studentleden over laatste onderwijsperiode (periode 6) 2: eindverslag collegejaar (dat natuurlijk ook weer als input dient voor volgende olc)

6

facultair strategieplan en uitwerkingen

7

BKO - tenuretrack system

1. samenvatting strategieplan Succes beyond Succes 2011-2014 2. het strategisch plan zelf 3. de stand van zaken omtrent de uitvoering: wat zijn de concrete doelen, in welk stadium van voltooing zijn deze en welke zijn al bereikt. In het tenuretrack system is een eis aan tenuretrackers dat zij de BKO behalen. In de bijlage de beschrijving van het systeem en de daarin opgenomen eis.

8

scholing docenten

5

De eerste drie bijlagen betreffen individuele scholing docent. Wij hebben liever individuele coaching met video en persoonlijke feedback dan een algemene cursus.

2

3

1

4

1. tussenrapportage 2. eindrapportage 3. vervolgscholing

9

10

11

12

toetskwaliteit voorbeelden van analyses

toetskwaliteit Instructies van examencommssie aan examinatoren (zgn gele kaart) voorlichting opleidingscommissie s 2011-2012

Alumni

Bijlage 4 is een excelsheet met meerdere tabbladen, met daarin alle scholingsactiviteiten van Feweb docenten. Ook hier geldt dat we ze liever gericht naar een cursus sturen dan een hele opleiding laten volgen. De hoeveelheid scholing is behoorlijk. In de bijlagen een aantal voorbeelden uit de pilot toetskwaliteit, uitgevoerd door de examencommissie, waarin zowel de betrouwbaarheid van de toets als de mate waarin leerdoelen van het vak getoetst worden, gecontroleerd zijn. Dus zowel en kwalitatieve als kwantitatieve analyse De pilot heeft intussen opgeleverd dat er een toetscommissie is ingesteld, die volgens deze werkwijze structureel de kwaliteit controleert en borgt. De ‘gele kaart’ waarop in placemat vorm de instructie aan docenten is vormgegeven mbt toetskwaliteit

In de bijlage een deel van de Voorlichting die de FEWEB begin elk jaar geeft aan nieuwe student-leden van de Opleidingscommissies in ppt vorm. In de bijgeleverde mail worden docenten daarover geïnformeerd. Voorzitters van de OLC hebben daarnaast mondeling een overdracht gehad van de vorige voorzitter (uit 2009-2010). De bijlagen bij deze mail bevatten gegevens over de inspanningen mbt alumnibeleid Bijgeleverde stukken: 1) mail verstuurd aan alumni in januari 2012 2) mail verstuurd aan alumni mei 2010. 3) uit het bestand respondenten januari 2012 de alumni die een stageplaats aanbieden aan Feweb. Deze alumni worden vervolgens benaderd door ons om e.e.a te effecturen. Stages worden beheerd door het stagebureau en vermeld op de website van de studievereniging Aureus. 4) het aantal respondenten uit januari 2010. Dit was de eerste keer dat een nieuw bestand werd opgebouwd, het percentage van 19% is dus eigenlijk

6

1

2

7


56

hoger, omdat het bestand erg vervuild was 5) Tenslotte driemaal het alumnimagazine dat FEWEB aan alle alumni toestuurt. Dit magazine, Vuurwerk, wordt tweemaal per jaar uitgegeven, eenmaal digitaal en eenmaal in papieren vorm. De laatste (digitale) editie bevat overigens ook gegevens over loopbaanonderzoek, dat door een Feweb aio wordt uitgevoerd, en waar wij natuurlijk dankbaar gebruik van maken. Voor voorbeeld Vuurwerk digitaal: zie http://www.feweb.vu.nl/nl/over-de-faculteit/relatie-

magazine/vuurwerk-nieuwsbrief/2011-juni/index.asp 13

14

MSc Accounting gerealiseerde actiepunten MSc Accounting adviesraad + eindtermenanalyse + onderzoek in onderwijs

Plus een voorbeeld ingevulde alumnienquete In de bijlage een voorbeeld van het laatste stadium van actiepuntenrealisatie, in dit geval een uitklapbare folder voor deeltijdstudenten accountancy.

2

Toelichting In de zip file drie folders:

1+ 1zip

De folder “Adviesraad” bevat stukken en verslag voor eerste bijeenkomst met adviesraad MSc Accounting & Control De folder “eindtermenanalyse” bevat het werkdocument met de gedetailleerde analyses van de huidige opleidingen in het licht van de landelijke eindtermen van de CEA (Commissie Eindtermen Accountantsopleiding). Dit document is bedoeld als input voor de lopende ronde van herziening van de bachelor-, master- en postgraduate opleidingen voor zover betrekking hebbend op het opleidingstraject voor registeraccountants.

15 16 18

adviesraad overig plannen wijziging tutoraat aanvulling materiaal audit MSc Accounting & Control

De folder “ARCA rapportage” bevat recente jaarverslagen van ARCA (Amsterdam Research Centre in Accounting). Met deze documenten wordt verslag uitgebracht aan de postgraduate opleidingen en hun curatoria over de inzet van onderzoeksmiddelen die vanuit deze opleiding worden gegenereerd, en mede aan de hand hiervan wordt het gesprek gevoerd over de vraag hoe het lopende onderzoek ten goede komt aan het onderwijs. In de bijlagen verslagen en bevindingen adviesraden overige opleidingen In de bijlagen een korte evaluatie tutoraat, en een voorstel tot bijstelling op basis van ervaringen en inzichten opgedaan in BKO-opleiding.

Voor wat betreft de onderdelen 3 en 4 uit het auditkader (zicht op resultaten, maatregelen) is het wellicht nuttig om te weten dat in de praktijk van onze opleiding (deeltijdmaster gecombineerd met PGO accountancy) veel zaken op deze terreinen besproken worden in ons zogenaamde matrix-overleg dat periodiek gehouden wordt tussen de de leiding van de MSc Accounting & Control, de leiding van de PGO Accountancy en het secretariaat van de opleiding Accountancy, dat een belangrijk deel van de uitvoerende werkzaamheden rond de deeltijdmaster uitvoert. Bijgevoegd zijn de notulen van het overleg van de laatste jaren. Tevens een copie van de zelfstudie van de PGO Accountancy van afgelopen april (2011) waarin de positie van dit overleg wordt geschetst.

7 3 2


57

Bezoek Interne Auditcommissie Faculteit der Economische Wetenschappen en Bedrijfskunde Datum Tijd Plaats Doel Opleidingen

: 19-03-2012 : 13:00-17:00 uur : 2D-07 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Economie en Bedrijfseconomie en M-Accounting en Control

=======================================================

Leden interne audit-commissie: Prof.dr. Peter Hollander (voorzitter); Drs. Eveline. Kok ( secretaris); Rob van Nie, RE, RA (Accountantsdienst VU); Prof.dr. Herman Verhoef; Dr. Elseline Vester; Sybren van Dokkum (studentlid); Floor Elsenburg MSc (notuliste) Tijdschema bezoek: 19-03-2012 13:00-13:45


13:45-14:30

Studentvertegenwoordiging

14:30-15:00


Advertentie op FEWEB-website, VU-net; emailbericht FEWEB staf


Prof. dr. Harmen Verbruggen, Drs. Frans Snijders, Drs. Rob de Crom

15:00-15:30 15:30-16:15

16:15-17:00

Namen gesprekspartners Prof.dr. Tom Groot (Accounting&Control), Prof.dr. Henri de Groot (Economie&Bedrijfseconomie), Prof . dr. Kees Camfermann (Accounting&Control), Drs. Rob de Crom, Drs. Irina Souch, Leo Paas (BSc Economie) en G.P. Melker (BSc Economie) FRS: Anieke Lamers, Sylvia de Jong, Nicolai Goetheer. Economie&Bedrijfseconomie: Erik van der Heijden, Mostafa Mohseni. Accounting&Control: Zoëlle Ava Yusufi

Opleidingscommissie Economie&Bedrijfseconomie: Dr. Tjerk Budding, Dr. Jacob Jordaan, Dr. Koos Sneek. Opleidingscommissie Accounting&Control:Mr. Annelies Brink -van der Meer. Examencommissie: Dr. Jan Rouwendal, Drs. Sabine van Vugt (secretaris).


58

Bijlage IV-D VERSLAG Interne facultaire audit Faculteit der Exacte Wetenschappen, 27 februari 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 59 – 62), de documentenlijst (pagina 63 en 64) en het bezoekschema (pagina 65). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus binnen de Faculteit der Exacte Wetenschappen en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Scheikunde en master Mathematics. Uitgangspunt daarbij is dat de bevindingen binnen de faculteit te generaliseren zijn naar de andere opleidingen. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: Het faculteitsbestuur heeft aandacht voor de structurele aspecten van kwaliteitszorg. Het uitbouwen van de goede basis op cursusniveau tot een systeem van integrale kwaliteitszorg voor de opleidingen is weliswaar opgepakt, maar zou met een groter gevoel van urgentie doorgevoerd kunnen worden. Kwaliteitscultuur: De commissie heeft de indruk dat de kwaliteitscultuur op “de werkvloer” wel leeft. Voorbeelden daarvan zijn o.a.: intervisie en eerstejaarsdocententeams. Structurele benadering van de kwaliteitszorg behoeft aandacht. Best practice: De aanpak in het project studie-succes (document nr 23-5)


59

Ingevuld auditkader FEW, bezoek dd 27 februari 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 05, 08 2 kwaliteit(scultuur) Visie sluit aan op IP en profiel. 05, 08 Aansluiting op het IP ontbreekt nog 4 Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert Geen documentatie aangetroffen 4 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 2 05 Adequaat beleid mbt BA: Streefdoelen gerelateerd aan 08/p. 7 verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 2 05/p. 9 Adequaat beleid mbt MA: 33, 34 Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 3 24 Cie neemt aan dat kwaliteitszorgplan Adequaat beleid mbt conform concept wordt vastgesteld. onderwijsevaluatie (conform Geen volledige documentatie mbt. Stage de eisen in Handboek en scriptie aangetroffen hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 Adequaat beleid Toetsen en 24 Betreft slechts een aanzet 3 beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID Adequaat beleid mbt 05/ p. 15 Aandeel van het onderwijs is heel 4 formatieplanning, ev summier uitgewerkt taaktoedeling, werving, 33, 34 benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO 05/ p. 17 2

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2 3.2a

(Deel)onderwerp

60 Document

Toelichting

Oordeel

(Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid Geen documentatie aangetroffen 3 27, 28 Beleid terzake wordt in samenwerking 2 Adequaat beleid mbt met centraal opgepakt. onderwijsruimten en studieplekken Adequaat ICT beleid 27,28 Idem 2 Onvoldoende uitgewerkt 3 05/ p. 9p. Adequaat beleid mbt studiebegeleiding (Handboek 12/ p 4 hoofdstuk studentbegeleiding 12 par 3.1) TOEGANKELIJKHEID Geen informatie over aangetroffen 4 Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK idem 4 Adequaat beleid mbt verankering onderzoek dmv docenteninzet idem 4 Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt 12/par idem 3 veldadviesraad en alumni 2.1.4 ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 25 Geeft onvoldoende informatie, bijv. geen 3 Zicht op realisatie in BA van gegevens over rendement streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Zicht op realisatie in MA van Geen informatie beschikbaar (behalve de 3 streefdoelen mede gericht op informatie uit stuk nr 09) instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 25 Betreft uitsluitend bachelor-onderwijs 3 Zicht op realisatie van evaluatiekwaliteit zoals beoogd Zicht op realisatie van 15 Gerealiseerde kwaliteit krijgt slechts 4 kwaliteit Toetsen en uiterst beperkte aandacht beoordelen PERSONEEL 05, 17 Geen zicht op aandeel “onderwijs” in het 3 Zicht op realisatie van jaargesprek formatieplanning, taaktoedeling, werving,


3.2b 3.3 3.3a 3.3b

3.3c 3.3d

3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

4.1b

4.1c

4.1d

(Deel)onderwerp

benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO beleid VOORZIENINGEN Zicht op resultaten van bibliotheekbeleid Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT Zicht op resultaten van studiebegeleiding

61 Document

Toelichting

05b/H6

30, 31

Oordeel

2

Centrale regie buiten competenties van faculteit Idem

NB

Idem De faculteit maakt graag gebruik van de centraal verschafte informatie in dit rapport. Nuttig om ook eigen maatregelen op te baseren.

NB 2

NB

TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK NB BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. NB MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED NB Zicht op resultaten van betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 2 Adequate maatregelen in BA: 05 verhogen kwaliteit, verhogen 12 23 studierendement, verhogen kosteneffectiviteit. Documentatie onvolledig 3 Adequate maatregelen in MA: 05 12 Instroom vergroten, ook 33, 34 internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Panelgesprekken (volgens gesprek met de 3 Adequate maatregelen op het 12/p. 2 studenten). Documentatie ontbreekt terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav 15 Slechts zeer summiere documentatie, 3 toetsen en beoordelen maatregelen wel bevestigd in gesprek met


(Deel)onderwerp

62 Document

Toelichting

Oordeel

Examencie 4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1

5.2

PERSONEEL Geen documentatie beschikbaar 3 Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen 20 Update van de informatie is noodzakelijk 3 professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid Adequate maatregelen tav NB onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav Geen documentatie beschikbaar 3 studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. 3 In organogram zijn opleidingen, Beschrijving van 16 opleidingscommissies en onderwijsorganisatie faculteit 17 examencommissie weinig inzichtelijk 19 Beschrijving van 16 Idem 3 onderwijsorganisatie 17 opleidingen 19

Rapportage Auditcommissie Overzicht documenten FEW def – auditdatum 20120227

Code Bestandsnaam

63

Inhoud Algemeen facultair Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 C&A van FEW Check-&Actlist; De manier van invullen en verslaglegging kan per faculteit verschillen, FEW heeft een totaal overzicht toegevoegd 01 01 Verbeterplan 2011_FEW.pdf Facultair verbeterplan; Idem Bovendien is het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg dikwijls onduidelijk. 02 02 TSOB input 2e PO FEW Input kwaliteitszorg 2e PO; Met instemming van faculteit 20110713.docx afgeleide lijst van “smart” geformuleerde actie punten 03 03 2800 Conceptverslag 2e PO 13 07 (concept) Verslag 2e PO; Verslag van het gehele PO. Het 2011.doc gaat met name over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 2800 achtmaands 2011.xls 8-maandsrapportage; voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05a 2800 Jaarplan2012_FEW def.pdf Jaarplan 2012 faculteit; FEW heeft de tekst en het format met de KPI’s in twee aparte stukken gezet 05b FORMAT 2800 Jaarplan 2012 (2).pdf 06 06 TSOBinput 3e PO FEW.docx Input 3e PO; 2 A4tjes TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 2800 FEW verslag PO 02 11 Concept verslag 3e PO; Verslag over het gehele PO. 2011.docx 08 08 PID_FEW H4 versie 1 december Concept PID gemaakt op verzoek van PCU 2011.docx 09 09 Bron onderwijs FEW ba sch en ma In- en doorstroom gegevens maths 2011.pdf 10 10 NSE 2011 FEW rapportage en overzicht.pdf 11 11 20111128 FEW Overzicht Oordelen overgenomen uit QANU rapportages, veelal niet accreditatiewaarderingen.xlsx recent, zie ook kolom accreditatie datum Door faculteit op verzoek toegestuurd 12 kwaliteitszorgplan FEW 2011-2012 _concept versie FB_.pdf 13 Jaarverslag OLC's FEW 2010-2011 _20120217_.pdf 14 Jaarverslag OLC Wiskunde 20102011.pdf 15 Jaarverslag examencommissie FEW 2010-2011 _concept versie_ivs2-tbkvh1.pdf 16 Organogram FEW-1.jpg 17 Organogram FEW-2.xlsx 18 Jaaroverzicht-OLC-Scheikunde-


64

2011.pdf 19

20 21

22

23 24

25

26 27 28 30 31 33 34

Door faculteit op verzoek toegestuurd, met facultaire toelichting 19-1 Few-Reglement17aug2009def Faculteitsreglement; de onderwijsstructuur van de met bijlagen.pdf faculteit, zoals beknopt weergegeven in het organogram, is gebaseerd of dit Faculteitsreglement vastgesteld in 2009. In het reglement zijn de taken van de onderwijsdirectie, de onderwijsdirecteur en de opleidingsdirecteuren duidelijk omschreven (paragraaf 2.2.; bijlagen 2 en 3) , alsmede de taken van de opleidingscommissies (paragraaf 3.1) en de examencommissie (paragraaf 3.2). 20-2 Beleid professionalisering Beleid professionalisering docenten FEW; januari 2008. In docenten FEW_jan08.pdf dit document is het facultaire beleid rond BKO vastgelegd. 21-3 Vak- en Vak- en curriculumevaluaties; oktober 2007. Dit is als curriculumevaluaties.pdf facultair kwaliteitszorgplan vastgesteld en op het facultaire intranet geplaatst. Alle docenten zijn per mail van dit beleid op de hoogte gesteld. 22- 4 Handleiding Toetsen en Handleiding toetsen en beoordelen; oktober 2007. Dit is als Beoordelen.pdf facultair kwaliteitszorgplan vastgesteld en op het facultaire intranet geplaatst. Alle docenten zijn per mail van dit beleid op de hoogte gesteld. 23-5 Tussentijds verslag EMP-project Tussenrapportage project Studiesucces; maart 2011. FEW.pdf 24-6 Aanzet Toetsbeleid FEW_jan Aanzet Toetsbeleid FEW; besproken in de 2010 Examencommissie.pdf Examencommissie; definitieve vaststelling volgt zodra universitaire toetsbeleid is vastgesteld en dit facultaire toetsbeleid daaraan getoetst is. 25-7 Bachelorevaluatie FEW.pdf Evaluatie Bachelorfase; meest recente rapportage; als voorbeeld van extra input van gegevens in de kwaliteitscyclus. Door faculteit nagezonden na ontvangst van de conceptrapportage 26 01 plan (her)inrichting MC versie 3.pdf 27 02a ICT voorzieningen onderwijs 2011-2012 FalW FEW.docx 28 02b Management Samenvatting Project ITO_versie 1 1.docx 30 04a CSL_rapportage VU-breed_definitieve versie december.pdf 31 04b CSL_rapportage FEW_def sept 09.pdf 33 06a procesdocument AGSS versie 140808.pdf 34 06b OpdrachtKwartiermaker.pdf


65

Bezoek Interne Auditcommissie Faculteit der Exacte Wetenschappen Datum Tijd Plaats Doel Opleidingen

: 27-02-2012 : 13:00-17:00 uur : P 423, W&N gebouw : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Scheikunde en M-Mathematics

========================================================

Leden interne audit-commissie: Prof.dr. A.P. Hollander (voorzitter); Drs. E.J. Kok ( secretaris); R.H. van Nie, RE, RA (Accountantsdienst VU); Prof.dr. H.A. Verhoef; Dr. E. Vester; Sybren van Dokkum (studentlid); Drs. F. Elsenburg (notuliste) Tijdschema bezoek: 27-02-2012 13:00-13:45


13:45-14:30


14:30-15:00

Spreekuur voor docenten en studenten

15:00-15:30 15:30-16:15

Pauze / Commissieberaad Examencommissie(s) en Opleidingscommissies

16:15-17:00


Namen gesprekspartners Prof.dr.ir R.V.A. Orru, opleidingsdirecteur S&F Prof.dr. G.J.B. van den Berg, opleidingsdirecteur Wiskunde Ir. J. Vermeer, voorzitter, opleidingsdirecteur FEW Drs. D.A. Temminck Tuinstra, beleidsmedewerker onderwijs FSR-delegatie Boudewijn Brandt (OLC Scheidkunde) A.C.H. Jans (OLC Scheidkunde) G.T. Molenaar (OLC Scheidkunde) N. Moret (student) S.A.M. Ebing (OLC Wiskunde) M.S. Kingma (OLC Wiskunde) N.H.N. van Laarhoven (OLC Wiskunde) Bekend gemaakt via een e-mail aan alle docenten van de opleidingen B-Scheikunde en M-Mathematics. Via een e-mail aan de studenten van betrokken opleidingen. Frederique Lalleman (studentlid OLC Business Analytics) Prof.dr. J. Heringa (Ex.cie.VZ) Dr. Chris Vos (Ex.cie.S&F) Dr. J. Chris Slootweg (Ex.cie. S&F) Dr. Klaas van Harn (Ex.cie.Wis) Prof.dr André Ran (Ex.cie.Wis) Prof.dr. M. Bickelhaupt (OLC Scheikunde) Drs. D.A. Temminck Tuinstra, beleidsmedewerker Onderwijs Mw.drs. D. Schinkelshoek directeur bedrijfsvoering (wegens ziekte afwezig) Ir. J. Vermeer, voorzitter, portefeuillehouder onderwijs Drs. D.A. Temminck Tuinstra, beleidsmedewerker onderwijs


66

Bijlage IV-E

VERSLAG Interne facultaire audit VUmc Geneeskunde, 6 maart 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 67 – 70), de documentenlijst (pagina 71 en 72) en het bezoekschema (pagina 73). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van VUmc en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Geneeskunde en master Geneeskunde. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij VUmc. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: Het bestuur heeft ervoor gezorgd dat het hele proces van kwaliteitszorg ook in formele zin haar beslag heeft gekregen in regels en procedures die helder zijn vastgelegd. Kwaliteitscultuur: Het kwaliteitszorgproces met de bijbehorende regels en procedures heeft consequent de aandacht en lijkt breed, door vele gremia, gedragen te worden. Mede daardoor valt de wat afstandelijke houding van de opleidingscommissie nog wat uit de boot. Best practice: Duidelijke, consequente lijnen door bestuur en OWI in gezamenlijkheid uitgezet en uitgevoerd, met daarbij de bewuste keuze voor fasering in aandachtspunten.


67

Ingevuld auditkader GNK, bezoek dd 6 maart 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar onderwijs 1.1 - 1.3 en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en G6, G13 2 kwaliteit(scultuur) G26 2 G6, G13 Gebaseerd op community of learners; Visie sluit aan op IP en profiel. terminologie uit huidige instellingsplan is nog niet Concreet: de kernwaarden overgenomen. verantwoordelijk, open en persoonlijk komen terug. Visie bevordert betrokkenheid G6 2 en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van haar EVALUATIEBELEID onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van onderwijs, 2.1 - 2.6 personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID G1, Bijlage 1, 2 Adequaat beleid mbt BA: G14 Streefdoelen gerelateerd aan verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) G1, Bijlage 1, 2 Adequaat beleid mbt MA: G14 Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) Adequaat beleid mbt G6, hfdst 3 Kwaliteitszorg op orde 2 onderwijsevaluatie (conform de G27 eisen in Handboek hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 Adequaat beleid Toetsen en G7 2 beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID Adequaat beleid mbt G28 2 formatieplanning, G8 taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) G1, Bijlage 1, 2 Adequaat beleid mbt BKO G9 (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3)

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


68

Std

(Deel)onderwerp

Document

Toelichting

2.3 2.3a

VOORZIENINGEN Adequaat bibliotheekbeleid

G30

2.3b

Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Adequaat beleid mbt verankering onderzoek dmv docenteninzet

G31

Documentatie betreft doel en samenstelling commissie, verslagen en actiepunten. Beleid ontbreekt nog. Documentatie betreft planning en realisatie bezetting ruimtes in KTC

2.5b

Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm

G13, G15

2.6

VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt G4, G5, G13 Aansluiting bij Raamplan Geneeskunde 2 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs RESULTATEN wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen 3.1 – 3.6 bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Zicht op realisatie in BA van G12, Bijl. 2 Met name het jaarverslag van de 1 streefdoelen mede gericht op G23, examencommissie, mat daarin de verhogen kwaliteit, verhogen G24, studievoortgangsanalyses per cohort is studierendement, verhogen G25 informatief. kosteneffectiviteit. De verslaglegging van evaluaties zijn inclusief verbeteracties. G12, Bijl. 2 idem 1 Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Zicht op realisatie van G23, idem 1 evaluatiekwaliteit zoals beoogd G24 Zicht op realisatie van kwaliteit G12, Bijl. 3 idem 1 Toetsen en beoordelen

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.6a 3

3.1 3.1a

3.1b

3.1c 3.1d

Oordeel

3

3

-G10

Geen documentatie over aangetroffen

3 2

--

Geen documentatie over aangetroffen

4

G13

Relatie onderzoek – onderwijs onvoldoende uitgewerkt. (In het recent verschenen QANU rapport wordt vastgesteld dat veel docenten actieve onderzoekers zijn.) Relatie onderzoek – onderwijs qua onderwijsvorm in de leerlijn Academische Vorming uitgewerkt. Relatie met eigen onderzoek wordt niet expliciet gelegd

3

3


(Deel)onderwerp

3.2 3.2a

PERSONEEL Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO beleid VOORZIENINGEN Zicht op resultaten van bibliotheekbeleid Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT Zicht op resultaten van studiebegeleiding

3.2b 3.3 3.3a 3.3b

3.3c 3.3d

3.4 3.4a 3.5 3.5a

3.5b

3.6 3.6a

TOEGANKELIJKHEID Zicht op realisatie van SCHIB beleid VERANKERING ONDERZOEK BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van betrokkenheid veldadviesraad MAATREGELEN 4.1 – 4.6

4.1 4.1a

ONDERWIJS Adequate maatregelen in BA: verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Adequate maatregelen in MA: Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Adequate maatregelen op het terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav toetsen en beoordelen

4.1c

4.1d

Document

Toelichting

G29

Voorbeelden van agenda’s laten zien dat divisieoverleg gericht is op het krijgen van zicht op realisatie

G1, Bijlage 1, G11

Oordeel

3

2

NB G31

G32

Wat betreft KTC blijkt uit de documentatie zicht op realisatie van bezettingsgraad

Jaarverslag verslaat in de klassieke zin. Koppeling aan het beleid (zie G10) en het vervolgens afleiden van maatregelen ontbreekt nog.

2

NB 2

NB

G26 G33

G26 G33

In de zelfstudie wordt met name bij facet 3, 5 en 10 hierop ingegaan, expliciete koppeling met het eigen onderzoek is er echter niet (zie ook de opmerkingen bij 2.5) idem

3

3

Via Raamplannen Geneeskunde, sterke 2 verwevenheid met de praktijk van de gezondheidszorg De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld.

4

4.1b

69

G20

2

G20, G21, G22

2

G7, G12

2

G7, G12

2


(Deel)onderwerp

4.2 4.2a

PERSONEEL Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav bibliotheekbeleid Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav ICT

4.2b 4.3 4.3a 4.3b

4.3c

4.3d 4.4 4.4a 4.5 4.5a

4.6 4.6a 5

5.1 5.2

70 Document

Toelichting

Oordeel

G26, par 3.3

3

G9

2

NB NB

G20 doet vermoeden dat de score een 2 zou kunnen zijn. Door gebrek aan documentatie bij voorgaande punten 2.3c en 3.3c echter NB

NB

Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen tgv dermate ingebed in beroepsgroep, daarom: nvt functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met betrekking tot ORGANISATIE de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden en 5.1 – 5.2 verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van G6, p 12 2 onderwijsorganisatie faculteit G8 G6, p 12 2 Beschrijving van G8 onderwijsorganisatie opleidingen

Rapportage Auditcommissie Overzicht documenten GNK

71

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 Check-&Actlist De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Facultair verbeterplan Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 Input kwaliteitszorg 2e PO Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten e 03 03 (concept) Verslag 2 PO Verslag van het gehele PO. Het gaat met name over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant Uit facultaire cyclus: 3e portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 8-maandsrapportage voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 Jaarplan 2012 faculteit 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 Input 3e PO TSOB input, tijd voor afstemmen met faculteit ontbrak e 07 07 Concept verslag 3 PO Verslag over het gehele PO. Realisatie instellingsplan, invoering richtlijn PCU 08 08 Project Identificatie Definitieve versies van PID per 1 maart 2012 Document (concept) Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht .pdf 11 11 20111128 Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Opgestuurd door faculteit G1 G1 Managementcontract 2012-2013.pdf G2 G2 missie en visie beschrijving-beleid IOO.pdf G3 G3 Missie, visie, kernwaarden VUmc.doc G4 G4 Bacheloropleiding geneeskunde VUmc- compas.pdf G5 G5 Masteropleiding geneeskunde VUmc-compas.pdf G6 G6 Kwaliteitszorgplan geneeskunde VUmc 2011-2014.pdf G7 G7 Toetsbeleid bachelor-master VUmc-compas.docx G8 G8 Bestuurlijke inrichting VUmc-compas.pdf G9 G9 Procedure Beoordeling BKO.doc G10 G10 Beleidsplan facultaire studiebegeleiding VUmc 2010-2011.doc G11 G11 Overzicht gevolgde BKO per.doc G12 G12 Jaarverslag Examencie Geneeskunde VUmc 2010-2011.pdf G13 G13 Onderwijsconcept VUmc-compas 2011.pdf G14 G14 Jaarplan VUmc SMS 0 3b.pdf Komt overeen met 05 G15 G15 Leerlijn academische vorming.pdf G16 G16 Verslag 12 maands gesprek RvB 2010.pdf G17 G17 Verslag 4 maands gesprek RvB 06 07 2011.pdf Komt overeen met 03


72

G18 G18 Managementrapportage IOO 2011 def kort Sluit aan bij G1 G19 G19 Managementrapportage IOO 2011 8 maands DEF.doc Op verzoek nagezonden door faculteit G20 G20 Opdracht herinrichting DLO Blackboard V3 -IV.rtf G21 G21 Opdracht verbetering onderwijslogistiek masteropleiding .pdf G22 G22 Verbeterplan masterjaar 1 VUmc Compas n a v visitatie 2010.doc G23 G23 Rapportage jaar 1 semester 1.1 2010-2011.doc G24 G24 verslag evaluatiebespreking semester 1 1 d d 1 maart 2011 def..doc G25 G25 Brief OLC 26-04-2011 blz 1 en 2.pdf Na bespreking van concept verslag door faculteit nagezonden Zelfevaluatie VUmc-compas. In hard-copy G26 aangereikt

G27 G27 totaal Selectie uit studiehandleiding.pdf G28 G 28 formatieplanning.xls G29 G 29 MEMO instituut voor onderwijs en opleiden agenda divisies.doc G30 G31 G32 G33

G30 bibliotheek.pdf G31 verschillende KTC stukken.pdf G32 studieadviseurs en studiebegeleiding.pdf G 33 Verantwoording eindtermen VUmccomaps.xls

11 Onderdelen uit studiehandleiding Formatieplanning

2 Voorbeelden divisieoverleg (het tweede: G 29 voorbeeld overzicht divisie bespreking digitaal onleesbaar) 4 Bibliotheek stukken 6 Klinisch Trainingscentrum 2 verslagen

Geel gemarkeerde of doorgehaalde documenten ontbreken bij Geneeskunde en ACTA, want niet opgenomen in de facultaire cyclus van de VU.


73

Bezoek Interne Auditcommissie VUmc Datum Tijd Plaats Amsterdam Doel Opleidingen

: 6 maart 2012 : 10:00 – 14:00uur : KTC, ruimte 6020/6019, polikliniek VUmc, De Boelelaan 1118, 1081 AV : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Geneeskunde en M-Geneeskunde

=======================================================

Leden interne audit-commissie: Prof.dr. A.P. Hollander (voorzitter), Drs. E.J. Kok (secretaris), R.H. van Nie, RE, RA (Accountantsdienst VU), Prof.dr. H.A. Verhoef; Dr. E. Vester; Sybren van Dokkum (studentlid); Floor Elsenburg (notuliste) Tijdschema bezoek: 06-03-2012 10.00-10.45


10.45-11.30


11.30-12.30

Spreekuur voor docenten en studenten Pauze / Commissieberaad Opleidingscommissies en Examencommissie(s)

12.00-12.30 12.30-13.15

13.15-14.00


Namen gesprekspartners Mw Prof. dr. G (Gerda) Croiset (opleidingsdirecteur) Mw Dr. H (Hester) E M Daelmans programmaleider master geneeskunde Prof dr H (Henk) J Groenewegen programmaleider bachelor geneeskunde Mw drs. E(Elise) Baartman, stafmedewerker afdeling Innovatie & kwaliteit Mw S (Souhailla) Abdessalami studentassessor VUmc T (Tom) van Gils (student lid OLC) Mw L (Laurien) Vroomen (student lid OLC) Mw A (Annemiek)Silven (student lid OLC) Via de website: VUmc School of Medical Sciences www.vu.med.nl Prof dr E (Eric) J H Meuleman (voorzitter OLC) Mw drs A (Annemieke) M Tanja- Harfterkamp (lid OLC) Prof dr G (Guy) A M Widdershoven (lid OLC) dr. J (Jean ) G F Bronzwaer (vicevoorzitter/lid EC) dr. S (Scheltus ) J van Luijk (lid EC) Mw Prof. dr. G (Gerda) Croiset (opleidingsdirecteur) Mw. M (Margreeth) C van der Meijde MBA, directeur instituut voor onderwijs en opleiden, vice decaan onderwijs Prof dr W (Wim) A B Stalman lid raad van bestuur/ decaan


74

Bijlage IV-F VERSLAG Interne facultaire audit Faculteit der Godgeleerdheid 13 maart 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde auditkader (pagina 75 78), de documentenlijst (pagina 79) en het bezoekschema (pagina 80) De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus binnen de Faculteit der Godgeleerdheid en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Religie en Levensbeschouwing en master Theologie. Uitgangspunt daarbij is dat de bevindingen binnen de faculteit te generaliseren zijn naar de andere opleidingen. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de audit commissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De faculteit is goed op weg, met name wat betreft de organisatie en beschrijving van de administratieve processen. De termijn waarop tentamenuitslagen bekend moeten zijn behoeft echter correctie. Kwaliteitscultuur: Hoewel de kwaliteitszorg in opzet goed georganiseerd is, wordt weinig blijk gegeven van gedragen implementatie en toepassing. Best practice: De procedurebeschrijvingen van het onderwijsbureau (doc nr 21)


75

Ingevuld auditkader FGG, bezoek dd 13 maart 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 08, 24 2 kwaliteit(scultuur) Visie sluit aan op IP en profiel. 08, 24 2 Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert Geen expliciete informatie aangetroffen 3 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 21 Geen kwaliteitszorgplan, wel procedures 3 Adequaat beleid mbt BA: beschreven Streefdoelen gerelateerd aan verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 13 2 Adequaat beleid mbt MA: Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 14, 21 Geen kwaliteitszorgplannen, evaluatieplan 3 Adequaat beleid mbt of Stage- en scriptiehandleiding. Wel onderwijsevaluatie (conform procedures en uit evaluatieoverzicht blijkt de eisen in Handboek dat de cursussen geëvalueerd worden, hoofdstukken maar geen curriculumevaluaties etc. Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 Adequaat beleid Toetsen en 18 Concept, beknopt plan dat op zich 3 beoordelen (conform het voldoet, maar nog niet is ingevoerd overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID Adequaat beleid mbt Geen expliciet beleid en aanpak op papier 4 formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO 05 BKO bij alle in aanmerking komend wp, 3

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


(Deel)onderwerp

2.3 2.3a

(Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid

2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a

Document

Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Adequaat beleid mbt verankering onderzoek dmv docenteninzet Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt veldadviesraad en alumni ZICHT OP RESULTATEN 3.1 – 3.6

3.1 3.1a

ONDERWIJS Zicht op realisatie in BA van streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Zicht op realisatie van evaluatiekwaliteit zoals beoogd

3.1c

3.1d

Toelichting

Oordeel

professionalisering van ander wp heeft geen prioriteit

Interactie tussen centraal en facultaire wensen niet gebleken id

3

id Geen beleidsplan, beperkte aankondiging van plannen in PID

3 3

Geen procedure of plan gevonden

3

05

Percentage wp met onderzoekonderwijsaanstelling niet terug te vinden

3

24

Niet goed wordt toegelicht hoe de onderzoeksexpertise van de docenten vorm gegeven wordt in het onderwijs

3

08

4 Kennelijk wel alumnidagen, maar geen verslagen en geen bewijs van activiteiten veldadviesraad De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld.

3

3.1b

76

Zicht op realisatie van

NB

14, 15, 26

Resultaten van het conceptplan kunnen er nog niet zijn

4

Verslag van cursusevaluaties, documentatie van behandeling binnen faculteit ontbreekt. Geen verslagen van evt curriculumevaluaties. Volgend jaarverslag OLC meer inhoudelijk gedetailleerd. Actiegerichtheid en zelfevaluatie ontbreekt. Plan aanwezig, resultaten nog niet

2

NB


3.2 3.2a

3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

4.1b

4.1c

(Deel)onderwerp

77 Document

Toelichting

Oordeel

kwaliteit Toetsen en beschikbaar beoordelen PERSONEEL NB Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO NB beleid VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid NB Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van Evaluatie vindt plaats via NSE, geen 3 studiebegeleiding actieve eigen evaluatie TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK NB BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. NB MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van NB betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Administratief op orde, maar beschikbare NB Adequate maatregelen in BA: documentatie geeft weinig zicht op verhogen kwaliteit, verhogen inhoudelijke maatregelen studierendement, verhogen kosteneffectiviteit. id NB Adequate maatregelen in MA: Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Adequate maatregelen op het id NB


4.1d 4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1 5.2

(Deel)onderwerp

78 Document

Toelichting

Oordeel

terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav 15, 26 Summiere maatregelen in jaarverslag OLC NB toetsen en beoordelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van Geen organogram of beschrijving 3 onderwijsorganisatie faculteit Beschrijving van id 3 onderwijsorganisatie opleidingen

Rapportage Auditcommissie Documenten overzicht FGG

79

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 Check-&Actlist De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Facultair verbeterplan Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. e 02 02 Input kwaliteitszorg 2 PO Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten 03 03 (concept) Verslag 2e PO Ontbreekt, want 2e PO werd afgelast. Actiepunten van 02 zijn door faculteit overgenomen. Uit facultaire cyclus: 3e portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 8-maandsrapportage voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 Jaarplan 2012 faculteit 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 Input 3e PO TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 Concept verslag 3e PO Verslag over het gehele PO. Realisatie instellingsplan, invoering richtlijn PCU 08 08 Project Identificatie Definitieve versies van PID per 1 maart 2012 Document (concept) Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht .pdf 11 11 20111128 Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Opgestuurd door faculteit 12 12 MJP GGL 2012-2017 Jan 2012.doc 13 13 Voorstel Reorganisatie Ma onderwijs Faculteit Godgeleerdheid, maart 2012.pdf 14 14 EvaluatieresultatenTheologie 2010-2011 DEF .pdf 15 15 Jaarverslag OLC.doc 16 16 Examencommissie R&L jaarverslag 2010-2011.doc 17 17 Examencommissie Theologie-jaarverslag 2010-2011 def.docx 18 18 toetsbeleid.docx 19 19 OER Bachelor Religie en Levensbeschouwing 20112012.pdf 20 20 OER Master Theology 2011-2012.pdf 21 21 Portfolio Procedures FGG 20120307.pdf Verzameling procedurebeschrijvingen 22 22 Checklist studiesucces light.xls 23 23 KPI's voor PID.docx 24 24 Herzien rapport joint versie2.pdf Par 4 Onderwijsvisie i Nagezonden door faculteit 25 25 Concept Seminarie VU.doc 26 26 Jaarverslag OLC (2).doc Is een vernieuwde versie van docnr 15


80

Bezoek Interne Auditcommissie Faculteit der Godgeleerdheid Datum Tijd Plaats Doel Opleidingen

: 13-03-2012 : 10:00-14:00 uur : 13a42 en 13a13/13a11 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Religie en Levensbeschouwing en M-Theologie

======================================================

Leden interne audit-commissie: Prof.dr. A.P. Hollander (voorzitter); Drs. E.J. Kok ( secretaris); R.H. van Nie, RE, RA (Accountantsdienst VU); Prof.dr. H.A. Verhoef; Dr. E. Vester; Sybren van Dokkum (studentlid); Drs. F. Elsenburg (notuliste) Tijdschema bezoek: 13-03-2012 10:00-10:45 13a13/13a11

Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteitsz orgmedewerker

10:45-11:30 13a13/13a11


11:30-12:00 13a13/13a11 12:00-12:30 12:30-13:15 13a13/13a11


13:15-14:00 13a13/13a11


Namen gesprekspartners A.Lanser- van der Velde (PFH onderwijs), J. Reinders (hoofd onderwijsbureau), S. Schot (onderwijscoördinatie) en N. Eikelboom (medewerker studentenzaken) FSR: S. Klaasse, D. Blommerde en K. Grit Opleidingscommissie: J. Kamminga, A. Gulik, E. Hauser, H. Akkar, M. Hameete, J. Anderson, M. Hof, G. Commelin-Troost en V. Benjamin Bekendgemaakt per mail Kamer 13a42 E. van der Borght (voorzitter Examencommissie Theologie en Religie en Levensbeschouwing), M. Folmer (secretaris Examencommissie Theologie en Religie en Levensbeschouwing NIET AANWEZIG), overige leden van de examencommissie: S. Stoppels, W. Vlastuin, M. Aulad Abdellah, M. Schoonebeek (ambt. secretaris Theologie) en S. Minkes (ambt. secretaris Religie en Levensbeschouwing). J. van Saane (voorzitter opleidingscommissie Godgeleerdheid NIET AANWEZIG!), overige leden: A. Karagul, A. Zwiep, P. Hoek, L. Minnema, J Reinders , S. Schot (onderwijscoördinatie). W. Janse (decaan), A.Lanser- van der Velde (PFH onderwijs) en A. Mulder (dir BV)


81

Bijlage IV-G VERSLAG Interne facultaire audit Letteren, 24 april 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 82 – 85), de documentenlijst (pagina 86 en 87) en het bezoekschema (pagina 88). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van Letteren en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Communicatie- en Informatiewetenschappen en de researchmaster Geschiedenis na 1400. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: Faculteit maakt een goed georganiseerde indruk, waarin het onderwijs ruime aandacht krijgt, maar de auditcommissie vraagt zich af of het faculteitsbestuur in dezen niet te afstandelijk opereert. Kwaliteitscultuur: Onderwijs en onderwijskwaliteit staan hoog in het vaandel bij de faculteit, maar het ontbreekt nog aan een structurele evaluatie van de effecten van het beleid. Best Practice: Scriptiehandleidingen, inclusief scriptiecontract en beoordelingsschema, breed onderwijsinformatiepakket voor docenten via website.


82

Ingevuld auditkader Letteren, bezoek dd 24 april 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 08, 4.2.1 2 kwaliteit(scultuur) 44 Visie sluit aan op IP en profiel. 44 2 Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert 44 2 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID Adequaat beleid mbt BA: 44, 48 2 Streefdoelen gerelateerd aan verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 50, 51, 2 Adequaat beleid mbt MA: 33, 34, 35 Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 12, 13, 20, 2 Adequaat beleid mbt 21, 22 onderwijsevaluatie (conform de eisen in Handboek hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 Adequaat beleid Toetsen en 15, 24 2 beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID 59, 61, Getalsmatige uitwerking in 59 ontbreekt 2 Adequaat beleid mbt 49 echter formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO 60 Maatregelen voor vaste staf vooralsnog 3 (Handboek hoofdstuk onvoldoende

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2 3.2a

(Deel)onderwerp

83 Document

Toelichting

Oordeel

professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid Geen documentatie over aangetroffen 3 Geen documentatie over aangetroffen 3 Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Geen documentatie over aangetroffen 3 Adequaat beleid mbt 38, 39, 40 2 studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Geen documentatie over aangetroffen 3 Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK In de stukken is geen informatie 4 Adequaat beleid mbt aangetroffen over het beleid verankering onderzoek dmv docenteninzet Adequaat beleid mbt 44, par. 4 2 verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt 00, punt 5 Geen documentatie over aangetroffen 4 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 05, H2d 3 Zicht op realisatie in BA van streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 4 Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 16, 17, 18, 2 Zicht op realisatie van 19, 29, 31 evaluatiekwaliteit zoals beoogd Geen documentatie over aangetroffen 4 Zicht op realisatie van kwaliteit Toetsen en beoordelen PERSONEEL Geen documentatie over aangetroffen 4 Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming,


3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a 4

4.1 4.1a

4.1b

4.1c

4.1d 4.2 4.2a

(Deel)onderwerp

84 Document

Toelichting

Oordeel

inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO 05, H5 Geen eigen, facultaire, documentatie over 3 beleid aangetroffen VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid NB Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van Geen documentatie over aangetroffen 3 studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK Geen documentatie over aangetroffen 4 BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. Geen documentatie over aangetroffen 4 MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van NB betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS NB Adequate maatregelen in BA: verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Adequate maatregelen in MA: NB Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Geen systematische documentatie over 3 Adequate maatregelen op het aangetroffen terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav 15 2 toetsen en beoordelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving,


4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1 5.2

(Deel)onderwerp

85 Document

Toelichting

Oordeel

benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid Adequate maatregelen tav NB onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 54, 55, 56, Aanpassing adviesrol opleidingscommissie 3 onderwijsorganisatie faculteit 57 noodzakelijk 55, 56 Idem 3 Beschrijving van Onvoldoende duidelijk onderwijsorganisatie opleidingen

Rapportage Auditcommissie Overzicht documenten Letteren, bezoekdatum 24 april 2012

86

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 LET Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen. 01 01 Verbeterplan 2011_LET.pdf Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 TSOB input 2e PO LET 20110704.docx Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten 03 03 1300 Conceptverslag 2e PO van 04.07.2011 v1 Verslag van het gehele PO. Het gaat met name concept.docx over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 1300 achtmaandsrap 2011.pdf voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 1300 jaarplan 2102 29092011definitieve versie 10 A4tjes. Jaarplan heeft overzichtelijker opzet mv.pdf gekregen. H2d –onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 TSOB input 3e PO.docx TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 1300 Letteren - verslag PO 3e ronde Verslag over het gehele PO. 17.11.2011 v2 concept.docx Realisatie instellingsplan, invoering richtlijn PCU 08 08 facultaire-pid PCU 1.2+FaculteitLetteren.docx Definitieve versie van PID per 1 maart 2012 Algemeen, facultair kwaliteit en kwaliteitszorg 09 09 Bron onderwijs LET.pdf https://www.intranet.vu.nl/studentenzaken/onde rwijsstatistiek 10 10 NSE 2011 rapportage en overzicht LET.pdf NSE 2011, interne VU rapportage vanaf Intranet 11 11 20111128 LETaccreditatiewaarderingen.xlsx Waarderingen bij de meest recente opleidingsaccreditaties, samengesteld vanaf rapporten op NVAO site Door Faculteit opgestuurde documenten LET doc mail 1 beleid kwaliteitszorg 12 12 Evalplan versie2005.doc 13 13 EvaluatieProced versie 2007.DOC 14 14 Opzet voor rapportage vanuit OC naar eigen studenten over 20102011.docx 15 15 implementatie toetsbeleid Let vs 01.doc KWALZORG 2000.doc LET doc mail 2 resultaten en verbeterpunten 16 16 overzicht uitvoering cursusevaluatieplan 2010-2011.doc 17 17 Evaluatieresultaten Letteren 2010-2011.pdf 18 18 Samenvatting uitkomsten eindvragenlijst Bachelor 2009-2010.docx 19 19 Verslag Eindvragenlijst BachLet0910.pdf LET doc mail 3 handleidingen 20 20 Alg Let Ba scriptiehandleiding def 9022012.docx

Rapportage Auditcommissie 21 22 23 24 25 26

21 Masterscriptiehdl.Alg versie 2011 def.doc 22 ResearchMasterscriptiehandeleiding versie 2011 vs03.doc 23 Stagehandleiding, versie 2011.doc 24 Toetshandleiding nw def 30062011.doc 25 klachtenprocedure def 30062011.docx 26 Regeling_Opleidingscommissiesdefinitief.docx LET doc mail 4 jaarverslagen OCs en ECs 27 27 BA-EC T en C Jaarverslag Taal en Communicatie 2010-2011.doc 28 28 Ma-EC letteren Jaarverslag Letteren 2010-2011.doc 29 29 BA-OC TenC Jaarverslag OC TenC 2010-2011.docx 30 30 MA-OC Ges jaarverslag OC MA-Geschiedenis 2010-2011.docx 31 31 MA-OC Ges Verslag Evaluaties 2010-2011.doc 32 32 Panelgesprek met studenten van de RM Ges.doc LET doc mail 5 beleid internationalisering en rendementen 33 33 beleidsnotitie internationalisering def..doc 34 34 Jaarverslag International Office 2010-2011.docx 35 35 Jaarplanning International Office 2011-2012.docx 36 36 eindverslag projectgroep BSA 1 9.docx 37 37 Eindverslag werkgroep Premasteronderwijs 2012 versie 8.docx 38 38 voorstel rendementsmaatregelenjan09.doc 39 39 Notitie stand van zaken rendementsbeleid Faculteit der Letteren.docx 40 40 studieadvisering bama.doc 41 41 ICT in het Letterenonderwijs VU_docentprofessionalisering.doc LET doc mail 6 beleid vernieuwing BA onderwijs 42 42 Alg Let Bachelor scriptietraject def.doc 43 43 Vernieuwingsbulletins 1 en 2.pdf 44 44 contourennota vs januari 2012.docx 45 45 Programma en verslag onderwijsdag januari 2012.pdf 46 46 leerlijnbepaling onderwijsvisie def.docx 47 47 Vernieuwingstraject fase 2b def.doc 48 48 SVdocument.pdf 49 49 ICT in het Letterenonderwijs VU tbv vernieuwing Ba-onderwijs.doc LET doc mail 7 beleid MA onderwijs en normenlast 50 50 Brede Labels opleidingen + specialisaties .xlsx 51 51 LT12.015 bijlage besluit ACASA.docx 52 52 111111_Eindrapportage curriculumcommissie samenwerking masteropleidingen Oudheid UvA-VU.pdf 53 53 Onderwijslastnormen 2012-2013.xlsx LET doc mail 8 onderwijsorganisatie en personeelsbeleid 54 54 Onderwijsorganisatie FdL beknopt.doc 55 55 Onderwijsorganisatie FdL uitgebreid.doc 56 56 Onderwijsorganisatie FdL taken 2011.docx 57 57 Organogram Faculteit.doc 58 58 inschalings en bevorderingsbeleid FdL.pdf 59 59 Personeelsbeleidsplan FdL 2011-2015.pdf 60 60 richtlijn scholing docerend personeel ivm BKO.docx 61 61 scholingsbeleid FdL.pdf Door LET nagezonden 62 62 WHWatisdat mbt OC's.pdf 63 63 OC-Handboek Letteren 2011-2012.pdf

87


88

Bezoek Letteren Interne Auditcommissie

Datum Tijd Plaats Doel Opleidingen (MHpil)

: 24 april 2012 : 10:00 – 14:00uur : 10A-31 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Communicatie- en Informatiewetenschappen en M-Geschiedenis na 1400

========================================================


Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteitszorgmedewerker

Namen gesprekspartners Prof. Dr. Koen Goudriaan (afdelingshoofd Geschiedenis); Prof. Dr. Wilbert Spooren (afdelingshoofd Taal en communicatie) Dr. Laura Rupp (onderwijsdirecteur) Dr. Liesbeth Geudeke (kwaliteitszorgmedewerker) Drs. Marianne Hamstra (hoofd onderwijsbureau)

10:45-11:30


FSR : Eva van Driel, Sacha Hermsen, Kayleigh Goudsmit, Frenchie de Kunder OLC’s : Ba-OC T&C: Stan Rombouts (studentlid tot september 2011) en Krtistel Blom (studentlid sinds januari 2012) Ma-OC Ges: Sebas Rümke, Adinda Bohte, Bart Heerema (studentleden)* FB: Marieke Oprel (studentlid)

11:30-12:00


Bekend gemaakt via de mail (voor docenten) en via het studentenportal

12:00-12:30 12:30-13:15

13:15-14:00


BA-CIW: Dr. Luuk Lagerwerf (OC), Drs. Margreet Onrust (EC) RM-Ges: Prof. Dr. Suzan Legène (OC), Prof. Dr. Lourens de Vries en dr. Leo Douw (EC- afwezig door verblijf in buitenland) (Waarnemer: Liesbeth Geudeke) Dr. Laura Rupp (phf onderwijs), Dr. Gerard Nijsten (directeur BV) (Waarnemer: Liesbeth Geudeke)


89

Bijlage IV-H VERSLAG Interne facultaire audit Faculteit der Psychologie en Pedagogiek 27 maart 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde auditkader (pagina 90 93), de documentenlijst (pagina 94 en 95) en het bezoekschema (pagina 96) De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus binnen de Faculteit der Psychologie en Pedagogiek en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Pedagogische Wetenschappen en master Psychologie. Uitgangspunt daarbij is dat de bevindingen binnen de faculteit te generaliseren zijn naar de andere opleidingen. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de audit commissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De faculteit heeft een evaluatiebeleid en beschikt over een ruime hoeveelheid evaluatieresultaten inclusief maatregelen. Onduidelijk is wie zorgt voor het realiseren van de verbeteringen; faculteitsbestuur, afdeling of docent. Openbaarheid van evaluaties verdient heroverweging. Kwaliteitscultuur: Aspecten van de formele kwaliteitszorgcyclus zijn in discussie (zie bovenstaande). De faculteit doet er goed aan zich te conformeren aan externe regelgeving. Best practice: De informatieve overzichten van de evaluatieresultaten.


90

Ingevuld auditkader FPP, bezoek dd 27 maart 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur 3 Visie op onderwijs en 08 Beschrijving onderwijscultuur (z.o) is kwaliteit(scultuur) adequaat, onderwijsvisie is onvoldoende uitgewerkt Sluit nog niet aan bij Instellingsplan en 3 Visie sluit aan op IP en profiel. 08, 4.2.1 profiel. Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert NB betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 05, H2a FPP-beleid Internationalisering in Ba-fase 2 Adequaat beleid mbt BA: Streefdoelen gerelateerd aan 33 verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 05, H2b 2 Adequaat beleid mbt MA: Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 3 14 Beleid mbt onderwijsevaluatie is op orde Adequaat beleid mbt (1), onderwijsevaluatie (conform Stage- en scriptiehandleiding is niet de eisen in Handboek aangetroffen (3) hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 2 27 Adequaat beleid Toetsen en 37 beoordelen (conform het 38 overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID 4 05, H5 H5 uit jaarplan geeft een summiere Adequaat beleid mbt samenvatting van het beleid. Beleidsstuk formatieplanning, waarbij met name ook de relatie met het taaktoedeling, werving, onderwijs wordt gelegd, ontbreekt. benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO 05, H5 2

1.1

1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


91

Std

(Deel)onderwerp

Document

Toelichting

Oordeel

2.3 2.3a

(Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid

12, 13

Niets over aangetroffen, in bijv, zelfstudies. Gedocumenteerd facultair beleid ontbreekt. In zelfstudies beschrijving situatie, geen eigen beleid

3

Gedocumenteerd facultair beleid ontbreekt

3

2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2

Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid

12, 13

12, 13

3

Adequaat beleid mbt 30, 32 2 studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor Geen informatie over aangetroffen 4 studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Geen expliciet beleid ter zake 4 Adequaat beleid mbt aangetroffen verankering onderzoek dmv docenteninzet Idem 4 Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt 00, ad 5 Aankondiging van een plan 4 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Zicht op realisatie in BA van 13 In-, door- en uitstroomgegevens, BSA, 2 streefdoelen mede gericht op resultaten evaluaties verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 12 In-, door- en uitstroomgegevens, 2 Zicht op realisatie in MA van resultaten evaluaties streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 1 Faculteit evalueert geregeld en beschikt 17, 18, 19, Zicht op realisatie van over overzichten van resultaten, incl. 20, 21, 22 evaluatiekwaliteit zoals adviezen van de verschillende gremia 34, 35 beoogd 3 18 t/m 22, Geen overzicht van een analyse van Zicht op realisatie van 28 toetsen voor- en achteraf. Jaarverslag kwaliteit Toetsen en Examencommissie bevat geen informatie. beoordelen PERSONEEL


(Deel)onderwerp

3.2a

Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO beleid VOORZIENINGEN Zicht op resultaten van bibliotheekbeleid Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT Zicht op resultaten van studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB beleid VERANKERING ONDERZOEK BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van betrokkenheid veldadviesraad

3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

Document

MAATREGELEN 4.1 – 4.6

4.1 4.1a

ONDERWIJS Adequate maatregelen in BA: verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Adequate maatregelen in MA: Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Adequate maatregelen op het terrein van onderwijsevaluatie en -beleid

4.1c

Toelichting

Oordeel

NB

Geen rapportage aangetroffen

3

NB NB

Geen zicht op het effect aangetroffen

NB 3

NB

NB

NB

NB Via WO-Monitor wordt bijgehouden hoe de opleiding aansluit op het beroepenveld, maar er zijn geen eigen resultaten De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld.

4

4.1b

92

12, 13

05, H2a, 17 t/m 22

Aanstellen tutoren 1 jaar, voorlichting verblijf buitenland, Engelstalige vakken

e

2

05, H2b, 17 t/m 22

Verantwoordelijkheid voor verbeteringen niet altijd duidelijk.

2

17 t/m 22

Adviezen helder geformuleerd, maar onduidelijk of die worden uitgevoerd

2


93

Std

(Deel)onderwerp

4.1d

Adequate maatregelen tav NB toetsen en beoordelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van Geen document aangetroffen 3 onderwijsorganisatie faculteit Beschrijving van Geen document aangetroffen 3 onderwijsorganisatie opleidingen

4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1 5.2

Document

Toelichting

Oordeel

Rapportage Auditcommissie Overzicht documenten FPP, bezoekdatum 27-03-2012

94

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 FPP Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan Idem. 2011_FPP.pdf Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 TSOB input 2e PO FPP Met instemming van faculteit afgeleide lijst van “smart” 20110704.docx geformuleerde actie punten 03 03 2500 Concept Verslag 2e Verslag van het gehele PO. Het gaat met name over punt 4, PO FPP 04.07.2011.doc (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 2500 achtmaands 2011 voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant FPP.xls 05 05 2500 FPP Bijlage Jaarplan 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – 2012 - Cijfers.xls onderwijskwaliteit is toegevoegd. 05 2500 Jaarplan 2012 Een vraag die bij de paragrafen over onderwijs speelt is: hebben FPP.doc we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? e 06 06 Input 3 PO 06 3e PO FPP TSOB input, tijd voor afstemmen met faculteit ontbrak 2011.docx 07 07 2500 FPP - Verslag 3e PO Verslag over het gehele PO. 16 11 2011.doc Realisatie instellingsplan, invoering richtlijn PCU 08 08 PID FPP 2.docx Definitieve versies van PID per 1 maart 2012 Algemeen, facultair kwaliteit en kwaliteitszorg 09 09 Bron onderwijs FPP.pdf https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht FPP.pdf 11 11 20111128 FPP Overzicht Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Door faculteit opgestuurde documenten Algemeen (visie, onderwijsbeleid, personeelsbeleid, verankering onderzoek, verwevenheid beroepenveld en vakgebied, zicht op resultaten onderwijs, maatregelen onderwijs) 12 12 Zelfevaluatie 2012 Psychologie.pdf 13 13 Zelfevaluatie 2012 Pedagogische wetenschappen.pdf Onderwijsbeleid (beleid en evaluatiebeleid, zicht op resultaten, maatregelen 14 14 OW2011- Nieuw evaluatiebeleid FPP-def.pdf 15 15 Totaaloverzicht evaluatieresultaten 2010-2012 BA Peda.pdf 16 16 Totaaloverzicht evaluatieresultaten 2010-2012 MA Psy.pdf 17 17 OW2011-Evaluaties periode 1 2010-2011-def.pdf 18 18 OW2011-Evaluaties periode 2+3 2010-2011-def.pdf 19 19 OW2011-Evaluaties periode 4 2010-2011-def.pdf 20 20 OW2011-Evaluaties periode 5+6 2010-2011-def.pdf 21 21 OW2012-Evaluaties periode 1 2011-2012-def.pdf 22 22 Verslag evaluatievergadering 28 februari 2012.pdf 23 23 verslagen OLC ped 2011-2012.pdf


95

24 24 verslagen OLC psy 2011-2012.pdf 25 25 voorbeelden besluitvorming curr wijzigingen 2012-2013 ba ped.pdf 26 26 voorbeelden besluitvorming curr wijzigingen 2012-2013 psy.pdf 27 27 OW2012-Kwaliteitszorgplan Toetsing FPP-def.pdf 28 28 Jaarverslag EC Pedagogische wetenschappen 2010-2011.pdf 29 29 Jaarverslag EC Psychologie 2010-2011.pdf 30 30 Regeling studiebegeleiding bij de FPP.pdf 31 31 Voorspellende waarde preadviezen cohort 2011.pdf 32 32 Topprestatie FPP.pdf 33 33 Internationalisering in de bachelorfase bij FPP, nov. 2009.pdf Door faculteit nagezonden documenten, met toelichting 34 34 fSrenquete2010-2011.pdf De fSr- enquête wordt nabesproken door de fSr met de decaan en portefeuillehouder onderwijs, 35 35 samenvatting fSr enquete.pdf die vervolgens actiepunten formuleren en in gang zetten. 36 36 Vragenlijst vakevaluatie FPP N2TE W.pdf De items 4, 8, 10, 14, 21 en 23 uit deze lijst zijn de ‘kernitems’. Als op deze kernitems onder het 67% interval wordt gescoord, wordt om een verbeterplan gevraagd en worden alle (?) commissies om input gevraagd. 37 37 Beoordelingsformulier These.pdf These voorbeelden FPP gebruikt voor essay, paper, literatuurverslag, 38 38 Handleiding voor becijfering mondelinge presentaties ) ook een standaard onderzoeksverslag, these.pdf beoordelingsformulier. Telkens voorzien van een handleiding voor becijfering. (formulieren en handleidingen zijn beschikbaar)


96

Bezoek Interne Auditcommissie Faculteit der Psychologie en Pedagogiek Datum Tijd Plaats Doel Opleidingen

: 27 maart 2012 : 13:00 – 17:00uur : Transitorium 1B-65 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Pedagogische Wetenschappen en M-Psychologie

======================================================

Leden interne audit-commissie: Prof.dr. Peter Hollander (voorzitter), Drs. Eveline Kok (secretaris), Rob van Nie, RE, RA (Accountantsdienst VU), Prof.dr. Herman Verhoef; Dr. Elseline Vester; Sybren van Dokkum (studentlid); Floor Elsenburg MSc (notuliste) Tijdschema bezoek: 27-03-2012 13:00-13:45 13:45-14:30

14:30-15:00 15:00-15:30 15:30-16:15

16:15-17:00

Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteitsz orgmedewerker Studentvertegenwoordiging:



Namen gesprekspartners 1. Mieke Donk (portefeuillehouder onderwijs) 2. Ingrid van den Oord (beleidsmedewerker onderwijs), 1. Marije de Waard (OLC PW + fSr) 2. Anne Bode (fSr, student Psy) 3. Prachilla Ori (fSr, student Psy) 4. Florijn Vriend (OLC Psy) Is bekend gemaakt als nieuwsbericht op de facultaire website (15/3) 1. 2. 3. 4. 5. 1. 2. 3.

Doret de Ruyter (voorzitter OLC PW) Mirjam Oosterman (OLC PW) Sander Koole (voorzitter OLC Psy) Clasien de Schipper (EC PW) Pol van Lier (voorzitter EC Psy) Jan Passchier (decaan) Janneke van Eijk (directeur bedrijfsvoering) Mieke Donk (portefeuillehouder onderwijs)


97

Bijlage IV-I VERSLAG Interne facultaire audit Faculteit der Rechtsgeleerdheid, 31 januari 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde auditkader (pagina 98 101), de documentenlijst (pagina 102 en 103) en het bezoekschema (pagina 104) De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus binnen de Faculteit der Rechtsgeleerdheid en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Rechtsgeleerdheid en master Criminologie. Uitgangspunt daarbij is dat de bevindingen binnen de faculteit te generaliseren zijn naar de andere opleidingen. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de audit commissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De kwaliteitszorgcyclus is gedocumenteerd maar de informatie is verspreid en wat soms wat formalistisch, weinig actiegericht. Streefdoelen (cursusevaluaties) worden vermeld maar worden niet als zodanig beleefd. Kwaliteitscultuur: in het docentencorps, individueel, wel, maar in de organisatie als geheel wat minder? Tijdgebrek en “het civiel effect” worden nogal eens opgevoerd als onveranderlijkheden. Dat belemmert noodzakelijke initiatieven en vernieuwingen met name op het gebied van toetsen, programmainhouden en -flexibilisering. Best practice: Column en spreekuur van de decaan


98

Ingevuld auditkader RCH, bezoek dd 31 januari 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur 2 Visie op onderwijs en 09 De visie is er wel – zie 08 – maar de kwaliteit(scultuur) 08 pag 4/5 strategienota (09) is verouderd en zou vernieuwd moeten worden. 3 08 Bij die vernieuwing de tekst laten Visie sluit aan op IP en profiel. aansluiten op de tekst van het Concreet: de kernwaarden instellingsplan. verantwoordelijk, open en persoonlijk komen terug. Visie bevordert betrokkenheid en 08 Het recente initiatief van de decaan 2 verbetering 30 (30) kan een goede bijdrage leveren. BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID Adequaat beleid mbt BA: 05 H1, Streefdoelen slechts geformuleerd op 3 Streefdoelen gerelateerd aan H2a facultair niveau, zonder specificering verhogen kwaliteit, verhogen naar de onderhavige bachelor. 12 studierendement, verhogen 19 kosteneffectiviteit. (zie IP) 3 Streefdoelen slechts geformuleerd op 05 H1, Adequaat beleid mbt MA: facultair niveau, zonder specificering Streefdoelen gericht op instroom H2b, H2c naar de onderhavige master. 22 vergroten, ook internationaal, Amsterdamse samenwerking is voor verscherpte toelatingseisen, Criminologie niet relevant. Amsterdamse samenwerking (zie IP) 2 De faculteit evalueert conform de 15 Adequaat beleid mbt regels en heeft de documentatie ervan 16 onderwijsevaluatie (conform de op orde. eisen in Handboek hoofdstukken 17 18 Onderwijsevaluatie par 2.1; 20 Programma par 3.3 en Stage en 21 Thesis 3.1 15 par 2.3 Het toetsbeleid is conform de regels en 2 Adequaat beleid Toetsen en 27 opgenomen in het evaluatieplan. Geldig beoordelen (conform het is ook het document Handleiding overeenkomstig Toetsen en Beoordelen waarnaar in 15 Handboekhoofdstuk par 3.1) par 2.3 verwezen wordt. PERSONEELSBELEID 05 Adequaat beleid mbt H5 uit het jaarplan geeft een summiere 4 formatieplanning, taaktoedeling, samenvatting van het beleid. Een werving, benoeming, beleidstuk waarbij met name ook de inwerkprocedures, relatie met het onderwijs wordt gelegd, professionalisering, ontbreekt. jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1)

1.1

1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

Document

Toelichting

Oordeel


99

Std

(Deel)onderwerp

Document

Toelichting

Oordeel

2.2b

Adequaat beleid mbt BKO (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 2 en 3)

14 05

De faculteit verdient complimenten voor het beleid ten aanzien van de scholing van docenten. Onduidelijk is waarom dit beperkt blijft tot personeelsleden met een aanstelling >.5 fte.

1

2.3 2.3a

VOORZIENINGEN Adequaat bibliotheekbeleid

10, pag 63

3

2.3b

Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Adequaat beleid mbt verankering onderzoek dmv docenteninzet Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm

Hoewel op orde volgens de QANU rapportage (BA) en de concept zelfstudie (MA), ontbreekt gedocumenteerd facultair beleid. idem

10 10 pag 64, 65

idem idem

3 3

24 25

De faculteit werkt mee aan VU initiatieven (VIB-pas, verklaring tentamenvoorziening)

2

--

De auditcommissie heeft geen expliciet beleid terzake aangetroffen. Idem Echter, voor zover de leerlijn in het vaardighedenonderwijs aan dit aspect tegemoet komt kan het oordeel een 3 zijn.

4

2.3c 2.3d

2.4 2.4a

2.5 2.5a 2.5b

2.6 2.6a 3

3.1 3.1a

3.1b

3.1c

10

-12

3

4

VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt 10 pag 69 De faculteit heeft raden van advies voor 2 veldadviesraad en alumni de opleidingen ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van 3.1 – 3.6 haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 19 Faculteit evalueert geregeld en beschikt 2 Zicht op realisatie in BA van over overzichten van de resultaten. streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Zicht op realisatie in MA van 22 idem 2 streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 3 Zicht op realisatie van 19, 22 Er is een uitgebreid evaluatieverslag, evaluatiekwaliteit zoals beoogd studentbetrokkenheid blijkt daarin zorgwekkend laag


100

Std

(Deel)onderwerp

Document

Toelichting

Oordeel

3.1d

Zicht op realisatie van kwaliteit Toetsen en beoordelen

27 28

Resultaten zijn duidelijk samengevat in het, overigens uitsluitend retrospectieve, jaarverslag van de examencommissie

2

3.2 3.2a

PERSONEEL Zicht op realisatie van formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO beleid

--

Behalve de getallen in het jaarplan, zijn de auditcommissie geen realisatiegegevens bekend.

5

05

Resultaten 2010 gemeld, resultaten 2011 niet bekend

3

--

Realisatiegegevens onbekend

4

--

Realisatiegegevens onbekend, maar kan op korte termijn aangeleverd worden

3

--

Realisatiegegevens onbekend, maar kan op korte termijn aangeleverd worden Realisatiegegevens onbekend, maar kan op korte termijn aangeleverd worden

3

3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6 3.6a

4 4.1 4.1a

VOORZIENINGEN Zicht op resultaten van bibliotheekbeleid Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT Zicht op resultaten van studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB beleid VERANKERING ONDERZOEK BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van betrokkenheid veldadviesraad

--

3

--


3

--


3

--


3

4 De Faculteit moet zich beraden op de wijze waarop de raden van advies van invloed (kunnen) zijn. De faculteit kan aantonen dat zij de kwaliteit van haar opleidingen waar nodig systematisch verbetert.

MAATREGELEN 4.1 – 4.6 ONDERWIJS Adequate maatregelen in BA: verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit.

--

19 26

Gezien de uitkomsten van de cursusevaluaties, lijken de streefdoelen te hoog waardoor het identificeren van gerichte maatregelen bemoeilijkt wordt. Eisen tav het “civiel effect” verdienen heroverweging, zowel wat betreft de opleidingen/afstudeerrichtingen als de omvang ervan in studiepunten.

3


101

Std

(Deel)onderwerp

4.1b

Adequate maatregelen in MA: 22 idem 3 Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking -Eea is afhankelijk van de acties naar NB Adequate maatregelen op het aanleiding van 3.1c terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav 28 Examencommissie dient maatregelen 3 toetsen en beoordelen voor te stellen (zie ook 3.1d) PERSONEEL -NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen 04, 31? Het ingezette BKO en intervisiebeleid 2 professionalisering(sbeleid) ziet er veelbelovend uit. VOORZIENINGEN Adequate maatregelen tav -NB bibliotheekbeleid -NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav ICT -NB Adequate maatregelen tav -NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB -NB beleid VERANKERING ONDERZOEK 3 -Het voorstel van de FSR (oa over Adequate maatregelen voor scriptiebegeleiding en flexibeler verankering onderzoek in docenteninzet) verdient aandacht onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen tgv -NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, bevoegdheden 5.1 – 5.2 en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 09 laatste De faculteit doet er goed aan de positie 3 onderwijsorganisatie faculteit paragraaf van de opleidingscommissies in de vernieuwde onderwijsorganisatie in het 32 licht van de WHW te heroverwegen. Beschrijving van 33, 34 Faculteitsreglement 3 onderwijsorganisatie opleidingen

4.1c

4.1d 4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6 4.6a 5

5.1

5.2

Document

Toelichting

Oordeel

Rapportage Auditcommissie Overzicht documenten RCH def – auditdatum 20120131 Code Bestandsnaam

102

Inhoud Algemeen facultair Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 C&A van Rechten faculteit Check-&Actlist; De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan RCH Facultair verbeterplan; Idem Bovendien is het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg dikwijls onduidelijk. 02 02 TSOB input voor 2e PO Input kwaliteitszorg 2e PO; Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten 03 03 conceptverslag 2e PO RCH (concept) Verslag 2e PO; Verslag van het gehele PO. Het gaat met name over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 achtmaandsrapportage RCH 8-maandsrapportage; voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 jaarplan 2012 RCH Jaarplan 2012 faculteit; 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – onderwijskwaliteit is toegevoegd. 06 06 TSOB input 3e PO RCH Input 3e PO; 2 A4tjes TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 conceptverslag 3e PO RCH Concept verslag 3e PO; Verslag over het gehele PO. 08 08 facultaire PID PCU def 09 Strategienotitie 2006.pdf De twee opleidingen: B Rechtsgeleerdheid en M Criminologie 10 QANU rapport VU Rechtsgeleerdheid definitief.pdf 11 RCH antwoord op aanvullende vragen NVAO.pdf 12 Notitie herziening curriculum Bacheloropleiding Rechtsgeleerdheid 2009.pdf 13 Zelfreflectie Criminologie versie 0 25.pdf 14 2010-03-30 - BKO-Project Beoordelingsinstrument - def (10.0151).doc 15 Evalplan 2010 Regelingen onderwijskwaliteit, beschrijving van het systeem. Conform eisen handboek? 16 Handleiding_bachelorscriptie_20102011.pdf 17 Handleiding MA-scriptie en stage Crim voor stud.pdf 18 Handleiding afstudeerproject voor


103

30 31 32 33 34

studenten criminologie.pdf Samenvatting_evaluatieresultaten_Re Samengevatte vakeavaluaties chtsgeleerdheid_2010-2011.pdf Bachelorscriptie Rechten 2010-2011, Evaluatieverslag door het onderwijscentrum over 10-10-2011.pdf de bachelorscriptie 240067 Curriculumevaluatie Ba RCH 2e semester 2010-2011 V2.pdf Samenvatting_evaluatieresultaten_Cri Samenvatting van vakevaluaties minologie_2010-2011.pdf Korte samenvatting Masterscriptie Evaluatie scripties febr2011-sept 2011, auteur Criminologie.doc onbekend Studenten en studiebegeleiding Format verklaring Standaard formulier voor voorziening bij tentamen tentamenvoorzieningen.doc in verband met beperking Update VIB-pas studenten met een beperking .msg Opleidingscommissie en examencommissie Beknopt verslag OLC RCH + NOT 2009-2010.doc Planning tentamenanalyses 2011-2012.doc Definitief Jaarverslag Examencommissie 2010-2011JStaangepast.docx Beoordelingsformulier Bachelorscriptie.pdf Faculteitsbestuur en organisatie Column van de decaan januari - 2012 - Faculteit der Rechtsgeleerdheid, Vrije.pdf NSE-reactie fb - 2011-09.pdf 02 facultaire-pid PCU - bijlage organogram.pdf 2010__faculteitsreglement 24-8-2009.doc 20100104 - Aanpassing Faculteitsreglement (afd ITenRecht).doc

35 36

35 NSE 2011 rapportage en overzicht RCH.pdf 36 Bron Onderwijs RCH 2011.pdf

19 20 21 22 23

24 25

26 27 28 29


104

Bezoek Interne Auditcommissie Faculteit der Rechtsgeleerdheid Datum : 31-01-2012 Tijd : 13:00-17:00 uur Plaats : Initium 2A-47 (en 2A-45) Doel : ter voorbereiding op Instellingsaudit ca. maart 2013 Opleidingen : BA-Rechtsgeleerdheid en MA-Criminologie ======================================================== Leden interne audit-commissie: Prof.dr. A.P. Hollander, voorzitter; Drs. E.J. Kok, secretaris; R.H. van Nie, RE, RA (Accountantsdienst VU); Prof.dr. H.A. Verhoef; Dr. E. Vester; Studentlid/-leden: nnb Tijdschema bezoek: 31-01-2012 Gesprekspartners verzocht Namen gesprekspartners 13:00-13:45 Opleidingsdirecteur(en)/ Prof.mr. Hemme Battjes, voorzitter OLB Onderwijsdirecteur/Kwaliteitsz Rechtsgeleerdheid orgmedewerker Prof.dr.mr. Wim Huisman, voorzitter OLB Criminologie Dr. mr. Lieke Coenraad, portefeuillehouder Onderwijs Drs. Zwanette Tobi, beleidsmedewerker Kwaliteitszorg Mr. Rob van Bogget, beleidsmedewerker Kwaliteitszorg a.i. 13:45-14:30


14:30-15:00


15:00-15:30 15:30-16:15

Pauze / Commissieberaad Examencommissie(s) en Opleidingscommissies

16:15-17:00


FSR Louisa Klop, vice-voorzitter FSR (student Rechtsgeleerdheid) Gerald Hopster, voorzitter FSR (student Criminologie) OLC’s Mohammed al Temimi, OLC BA-Rechtsgeleerdheid Wieke de Zwart, OLC Criminologie Algemene uitnodiging via nieuwsbrieven: dinsdag 2401-2012 aan docenten, donderdag 26-01 aan studenten.

Prof. mr. Jan Struiksma, voorzitter Examencommissie Prof.mr. Jan Hallebeek, voorzitter OLC Rechtsgeleerdheid Dr. Frank van Gemert, plv. voorzitter OLC Criminologie Prof.mr. Elies van Sliedregt, decaan Dr.mr. Lieke Coenraad, portefeuillehouder Onderwijs Drs. Michel van Raaphorst, directeur Bedrijfsvoering


105

Bijlage IV-J VERSLAG Interne facultaire audit Sociale Wetenschappen, 2 april 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 106 – 109), de documentenlijst (pagina 110 en 111) en het bezoekschema (pagina 112). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van FSW en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Communicatiewetenschap en master Political Science. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De verantwoordelijkheid voor de kwaliteitszorg is verdeeld tussen de faculteit en de afdelingen, met alle gevolgen van dien. Er bleek relatief weinig aandacht voor dit auditproces. Dit zou kunnen wijzen op te weinig aandacht voor onderwijskwaliteit en de bijbehorende zorg. Kwaliteitscultuur: Deze lijkt per opleiding/afdeling behoorlijk te verschillen. Ook hier lijkt facultair initiatief door middel van richtlijnen aan te bevelen. Best practice: Facultair: de centrale examencommissie. Opleiding CW: 1) overdrachtsdossier (studenten) voor de opleidingscommissie. 2) Studentleden uit de opleidingscommissie beheren een “postbus” (emailadres) voor opmerkingen van studenten over het lopende onderwijs.


106

Ingevuld auditkader FSW, bezoek dd 2 april 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 12 Helder uitgewerkt document 2 kwaliteit(scultuur) Visie sluit aan op IP en profiel. 12 Document stamt uit 2010 aanpassing van 3 terminologie is gewenst Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert 12 2 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID Adequaat beleid mbt BA: 13 Er is wel behoefte aan een “smart” 2 Streefdoelen gerelateerd aan 14 formulering verhogen kwaliteit, verhogen 16 studierendement, verhogen 27 kosteneffectiviteit. (zie IP) 27 3 Adequaat beleid mbt MA: Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 3 16 Weinig documentatie aangetroffen. Adequaat beleid mbt Echter, gezien de resultaten (3.1a en 3.1b) onderwijsevaluatie (conform is het beleid waarschijnlijk wel aanwezig. de eisen in Handboek hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 19 Document 21 is toe aan een update, die 2 Adequaat beleid Toetsen en 21 reeds voorzien is. beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID 3 -Geen documenten over loopbaanbeleid Adequaat beleid mbt en onderwijskwaliteit in jaargesprekken, formatieplanning, formatieplanning taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1) Adequaat beleid mbt BKO 5, H5 Geeft streefgetallen, beleid niet 3

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

2.2b

Document

Toelichting

Oordeel


2.3 2.3a 2.3b

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2 3.2a

(Deel)onderwerp

107 Document

Toelichting

Oordeel

(Handboek hoofdstuk aangetroffen professionalisering van docenten par 4.1 eis 2 en 3) VOORZIENINGEN Adequaat bibliotheekbeleid -Geen documentatie over aangetroffen 3 -Geen documentatie over aangetroffen. 3 Adequaat beleid mbt NSE score vraagt om actie onderwijsruimten en studieplekken Adequaat ICT beleid -Geen documentatie over aangetroffen 3 3 12, pag 5 Er zou een regeling studiebegeleiding Adequaat beleid mbt bestaan; door commissie echter niet studiebegeleiding (Handboek gezien. hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID -Geen documentatie over aangetroffen 3 Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK -4 Adequaat beleid mbt verankering onderzoek dmv docenteninzet Betreft slechts onderzoeksmethoden 2 13, pag 10 Adequaat beleid mbt 12 verankering onderzoek dmv 27, par 2 onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt -3 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 26 . 2 Zicht op realisatie in BA van streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Zicht op realisatie in MA van 23 2 streefdoelen mede gericht op 22 instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 10 Alleen NSE-cijfers bekend 4 Zicht op realisatie van evaluatiekwaliteit zoals beoogd Zicht op realisatie van 22 idem 2 kwaliteit Toetsen en 26 beoordelen PERSONEEL NB Zicht op realisatie van formatieplanning, taaktoedeling, werving,


3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

4.1b

4.1c

4.1d 4.2 4.2a

(Deel)onderwerp

108 Document

Toelichting

Oordeel

benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO 4 Er worden verschillend cijfers 4 beleid 5 gerapporteerd VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid Zicht op realisatie van NB onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van NB studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK BA: Zicht op de mate waarin NB het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. NB MA: Zicht op de mate waarin het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van NB betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Adequate maatregelen in BA: 26 Betreft slechts studierendement 4 verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Betreft ook studierendement en 4 Adequate maatregelen in MA: 22 samenwerking UvA Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Adequate maatregelen op het NB terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav Geen documentatie over aangetroffen 4 toetsen en beoordelen PERSONEEL Adequate maatregelen NB


4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1 5.2

(Deel)onderwerp

109 Document

Toelichting

Oordeel

formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen tgv NBfunctioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 16 Een duidelijk organogram ontbreekt. 3 onderwijsorganisatie faculteit 27 Beschrijving van 16 Een duidelijk organogram ontbreekt. 3 onderwijsorganisatie 27 opleidingen

Rapportage Auditcommissie Documentenoverzicht FSW, bezoekdatum 2012-04-02

110

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 FSW Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan 2011_FSW.pdf Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 Nazending TSOB vervroegd 2e Afstemming tussen TSOB en faculteit vooraf was niet meer PO FSW 20110615.pdf mogelijk vanwege vervroeging datum PO. 03 03 Conceptverslag 2e PO Verslag van het gehele PO. Het gaat met name over punt 4, FSW.doc (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant Uit facultaire cyclus: 3e portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 2600achtmaands 2011 voortgang over 2011. H2 (onderwijs) en H4 HRM zijn Vastgesteld FB 20110929.pdf relevant 05 05 2600 Jaarplan 2012 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. conceptversie 20110926 H2d –onderwijskwaliteit is toegevoegd. vastgesteld FB 20110929l Een vraag die bij de paragrafen over onderwijs speelt is: ingediend.pdf hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? e 06 06 Input 3 PO Hierover is met geen van de faculteiten tevoren overlegd. 07 07 3e PO FSW 02-11-2011 mk Verslag over het gehele PO. (2).docx Realisatie instellingsplan, invoering richtlijn PCU 08 08 PCU PID FSW versie 1 5.doc Dit is de definitieve versie van PID per 1 maart 2012 Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht .pdf 11 20111128 FSW Overzicht Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Door faculteit opgestuurde documenten 12 12 Onderwijsvisie FSW sept2010.doc 13 13 Startdocument programmaherziening FSW.pdf 14 14 Eindrapportage W AO BSc1.docx 15 15 aangepast bachelorkader juli 2010.pdf 16 16 Regeling Interne Onderwijskwaliteitszorg versie 2011-2012.docx 17 17 Evaluatierapport examencommissie versie 17, 18 en 19 horen bij elkaar. 24jan12.plus bijlage 1, 3 en 5.pdf 17 is het hoofd document. Daaruit 18 18 Startdocument centrale FSW examencie def versie ontbreken 2 bijlagen. Bijlage 2 = het startdocument (nr 18) en bijlage 4 = de 7 april plus bijlagen.pdf kwaliteitsborging toetsing (nr 19) 19 19 Kwaliteitsborging toetsing FSW (definitieve versie 16 juni 2011).pdf 20 20 aan de opleidingscommissies van FSW.pdf 21 21 Toetsen en Beoordelen 2008-2009.doc 22 22 Onderwijsjaarverslag Politicologie 2009-2010.pdf

Rapportage Auditcommissie 23 23 EvaluatieCie POL 2010-2011.doc 24 24 OC-inwerkboek POL.doc 25 25 de onderwijsmonitor van CW.doc Door Faculteit nagezonden 26 26 onderwijsjaarverslag 2009-2010 CW.pdf 27 27 FSW beleidsplan 2011-2015.pdf

111


112

Bezoek Interne Auditcommissie Faculteit der Sociale Wetenschappen Datum Tijd Plaats Doel Opleidingen

: 2 april 2012 : 12:00 – 16:00uur : Metropolitan gebouw Z 009 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Communicatiewetenschap en M-Political Science

======================================================



12:45-13:30

Studentvertegenwoordiging

Namen gesprekspartners - Anita van Hoof (bachelorcoördinator Communicatiewetenschappen), - Ben Crum (onderwijsmanager Politicologie) - (indien hersteld) Arjen Heijstek (beleidsmedewerker onderwijsbureau). Mocht Arjen nog ziek zijn zal Karin Bijker (hoofd onderwijsbureau) hem vervangen. FSR : - Maxime Kruijs (OLC-coördinator) - Ynte Bakhuizen (OLC-coördinator) OLC’s: - Maartje van Engelen (OLC CW) - Dave Verkaik (OLC CW; misschien iets verlaat) - Zahra Astitou (OLC POL)

13:30-14:00


14:00-14:30 14:30-15:15

Pauze / Commissieberaad Opleidingscommissies en Examencommissie(s)

15:15-16:00


Docenten zijn via het mailadres van de betreffende afdeling uitgenodigd. Studenten van de bacheloropleiding CW en de masteropleiding CW zijn via VUnet opgeroepen. Het is onbekend hoeveel personen aan de oproep gehoor zullen geven. -

Christian Burgers (voorzitter OLC CW) Ineke Nagel (OLC CW)

-

André van Montfort (voorzitter EC), Jeannette Wouters (ambtelijk secretaris EC) (mogelijk vergezeld door Sonja Utz en Geert de Vries, leden van de centrale EC) Anton Hemerijck (decaan), Frank de Bakker (portefeuillehouder onderwijs) Mareanne Karssen (directeur bedrijfsvoering)

-


113

Bijlage IV-K VERSLAG. Interne facultaire audit Academisch Centrum Tandheelkunde Amsterdam, 10 april 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 114 – 117), de documentenlijst (pagina 118 en 119) en het bezoekschema (pagina 120). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van ACTA en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Tandheelkunde en master Tandheelkunde. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: Het kost de faculteit moeite om studenten voldoende te betrekken bij de organisatie van onderwijs en onderzoek. De nieuwe huisvesting, met een sterke scheiding tussen de verblijfplaatsen van staf en studenten, behoeft op detail aanpassing. Ook lijkt de geringe omvang van de aanstelling van de "praktijkdocenten" de betrokkenheid niet te bevorderen. Kwaliteitscultuur: De invulling en uitvoering van het onderwijsprogramma wordt in hoge mate bepaald door de beschikbaarheid van patiënten. Daarbij lijkt die "zorg" voor (c.q. het beschikbaar zijn van) de patiënten vooralsnog voorrang te hebben boven de stroomlijning van het onderwijsprogramma. Ook de gedetailleerdheid waarmee de uitvoering van het Raamplan Tandheelkunde wordt uitgewerkt (leidend tot cursussen met een omvang variërend van 1 t/m 9 studiepunten) bemoeilijkt een efficiënt en duidelijk onderwijsrooster. Best practice: De aandacht voor de BKO en het percentage WP-ers dat die kwalificatie reeds heeft behaald verdient navolging.


114

Ingevuld auditkader ACTA, bezoek dd 10 april 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 12, 15 Te weinig “smart” geformuleerd 2 kwaliteit(scultuur) Visie sluit aan op IP en profiel. 12, 15 Dient nader geformuleerd te worden 3 Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert 12, 15 Bevat geen relevante informatie 3 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 2 12, pagina Adequaat beleid mbt BA: Streefdoelen gerelateerd aan 18 ev verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 12, pagina 2 Adequaat beleid mbt MA: 18 ev Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 3 No. 16 dateert uit 2005, update is 16,18 Adequaat beleid mbt gewenst onderwijsevaluatie (conform 31, 32, 33 de eisen in Handboek Deze stukken over de onderwijsdialoog hoofdstukken bieden weinig concreet uitzicht op Onderwijsevaluatie par 2.1; verbetering. Tevens wordt de vraag Programma par 3.3 en Stage opgeroepen naar de relatie met en en Thesis 3.1 functie van de opleidingscommissie 22, 23, 24, 2 Adequaat beleid Toetsen en 25, 26 beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID 12, hfd 7 Bevat geen concrete planning 3 Adequaat beleid mbt formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1)

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

Document

Toelichting

Oordeel


115

Std

(Deel)onderwerp

Document

2.2b


12, hfd 4 + 7 27, pag. 5 30 34, 35

2.3 2.3a 2.3b

VOORZIENINGEN Adequaat bibliotheekbeleid Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2

13

27, pag 15/16

Toelichting

Oordeel

1

Niets aangetroffen Behoeft uitwerking

3 3

Behoeft aanvulling

3

Adequaat beleid mbt Niets aangetroffen 3 studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Adequaat beleid voor 27, pag. 7 2 studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK 12 Een “smart” uitwerking ontbreekt 3 Adequaat beleid mbt 37 verankering onderzoek dmv docenteninzet 37 Een “smart” uitwerking ontbreekt 3 Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid tgv Werken conform Raamplan 2 veldadviesraad en alumni Tandheelkunde. ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Zicht op realisatie in BA van 27 2 streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 27 2 Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 28 2 Zicht op realisatie van evaluatiekwaliteit zoals beoogd 28 2 Zicht op realisatie van kwaliteit Toetsen en beoordelen PERSONEEL


116

Std

(Deel)onderwerp

3.2a

Zicht op realisatie van NB formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO 30, 35 2 beleid VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid NB Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van NB studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB Geen resultaten gevonden 3 beleid VERANKERING ONDERZOEK NB BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. MA: Zicht op de mate waarin NB het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED Zicht op resultaten van Via Raamplan Tandheelkunde 2 betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 2 Adequate maatregelen in BA: 27 verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. 2 Adequate maatregelen in MA: 27 Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking 2 Adequate maatregelen op het 18 terrein van onderwijsevaluatie en -beleid Adequate maatregelen tav 22, 28, 29 Stuk nr 22 zou nog formeel vastgesteld 2 toetsen en beoordelen moeten worden

3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a 4

4.1 4.1a

4.1b

4.1c

4.1d

Document

Toelichting

Oordeel


117

Std

(Deel)onderwerp

4.2 4.2a

PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen 27, pag 5 2 professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs AANPASSING NB ONDERWIJSVORM VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 16 Behoeft aanpassing, relatie met de 3 onderwijsorganisatie faculteit zorgcomponent dient ook beschreven te worden 16, 36 Behoeft aanpassing 2 Beschrijving van onderwijsorganisatie opleidingen

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.5b 4.6

4.6a 5

5.1

5.2

Document

Toelichting

Oordeel

Rapportage Auditcommissie Documentenoverzicht ACTA1

118

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 ACTA Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan Idem. 2011_ACTA.pdf Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd bij alle faculteiten duidelijk. 02 02 Input kwaliteitszorg 2e PO Met instemming van faculteit afgeleide lijst van “smart” geformuleerde actie punten 03 03 (concept) Verslag 2e PO Verslag van het gehele PO. Het gaat met name over punt 4, (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant e Uit facultaire cyclus: 3 portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 8-maandsrapportage voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 Jaarplan 2012 faculteit 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d – onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 Input 3e PO TSOB input, tijd voor afstemmen met faculteit ontbrak e 07 07 Concept verslag 3 PO Verslag over het gehele PO. Realisatie instellingsplan, invoering richtlijn PCU 08 08 TT-ACTA-facultaire-pid PCU 1 Definitieve versies van PID per 1 maart 2012 2.docx Algemeen, facultair kwaliteit en kwaliteitszorg 09 09 Bron onderwijs THK https://www.intranet.vu.nl/studentenzaken/onderwijsstatistiek 2011.pdf 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht ACTA.pdf 11 11 20111128 ACTA Overzicht Waarderingen bij de meest recente opleidingsaccreditaties, accreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Door faculteit opgestuurd – achtergrond over afwijkende bestuursstructuur en management info 12 12 ACTA Convenant 2012-2014 versie 2 0 ter ondertekening opm COR.pdf 13 13 ACTA Facultaire 12-maands rapportage 2011.pdf 13 en 14 vergelijken wellicht met de rapportages uit de cyclus op de VU 14 14 ACTA Management Informatie 7 februari 2012.pdf Door faculteit opgestuurd – kwaliteitszorgplannen en procedures 15 15 ACTA Onderwijsvisie 2010.pdf 16 16 ACTA Onderwijskwaliteitszorgplan.pdf OC 17 17 ACTA OC Huishoudelijk reglement.pdf 18 18 ACTA OC Evaluatieprotocol.pdf EC en Toetscommissie

Geel gemarkeerde documenten ontbreken bij Geneeskunde en ACTA, want niet opgenomen in de facultaire cyclus van de VU. 1


119

19 19 Regels en Richtlijnen 2010-2011 bijlage bij OER 23-72010.pdf 20 20 OER bachelor 2011-2012 definitief 30-8-2011.pdf 21 21 OER 3-jarige Masteropleiding 2011-2012_definitief d d 30-8-2011.pdf 22 22 ACTA Toetscommissie - concept Toetsbeleid.pdf 23 23 ACTA Toetscommissie - plaats & taken.pdf 24 24 ACTA Toetscommissie - aanbevelingen.pdf 25 25 ACTA Toetscommissie - Concept Draaiboek tentamens.pdf 26 26 ACTA Toetscommissie - resultaten vragenlijst.pdf

27 28 29 30

27 ACTA OWI jaarverslag 2009-2010.pdf 28 ACTA OC jaarverslag 2010-2011.pdf 29 ACTA EC jaarverslag 2010-11.pdf 30 ACTA OWI Concept Jaarverslag 2010-11.pdf

EC EC EC

onderwijsinstituut opleidingscommissie examencommissie Voor het OWI is in bewerking het stuk: "Jaarverslag 10-11 & Jaarplan 12-13"(1 geheel, volgens een nieuw UvA format) ) Dit Jaarverslag is daar uit gelicht. Het bevat hetzelfde als stuk 12 maar hier en daar met wat meer detail, en het format is helderder in termen van doelen en KPIs.

Door ACTA nagezonden documenten 31 31 ACTA Onderwijsdialoog - Voorstel UvA studiesucces 2011-12.pdf 32 32 Verslag van de ACTA Onderwijsdialoog okt 2011.pdf 33 33 Verslag - SAMEN NAAR DUIDELIJKHEID EN KWALITEIT.pdf 34 34 BKO-voorstel voor MT 2009.pdf 35 35 BKO rapportage_en_voortgang_nov_2011.pdf 36 36 Organogram onderwijs ACTA April 2012.pdf 37 37 artikel Schoonheim et al 2011 600-0579 onderwijsvisie.pdf


120

Bezoek Interne Auditcommissie ACTA

Datum Tijd Plaats Doel Opleidingen

: 10 april 2012 : 13:30 – 17:30 uur (NB: gewijzigde tijden en volgorde) : kamer 6Z-65, gebouw ACTA : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Tandheelkunde en M-Tandheelkunde 3 jarig

=======================================================

Leden interne audit-commissie: Prof.dr. Peter Hollander (voorzitter), Drs. Eveline Kok (secretaris), Rob van Nie, RE, RA (Accountantsdienst VU), Prof.dr. Herman Verhoef; Dr. Elseline Vester; Sybren van Dokkum (studentlid); Floor Elsenburg MSc (notuliste) Tijdschema bezoek: 10-04-2012 13:30-14:15 14.15-15.00 15:00-15.30 15:30-16:00 16:00-16:45 16:45-17:30

Gesprekspartners verzocht Onderwijsdirecteur/Kwaliteitszorgmedewerker Opleidingscommissie en Examencommissie Spreekuur voor docenten en studenten Pauze / Commissieberaad Studentvertegenwoordiging Faculteitsbestuur: Decaan, pfh Onderwijs, dir BV

Namen gesprekspartners dr. Marjoke Vervoorn, dr. Teun Timmers dr. Meta Schoonheim, dr. Toon Ligtenberg (OC); dr. Irene Aartman, prof.dr. Chiel Naeije (EC) Aankondiging per email, informatieborden

Floris Hartman, Thomas Remmelts (FSR), Karin Veldt, Gijs Schenkenberg (OC) prof. dr. Albert Feilzer, dr. Marjoke Vervoorn, drs. Alice Stäbler


121

Bijlage IV-L VERSLAG Interne facultaire audit Wijsbegeerte, 16 april 2012 Het verslag bestaat uit de volgende vier onderdelen: dit voorblad, het ingevulde kader (pagina 122 – 125), de documentenlijst (pagina 126 en 127) en het bezoekschema (pagina 128). De kwaliteit van het onderwijs wordt geborgd door systematische kwaliteitszorg op drie niveaus: op (1) instellingsniveau, op (2) facultair niveau en op (3) opleidingsniveau. De onderwijskwaliteit zelf wordt in de opleidingen waargemaakt. Aan de besturen op is de verantwoordelijkheid om die kwaliteit ook op de hogere aggregatieniveaus te sturen en te waarborgen. Zo legt het CvB in de instellingscyclus verantwoording af aan de Raad van Toezicht (RvT) over het gevoerde kwaliteitsbeleid en het functioneren van de kwaliteitszorg aan de VU. De tweemaandelijkse financiële rapportages en halfjaarlijkse integrale rapportages stellen de RvT in staat de vinger aan de pols te houden. De cyclus op het facultaire niveau is vanaf 2011 vernieuwd en heeft een meer integraal karakter gekregen (onderzoek, onderwijs, HRM en financiën). Uitgaande van het instellingsbeleid en –plan formuleren faculteiten hun jaarplannen met eigen streefdoelen en rapporteren viermaandelijks aan het CvB in de zogenaamde portefeuillehoudersoverleggen (PO). De onderwijskwaliteit en de onderwijsresultaten worden behaald in de opleidingen. De kwaliteitszorgcyclus op opleidingsniveau is niet in detail voorgeschreven aan faculteiten maar moet wel voldoen aan landelijke en universitaire regelingen (denk bijvoorbeeld aan: rol opleidingscommissies en examencommissies, Handboek Onderwijskwaliteit) Het doel van deze audit is beter zicht te krijgen op het functioneren van de kwaliteitszorgcyclus in de opleidingen van de Faculteit der Wijsbegeerte en gerichte aanbevelingen te doen over mogelijke verbeteringen. Dat is gebeurd door het bestuderen van stukken uit de facultaire cyclus en (deels opgevraagde) stukken over de opleidingen bachelor Wijsbegeerte en master Wijsbegeerte. Uitgangspunt daarbij is dat de bevindingen te generaliseren zijn naar de andere opleidingen bij de faculteit. In het bijgaande, ingevulde kader doet de auditcommissie verslag van haar bevindingen. Het kader volgt de gebruikelijke stappen in de kwaliteitszorgcyclus: Plan-Do-Check-Act (in onderlinge samenhang en in opeenvolgende cycli). Het gaat, in eerste instantie, om de formele kant van de cyclus: is de documentatie en het bewijsmateriaal op orde? Vervolgens heeft de auditcommissie zich een beeld willen vormen van de mate waarin de teksten de beleving in de werkelijkheid weerspiegelen en van het meer culturele aspect van kwaliteitszorg: leeft het? Wordt de jaarlijkse cyclus plichtsgetrouw doorlopen of is er meer actieve betrokkenheid? Voor een oordeel over deze beide laatste aspecten baseert de commissie zich, behalve op de stukken zelf, op de opgedane indrukken in de gesprekken tijdens het auditbezoek. De observaties van de commissie over deze, meer informele, aspecten van de kwaliteitszorg kunnen niet altijd tot uiting gebracht worden in de toelichting op de oordelen in het kader. Daarom vatten we hieronder de algemene indruk van de commissie samen op drie aspecten. Het formele aspect gaat over de beschikbaarheid van documentatie en bewijsmateriaal en in hoeverre het de werkelijkheid weerspiegelt. Het oordeel over het culturele aspect is naast de informatie uit de beschikbare documentatie, mede gebaseerd op de gesprekken. Tenslotte, omdat we bezig zijn met een gezamenlijke exercitie ter verbetering van de kwaliteitszorg, vermelden we als het zich voordoet een gevonden werkwijze die o.i. als ”best practice” aangemerkt kan worden. Algemeen Formeel: De faculteit streeft naar kwaliteit en dat is aan te treffen bij zowel docenten als studenten. Kwaliteit gaat voor tijd, en de organisatie doet onvoldoende om studievertraging tegen te gaan: studenten overschrijden daardoor de tijdsduur voor bijv. de scriptie ruimschoots, docenten remmen dat nauwelijks af. Kwaliteitscultuur: Kleine organisatie waarin veel beslissingen zijn terug te voeren op persoonlijke contacten. Bezwaar hiervan kan zijn dat er te weinig formeel geregeld is. Als voorbeeld geldt het intervisieproject, in principe een best practice, maar het is de vraag of het in alle gevallen plaats vindt, en zo ja of er verslaglegging over is. Best practice: Intervisie als methode om de professionele kwaliteit van docenten te verhogen. Vanwege het met Godgeleerdheid gedeelde onderwijsbureau gelden de procedurebeschrijvingen hier ook als best practice.


122

Ingevuld auditkader Wijsbegeerte, bezoek dd 16 april 2012 Std

(Deel)onderwerp

1

VISIE De faculteit beschikt over een breed gedragen visie op de kwaliteit van haar 1.1 - 1.3 onderwijs en op het ontwikkelen van een kwaliteitscultuur Visie op onderwijs en 13 2 kwaliteit(scultuur) 13 Aansluiting op laatste versie IP moet nog 2 Visie sluit aan op IP en verwerkt profiel. Concreet: de kernwaarden verantwoordelijk, open en persoonlijk komen terug. Visie bevordert 13 2 betrokkenheid en verbetering BELEID en De faculteit beschikt over adequaat beleid om de visie op de kwaliteit van EVALUATIEBELEID haar onderwijs te realiseren. Dit omvat in elk geval: beleid op het gebied van 2.1 - 2.6 onderwijs, personeel, voorzieningen, toegankelijkheid en studeerbaarheid voor studenten met een functiebeperking, verankering van onderzoek in het onderwijs, alsmede de verwevenheid tussen onderwijs en het (internationale) beroepenveld en vakgebied ONDERWIJSBELEID 08, 12, 14, Weinig inhoudelijke reflectie. 2 Adequaat beleid mbt BA: Streefdoelen gerelateerd aan 32 verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. (zie IP) 12, 14, 32 Samenwerking UvA moet nog 2 Adequaat beleid mbt MA: onderbouwd met een stuk Streefdoelen gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking (zie IP) 19, 36, 37, Stuk uit 2004, is update in aansluiting bij 2 Adequaat beleid mbt 38 Handboek Onderwijskwaliteit gewenst? onderwijsevaluatie (conform de eisen in Handboek hoofdstukken Onderwijsevaluatie par 2.1; Programma par 3.3 en Stage en Thesis 3.1 22, 23, 39 2 Adequaat beleid Toetsen en beoordelen (conform het overeenkomstig Handboekhoofdstuk par 3.1) PERSONEELSBELEID 4 12, par. 16 Is alleen de onderwijslastberekening, Adequaat beleid mbt 4.1.3, 16 maar geen formatieplanning. formatieplanning, Uit 12 blijkt dat er beleid mbt taaktoedeling, werving, jaargesprekken is. benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding (Handboek hoofdstuk professionalisering van docenten par 4.1 eis 1)

1.1 1.2

1.3 2

2.1 2.1a

2.1b

2.1c

2.1d

2.2 2.2a

Document

Toelichting

Oordeel


123

Std

(Deel)onderwerp

Document

Toelichting

Oordeel

2.2b


05- H5, 33, 34, 35

BKO: alle docenten die in aanmerking komen, maar verschil tussen 14% en 100% behoeft verklaring. Afspraken met Onderwijscentrum ontbreken in de stukken

3

2.3 2.3a 2.3b

VOORZIENINGEN Adequaat bibliotheekbeleid Geen beleidsstuk aangetroffen 3 40, 41, 42 Geen beleidsstuk aangetroffen 3 Adequaat beleid mbt onderwijsruimten en studieplekken Adequaat ICT beleid Geen beleidsstuk aangetroffen 3 13, 26, 27 2 Adequaat beleid mbt studiebegeleiding (Handboek hoofdstuk studentbegeleiding par 3.1) TOEGANKELIJKHEID Geen beleidsstuk aangetroffen 3 Adequaat beleid voor studeren met beperking (Conform beleid SCHIB) VERANKERING ONDERZOEK Niet aangetroffen 3 Adequaat beleid mbt verankering onderzoek dmv docenteninzet 13 f 2 Adequaat beleid mbt verankering onderzoek dmv onderwijsvorm VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequaat beleid mbt Nog niet in voorzien 4 veldadviesraad en alumni ZICHT OP De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar RESULTATEN onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit 3.1 – 3.6 van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS Geen documentatie aangetroffen 4 Zicht op realisatie in BA van streefdoelen mede gericht op verhogen kwaliteit, verhogen studierendement, verhogen kosteneffectiviteit. Geen documentatie aangetroffen 4 Zicht op realisatie in MA van streefdoelen mede gericht op instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking Geen systematische overzichten 4 Zicht op realisatie van aangetroffen evaluatiekwaliteit zoals beoogd Idem, helaas ontbreekt dit punt ook in 4 Zicht op realisatie van stuk 24 kwaliteit Toetsen en beoordelen PERSONEEL Zicht op realisatie van NB

2.3c 2.3d

2.4 2.4a

2.5 2.5a

2.5b

2.6

2.6a 3

3.1 3.1a

3.1b

3.1c

3.1d

3.2 3.2a


3.2b 3.3 3.3a 3.3b

3.3c 3.3d 3.4 3.4a 3.5 3.5a

3.5b

3.6

3.6a

4

4.1 4.1a

4.1b

4.1c

(Deel)onderwerp

124 Document

Toelichting

Oordeel

formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Zicht op realisatie van BKO 05, H5 2 beleid VOORZIENINGEN Zicht op resultaten van NB bibliotheekbeleid NB Zicht op realisatie van onderwijsruimten en studieplekken Zicht op realisatie van ICT NB Zicht op resultaten van Geen documentatie aangetroffen 4 studiebegeleiding TOEGANKELIJKHEID Zicht op realisatie van SCHIB NB beleid VERANKERING ONDERZOEK NB BA: Zicht op de mate waarin het onderzoek in het bachelor onderwijs is verankerd en de kwaliteit daarvan. MA: Zicht op de mate waarin NB het onderzoek in het master onderwijs is verankerd en de kwaliteit daarvan. VERWEVENHEID BEROEPENVELD EN VAKGEBIED NB Zicht op resultaten van betrokkenheid veldadviesraad MAATREGELEN De faculteit heeft zicht op de mate waarin haar visie op de kwaliteit van haar 4.1 – 4.6 onderwijs wordt gerealiseerd, en meet en evalueert regelmatig de kwaliteit van haar opleidingen bij studenten, medewerkers, alumni en vertegenwoordigers van het beroepenveld. ONDERWIJS 2 Strikt genomen zou het oordeel NB Adequate maatregelen in BA: 26 moeten luiden, omdat het niet gaat om verhogen kwaliteit, verhogen maatregelen nav resultaten op basis van studierendement, verhogen beleid. Uitgaande van de maatregelen in kosteneffectiviteit. stuk 26 desondanks een 2. NB Adequate maatregelen in MA: Instroom vergroten, ook internationaal, verscherpte toelatingseisen, Amsterdamse samenwerking NB Adequate maatregelen op het terrein van onderwijsevaluatie en -beleid


125

Std

(Deel)onderwerp

4.1d

Adequate maatregelen tav NB toetsen en beoordelen PERSONEEL NB Adequate maatregelen formatieplanning, taaktoedeling, werving, benoeming, inwerkprocedures, professionalisering, jaargesprekken, loopbaanbegeleiding Adequate maatregelen NB professionalisering(sbeleid) VOORZIENINGEN Adequate maatregelen tav NB bibliotheekbeleid NB Adequate maatregelen tav onderwijsruimten en studieplekken Adequate maatregelen tav NB ICT Adequate maatregelen tav NB studiebegeleiding TOEGANKELIJKHEID Adequate maatregelen SCHIB NB beleid VERANKERING ONDERZOEK NB Adequate maatregelen voor verankering onderzoek in onderwijs VERWEVENHEID BEROEPENVELD EN VAKGEBIED Adequate maatregelen mbt NB functioneren veldadviesraad ONDERWIJSDe faculteit heeft een effectieve organisatie- en beslissingsstructuur met ORGANISATIE betrekking tot de kwaliteit van haar opleidingen, waarin de taken, 5.1 – 5.2 bevoegdheden en verantwoordelijkheden duidelijk zijn afgebakend en waarvan de inspraak van studenten en medewerkers deel uitmaakt. Beschrijving van 31 In organogram komt onderwijsorganisatie 3 onderwijsorganisatie faculteit niet voor Beschrijving van Geen document aangetroffen, hier en 3 onderwijsorganisatie daar in stukken opmerkingen, maar opleidingen begrippen opleidingscommissie en onderwijscommissie worden voor de auditcommissie niet inzichtelijk gebruikt.

4.2 4.2a

4.2b 4.3 4.3a 4.3b

4.3c 4.3d 4.4 4.4a 4.5 4.5a

4.6

4.6a 5

5.1 5.2

Document

Toelichting

Oordeel


126

Documenten overzicht Wijsbegeerte 2

Uit facultaire cyclus: 2e portefeuillehouder overleg 2011 (2e PO), gehouden in de periode juni - juli 2011 00 00 WIJS Check&Act list.docx De manier van invullen en verslaglegging kan per faculteit verschillen 01 01 Verbeterplan 2011_WIJS.pdf Idem. Het onderscheid tussen verbetering van kwaliteit en verbetering van kwaliteitszorg is niet altijd duidelijk. 02 02 TSOB input 2e PO WIJS Met instemming van faculteit afgeleide lijst van “smart” 20110624.docx geformuleerde actie punten 03 03 1100 Conceptverslag 2e PO WB Verslag van het gehele PO. Het gaat met name over punt 4, van 08.07.2011 v1 concept.doc (kwaliteitszorg) maar delen van punt 3 (onderwijs) zijn wellicht ook relevant Uit facultaire cyclus: 3e portefeuillehouder overleg 2011 (3e PO), gehouden in de periode oktober – november 2011 04 04 1100 achtmaands 2011.xls voortgang over 2011. H2 (onderwijs) en H4 HRM zijn relevant 05 05 1100 Jaarplan 2012 def (2).xlsx 10 A4tjes. Jaarplan heeft overzichtelijker opzet gekregen. H2d –onderwijskwaliteit is toegevoegd. Een vraag die bij de paragrafen over onderwijs speelt is: hebben we de juiste KPI’s? wat zijn de goede voor kwaliteitszorg? 06 06 3e PO WIJS - input TSOB.docx TSOB input, tijd voor afstemmen met faculteit ontbrak 07 07 Concept verslag 3e PO07 1100 Verslag over het gehele PO. Wijsbegeerte - Verslag PO 3e ronde 20111107.docx Realisatie instellingsplan, invoering richtlijn PCU 08 08 Project Initiatie Document WB Definitieve versies van PID per 1 maart 2012 nov. 2011.doc Algemeen, facultair kwaliteit en kwaliteitszorg 09 Bron onderwijs 2011 https://www.intranet.vu.nl/studentenzaken/onderwijsstati stiek 10 10 NSE 2011 rapportage en NSE 2011, interne VU rapportage vanaf Intranet overzicht WIJS.pdf 11 11 20111128 Waarderingen bij de meest recente opleidingsaccreditaties, WIJSaccreditatiewaarderingen.xlsx samengesteld vanaf rapporten op NVAO site Door faculteit opgestuurd 12 12 MJP WB 2012-2017 definitief (2).doc 13 13 onderwijsvisiejuniNaOv2009.doc 14 14 Nota Herstructurering Bachelor-Master 012012.doc 15 15 Minorenbeleid Faculteit der Wijsbegeerte 23022012.doc 16 16 Berekeningsmodel onderwijs 2010 definitief.doc 17 17 OER Ba WBG2011-2012 def.pdf 18 18 OER Ma WBG2011-2012 def.pdf 19 19 Notitie Interne kwaliteitszorg(feed forward).doc 2

Dezelfde verzameling procedures als bij FGG (21 Portfolio Procedures FGG 20120307.pdf) sectie A tot en met G geldt bij Wijsbegeerte ook – de stukken zijn hier niet nogmaals opgenomen.


127

20 20 verslagen OLC jan 2012, november 2011.pdf

21 22 23 24 25 26 27 28 29 30 31

21 240278 Spec coll BA Decock DEF.pdf 22 ToetsenBeoordelenapril2009.doc 23 TentamenhandleidingWB.doc 24 Jaarverslag Examencommissie Wijsbegeerte 20102011.pdf 25 BSA godgeleerdheid en wijsbegeerte.pdf 26 Eindrapport Studiesucces met commentaar FB.rtf 27 Doelstelling en richtlijnen docentmentoraat.doc 28 Rapport Commissie Docentmentoraat en Vaardigheden.doc 29 Bijlage 1 vragen docentmentoren.doc 30 Bijlage 2 studentmentoren.doc 31 organogram.pdf

Door faculteit nagestuurd 32 32 Rapport Commissie Herstructurering BaMa def.doc

Nagesturd over de BKO 33 33 Voorstel Basiskwalificatie Onderwijs - 2209.doc 34 34 Agendapunt FB_ BKO.pdf 35 35 Basis Kwalificatie Onderwijs.pdf

Jaarverslag OLC is niet aanwezij, vandaar deze twee voorbeeld verslagen Voorbeeld evaluatieverslag Handleiding toetsen en beoordelen

Bijlage bij nr 28 Bijlage bij nr 28 http://www.wijsbegeerte.vu.nl/nl/org anisatie/organisatie/index.asp

Hierin is de informatie aan te treffen rondom verwerking in het nieuwe programma van de opmerkingen van de visitatiecommissie. In 2011-12 is het programma gewijzigd volgens deze plannen. In 2012-13 volgt een volgende wijziging van het programma, ten gevolge van de herlabeling Masters Geesteswetenschappen en de PCU-richtlijnen, maar die is gebaseerd op de herziening van 2011-12. (zie stuk nr 14) Een oud voorstel aan het FB (m.b.t. nieuw aan te stellen docenten). Een recente mail aan het FB n.a.v. mijn gesprek met Sjoerd Sinke van het Onderwijscentrum Mail aan docenten met de vraag om hun Onderwijs C.V.

Nagestuurd over scripties 36 36 Scriptieregeling Bachelor Wijsbegeerte (tm cohort 20062007)_tcm58-106295.pdf 37 37 Scriptieregeling Bachelor Wijsbegeerte Vanaf 2008_tcm58106648.pdf 38 38 Scriptieregeling_master_WB2011_tcm58-106311.pdf 39 39 Beoordelingsformulier scriptie (MA WB)_tcm58107722.pdf Nagestuurd van de FSR 40 40 111216 Advies verhuizing.pdf 31 41 120216 Advies verhuizing 2.pdf 42 42 Reactie op ODC en FSR.doc


128

Bezoek Interne Auditcommissie aan Faculteit der Wijsbegeerte Datum Tijd Plaats Doel Opleidingen

: 16 april 2012 : 13:00 – 17:00uur : 13a11/13a13 en 13a42 : ter voorbereiding op Instellingsaudit ca. maart 2013 : B-Wijsbegeerte en M-Wijsbegeerte

======================================================

Leden interne audit-commissie: Prof.dr. Peter Hollander (voorzitter), Drs. Eveline Kok (secretaris), Rob van Nie, RE, RA (Accountantsdienst VU), Prof.dr. Herman Verhoef; Dr. Elseline Vester; Sybren van Dokkum (studentlid); Floor Elsenburg MSc (notuliste) Tijdschema bezoek: 31-01-2012 13:00-13:45 13a13/13a11 13:45-14:30 13a13/13a11

Gesprekspartners verzocht Opleidingsdirecteur(en)/ Onderwijsdirecteur/Kwaliteits zorgmedewerker Studentvertegenwoordiging:

14:30-15:00 13a13/13a11 15:00-15:30 15:30-16:15 13a13/13a11


16:15-17:00 13a13/13a11


Namen gesprekspartners Dr. J.M. Halsema (pfh Onderwijs), ) en drs. J. Reinders (hoofd onderwijsbureau) FSR: W.J. Hilderink, P.M.A. van Wierst en F. Zwartbol OLC’s: P.M.A. van Wierst, B.P. van Croesdijk, R. van Marle, Y.M. de Boer en L.B. van der Holst. Bekendgemaakt per mail Kamer 13a42 Examencommissie: prof. dr. Hans Radder (vz), dr. Loes Derksen en prof. dr. Reinier Munk Opleidingscommissie: prof. dr. Bert Musschenga (vz), dr. Ad Verbrugge, drs. Jelly Reinders, dr. Govert Buijs, dr. Frits Schipper en dr. Edwin Koster Prof. dr. R. van Woudenberg (decaan), Dr. J.M. Halsema (pfh Onderwijs) en Mr. A.W. Mulder (dir BV)


129

Bijlage V Overzicht onderwijsorganisatie faculteiten

Bij de facultaire audits is gebleken dat de feitelijke verantwoordelijkheden voor onderwijsbeleid, onderwijsorganisatie en onderwijsprogrammering niet overal op dezelfde manier geregeld zijn. Uiteindelijk is natuurlijk het faculteitsbestuur verantwoordelijk maar de taken zijn op verschillende manieren gedelegeerd. Voor deze paragraaf is – naast wat er in de wet geregeld is - gebruik gemaakt van het Handboek Onderwijskwaliteit, Hoofdstuk Onderwijsorganisatie, versie april 2011, van de door de faculteiten aangeleverde organogrammen en/of reglementen en hun toelichting hierop en van de informatie op de facultaire websites. Zowel de organogrammen als de informatie op de website is niet altijd helder en ook niet altijd actueel. In de Wet op het Hoger Onderwijs en Wetenschappelijk Onderzoek (WHW) is vastgelegd dat iedere faculteit aan het hoofd van de faculteit een decaan heeft of een faculteitsbestuur waarvan een student als adviserend lid deel uitmaakt. Daarnaast is vastgelegd dat aan het hoofd van een opleiding een opleidingsdirecteur staat of een opleidingsbestuur waarvan een student als adviserend lid deel uitmaakt. Voor iedere opleiding of cluster van opleidingen benoemt het faculteitsbestuur een opleidingscommissie die uit een gelijk aantal docenten en studenten van de betreffende opleiding(en) bestaat, en een examencommissie De auditcommissie was vooral geïnteresseerd in de vraag bij wie de feitelijke verantwoordelijkheid voor het onderwijsbeleid belegd was, bij wie het management van het onderwijs of de uitvoering van het beleid en bij wie de (eerste aanzet tot) de inrichting van de onderwijsprogramma’s en de relatie van deze verantwoordelijken met opleidingscommissie en afdelingshoofden. Het gaat hier in feite om 5 onderscheiden taken: 1. verantwoordelijk voor het facultaire onderwijsbeleid en de vaststelling van de onderwijsprogramma’s 2. verantwoordelijk voor het management van het onderwijs en de uitvoering van het facultaire onderwijsbeleid 3. verantwoordelijk voor de uitvoering van het onderwijs in een of enkele opleidingen en voor de ontwikkeling van programma’s binnen het facultaire beleid 4. brengt advies over de komende OER (o.a. onderwijsprogramma’s) uit en evalueert uitvoering OER 5. verantwoordelijk voor de inzet en kwaliteit van docenten in de opleidingsprogramma’s

Voor de invulling van deze taken zijn de volgende mogelijkheden: Taak 1 ligt bij het faculteitsbestuur, Taak 2 kan ook bij de portefeuillehouder onderwijs liggen, maar hiervoor kan ook een aparte onderwijsdirecteur benoemd zijn. Taak 3 ligt bij de in de wet vastgelegde opleidingsdirecteur, maar is in faculteiten verschillend belegd. Taak 4 is de belangrijkste en wettelijk vastgelegde taak van de opleidingscommissie.


130

Taak 5 ligt bij de afdelingshoofden die leidinggeven aan het wetenschappelijk personeel (wp).

In onderstaand schema is aangegeven welke faculteiten een portefeuillehouder onderwijs én een onderwijsdirecteur hebben en in welke faculteiten beide taken in een functie gecombineerd zijn. Verder is aangegeven hoe taak 3 belegd is. Alle faculteiten hebben zoals voorgeschreven een of meer opleidingscommissies. Ook zijn er afdelingshoofden benoemd. Schema: Taken onderwijsbeleid en onderwijsmanagement Faculteit

FALW FBW FEWEB FEW GNK FGG LET RCH FPP FSW ACTA WIJS

Pf ow én dir ow (2 pp) + +

Pf ow + ow direct. (1 p) + + + + + + + + + + + +

Taak 3

Documentnummer

Opmerkingen

Opl. Direct. Opl. Com. Opl. Bestuur Opl.Directeuren Dir. Ow Instit. Opl. Com. Afd hoofden ? Afd hoofden Pf.ow in afdbest Opl. Directeur Opl. Com.

18 26, 27 14 16, 17

Afdhfd = vz opl cie

32, 33, 34 36

Pf ow in MT afdeling

Het onderwijsbeleid en de onderwijsorganisatie en –administratie worden ondersteund vanuit het faculteitsbureau, vaak onder verantwoordelijkheid van een hoofd onderwijsbureau. Bij de ondersteunende taken kunnen betrokken zijn een onderwijsadminstratie en beleids- en/of kwaliteitszorgmedewerkers of onderwijscoördinatoren. Aanbeveling: De commissie heeft geconstateerd dat de verschillende taken op verschillende manieren bij mensen en commissies belegd zijn. De commissie is van mening dat de beleids- en managementtaken ten aanzien van een of meer opleidingen horen te liggen bij anderen dan degenen die vanuit hun hierarchische rol verantwoordelijk zijn voor het hrm-beleid van het wp. Zij is van mening dat een duidelijker lijn, zoals beschreven wordt in het Handboek Onderwijskwaliteit, in de universitaire regelgeving en facultaire reglementen, de organisatie ten goede komt.

Onderwijskwaliteit: onze zorg

Recommend Documents