Actuele ontwikkelingen
Netwerkbijeenkomst Contactpersonen COE
Welkom 16 april 2013
Actuele ontwikkelingen Programma 13.00
Stand van zaken regelgeving
13.15
Terugblik pilotexamen COE periode 3 en 4
13.30
Afname COE buiten de eigen mbo-instelling
14.00
FACET, de afname software die op termijn ExamenTester gaat vervangen
14.30
Pauze
15.00
Nadere aanwijzingen voor aanpassingen in examinering voor kandidaten met een beperking
16.00
Discussie naar aanleiding van bovengenoemde onderwerpen
16.30
Netwerken en borrel
Actuele ontwikkelingen Mededelingen Steunpunt N.a.v. voortgangsrapportage 19 december 2012
Brief ministerie OCW (binnenkort) • • • • •
Slaag-/zakregeling Vermelden van resultaten Maatwerk examinering VMBO Studenten met een beperking Centrale examens Engels
ICO Taal en Rekenen
Actuele ontwikkelingen Financiële middelen -> prestatiebox Bloemlezing implementatieplannen Methodes/lesmateriaal
Opleidingen/trainingen cursussen Netwerkbijeenkomsten rekenen – vacature pioniersgroep
CENTRAAL ONTWIKKELDE EXAMENS T & R Terugblik P3 2012-2103
Jan Paul de Vries 16-04-13
OPSCHALING 2F Taal: 19.454 (najaar 2012: 8.851) Rekenen: 19.194 (najaar 2012: 9.011) 3F Taal: 18.595 (najaar 2012: 15.214) Rekenen: 19.045 (najaar 2012: 14.549) Voor P4 nu al ca. 15.000 voor taal 2F en rekenen 2F! Opschaling is een feit. Compliment aan de instellingen die deze logistieke operatie realiseren!
INHOUD 2F: • tijdsduur t&r voldoende • resultaten rekenen iets hoger (vooral mbo-2) • resultaten taal ongeveer gelijk 3F: • tijdsduur rekenen weer te krap • resultaten rekenen iets verbeterd • resultaten taal iets minder Kritiek op beperkte functionaliteit rekenmachine Conclusies: • wijzigingen in pilotexamen rekenen 3F zouden zichtbaar moet worden in P4!
TECHNIEK 1. Weinig problemen; • Wit scherm bij een opgave (is nader onderzocht door Cito; oorzaak: videokaart) 2. Opschaling leidt wel eens tot problemen (zeer grote aantallen binnen TM heeft nog aandacht nodig); Opschoning: • zie nieuwe versie van service-document ExamenTester mbo (hoofdstuk opschonen en archiveren); • denk goed na over aantallen portal-accounts!
LOGISTIEK & ORGANISATIE Tijdens afname nauwelijks problemen; Rapportage resultaten rekenen 3F: opeenstapeling van problemen; Fouten in de afhandeling: CvE en Cito evalueren en trekken conclusies om dit te voorkomen! Ook wij hebben e.e.a. te leren!
PROCEDURES 1. Ervaringen met ongeldig verklaren van individuele afname; 2. Te vroeg of te laat plannen van afnames: • Package van P3 gebruiken in planning voor P4; • Taal 3F plannen en afnemen voordat dit mag volgens Handboek; m.i.v. van 2013-2014 strak tijdslot van twee weken! Overige procedures: kandidaten met beperking volgt na de pauze.
ANDERE REKENMACHINE Twee soorten problemen: • onjuiste bewerkingen (afrondingen) • gebrekkige functionaliteit Gebruik andere rm binnen ExamenTester voor 2013-2014; • Flash-applicatie die in VO gebruikt wordt; • Uitgebreide functionaliteiten (lijkt op CASIO) • Uitrol losse applicatie. • ExamenTester heeft nu Flash nodig! • Geen losse rekenmachine meer toestaan. Uitrol nieuwe voorbeeldexamens en losse applicatie voor de zomervakantie. Nadere info volgt!
EXAMENBLAD MBO In de toekomst 1 loket voor alle regelgeving die geldt voor de (pilot) COE’s; Dat wordt Examenblad MBO: • website met regels (syllabi, examenduur, periodes, hulpmiddelen, afname-protocol, regels voor kandidaten met een beperking etc.) In werking per september 2013; Presentatie op de voorlichtingsbijeenkomsten in sept. 2013;
RAADPLEGING SYLLABI Nieuwe concept-syllabi geredigeerd voor syllabuscommissies taal en rekenen mbo; • Betere afstemming tussen syllabi 2F en 3F ; • Zo mogelijk meer helderheid en duidelijkheid voor docenten; • Aandachtspunt complexiteit bij rekenen (in nieuwe versies meer contextloze opgaven -> 20%); Publicatie eind april via Steunpunt; vanaf september ook op Examenblad mbo;
OVERIG Enquête: aanvullende informatie op wat studenten melden over rekenonderwijs; • Geef link naar digitale vragenlijst door aan teamleiders etc. • respons tot aan 30 april a.s.
Rapportage over voortgang implementatie • In juni volgt weer rapportage van minister aan TK; • Dan publicatie van behaalde resultaten (2012-2013);
EXAMINEREN BIJ DERDEN Servicedocument van Steunpunt, CvE, Cito en saMBO-ICT
Beschrijft aandachtspunten: • Techniek; • Logistiek; • Procedures/regelgeving; Terminologie Instelling A: diplomeert (examencommissie tekent voor diploma) Instelling B: voert diensten uit voor instelling A (kan andere onderwijsinstelling zijn of commerciële dienstverlener) 2 scenario’s
EXAMINEREN BIJ DERDEN •
Procedures/regelgeving:
Scenario 1 (afname op andere instelling, onderwijsinstelling of commerciële dienstverlener): Instelling A blijft altijd verantwoordelijk voor diplomering en voor examinering! • Portal–account blijft geregistreerd op naam van instelling A; • Instelling A krijgt altijd vanuit Cito alle informatie en de rapportages; • Instelling A moet eventueel aan Inspectie de afname documenteren (logboek en proces-verbaal);
EXAMINEREN BIJ DERDEN •
Procedures/regelgeving:
Scenario 2 (stand-alone): In zwaarwegende omstandigheden (bij twijfel: verzoek indien bij CvE); Is risicovol met oog op geheimhouding: • Let op aanwijzingen in protocol van afname (logboek en procesverbaal); • Voor komend jaar melden bij CvE, wij volgen deze procedures;
Scenario 1 – Examineren bij derden • Gebruik eigen portal account (instelling die diplomeert) • Technische inrichting 1. Lokaal (locatie) apart ingericht 2. Gebruik van meerdere portal accounts per locatie
• Beperkingen ExamenTester MBO – – – –
Aantal leerlingen <2500 U kunt met ExamenTester MBO 2.10 één LocalServer installeren op één server. U kunt met ExamenTester MBO 2.10 één TestCenter installeren op één afnamecomputer gerelateerd aan de LocalServer (portal account). U kunt met ExamenTester MBO 2.10 één TestManager installeren op één computer gerelateerd aan de LocalServer (portal account)
Scenario 1 – Examineren bij derden Technisch oplossingen/mogelijkheden ExamenTester MBO •
LocalServer – Inzet virtuele server (op één fysieke server wel meerdere LocalServers mogelijk)
•
TestCenter en TestManager – Communicatie via poortnummer (=21021) en LocalServerId (=server) – Image van afnamecomputer – Via script meerdere TestCenter installaties naast elkaar mogelijk → Risico’s → ICT-deskundigheid nodig → wordt niet door Cito ondersteund
Scenario 1 – Examineren bij derden Samenvatting per locatie meerdere portal accounts –
Deze optie kan gekozen worden als er sprake is van een gescheiden omgeving: aparte LocalServer met apart daaraan verbonden afnamecomputers.
–
Als deze optie gekozen wordt, zullen ook de resultaten per portal account verwerkt en gerapporteerd worden.
–
Per locatie gebruikt u in dit scenario meerdere portal accounts. Bepaal daarom secuur welk portal account u voor welk deel binnen uw locatie inzet.
–
Centraal beheer is in dit scenario lastiger. Zo is het niet mogelijk om verschillende versies van ExamenTester MBO 2.10 op één computer te installeren
Scenario 1 – Examineren bij derden Aandachtspunten tussen instelling A en instelling B – Keuze gebruik van TestManager – Invoer kandidaten en afnameplanning
(instelling A/instelling B) (instelling A/instelling B)
– Centrale data communicatie (synchronisatie) via GlobalServer – – – – –
Verplichte systeemcheck (instelling B) Beschikbaarheid/installatie van package (instelling B) Afname: Start juiste TestCenter applicatie (instelling B) Synchronisatie en dataretour (instelling A/instelling B) Ontvangen rapportages (instelling A)
– Opschonen en archivering (instelling A/instelling B) zie Servicedocument ExamenTester MBO (beperking <2500 leerlingen)
Scenario 2 – Standalone afname Afname binnen de instelling:
Scenario 2 – Standalone afname
Scenario 2 – Standalone afname
Scenario 2 – Standalone afname Installatie en configuratie • • • • • • • • • •
De laptop verbinden met internet De LocalServer installeren De LocalServer configureren (invoeren van juiste ToetsNet Portal) De ClientSetup’s aanmaken TestCenter installeren (TestCenterSetup.exe) TestManager installeren (TestManagerSetup.exe) TestManager starten (als supervisor of examensecretaris) Packages installeren TestManager afsluiten De verbinding met internet verbreken
Scenario 2 – Standalone afname Aandachtspunten standalone afname • •
TestCenter, TestManager, LocalServer en datamap op dezelfde computer (laptop) geïnstalleerd. Gebruik hetzelfde portal account (ToetsNet Portal account)
• •
Communicatie via GlobalServer Synchronisatie vóór en na een afname (via GlobalServer) – – –
•
Leerling en afnameplanning Toevoegingen, wijzigingen, verwijderen Geplande en/of niet geplande afnameplanning
Beveiliging – – – – –
Inloggen op de laptop Wachtwoord BIOS Wachtwoord Toetsleider Gebruik sterke wachtwoorden Installatie van package op laptop
Naslagwerk • Handboek COE www.coe.cito.nl
• Servicedocument ExamenTester MBO 2.10 www.coe.cito.nl
• Servicedocument Steunpunt www.steunpuntaalenrekenenmbo.nl
Vragen Zijn er nog vragen?
FACET
Hanne Dues Implementatiemanager computerexamens
FACET Nodig voor alle computerexamens die onder verantwoordelijkheid gaan vallen van het College voor Examens • Centrale examens VO • Centraal ontwikkelde examens MBO • Rekentoets VO • DTT VO (Diagnostische tussentijdse toets) • Eindtoets PO • Examens Nederlands als tweede taal (NT2) • …
ALGEMEEN •
Spelers • CvE – gedelegeerd opdrachtgever
• DUO – beheerder Facet • Cito leverancier examens
• Klankbordgroep: denkt mee en werkt mee vanaf het begin; levert de pilotscholen – alle typen scholen – dus ook MBO (4 instellingen) • Resonancegroep: denkt mee over de implicaties voor de sector alleen MBO (12 instellingen)
ALGEMEEN • Logistiek (inplannen, afhandelen)
• Gebruik beveiligde site DUO (met tokens) • Browser-based en online • Afname
• Afgeschermde omgeving / let op: wel installatie voor beveiliging
Examenlocatie
College voor Examens
BROn SAS
Kandidaatgegevens
Logistiek
Examens
Examens
Afnameplanningen
Afnames
Antwoorden
Antwoorden
Eindscore Cijfers Afname
CITO
Centrale server DUO
Correctie
Fase 1 - voorbereiden Examenlocatie
College voor Examens
BROn SAS
Kandidaatgegevens
Logistiek
Examens
Examens
Afnameplanningen
Afnames
Antwoorden
Antwoorden
Eindscore Cijfers Afname
CITO
Centrale server DUO
Correctie
BEHEER •
Centraal beheer mogelijk– meerdere locaties vanaf één locatie
•
Online – kan ook vanaf thuis
•
Facet kiest de variant automatisch
•
Verklankingsvariant wordt automatisch gekozen (afhankelijk van instelling kandidaat)
HET MAKEN VAN AFNAMEPLANNINGEN Alles via beveiligde site van DUO Manier 1 – via import kandidaten (zoals in ExamenTester)
• Import kandidaatgegevens uit SAS • In Facet planningen maken
Manier 2 – via import planningen (alleen MBO) • Import van reeds gemaakte planningen vanuit roosterpakket • Via csv/xml (wordt nu getest) • Via Webservice (in ontwikkeling)
MANIER 1 – VIA IMPORT KANDIDAATGEGEVENS •
•
Importeren kandidaatgegevens •
Extra kandidaatgegevens voor MBO (schooltype, CREBO) niet meer nodig (loopt via persoonsgebonden nummer en BRON)
•
Meer mogelijkheden om lijst te sorteren en te selecteren
•
Bovenschools beheer - Meerdere brins bedienen vanaf één plek
Maken afnameplanningen in Facet •
Facet bepaalt welke variant(en) wordt/worden gekozen
•
Geen aparte dyslexievarianten nodig omdat verklanking in Facet aanwezig is
•
Per groep is online of offline afname mogelijk
MANIER 2 – VIA IMPORT AFNAMEPLANNING • Importeren als bestand in csv of xml formaat
Fase 2 - afname Examenlocatie
College voor Examens
BROn SAS
Kandidaatgegevens
Logistiek
Examens
Examens
Afnames
Afnames
Antwoorden
Antwoorden
Eindscore Cijfers Afname
CITO
Centrale server DUO
Correctie
DE AFNAME •
Examenbestand wordt 48 uur vóór afname automatisch naar afnameomgeving gedistribueerd • Online – afnameomgeving staat bij DUO • Offline – afnameomgeving staat op de examenlocatie
•
Afnamedashboard in afnamelokaal voor de toetsleider/afnameleider
•
Afname vindt plaats in een afgeschermde omgeving (lockdown client)
•
Meer hulpmiddelen (loep, kladblok, tekst markeren) en uitgebreide navigatie (overzichtsscherm, vragen markeren) Werken met secties (terugbladeren bij rekenen)
•
Fase 3 afronden Examenlocatie
College voor Examens
BROn SAS
Kandidaatgegevens
Logistiek
Examens
Examens
Afnames
Afnames
Antwoorden
Antwoorden
Eindscore Cijfers Afname
CITO
Centrale server DUO
Correctoren
AFRONDEN •
Cijfer en vaardigheid worden berekend in Facet
•
Rapportage cijfers en vaardigheden vanuit Facet
•
Schoolrapportages via Cito verdwijnen, gaan via Facet
•
Export van rapportages mogelijk als csv en xml
SAMENVATTEND: WAT BETEKENT FACET VOOR EEN INSTELLING? • • • • • • •
Online betekent geen lokale serverinstallatie Offline installatie naar verwachting eenvoudiger (virtueel) Examens automatisch gedownload Afnameplanningen importeren Facet kiest variant automatisch Token nodig voor toegang beveiligde site DUO Nieuwe rollen op locatie
VOLGENDE STAPPEN •
Pilot in juni (Rekentoets VO tijdens examentijd)
•
COE MBO en overige VO-examens buiten examentijd in mei/juni
•
Go / no go juni 2013!
•
Invoeringsplan in juni 2013 vaststellen
•
Mogelijkheden van Facet volledig bruikbaar na volledige vervanging ExamenTester
INVOERING •
Uitgangspunt: ongestoorde afname Invoering afhankelijk van testresultaten
•
Klankbordgroep (kb) gaat voorop in de pilot
•
Olievlek strategie Beheerste invoering door CvE – geen vrije aanmelding Vanaf september benaderen veld door CvE
•
Offline en online versie tegelijk
INVOERING TIJDLIJN 2013/2014 pilot COE’s in oktober/november met kleine groep daarna beheerst uitbreiden 2014/2015 verder beheerst uitbreiden tot in P3 de keuze aan de instellingen is 2015/2016 Facet helemaal ingevoerd
MOGELIJKE INVOERING
2013
2014 2015 2016 Schooljaar 2013-2014 Schooljaar 2014-2015 Schooljaar 2015-2016 F MA MJ J A S O N D J F MA MJ J A S O N D J F MA MJ J A S O N D J F MA MJ J
MBO COE taal
test
kb
max 15%
max 30%
max 60%
max 90%
Over
Alleen Facet
MBO COE rekenen
test
kb
max 15%
max 30%
max 60%
max 90%
Over
Alleen Facet
VRAGEN?
Actuele ontwikkelingen Discussie •
Afname COE buiten de eigen instelling
•
Invoering Facet
•
Kandidaten met een beperking
•
Andere onderwerpen??