Deliverable 4.8 en 4.9
Verslag en evaluatie onderwijsactiviteiten testfase 2 1 februari 2012 – 1 september 2012 In dit document zijn de verslagen en evaluaties opgenomen van de onderwijsactiviteiten van het Onbetwist-project in testfase 2. Voor het opstellen van de verslagen en evaluaties was een sjabloon beschikbaar gesteld. Bij de Universiteit Maastricht zijn via de eigen instellings ELO opgaven beschikbaar gesteld aan studenten. Deze opgaven zullen in een later stadium opgenomen worden in de Onbetwist database. Bij de Universiteit Utrecht waren dit voorjaar geen onderwijsactiviteiten in het onderwijsproject Lineaire algebra. Bij de Universiteit Utrecht zijn deze zomer in het onderwijsproject voor Scheikunde items gebruikt uit de Digitale wiskunde omgeving van de UU, zowel als entree- als als posttoets. Bij de Universiteit Utrecht zijn afgelopen periode in het onderwijsproject voor Informatica items uit de Onbetwist database gebruikt, zowel als entree- als als posttoets. Bij de Universiteit van Amsterdam zijn afgelopen periode in het onderwijsproject voor Biomedische wetenschappen items gebruikt uit de Digitale wiskunde omgeving (van de UU). Bij de Universiteit van Amsterdam zijn afgelopen periode in het onderwijsproject voor Levenswetenschappen items gebruikt uit de Digitale wiskunde omgeving (van de UU). Bij de TU Eindhoven zijn items uit de Onbetwist database grootschalig ingezet bij een zomercursus voor eerstejaars. Bijna 2.000 studenten hebben items gemaakt, samen hebben ze ongeveer 300.000 maal een elektronische opgave gemaakt. Bij de Open Universiteit is bij het onderwijsproject Basiscursus wiskunde geen gebruik gemaakt van items uit de Onbetwist database omdat ze niet voldoende gemakkelijk beschikbaar waren, en er voldoende andere items voorhanden waren. Bij het onderwijsproject Voorbereidingscursus wiskunde A en T zijn wekelijks opgaven ingezet en gemaakt door studenten. Van de Onderwijsprojecten TUE/Lineaire algebra en UU/Economie zijn geen rapportage en evaluaties over de afgelopen periode ontvangen. Conclusie Uit de rapportages valt af te leiden dat er op het gebied van digitale toetsing en wiskunde aansluit- en eerstejaars onderwijs bij de instellingen veel gebeurt, maar dat er nog weinig gebruik gemaakt wordt van de Onbetwist database. Iedere instelling werkt vooralsnog
voornamelijk met eigen oplossingen en materialen. Perspectief is wel dat er items aangeleverd en ingevoerd zullen worden. Alleen in Eindhoven wordt grootschalig gebruik gemaakt van items die ook in de Onbetwist database voorkomen, al moeten veel van die items nog beoordeeld worden door de redactiecommissies. Hierna zijn de afzonderlijke rapportages opgenomen, voor zover ontvangen.
Verslag en evaluatie Implementatieproject testfase 2 1 februari 2012 – 1 september 2012 Contactpersoon implementatieproject
F.Beukers
Onderwijsinstelling / faculteit / afdeling
Universiteit Utrecht
Verslag
Er hebben geen activiteiten plaatsgevonden in dit blok
Evaluatie Implementatieproject testfase 2 1 februari 2012 – 1 september 2012 Contactpersoon implementatieproject Onderwijsinstelling / faculteit / afdeling
Egbert Mulder, Annik van Keer, Henk van der Kooij Universiteit Utrecht, Scheikunde, Onderwijsinstituut
Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek)
VWO-wiskunde
Hoe zijn de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via instellings-elo, …)
Digitale Wiskunde Oefenomgeving, www.fi.uu.nl/dwo/sk Op papier
Hoe zijn de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als officiële toets, …)
Als entree- en posttoets en oefenmateriaal bij de Wiskunde Zomercursus
Hoeveel items en/of toetsen zijn gebruikt?
Twee toetsen, entree- en posttoets, ca 20 per toets, en als oefenmateriaal tijdens de cursus Digitale Wiskunde Oefenomgeving, www.fi.uu.nl/dwo/sk
Zijn er ook nog items en/of toetsen gebruikt buiten Onbetwist? Is de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Ja
Hoe is gebruik gemaakt van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Klassikaal tijdens de Wiskunde Zomercursus. Deze besloeg 5 middagen (27-31 augustus 2012), 27 deelnemers (eerstejaars, tweedejaars recidivisten en premaster studenten) 60 uur
Welke tijdsinzet is gebruikt in deze fase van het project?
Verslag en evaluatie Implementatieproject testfase 2 1 februari 2012 – 1 september 2012 Contactpersoon implementatieproject
Johan Jeuring
Onderwijsinstelling / faculteit / afdeling
Universiteit Utrecht / Betawetenschappen / Informatica
Verslag Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek)
VWO-wiskunde
Hoe werden de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via instellings-elo, …)
Items worden voornamelijk elektronisch ter beschikking gesteld via instellings-wiki. Toetsen worden op papier afgenomen.
Hoe werden de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als officiële toets, …)
Onbetwist items worden ingezet bij de instaptoets en uiteindelijke toets, en bij de oefenitems door het jaar heen.
Hoeveel items en/of toetsen zijn gebruikt?
Een toetsen, enkele tientallen items.
Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist?
Er worden ook nog items aangeboden uit Math-Bridge.
Was de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Nog niet: het zou mooi zijn als de Freudenthal applets ook toegevoegd zouden worden op de een of andere manier.
Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Door het te publiceren op de vakpagina’s, het gebruik te demonstreren, en eventuele problemen met oefeningen te bespreken. Tijdens de feedback-bijeenkomsten worden alleen problemen met het oplossen van opgaven besproken. Hoeveel uren zijn in deze fase van het project 11 ingezet? Evaluatie Geef hiernaast een korte evaluatie van testfase 1, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fasen van het project worden veranderd?
Ik kan de Freudenthal applets makkelijk gebruiken, maar het is me nog niet helemaal duidelijk hoe ik de Onbetwist database makkelijk in zou kunnen zetten.
Verslag en evaluatie Implementatieproject testfase 2 en ontwikkelfase 3 1 februari 2012 – 1 september 2012 UvA, 1e jaar bacheloropleiding biomedische wetenschappen: Cursus Humane Fysiologie & ICT Wiskunde 2
Contactpersoon implementatieproject
André Heck, Jan Hindrik Ravesloot
Onderwijsinstelling / faculteit / afdeling
UvA, FNWI
Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek) Hoe werden de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via instellings-elo, …)
VWO-wiskunde en Calculus (met name differentiaalvergelijkingen
Hoe werden de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als officiële toets, …)
4 weken in blok 5, met digitale wiskundeoefeningen om de wiskunde te leren die leidt tot begrip van Hodgkin-Huxley model in neurofysiologie. Studenten werden voorafgaand aan de twee colleges gevraagd om zelfstandig met het lesmateriaal te werken
Hoeveel items en/of toetsen zijn gebruikt?
18 DWO oefen-items zijn ontwikkeld, min of meer afgestemd op de studie levenswetenschappen. Verder zijn 5 Geogebra/Excel gebaseerde opdrachten en 13 pen-en-papier opdrachten met pencasts als uitwerking geïmplementeerd GeoGebra-gebaseerde opdrachten vallen buiten ONBETWIST kader
Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Homepage van docent bevatte het digitale lesmateriaal opgezet naar analogie van UvAe-klas en de DWO was de voornaamste digitale wiskunde oefenomgeving
Wat betreft basisvaardigheden (bijv. integreren van functies) wel, maar er was behoefte aan oefeningen in de context van levenswetenschappen om de studenten te motiveren, ook op het gebied van differentiaalvergelijkingen Minimumdeelname aan opgavenpractica
Hoeveel uren zijn in deze fase van het project In testfase 2 en ontw. Fase 3: 70 uur. ingezet? Deze fase werd vooral gebruikt voor didactisch en inhoudelijk ontwerp van de cursus, om lesmateriaal op te bouwen en dit te gebruiken in de implementatie van de cursus in blok 5. Geef hiernaast een korte evaluatie van Voorgenomen activiteiten voor ICT testfase 2, met als aandachtspunten: Wiskunde in blok 5 van het eerstestudiejaar
-
zijn de voorgenomen activiteiten uitgevoerd? zijn de voorgenomen doelen gehaald? wat ging goed, wat ging slecht? wat moet er komende fasen van het project worden veranderd?
voor biomedische wetenschappen zijn gerealiseerd (voor 150 studenten). Uit de evaluatie is gebleken dat de leerdoelen te hoog gegrepen waren: studenten hadden veel moeite met de lesstof en hadden behalve oefening graag meer college gehad en zouden ook een werkcollege en/of vragenuur gewenst hebben. Ook hadden ze behoefte aan meer uitgewerkte voorbeelden. Het onderdeel is niet getentamineerd om geen struikelblok voor studenten te zijn bij eht vak Humane anatomie en fysiologie.. De cursus moet gereviseerd worden voor volgend jaar: de digitale aanpak kan gehandhaafd worden bij herhaling van wiskunde, maar het cursusmateriaal moet aan het wiskundeniveau van de studenten aangepast worden daar waar het om nieuwe lesstof gaat. Bij ICT wiksunde 1 in blok 1 zal al meer aandacht aan differentiaalvergelijkingen besteed worden in een college en practicum.
Verslag en evaluatie Implementatieproject testfase 2 en ontwikkelfase 3 1 februari 2012 – 1 september 2012 UvA, 1e jaar bacheloropleiding levenswetenschappen: Cursus Biochemie & Celbiologie & ICT Wiskunde 1 Contactpersoon implementatieproject
André Heck, Tanneke den Blaauwen
Onderwijsinstelling / faculteit / afdeling
UvA, FNWI
Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek)
VWO-wiskunde, i.h.b. rekenen met grootheden, wiskundige functies en hun afgeleiden. wiskunde van groeiprocessen,
Hoe werden de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via
Elecktronisch: BlackBoard is communicatiemiddel en DWO is de digitale wiskunde oefenomgeving
instellings-elo, …) Hoe e de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als officiële toets, …)
In week 1 een diagnostische toets; verder wekelijks in blok 1, met digitale wiskundeoefeningen om op het gewenste wiskunde A niveau (terug) te komen en met een nieuw stukje wiskunde (differentiaalvergelijkingen) kennis te maken. Nieuw is een herhaling van de diagnostische toets in week 8 om vooruitgang te peilen.
Hoeveel items en/of toetsen zijn gebruikt?
Eerder ontwikkeld diagnostische vwowiskunde A toets (met 16 vragen) en toetsmateriaal (50 items) is verbeterd en opnieuw ingezet. Nieuw waren extra facultatieve oefeningen van VWO-wiskunde: het betrof 26 DWO activiteiten met in totaal 214 items. Sommige studenten hebben inderdaad van de extra onderdelen gebruik gemaakt
Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist?
Ja, toetsen op Prep-U niveau 5 uit de bioportal horende bij het studieboek Life.
Was de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Wat betreft basisvaardigheden (bijv. rekenen, differentiëren van functies) wel, maar er blijft behoefte aan oefeningen in de context van levenswetenschappen om de studenten te motiveren. Een minimum slagingspercentage toegang geeft tot (deel)tentamens.
Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Hoeveel uren zijn in deze fase van het project In testfase 2 en ontw. Fase 3: 25 uur ingezet? Deze fase werd vooral gebruikt om lesmateriaal te verbeteren en aan te passen. Geef hiernaast een korte evaluatie van Voorgenomen activiteiten voor ICT testfase 2 – ontwikkelfase 3, met als Wiskunde 1 in blok 1 van het eerstestudiejaar aandachtspunten: voor levenswetenschappen zijn gerealiseerd - zijn de voorgenomen activiteiten (voor 550 studenten). uitgevoerd? Oorspronkelijke DWO modules zijn in - zijn de voorgenomen doelen gehaald? kleinere blokken opgesplitst die wekelijks - wat ging goed, wat ging slecht? aangeboden werden. Dit lijkt te bevorderen - wat moet er komende fasen van het dat studenten bij blijven en niet onnodig te project worden veranderd? veel vooruit werken. Eventuele technische problemen hebben dan ook minder nadelige gevolgen. Uit eerder DWO-materiaal kon gemakkelijk extra materiaal gehaald worden: hergebruik werkt in praktijk
Verslag en evaluatie Implementatieproject testfase 2 en ontwikkelfase 3 UvA, 1e jaar bacheloropleiding levenswetenschappen: Cursus Methoden van onderzoek en statistiek In testfase 2 en ontw. Fase 3 was beoogd 20 uur werk te stoppen in uitbouw van lesmateriaal en testen in MapleTA server van UvA, met speciale aandacht aan implementatie en evaluatie. Dit is niet gebeurd vanwege overload van werkzaanmheden van betrokken personen (André Heck en Maarten Boerlijst), waardoor schwung uit dit onderdeel gekomen is. Ook stond installatie van een nieuwe Maple TA versie op stapel binnen UvA en zou implementatie beter hierin kunnen plaatsvinden. Werkzaamheden vinden nu in najaar plaats (cursus loopt door t/m blok 4)
Verslag en evaluatie Implementatieproject testfase 2 1 februari 2012 – 1 september 2012 Contactpersoon implementatieproject
Hans Cuypers
Onderwijsinstelling / faculteit / afdeling
TU/e
Verslag Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek)
Zomercursus 1ste jaars. Herhaling van de vwo-stof. Opgaven werden genomen uit het domein vwo en calculus.
Hoe werden de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via instellings-elo, …)
Via instellings-elo werden de vragen aan ongeveer 1900 studenten beschikbaar gesteld. In totaal is ongeveer 300.000 maal een elektonische opgave gedaan. De cursus werd afgesloten met een schriftelijke toets in de eerste collegeweek.
Hoe werden de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als
Ja
officiële toets, …) Hoeveel items en/of toetsen zijn gebruikt?
Ongeveer 200
Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist?
Nee
Was de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Ja
Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Deelname was voor aankomende studenten en daardoor in de zoemr niet verplicht. De toets in het begin van het collegejaar echter wel. Hoeveel uren zijn in deze fase van het project Ongeveer 50 ingezet?
Evaluatie Geef hiernaast een korte evaluatie van testfase 2, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fase van het project worden veranderd?
De voorgenomen activiteiten zijn uitgevoerd De doelen behaald. Niks
Verslag en evaluatie Implementatieproject testfase 2 1 februari 2012 – 1 september 2012 Contactpersoon implementatieproject
Léon Driessen
Onderwijsinstelling / faculteit / afdeling
Open Universiteit / Faculteit Informatica - Basiscursus wiskunde, docent: Bert Esmeijer - Voorbereidingscursus wiskunde A, docent Léon Driessen - Voorbereidingscursus wiskunde T,
docent Léon Driessen Verslag Uit welk inhoudelijk domein zijn items en/of toetsen gebruikt? (VWO-wiskunde, Calculus, Lineaire algebra, Statistiek)
VWO wiskunde
Hoe werden de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? (Elektronisch, op papier, via moodle.onbetwist.org, via MapleTA, via instellings-elo, …)
Via www.onbetwist.org
Hoe werden de items en/of toetsen uit Onbetwist ingezet? (facultatief, wekelijks, als oefening, als officiële toets, …)
Basiscursus wiskunde: - uiteindelijk is geen gebruik gemaakt van de items; in het reguliere onderwijsmateriaal was voldoende aanwezig, en de items waren niet gemakkelijk toegankelijk. Voorbereidingscursus wiskunde A en T: - Wekelijks, als extra oefening bij de lessen
Hoeveel items en/of toetsen zijn gebruikt?
Ongeveer 100
Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist?
Ja, de items en opgaven uit de boeken, en van de oefententamens.
Was de Onbetwist database voldoende gevuld met items en toetsen voor dit implementatieproject?
Nog niet.
Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen?
Het werd studenten geadviseerd. Enkelen gingen serieus er mee aan de slag. Uiteindelijk is het de verantwoordelijkheid van de studenten zelf.
Hoeveel uren zijn in deze fase van het project 20 uur ingezet? Evaluatie Geef hiernaast een korte evaluatie van testfase 2, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd?
Bij de Basiscursus wiskunde is uiteindelijk niet meer gebruik gemaakt van de onbetwistitems. De toegang was nog lastig, het interface nog niet best.
-
zijn de voorgenomen doelen gehaald? wat ging goed, wat ging slecht? wat moet er komende fasen van het project worden veranderd?
Bij de Voorbereidingscursussen wiskunde A en T is het gelukt om studenten naar de items te verwijzen en een aantal heeft er hun voordeel mee gedaan. Belangrijk is dat de opgaven heel makkelijk toegankelijk zijn voor de studenten, en dat ze er zonder ‘technisch gedoe’ mee aan de slag kunnen. Als er technisch dingetjes fout gaan, worden ze extra onzeker en haken heel snel af. De bruikbaarheid voor docenten en studenten zal dus in de komende fasen van het project sterk verbeterd moeten worden.