TOA: Toolkit én schatkist

TOA: Toolkit én schatkist

Ruim 1,7 miljoen toetsen afgenomen. Wat weten we nu?

Taal en rekenen 2 jaar onderweg en wat heeft ons dit nu gebracht? Bekijk de resultaten van 2 jaar meten.

Bureau ICE is in 2007 gestart met de TOA. Nu werken meer dan 700 scholen met 450.000 leerlingen met de TOA en zijn er ruim 1,7 miljoen toetsen afgenomen. Bij de 0-meting bij de start van het schooljaar 2011-2012 zijn ruim 200.000 toetsen afgenomen. In 2010 waren dat er voor de 0-meting nog een kleine 40.000. De Toolkit Onderwijs en Arbeidsmarkt is met ruim 350 toetsen niet alleen een schatkist met toetsen maar bevat vooral een schat aan informatie over de leerlingen. Bijvoorbeeld over hoe zij scoren op Referentieniveaus Taal en Rekenen. En hoe ze zich ontwikkelen. Want na 2 jaar toetsen tekent zich ook een eerste beeld af van het rendement van inspanningen om gedurende het mbo-onderwijs de taal- en rekenvaardigheid van leerlingen te verbeteren.

Top vijf van bevindingen:

1

Het belang van een 0-meting wordt breed erkend: niet alleen het aantal afnamen groeide van 40.000 toetsen in 2010 naar ruim 100.000 toetsen in 2011, maar scholen kiezen er ook vaker voor meerdere vaardigheden te meten bij de instroom.

2

Bij instroom in het mbo leest meer dan de helft van de leerlingen van de mbo-1 opleidingen onder niveau 1F. Zij moeten twee niveaustappen maken om de eindnorm te kunnen halen.

3

Voor niveau 4-leerlingen geldt dat ongeveer 75% van de leerlingen bij instroom leest op niveau 2F en dus in het mbo nog één niveaustap moet maken.

4

Het niveau waarmee leerlingen instromen in het mbo wijkt in 2011 nauwelijks af van het beeld van 2010.

5

Bij een tweede meting gedurende het mbo-onderwijs blijken leerlingen voor rekenen, lezen en luisteren gemiddeld genomen vooruit te gaan ten opzichte van hun 0-meting.

1.7 miljoen Totaal aantal afnamen

700 scho

len

210.000

Aantal afnamen 0-meting 2011

350 Beheerders/docenten

Leerlingen

14.200

570.000

Aantal toetsen op 1 maart 2012

80

Aantal toetsen ontwikkeld in 2011


Rekenen

Totaal aantal deelnemers 2010: 9.798 Totaal aantal deelnemers 2011: 25.209 2010

Vergelijk uw eigen resultaten met de landelijke uitkomsten!

2011 37% 33%

27%

28% 27%

26%

8% 4%

Lager dan 1F

1F

Lager Lage dan 2F

1% 2F

3%

Lage Lager dan 3F

1% 1%

Luisteren

Lezen

Totaal aantal deelnemers 2010: 12.065 Totaal aantal deelnemers 2011: 32.317


0345-656610

3F

2010

2011

2011 56% 56%

46% 45%

25% 23%

8% 10%

9% 9%

3% 1F

LLager d dan 2F

2F

LLager d dan 3F

3F

Taalverzorging 2011

LLager d dan 1F

7% 0% %

1F

LLager d dan 2F

2F

2010

47%

36% 31%

29% 20%

11%

13%

22%

15% 16%

19%

5% 6% 0% %

LLager g d dan 1F

1F

2F

3F

2011

33% 32%

8%

LLager d dan 3F

Totaal aantal deelnemers 2010: 3.154 Totaal aantal deelnemers 2011: 4.162

44%

11%

1%

Schrijven


5%

2% 2%

0% % LLager d dan 1F

20% 20%

17% 15%

12% 11%

3F

Achterstand is groot Bij de invoering van de Referentieniveaus bij de start van het schooljaar 2010-2011 kon met behulp van de toetsen uit de TOA gelijk op grote schaal gemeten worden bij de instroom in het mbo. Zo hebben we met behulp van deze 0-meting direct vanaf het begin van de invoering van de nieuwe niveausystematiek de stand van zaken kunnen peilen: met welk referentieniveau

LLager d dan 1F

1F

Lager L d dan 2F

2F

1%

Lager L d dan 3F

3F

www.bureau-ice.nl stromen de leerlingen in in het mbo? En dus feitelijk, hoe verlaten ze het vmbo? Het verschilt per vaardigheid maar over het algemeen stromen de leerlingen met een achterstand in het mbo in en moet het overgrote deel van de leerlingen voor de verschillende vaardigheden nog één of zelfs twee niveaustappen zetten gedurende hun onderwijstijd op het mbo.


Gaan de niveau 4-leerlingen het centrale examen halen? Slagen voor het examen taal en rekenen wordt een grote uitdaging voor mbo-4 leerlingen. Bij de instroom nu beheerst 22% van de leerlingen 3F lezen. Voor luisteren is dat 41% en voor rekenen 1%. Dit betekent dat het overgrote deel van de leerlingen voor alle vaardigheden nog minimaal één niveaustap moet zetten en een deel zelfs twee niveaustappen. Met name bij rekenen zijn de problemen groot: 42% blijkt hier bij instroom op niveau 1F binnen te komen.

www.bureau-ice.nl

Rekenen mbo 4 Eerste toetsmoment Laatste toetsmoment (bij dezelfde leerlingen) 46% 38% 34% 24% 13%

12%

9% 4%

Lager dan 1F

1F

8%

6%

Lager dan 2F

Lezen mbo 4

2% 2F

Lager dan 3F

4%

3F

Luisteren mbo 4

Eerste toetsmoment Laatste toetsmoment (bijj dezelfde leerlingen) g

Eerste toetsmoment Laatste toetsmoment (bij dezelfde leerlingen)

50%

65%

36%

51%

34% 36% 17% 17%

17% 6% 1% 1% Lager dan 1F

4%

1F

17%

10%

9%

1% Lager dan 2F

2F

Lager dan 3F

3F

4% 0%

Lager dan 1F

11% 1%

1F

2F haalbaar als norm voor niveau 1 en 2? De discussie is nog volop bezig. Wat moet de norm worden voor examinering van taal en rekenen voor niveau 1 en 2? De intakegegevens van de niveau 1 en 2 leerlingen in het mbo laten bij de intake van het schooljaar 2011-2012 opnieuw zien dat niveau 2F te ambitieus lijkt voor het overgrote deel de leerlingen om te

6%

Lager dan 2F

2% 2F

6%

Lager dan 3F

3F

www.bureau-ice.nl

behalen gedurende hun korte traject. Op de korte termijn is het invoeren van een ‘harde’ norm in de vorm van een centraal examen taal en rekenen met consequenties voor diplomering een groot risico: veel leerlingen zullen in dat geval geen mbo-diploma kunnen behalen.


Met de TOA meten van primair onderwijs tot en met hoger onderwijs De Referentieniveaus zijn bedoeld om doorlopende leerlijnen taal en rekenen te gaan faciliteren van basisonderwijs tot en met beroepsonderwijs. Met behulp van de Referentieniveaus en daaraan gekoppelde toetsen is het dan ook vanaf 2010-2011 mogelijk geworden om op de verschillende ‘drempels’ van het onderwijs te meten. Met de taal- en rekentoetsen uit de TOA speciaal gericht op de doelgroep jongeren van 12-16 hebben we kunnen vaststellen waar leerlingen hun achterstand oplopen. De eerste kleinschalige onderzoeken in het basisonderwijs laten zien dat maar net de helft van de basisschoolleerlingen het beoogde niveau 1F behaalt voor lezen en rekenen. Onderzoek gedurende het vmbo laat zien dat leerlingen in het vmbo niet stilstaan: er zit groei in hun taal- en rekenvaardigheid bij het stijgen van de leerjaren.

www.bureau-ice.nl/publicaties

Intake mbo 2 - 2011

Intake mbo 1 - 2011 60%

60%

50%

50%

40%

40%

30%

30%

20%

20%

10%

10% 0%

0% %

Rekenen Lezen Luisteren Schrijven Taalverzorging

Lager dan 1F

1F

Lager dan 2F

2F

Lager dan 3F

3F

56% 43% 17% 36% 32%

19% 33% 44% 22% 45%

20% 11% 9% 8% 0%

5% 13% 30% 12% 21%

0% 0% 0% 0% 0%

0% 0% 0% 0% 3%


Intake mbo 3 - 2011

1F

Lager dan 2F

2F

Lager dan 3F

3F

42% 15% 3% 24% 13%

32% 41% 30% 29% 45%

9% 13% 9% 14% 0%

16% 30% 56% 32% 37%

0% 0% 0% 0% 0%

0% 1% 2% 0% 5%

Intake mbo 4 - 2011

70%

60%

60%

50%

50%

40%

40%

30%

30%

20%

20%

10%

10% 0% %


Lager dan 1F

% 0% Lager dan 1F

1F

Lager dan 2F

2F

Lager dan 3F

3F

23% 3% 1% 6% 6%

38% 20% 9% 19% 31%

6% 15% 9% 24% 0%

31% 51% 64% 46% 53%

1% 3% 1% 1% 0%

1% 9% 16% 4% 10%

Is rendement zichtbaar? Nu we voor het tweede jaar op rij werken met de Referentieniveaus zijn er gegevens beschikbaar van leerlingen die na de intake een vervolgmeting hebben afgelegd. De eerste voorzichtige conclusies dienen zich nu aan: leerlingen van mbo 4 lijken vooruit te gaan op


Lager dan 1F

1F

Lager dan 2F

2F

Lager dan 3F

3F

15% 0% 0% 2% 2%

42% 4% 1% 2% 21%

3% 11% 6% 28% 0%

34% 56% 49% 36% 57%

4% 7% 2% 12% 0%

1% 22% 41% 21% 20%

www.bureau-ice.nl het gebied van lezen, luisteren en rekenen. Maar we hebben meer gegevens en dus meer tijd nodig voor verder onderzoek. En dan bijvoorbeeld ook: welke aanpak werkt en welke niet? Kwalitatief onderzoek op basis van kwantitatieve gegevens. Wordt vervolgd dus …

Op zoek naar betrouwbare en valide schoolexamens? De TOA biedt uitkomst! Het centrale deel van het examen is voor niveau 4 geregeld. Voor de overige niveaus zijn scholen zelf verantwoordelijk voor de invulling van de examinering van lezen en luisteren. Daarnaast moeten alle niveaus van het mbo zelf zorg dragen voor een valide en betrouwbare examinering van de productieve vaardigheden schrijven, spreken en gesprekken. De TOA biedt de mogelijkheid om met generieke examens de complete examinering te dekken. De TOA bevat meer dan voldoende lees toetsen, luistertoetsen, schrijftoetsen, spreektoetsen en gespreksvaardigheidstoetsen om de complete examinering (inclusief herkansingen) uit handen te nemen. De beoordeling kan volledig in de TOA worden uitgevoerd. Voor lezen en luisteren gaat dat automatisch. Voor de productieve vaardigheden (schrijven, spreken, gesprekken) maakt het nieuwe, globale beoordelingsmodel een snelle, efficiënte beoordeling van examens mogelijk. Bovendien kan met de

beoordelaarstool ook de kwaliteit van de beoordelaars eenvoudig gemonitored worden. Zo is het met de TOA niet alleen eenvoudig om validiteit en betrouwbaarheid van de examinering te borgen voor lezen en luisteren maar ook van de van de productieve vaardigheden. De TOAtoetsen zijn dan ook niet voor niets onlangs weer voor alle vaardigheden op alle niveaus goedgekeurd door de Inspectie voor het Onderwijs. Wilt u schoolexamens die wat inhoud betreft aansluiten op een specifieke opleiding? Maar wilt u niet inboeten aan betrouwbaarheid en validiteit? De TOA biedt de mogelijkheid om met de goedkeuring van Bureau ICE uw eigen maatwerktoetsen in de TOA op te nemen. Voor meer informatie over opleidingsspecifieke toetsen in de TOA kunt u contact opnemen met Bureau ICE, 0345 656610.

De TOA is hét instrument ter voorbereiding op het centraal examen De centrale examens kristalliseren zich meer en meer uit. Voor verschillende ROC’s een moment om bestaande toetsen te vergelijken met de uitkomsten van de pilotexamens. Hoe? Door dezelfde leerlingen zowel mee te laten doen aan de pilotexamens als ook een TOA-toets voor te leggen. De eerste experimenten van mbo’s laten zien dat de TOA lees- en luistertoetsen een betrouwbare voorspelling geven van de uitkomsten van de centrale examens. Reden om de TOA te blijven gebruiken voor de voortgang van taal en rekenen want slagen voor een niveau in de TOA biedt 92% kans op slagen bij de centrale examens.

Vraag nu een vrijblijvend gesprek aan!

Verkrijg nu uw TOA-licentie!

De belangrijkste vernieuwingen in de TOA (schooljaar 2011-2012) Voortdurend werken we samen met onze gebruikers aan de verdere ontwikkeling van de TOA. Dit is inherent aan een digitaal, webbased systeem maar ook in lijn met de filosofie van Bureau ICE: tevredenheid door kwaliteit.

De 10 belangrijkste veranderingen: Beheer en administratie automatisch door koppelingen met o.a. 1 Magister en N@Tschool Nieuwe toetsen voor alle vaardigheden op alle niveaus voor 2 Nederlands (1F t/m 3F) Nieuwe toetsen voor alle vaardigheden voor Engels en Duits (A1, A2, 3 B1 en B2) Basistoetsen, speciaal voor leerlingen voor wie niveau 1F nog 4 moeilijk te halen is Een rapportagetool zodat scholen zelf snel en eenvoudig eigen 5 rapportages kunnen uitdraaien Een nieuw globaal beoordelingsmodel om sneller en efficiënter 6 examinering van productieve vaardigheden uit te kunnen voeren Per toets een TIK (Toets Informatie Kaart) zodat alle belangrijke 7 informatie per toets in één overzicht beschikbaar is Groepsrapporten en individuele rapporten met uitgebreide over 8 zichten met één druk op de knop beschikbaar Doorlopende leerlijn technisch mogelijk door dekkend systeem 9 overdracht PO-VO-MBO-HBO Interbeoordelaarsbetrouwbaarheid nu veel eenvoudiger te borgen 10 met de beoordelaarstools in de TOA

”Sinds 1991 Staatsexamens Nederlands als Tweede Taal.” ”Sinds 1996 toetsing in het kader van inburgering.”

De TOA is een middel, geen doel Welke vaardigheden ga je wanneer toetsen? Welke toets zet je op welk moment in? Wat ga je doen met de uitkomsten? Welke gevolgen heeft de score voor leerlingen? Hoe borg je dat examentoetsen niet gebruikt worden als intaketoets? Hoe examineer je taal en rekenen? Hoe borg je de voortgang richting het examen?

Allemaal vragen die horen bij de inzet van de TOA. Samen met instellingen die de TOA (gaan) inzetten, bespreken we deze en nog veel meer vragen om zo te komen tot een toetsplan voor Taal en Rekenen. Zo voorkom je dat een instelling én een leerling veel tijd en energie steken in de afname van toetsen en er vervolgens niets mee (kunnen) doen.

Taalassessoren opleiden Het beoordelen van de schrijftoetsen en ook de spreek- en gesprekstoetsen gaat niet automatisch. Hier zijn menselijke beoordelaars voor nodig. En die hebben weer training nodig om te borgen dat de uitslagen (voldoende) betrouwbaar zijn. Belangrijk, zeker daar waar het examinering betreft. Het trainen van de beoordelaars hoort dan ook onlosmakelijk bij de inzet van de TOA voor schrijven, spreken en gesprekken. Met korte, efficiënte trainingen helpt Bureau ICE beoordelaars op weg.

Willen beoordelaars zich verder ont wikkelen, dan kan worden gekozen voor de training tot professional. Wil een instelling nog verder gaan, dan kunnen beoordelaars ook opgeleid worden tot trainer. Als een instelling voor deze laatste optie kiest, kunnen ze beoor delaars laten opleiden die vervolgens intern eigen, nieuwe beoordelaars kunnen opleiden. Geïnteresseerd? Voor alle soorten trainingen kunt u contact met ons opnemen.

TOA verder uitgebreid met Moderne Vreemde Talen Altijd al heeft de TOA toetsen bevat voor Engels en Duits. Een nieuwe serie toetsen voor Duits en Engels zijn onlangs aan de toolkit toegevoegd. Zo kunt u zowel in de intake als bij de voortgang en examinering gebruik kunt maken van de toetsen uit de TOA. Voor alle vaardig heden voor alle niveaus (A1 t/m C1) zijn voldoende taaltoetsen beschikbaar,

bovendien goedgekeurd door de Inspectie voor het Onderwijs. Na de zomer wordt het aanbod toetsen Moderne Vreemde Talen uitgebreid met toetsen Frans.

De TOA van Bureau ICE is officieel goedgekeurd door de onderwijsinspectie.

Bureau ICE voert nu al 20 jaar de Staatsexamens en 15 jaar de Inburgeringsexamens uit in samenwerking met CITO.

Dekkend toetsaanbod voor alle niveaus alle vaardigheden voor minimaal 1 intake, 2 keer een voortgangstoets, examen en herkansing.

Doorlopende leerlijn kan via de TOA gefaciliteerd worden.

1,7 miljoen toetsen afgenomen.

Geen systeem problemen of problemen bij het afnemen van de TOA toetsen.

14.000 docenten en beheerders werken met de TOA en wij ontvangen maar 2 functionele vragen naar onze gratis helpdesk per dag.

600.000 + leerlingen actief in de TOA.

Landelijke dekking van de TOA dus ook vergelijkingen op alle niveaus voor managementanalyse.

Gebruikers zeer tevreden over de TOA en ondersteuning vanuit Bureau ICE. U kunt dit navragen bij 25 ROC’s die breed met de TOA werken.

Met TOA gegarandeerd

Door het grote volume kunnen wij de TOA voordelig aanbieden.

een beter toetsplan: minder toetsafnames, meer toetskwaliteit en meer sturing vanuit de toetsresultaten.

Automatiseren van administratie en beheer. Betrouwbaarheid en validiteit gewaarborgd op basis van onze expertise en continue metingen en onderzoek.

TOA: eenheid in toetsing, overdraagbaarheid van gegevens, kwaliteit en voordeel.

Voorspellende waarde TOA ten opzichte van COE (centraal ontwikkeld examen) ligt rond de 80%.

Bureau ICE is al meer dan 20 jaar een begrip op het gebied van toetsing en examinering.

Meer informatie? Neem contact met ons op! Zie ook: www.bureau-ice.nl

Zie ook: www.toets.nl

Postbus 189 4100 AD Culemborg Godfried Bomansstraat 4 4103 WR Culemborg

T 0345 – 65 66 10 F 0345 – 54 98 46 www.bureau-ice.nl www.ice-opleidingen.nl

Bank 68.27.35.221 Kvk Tiel 11028.918 BTW NL810615939 B01 ISO 9001-2000 gecertificeerd

TOA: Toolkit én schatkist

Recommend Documents