Evalueren is Leren Workshop Landelijke KKB-dag NVLF
Hanke Timmermans, senior adviseur CBO
Evalueren is Leren Programma
Evalueren: waarom? Wat evalueer je? Op welk moment evalueer je? Hoe evalueer je? Wat doe je met het geleerde?
Methodisch werken in de groep • • • •
Plannen Uitvoeren Evalueren Bijsturen
Act
Study
Plan
Do
Ontplooiing kring begeleiden (Ersösz) Visie
Vaardigheden
Stimulansen
Middelen
Actieplan
Verandering
Vaardigheden
Stimulansen
Middelen
Actieplan
Verwarring
Spanningen
Visie
Stimulansen
Visie
Vaardigheden
Visie
Vaardigheden
Stimulansen
Visie
Vaardigheden
Stimulansen
Middelen
Actieplan
Onzekerheid
Middelen
Actieplan
Vertraging
Actieplan
Frustratie
Middelen
Valse starts
Kwaliteit produceren
STRUCTUUR + PROCES
UITKOMST
Donabedian, 1980
Wat evalueer je?
• • • • • • • •
Onderwerpen Doelen en resultaten Planning Werkwijze / methode Leermomenten Effecten in de eigen praktijk Effecten in de kring ……………………..
Opdracht evaluatie onderwerp Welke evaluatievragen stel je? 1. … 2. … 3. … 4. … 5. …
Op welk moment evalueer je? • Na afronding van • Agendapunt • Bijeenkomst • Onderwerp
• Bij opstellen van • Jaarverslag • Jaarplan
• …………………………….
Format voor evaluatie KK-bijeenkomst Datum Onderwerp Doelen Middelen/Activiteiten Volgens plan gewerkt? Doel gerealiseerd? Resultaat*: Doel niet gerealiseerd? Reden:* Leermomenten * Beschrijf resultaten en redenen zo concreet mogelijk
Hoe evalueer je? • individueel of als kring? • als kringbegeleider(s)? • mondeling of schriftelijk? • reflectie of meten? • ………………………
Evaluatie is reflectie! Kernvragen reflectie: • Wat ging goed? • Wat kan beter?
Aandachtspunten voor reflectie: • • • • •
Heeft de bijeenkomst mij/ons wat opgeleverd? Heb ik/hebben we geleerd? Zo ja, wat? Hoe heb ik/hebben we gewerkt? Heb ik/hebben we de juiste doelen gesteld? Wat betekent dit voor de volgende keer?
Evalueren is meten! • Extra evaluatie: Meetbare Resultaten • Voorafgaand aan de bijeenkomst/interventie (nulmeting) • Na afloop van de bijeenkomst/interventie (nameting) • Invoeren in EXCEL
Opdracht Hoe evalueer je?
Reflectie past bij ……..???
Meten past bij ……….???
Van casuïstiek naar praktijk • Casuïstiekbespreking ↓ • Leermomenten Evalueren ↓ • Verbeterpunten ↓ Meten • Betere resultaten
Opdracht Denk terug aan je eigen kringbijeenkomsten: Welke doelen heeft jouw kring? • voor de ontwikkeling van de kring • voor de kringleden • voor onderwerpen die jullie bespreken • voor ……………..
Opdracht (vervolg) Kies een doel uit dat vaak voorkomt • Welke resultaten zien jullie? • Hoe evalueren jullie die resultaten met de kring? • Hoe kan je die resultaten zichtbaar maken?
Stel evaluatievragen op voor minimaal 2 resultaten
Werkwijze Excel • • • • •
Onderwerp invullen Vragen (met groep) invullen Ja/nee score invullen vóór interventie ……………………(interventie) Ja/nee score invullen na interventie
hi
hi
hi
hi
hi
er en
er en
er en
er en
er en
ty p
ty p
ty p
ty p
ty p
e
e
e
e
e
vr a
vr a
vr a
vr a
vr a
ag
ag
ag
ag
ag
5>
4>
3>
2>
1>
Leeg voorbeeld
1,2 1
0,8
0,6
0,4
0,2
0
Voorbeeld resultaten bijeenkomst
Casus Chronische heesheid • Vas-score: Elke patiënt vult tenminste in 1e, 4e en laatste sessie de Vas-score voor ervaren ernst van de heesheidsklachten in • Oefeningen: Elke patiënt krijgt minimaal 3 oefeningen adequaat stemgebruik schriftelijk mee voor thuis • De logopedist geeft volgens de vraag-vertel-vraag systematiek informatie en adviezen over preventie van overbelasting van de stem • Controle op correcte uitvoering van de thuisoefeningen gebeurt tijdens elke sessie • Patiënten met persisterende problematiek worden doorverwezen conform ons verwijsprotocol
Voorbeeld leeg meetformulier 1,2
1
0,8
0,6 Nulmeting 0,4
Nameting
0,2
0 Vas-score: Elke patiënt Oefeningen: Elke patiënt De logopedist geeft Controle op correcte Patiënten met vult tenminste in 1e, 4e krijgt minimaal 3 volgens de vraag-verteluitvoering van de persisterende en laatste sessie de Vasoefeningen adequaat vraag systematiek thuisoefeningen gebeurt problematiek worden score voor ervaren ernst stemgebruik schriftelijk informatie en adviezen tijdens elke sessie doorverwezen conform van de heesheidsklachten mee voor thuis over preventie van ons verwijsprotocol in overbelasting van de stem
Wat is een jaarverslag? Een optelsom van • activiteiten + • evaluaties + • reflecties + • conclusies + • gevolgen voor volgende jaar
Opzet Jaarverslag KK Algemene gegevens Doelstellingen afgelopen cyclus Middelen/Activiteiten Evaluatie •
Volgens plan gewerkt?
•
Doelen gehaald?
Contacten Conclusies •
Concrete resultaten
•
Geleerde lessen
•
Succesfactoren
•
Knelpunten
Planning volgend jaar (doelen/activiteiten)
Opzet Jaarverslag KK (2) • Doelstellingen afgelopen cyclus • Welke doelen hadden we ons gesteld? • Welke motivatie hadden we daarbij?
• Middelen/activiteiten • Wat hebben we gedaan? • Welke methoden en kwaliteitsinstrumenten hebben we gebruikt? • Hoe hebben we de taken verdeeld?
Opzet Jaarverslag KK (3) • Evaluatie • Zijn de activiteiten volgens plan uitgevoerd? Zo niet, waarom niet. • Zijn de gestelde doelen gehaald (resultaat)? Zo niet, waarom zijn de doelen gedeeltelijk / niet gehaald.
• Reflectie • Wat leren we hiervan over onze werkwijze, onze doelen, onszelf?
Opzet Jaarverslag KK (4) • Conclusies • Wat zijn concrete resultaten van de bijeenkomsten? • Wat hebben de kringleden geleerd? • Wat waren succesfactoren? • Wat waren knelpunten?
• Planning volgend jaar • Welke doelen? • Welke activiteiten?
Format Jaarplan Datum
Doelstelling
Resultaat
bijeenkomst
bijeenkomst
bijeenkomst
Methodiek
Voor-
Uitkomst
bereiding evaluatie door?
Opdracht jaarplan Denk aan onderwerpen die jullie nog op de agenda hebben staan • • • • • •
Kies een onderwerp Welk doel? Welke resultaten zijn te verwachten? Welke methoden of activiteiten passen daarbij? Hoe evalueren? Vul jaarplan format in
Jaarplan: aandachtspunten • • • • •
Onderwerp ≠ methode Doel (onderwerp) > methode Doorlooptijd Opbouw in doelen per onderwerp Combinatie van methoden
