Pilot kutatás 2016
Kognitív játékok, feladatsorok és kompetenciamérések eredményeinek kapcsolatai Faragó Boglárka – Kovács Kristóf – Sarkadi-Nagy Szilvia 2016. június 14.
Az előadás céljai • A Kognitos Kft. által vezetett pilot kutatás bemutatása - 2016 tavasz. • A kutatás során kapott mérési eredmények értelmezése. • A kutatás eredményei alapján a további feladatok és projekt javaslatok megfogalmazása.
A vizsgálat fókuszában álló kérdések 1. Lehet-e a játékok eredményeiből jósolni a kompetenciamérések eredményeit? (kognitív játékok és kompetenciamérések közötti korrelációk) 2. Jósolhatók-e a játékokon elért eredmények alapján az iskolai osztályzatok? (kognitív játékok és osztályzatok közötti korrelációk) 3. Tantárgyi feladatsorok eredményei alapján jósolhatók-e a kompetenciamérések eredményei? (random feladatsorok eredményei és a kompetenciamérések eredményei közötti korrelációk) 4. Megjósolhatók-e a feladatsorokon elért eredmények alapján e az iskolai osztályzatok? (feladatsorok eredményei és osztályzatok közötti korrelációk) 5. Egyes játékokon elért eredmények hogyan változnak az életkori előre haladással?
A pilot kutatás részletei
Résztvevők Baár Madas Református Gimnázium (86 fő) • ELTE Radnóti Miklós Gyakorlóiskola (238 fő) • Molnár Ferenc Általános Iskola (168 fő) • Eszterházy Károly Főiskola Gyakorló Iskola (201 fő) 694 diák az 1-11. évfolyamokból, több min 40 ezer játék és feladatsor megoldáson dolgozott március 15 és május 15 között! Egy diák átlagosan több min 200 percet gyakorolt/játszott! Eszközök a KIOP.HU oldalon • 5 tantárgyból feladatsorok: irodalom, nyelvtan, matematika, biológia, fizika (sikeres végrehatásukhoz tárgyi ismeretek és kognitív képességek szükségesek) • 15 kognitív játék ( a jó eredményhez nem kell lényeges iskolai tudás) Adatok, amelyeket az iskoláktól kaptunk • kompetenciamérések eredményei (szövegértés, matematika) • iskolai osztályzatok
Vizsgálatban szereplő kognitív játékok Képességterület
Képesség Induktív logika / Szabályfelismerés Deduktív logika / Szabályalkalmazás
Fluid / nem verbális gondolkodás Kognitív gátlás Tervezés Kognitív flexibilitás
Kvantitatív / numerikus gondolkodás
Emlékezet Munkamemória Mentális forgatás
Téri / vizuális gondolkodás Téri navigáció Pszichomotoros gyorsaság
Gyorsaság Számolási sebesség
Perceptuális képességek
A bűvész kártyái A bűvész kártyái Versenyfutás a büféhez Öcsi uzsonnája A tojásszállítmány A bűvész kártyái
Mennyiségbecslés Téri-vizuális rövid távú emlékezet
Figyelem
Vizsgálatban szereplő játék
Figyelmi váltás Szelektív figyelem vizuális keresés
Moszkvai Matrjoska babák Paradicsompalánta Főtéri csengettyűs Esküvői fotózás Az újonc Főtéri csengettyűs A tervezőprogram Építkezés a kengurufarmon Versenyfutás a büféhez Paradicsompalánta Öcsi uzsonnája Nehezített számháború Lomtalanítás Az amnéziás igazgató Esküvői fotózás Etióp elsősegélycsomagok Etióp elsősegélycsomagok Lomtalanítás
Kognitív játékok eredményei és kompetenciamérés eredményei • Szövegértés – 0,4 feletti korreláció 0 – 0,3 feletti korreláció 5 – 0,2 feletti korreláció 5 → szövegértés játékok fejlesztése szükséges! • Matematika – 0,4 feletti korreláció 4 – 0,3 feletti korreláció 4 – 0,2 feletti korreláció 4 → jól jósolják a kompetenciát
Kognitív játékok eredményei és osztályzatok • A kognitív játékok az osztályzatokkal csak kevéssé korrelálnak, csak egy 0,2 feletti korreláció van, az is negatív. • Lehetséges okok: – szubjektív, egyénre szabott, motivációs célú osztályzási rendszer – kevert képesség igények
Feladatsorokon elért eredmények és kompetenciamérés eredményei •
•
Igen magas korrelációk találhatóak, általában 0,3 fölötti értéket mutatnak: – 0,5 feletti korreláció: • matematika feladatsor – matematika kompetenciamérés – 0,4 feletti korreláció: • fizika feladatsor – szövegértés és matematika kompetenciamérés • irodalom feladatsor – szövegértés és matematika kompetenciamérés • nyelvtan feladatsor – szövegértés kompetenciamérés • matematika feladatsor – szövegértés kompetenciamérés – 0,3 feletti korreláció: • biológia feladatsor – szövegértés és matematika kompetenciamérés • nyelvtan feladatsor – matematika kompetenciamérés A kompetenciamérés eredményeivel csak a környezetismeret és a természetismeret feladatsorok nem korrelálnak szignifikánsan.
Feladatsorokon elért eredmények és iskolai osztályzatok • a feladatsorokon elért eredmények általában jól korreláltak az osztályzatokkal (egy 0,2 feletti korreláció, a többi 0,3 feletti) • 0,4 feletti korreláció: Ø a fizika feladatsor és matematika osztályzat, Ø a környezetismeret feladatsor és irodalom osztályzat, Ø matematika feladatsor és a matematika osztályzat között. • biológia és a természetismeret feladatsorok egyik iskolai osztályzattal sem mutattak szignifikáns korrelációt
Képességek korcsoportok szerinti különbségei Három életkori csoport: 1-4. osztály 5-8. osztály 9-11. osztály • Nincs szignifikáns növekedés a 8. osztályos kor után már : • Az esküvői fotózás (Figyelem, Emlékezet) • Fejlődési ugrás 8. osztály után: • A bűvész kártyái (Fluid/ nem verbális gondolkodás) • A tojásszállítmány (Fluid/ nem verbális gondolkodás) • Nehezített számháború (Matematikai ismeretek, Gyorsaság) • Lomtalanítás (Matematikai ismeretek, Gyorsaság, Perceptuális képességek) • Építkezés a kengurufarmon (Téri/ vizuális gondolkodás) • A tervezőprogram (Téri/ vizuális gondolkodás)
• Nincs szignifikáns növekedés az 1-11. osztály időszakban: • Moszkvai matrjoska babák (Kvantitatív/ numerikus gondolkodás: mennyiségbecslés) • Versenyfutás a büféhez (Téri navigáció, Kognitív gátlás)
További fejlesztések • Játékkészlet módosítása, javítása, bővítése – Szövegértéssel és matematikával kapcsolatos relevánsabb játékok – Algoritmikus gondolkodást fejlesztő játékok – Szociális kompetencia játékok – Élvezetesebb és adaptív játékok • További feladatsorok, magyarázó videók készítése folyamatosan változó nehézséggel, témakörönként • Keretrendszer fejlesztése – Eredmények informatívabb és motiválóbb prezentációja, a versengést támogató eszközök beépítése – Adaptív mérő és tanító algoritmusok alkalmazása – Oktatás módszertani kísérletek támogatása: játékok, feladatok kiosztásának, gyakorlásának, magyarázatának különböző formái
Pedagógiai célkitűzések • • • •
longitudinális kutatás hosszabb távú hatásokra más mérőeszközökkel, standardizált tesztekkel összevetés képesség profilok azonosítása kognitív képesség profilokkal kapcsolatban a pedagógiai alkalmazások elősegítése • képességdeficit kompenzációja • problémamegoldási stratégiák tanítása • játékok, grafikus feladatok, animációs ismertetők együttes pedagógiai alkalmazásának módszertana