mérés.info A mérés-értékelés hírei
2014. szeptember
CÍM
1088 Budapest, Vas utca 8. www.fppti.hu
HONLAP
Re: Köszöntő Rövidebb kihagyás után, a 2014/2015- Ebbéli tevékenységében—ahogy eddig ös tanévtől ismét megjelenik időszakos is—az MFPI mérés-értékelési szakértői kiadványunk, a mérés.info. segítségére kívánnak lenni az iskoláknak úgy a pedagógustájékoztatás, mint A pedagógiai mérés-értékelés a leg- a képzés-továbbképzés terén. utóbbi számunk óta eltelt időben sem vált marginális területté, ám az új tan- A mérés.info jelen, 22. száma tekintév újdonságokat hozott e tekintetben. hető ebben a vonatkozásban egyfajta Intézményvezetők, munkaközösség- portfóliónak is, amelyből azon kollévezetők, és mindenki, aki rendszer- gák, akik még szolgáltatásainkat nem szemléletűen tervezte meg az e tanévi vették igénybe, tájékozódhatnak a munkáját, olvasta a tanév rendjéről fejlesztéstámogató tevékenységeinkről. szóló miniszteri rendeletben, hogy a Ajánljuk mindazonáltal mielőbbi eloltanév végéig immáron minden közneve- vasásra ezt a számot a műhelyfoglalkolési intézménynek intézkedési tervet zásainkat, továbbképzéseinket rendkell készítenie. Az intézkedési terv szeresen látogató kollégáinknak is, alapját az az elemző munka kell, hogy mert már a következő szám is megtelt megelőzze, melynek során az iskola tartalommal, és azzal is hamarosan értelmezi tanulóinak az Országos kom- jelentkezni fogunk. petenciamérés során tanúsított eredményeit, és arra építve dolgoz ki, majd Südi Ilona—Török József vezet be és működtet fejlesztő beavatkozásokat.
Tartalom Südi Ilona Tények. A 2013/2014. tanévi műhelyek után
3. oldal
Török József Segítség a tényalapú oktatáspolitikai döntéshozatalhoz
8. oldal
Képzés, továbbképzés, műhely — ajánló
10. oldal
Meghirdetett mérés-értékelés műhelyfoglalkozás
12. oldal
Kiadvány — ajánló
13. oldal
22. szám
2014. szeptember
2
Südi Ilona
Tények A 2013/2014. tanévi műhelyek után A 2013/2014. tanév utolsó mérésértékelés műhelyfoglalkozásáról megfogalmazott értékelések nagyon hasznos információkat adnak számunkra a területen elvégzett munkánk áttekintéséhez továbbá kirajzolódnak a jövő feladata is. Előzmények Mielőtt a véleményeket összegeznénk, nézzük meg milyen programok előzték meg a május 22-i műhelyfoglalkozást.1 Az első alkalom az országos kompetenciamérés tanulói jelentésének bemutatását, a FIT-szoftver2 adta lehetőségek egyéni tanulói fejlesztési célból történő felhasználási lehetőségeinek ismertetését tűzte ki céljául.3 Ekkor fogalmazódott meg igényként a FIT elemző szoftver használatának készségszintű begyakoroltatására irányuló továbbképzés-sorozat, melyre válaszként a nagy érdeklődést figyelembe véve két csoport indult. Egy-egy csoportban háromszor két órában került nagyító alá az országos kompetenciamérés FITszoftvere, az iskolai adatok lekérdezé-
se és az adatvezérelt fejlesztési célok meghatározása.4 A tanév záró műhelyfoglalkozása a hagyományokat követve az országos kompetenciamérés eredményeit vizsgálta. Dilemmát jelentett, hogy a 2013 januárjától életbe lépett szervezeti változást követő jelentések adatait milyen módon, milyen körben jelenítsük meg. A cím, „Különböznek-e a budapesti 10. évfolyamos OKM-2013 képességek (tan) kerületenként” jól tükrözi a megcélzott tartalmat. A résztvevők 45%-a formált véleményt, mely kellő alapot ad tanulságok levonására. Előzetes elvárások Az online kérdőív első kérdése arra irányult, hogy milyen előzetes elvárásokat fogalmaztak meg a műhelyfoglalkozással kapcsolatban. A válaszok alátámasztják, ami már a regisztráció alapján várható volt, hogy egy heterogén csoport vesz részt a programon. Volt, aki azt mondta, hogy
1
A műhelyfoglalkozásról bővebben az MFPI Híradó 2014/1. számában http://www.kir.hu/okmfit_elemzes/ 3 http://www.fppti.hu/meres-ertekeles/meres_hirek/meres_muhely_20131017.html 4 http://www.fppti.hu/meres-ertekeles/meres_hirek/OKMFIT_foglalkozassorozat.html 2
22. szám
2014. szeptember
3
„pont azt kaptam, amit vártam. ….. érdekelt a hangsúlyok, amelyeket az eredmények mellé tesz egy-egy előadó. A CSH-indexről is érdeklődtem.” „Meg-tudjam, hogy miben volt más ez a mérés, mint a korábbiak.” A két elhangzott előadás összességében erre adott választ. Így aki „a kompetenciamérés eredményeinek megismerése, a saját iskolám grafikonjainak értékeléséhez, értelmezéséhez segítség igénybevétele”, továbbá
„… számítógép előtt ülve a kompetenciamérés adataiból, néhány feltett kérdés megválaszolásának érdekében, a megfelelő adatokat kigyűjteni, illetve lekérdezését gyakorolni” elvárással ült le, az sajnos csalódott. Számítógép előtt ülve a FIT elemző szoftver részletes használatát egy korábbi program keretében ismerhették meg a résztvevők.
Bővebben a programról A jelenlévők kétharmada teljes mértékben elégedett volt az összes kérdésre adott válaszok összesített eredménye alapján (1. ábra). Ha az elégedettség átlagos szintjét részletekben megnézzük, akkor látható, hogy hol jeleztek problémát a résztvevő kollégák (2. ábra).
1. ábra. Az összesített vélemények megoszlása
22. szám
2014. szeptember
4
2. ábra. Az elégedettség átlagos mértéke a vizsgált területenként
Egy annyira heterogén csoport igényeinek megfelelő programot összeállítani, mint ami jelen volt, szinte lehetetlen vállalkozás. Ennek ellenére a program összeállítás elégedettsége igen magas. A rendezvény általános színvonala ehhez képest 10 százalékponttal alacsonyabb, ebben az értékelésben biztos, hogy minden körülményt figyelembe vettek és jeleztek. „Gyenge láncszem” a technikai megítélés. Itt nem az IKT eszközöket értik a kollégák, hanem a helyszint, a termet, annak berendezését és elrendezését.
22. szám
2014. szeptember
Az egyes kérdésekre adott válaszok megoszlását részletekben a 3. ábra szemlélteti. Jól látszik, hogy a legnagyobb szóródást a rendezvény technikai háttere mutatja. Bár az általános színvonallal és a technikai háttérrel a válaszolók 70%-a többnyire elégedett, érdemes figyelni a technikai háttér esetén arra, hogy itt a legalacsonyabb a teljes mértékben elégedettek aránya.
5
3. ábra. Az egyes kérdésekre adott válaszok megoszlása
Megjegyzések a véleményekhez Abban az esetben, ha valaki nem volt teljes mértékben elégedett, szövegesen is megfogalmazhatta indokait. Nézzünk néhányat ezekből. „… a helyiség ahol voltunk barátságtalan és hideg volt. A tartalommal teljes mértékben meg voltam elégedve.” „Részben tartottam informatívnak a rendezvényt. Az elhelyezés nem volt szerencsés. 1. A program összeállítása nem volt a résztvevők elvárásaihoz, illetve előzetes igényfelméréshez kötve. A program nem törekedett a gyakorlati műhely-foglalkozás megvalósítására … 5. A vetített ábrákban a minimális színeltérés, a vetítési méret kicsinysége miatt nehezítette az értelmezést.” „Néhol értelmezést gátlóan szakmai volt (számomra). Még kifejtettebben is értékeltem volna (időkeret szűkössége).”
22. szám
2014. szeptember
Az előzetes regisztrációs gyakorlat a terem befogadóképességének korlátai miatt került bevezetésre. A regisztrációs határidő betartása a részt venni szándékozottak részéről még nem teljes mértékben valósult meg, ezért nehéz újabb helyszínt keresni az utolsó pillanatban. Valószínűsíthetően több alkalom kisebb csoportban hatékonyabb. Feltételezhetően a csoport összetétele, mérés-értékelési előismeretek különböző volta miatt került megfogalmazásra, hogy „néhol értelmezést gátlóan szakmai volt”. Az előadások a tankerületi FIT jelentések adataira épültek, abból történt gyűjtés alapján kerültek szemléltetésre az eredmények. Ezért érdekes az alábbi megállapítás. „Ilyen általánosságokat az Interneten is megtalálunk. Konkrétabb megközelítés, kevesebb adat hasznosabb lett volna.” Igen hasznos, a jövőben figyelembe
6
veendő az alább megfogalmazott egyéb kiegészítés a rendezvénnyel kapcsolatban. „A pedagógus, vagy intézményvezető praktikusan, mint egy főzőreceptben mit csináljon. «Nézd meg magad itt, válaszolj a kérdésre, hogy ...»” „A körülményeken jó lenne javítani, ha lehetséges. Kicsit tágasabb helyiség nem ártana.” „Máshol, hosszabb időkeretben szívesen látnám a 6., 8. évfolyam eredményeinek összegző elemzését.”
„Az érettségi vizsgák változásai” „Konkrét, iskolai elemzések elvégzésének egy lehetséges forgatókönyvét várom műhelymunka keretében a tervezéstől a lekérdezéseken keresztül a prezentációig.” „A kerületi Pedagógiai Intézetek szakértői számára a fenntartó szintű elemző-műhely munkát lehetőleg más időpontban tervezzék, mert a kettő merőben eltér egymástól.” „Meghívott OH előadó adjon tájékoztatást az országos mérések jövőbeni változásairól, a fejlesztési elképzelésekKövetkező tanév ről.” Ezek a témák több évre adnak feladaAz utolsó kérdésben lehetőség volt a tot és megkönnyítik a tervező munkánkövetkező műhelyfoglalkozások témáira kat. Fontosnak tartjuk az intézmények javaslatot tenni. számára nyújtott gyakorlati lehetősé„Ebben a témában egy év múlva hason- get kiegészítve a fejlesztés kérdésében ló összejövetelre számítunk!” adott segítséggel.
Fotó: Südi Ilona
22. szám
2014. szeptember
7
Török József
Segítség a tényalapú oktatáspolitikai döntéshozatalhoz A hatékonyságot javító, az eredményességet növelő és a méltányosságot is megvalósítani képes rendszerszinten jó döntés előkészítése és meghozatal több irányból is megközelíthető. Elvi, magasabb rendű, tehát a rendszeren kívül álló megközelítés e téren éppúgy lehetséges, mint a rendszer belsejéből származó és adódó. Érvényes ez a nevelés oktatás országos nagyrendszerére is, melynek értelmezési keretében az előző típusú döntéshozatal jellemző megjelenési formája az oktatáspolitikai felülről kezdeményezett reform, utóbbi típusának jellegzetessége pedig az adatokra alapozó, a rendszert alkotók innovatív potenciálját is becsatornázó minőségfejlesztés. Szerencsés helyzetben van a magyar oktatásügy, hiszen több mint negyven éve vesz részt nemzetközi vizsgálatokban, melynek visszajelzései világviszonylatban is viszonyítási pontokat biztosítanak saját teljesítményünk pozicionálására. Helyzetünk nemcsak szerencsés, hanem egyben kivételezett is, hiszen rendkívül gazdag, évről évre a nevelés-oktatás minden egyes szintjén érvényes, tárgyszerű és megbízható visszajelzést biztosító országos értékelési rendszer működik immár közel másfél évtizede Magyarországon. A hazai Országos kompetenciamérés (OKM) csakúgy, mint a nemzetközi vizsgálatok (PISA, TIMSS, PIRLS) a tanulói képességek fejlettségének egyes szeg-
22. szám
2014. szeptember
menseit leíró adatokon túl az azokat befolyásolni képes belső, az oktatási rendszer szerves részét képező tényezők mellett vizsgálja a külső tényezőket is, amelyek az azonos képességgel rendelkező tanulók fejlettsége és teljesítménye közötti különbségek mértékét illetően magyarázóerővel bírnak. Ezek az adatbázisok megbízható alapját képezhetik a tényalapú döntéshozatal előkészítésének, mindössze a megfelelő szakmai műhelyek értő hozzáálláson alapuló, kellő egzaktságú kérdésekre vonatkozó válaszainak megtalálását célzó elemzését kell elvégezni hozzájuk. A TÁMOP-3.1.8-09/1-2010-0004 „Átfogó minőségfejlesztés a közoktatásban” című kiemelt uniós projekt keretében az Oktatási Hivatal „A hazai és nemzetközi mérési eredmények feldolgozásán alapuló fejlesztési és oktatáspolitikai célú másodelemzések” címmel kiírt pályázatának három elemzését magába foglaló kötet jelent meg 2014. késő tavaszán. E kutatás-fejlesztési tevé-
8
kenység keretében készült el a Herczeg iskoláiban tanulók esetében alacsoBálint „Az iskolák közötti különbségek nyabb a rossz családiháttér-index mértékének mélyebb vizsgálata”, hatása”, Nahalka István – Zempléni András „Hogyan hat az iskola/osztály tanulói- “a 8 és 6 osztályos gimnáziumi képnak heterogén/homogén összetétele a zésben tanulók esetében szintén tanulók eredményességére”, valamint kevésbé meghatározó a családi hátCsullog Krisztina – D. Molnár Éva – tér”, Lannert Judit „A tanulók matematikai teljesítményét befolyásoló motívumok “tovább növeli a családi háttér és stratégiák vizsgálata a 2003-as és hatását […] az osztályok közötti 2012-es PISA-mérésekben” című tanulszegregációs index és az iskolanagymánya. ság”, A tanulmánykötet, az annak részleteit és mintegy keresztmetszetét is bemutató konferenciát követően letölthetővé vált. A kétszáz oldalas, táblázatokkal és ábrákkal bőven illusztrált kötet tanulmányai önmagukban is megérnének egyegy hosszabb elemzést, a tanulmányok szabad hozzáférhetősége okán azonban ettől most hadd tekintsünk el, és mintegy étvágygerjesztőnek, hadd idézzünk pár, a lényeget megragadó és egyben továbbgondolásra is lehetőséget biztosító megállapítást belőlük:
“nem a valóságos összefüggéseket
fogalmazzák meg azok az állítások, melyek szerint a jobb tanulók külön csoportokban, elkülönült formában való nevelése azért indokolt, mert az osztályaikban lévő gyenge tanulók lehúzzák az eredményeiket”,
“a képzési formák különbségei mö-
gött nagy részben a szocioökonómiai különbségek állnak”,
“a földrajzi jellemzők jelentősen
befolyásolják az eredményeket, de […] az intézmény humán kapacitásának minősége legalább akkora hatást gyakorol az eredményekre”,
“az egyházi, non-profit fenntartók
22. szám
2014. szeptember
9
KÉPZÉS, TOVÁBBKÉPZÉS, MŰHELY
AJÁNLÓ A 2014/2015. tanév rendjéről szóló EMMI rendelet értelmében minden iskola köteles intézkedési tervet készíteni. A Mérei Ferenc Fővárosi Pedagógiai Intézet mérés-értékelési szakértői két formában is tudnak segíteni az elkészítendő elemzés és az az alapján készítendő intézkedési terv kimunkálásában: 1. műhelyfoglalkozás-sorozattal, melynek címe: Az OKM FIT elemző szoftver használata intézkedési terv készítéséhez. A foglalkozássorozat időtartama: 3x2 óra november végén. 2. 30 órás akkreditált pedagógus-továbbképzéssel Hozzáadott érték – Mit és miért mérünk címmel. A továbbképzés legalább 15 fő jelentkezése esetén – akár kihelyezett formában is – indul.
Szolgáltatásaink térítésmentesek. Részvételi szándékukat a
[email protected] címen szíveskedjenek jelezni.
Jogszabályi háttér: A 2014/2015. tanév rendjéről szóló 35/2014. (IV. 30.) EMMI rendelet 9. § (10) bekezdése értelmében az igazgató az országos kompetenciamérés tanulói és intézményi adatai alapján feladatellátási helyenként elemzi az intézmény pedagógiai munkáját, különös tekintettel az azonos iskolatípusok országos átlagadataival való összehasonlításra, az iskola családi háttérindexéhez mért iskolai pedagógiai teljesítményekre, az iskola pedagógiai fejlesztő munkájának hatására, és
22. szám
a mérési eredmények időbeni változásaira.
2014. szeptember
10
Ennek keretében az iskola igazgatója azonosítja az intézményi pedagógiai munka
erősségeit, gyengeségeit és intézményi intézkedési tervben határozza meg az intézményi pedagógiai munka eredményességének fejlesztése érdekében szükséges intézkedéseket. Az elemzést is tartalmazó intézményi intézkedési tervet az igazgató 2015. június 10-éig készíti el, majd a nevelőtestület véleményének figyelembevételével 2015. június 30-ig véglegesíti és megküldi a fenntartójának. A fenntartó rendszeresen ellenőrzi az intézményi intézkedési tervben foglaltak teljesítését. Az elkészítendő elemzés és az az alapján készítendő intézkedési terv kimunkálásában hasznosnak bizonyulhat az Intézetünk mérés-értékelési szakértői által tartott Az OKM FIT elemző szoftver használata intézkedési terv készítéséhez című 3x2 órás műhelyfoglalkozás-sorozat, valamint a Hozzáadott érték – Mit és miért mérünk című akkreditált 30 órás pedagógus-továbbképzés. A műhelyfoglalkozásokra 2014. novemberében kerül sor, a továbbképzés –akár kihelyezett formában is - legalább 15 fő jelentkezése esetén indul. Részvételi szándékukat a
[email protected] címen szíveskedjenek jelezni.
Forrás: sxc.hu
22. szám
2014. szeptember
11
MEGHIRDETETT MÉRÉS-ÉRTÉKELÉS MŰHELYFOGLALKOZÁS 2014/2015. TANÉV I. félév 2014. november 4. (kedd) 15-16.30
Gondolkodjunk közösen! Mit tudunk kezdeni az országos kompetenciamérés eredményeivel? A tények elemzése fejlesztői szemmel – az intézményi intézkedési terv elkészítéséhez. Előadók Gönczöl Enikő (EduNet Alapítvány, közoktatási szakértő) Südi Ilona (MFPI) Török József (MFPI)
Helyszín Mérei Ferenc Fővárosi Pedagógiai Intézet Budapest VIII. Vas utca 8. Részvétel regisztrációhoz kötött, legkésőbb 2014. október 22-éig a
[email protected] e-mail címen.
Szeretettel várjuk a mérés-értékelés iránt elkötelezett kollégákat a 2014/2015. tanévi első műhelyfoglalkozásunkra.
22. szám
2014. szeptember
12
Levelezőlista méréseseknek
[email protected] e-mail címet hoztunk létre azzal a céllal, hogy az intézmények mérés-értékelési területéért felelős kollégák közvetlenül kapjanak információt, meghívót e területet érintő kérdésekről. Jelenleg erre a listára szeptember 15-ig történt adatszolgáltatás keretében megadott kollégák és a korábbi mérésértékelés műhelyeken résztvevők kerültek felvételre.
Erre a listára bárki feliratkozhat és le is iratkozhat, melynek a menete az alábbi. Feliratkozás: Írjon egy levelet az
[email protected] címre Kapni fog egy értesítést arról, hogy kérelmét a rendszer fogadta. A kapott levélre válasz gomb megnyomásával és a levél változatlanul hagyásával válaszoljon 12 órán belül. Kapni fog egy megerősítést arról, hogy a levelezési lista tagja lett Leiratkozás: Írjon egy levelet az
[email protected] címre Kapni fog egy értesítést arról, hogy a rendszer a kérelmét fogadta A kapott levélre válaszoljon a válasz gomb megnyomásával és a levél változatlanul hagyásával 12 órán belül Kapni fog egy értesítést a leiratkozás megtörténtéről
Fotó: sxc.hu
22. szám
2014. szeptember
13
KIADVÁNY
AJÁNLÓ
Mérésmetodikai értékelés a 2012. májusi érettségi feladatsorokról A TÁMOP-3.1.8 „Átfogó minőségfejlesztés a közoktatásban" című kiemelt uniós projekt I. pillérének keretében folyó kutatások egyik elemeként elkészült a 2012. májusi érettségi feladatok mérésmetodikai vizsgálata. A magyar nyelv és irodalom, a matematika, a történelem, az angol nyelv és német nyelv vizsgatárgy elemzése valamint a kutatási zárójelentés elérhető http://www.oktatas.hu/ kozneveles/projektek/ tamop318_minosegfejl/ projekthirek/ erettsegi_vizsgafeladatok_elemzese Az összegző tanulmány részletesen bemutatja a kutatás folyamatát, módszertanát és legfontosabb következtetéseket, javaslatokat a vizsgált öt tárgy esetében. Az elkészült anyagok elsősorban az érettségi feladatok és feladatsorok fejlesztői számára nyújtanak igen hasznos információkat, de ajánljuk mindenkinek, akit a mérés-értékelés területével foglalkozik.
22. szám
2014. szeptember
14
MFPI Híradó Intézetünk ingyenes információs kiadványának 13-15. oldalán tudósítást adunk az Országos kompetenciamérés 2013. évi eredményeinek nyilvánosságra hozatala után szervezett mérésműhelyfoglalkozásiunkról. A rendkívüli érdeklődés övezte rendezvény aktualitását az adta, hogy a megváltozott fenntartói struktúra új elemzési szempontokat biztosított, ezért tankerületek mint fenntartók is részt vettek rajta. A háromoldalas, ábrákkal és fotókkal illusztrált cikket is tartalmazó MFPI Híradó letölthető az Intézet honlapjáról.
22. szám
2014. szeptember
15
FELELŐS KIADÓ SZERKESZTETTE
Rigóczki Csaba, igazgató Südi Ilona
PEDAGÓGIAI ÉRTÉKELÉSI SZAKTERÜLET MUNKATÁRSAK
Südi Ilona Török József
[email protected] [email protected] [email protected]
338 2156/147 338 2156/119
