Efektivní systém hodnocení a financování výzkumu, vývoje a inovací (IPN Metodika) Jitka Moravcová MŠMT
Seminář Hodnocení a financování vědy v ČR Poslanecká sněmovna Parlamentu ČR 20.5.2014 www.metodika.reformy-msmt.cz
Hodnocení VaVaI Co je hodnocení? ● Definice Evropské komise: “Hodnocení je proces, kterým je sledována, interpretována a vyhodnocována kvalita, implementace, relevance a dopady politiky/programů VaVaI.” Co je hodnocení v ČR? ● Počítání výsledků, kterým je přiřazena určitá váha. Monitorovací cvičení, hodnotí se výzkumné organizace a programy. Mechanicky (trojčlenka) se používají získané body k výpočtu institucionální podpory poskytovatelům a ti (kromě AV ČR) stejným algoritmem počítají inst. financování výzkumných organizacím…….. 1
Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací ● Institucionální podporu lze poskytnout na ● dlouhodobý koncepční rozvoj výzkumné organizace na základě zhodnocení jí dosažených výsledků, ● mezinárodní spolupráci ČR ve VaV realizovanou na základě mezinárodních smluv, ● Účelovou podporu lze poskytnout na ● grantový projekt, ● programový projekt, ● specifický vysokoškolský výzkum, ● velkou infrastrukturu.
2
Financování - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací ● ● ● ● ● ● ● ●
Institucionální podpora - poskytovatelé MŠMT, AV ČR, MPO, MZe, MZ Účelová podpora - poskytovatelé GA ČR, TA ČR, MŠMT
3
Hodnocení - Zákon 130 o podpoře výzkumu, experimentálního vývoje a inovací ● Institucionální podpora ● Institucionální podporu poskytne poskytovatel VO na základě zhodnocení jí dosažených výsledků tak, že její podíl na celkové výši institucionální podpory VO ze státního rozpočtu v daném roce odpovídá jejímu podílu na hodnotě výsledků všech VO dosažených v uplynulých 5 letech podle hodnocení prováděného každoročně RVVI. ● Poskytovatel může výši podpory upravit podle podrobnějšího hodnocení používajícího mezinárodně uznávaných metodik. ● Pouze AV ČR jako poskytovatel takové hodnocení realizuje. ● Ostatní rozpočítávají podle výsledků (RIV body). ● VVŠ rozpočítávají podle výsledků na fakulty a dále na jednotlivé ústavy a katedry (a jednotlivce). 4
Současná metodika hodnocení výsledků ● ● ● ● ●
lepší, než žádná metodika hodnocení, je jednoduchá, je zažitá, není náchylná k nepotismu, základ pro přiznání institucionální podpory
5
Současná metodika hodnocení výsledků Absolutní počet odkazů
Relativní zastoupení odkazů
výroba tzv. recenzovaných neimpaktovaných (tj. především domácích) časopiseckých publikací vzrostla v období 20062010 o více než 200 procent • WoS, heslo „Czech Republic“, 25.1.2014
6
Současná metodika hodnocení výsledků ● soustředí se pouze a právě na hodnocení výstupů, ● nedává informaci o kvalitě a významu výsledků, ● neposkytuje informace umožňující mezinárodní srovnání výkonnosti a produktivity pracovišť ani celých oborů, ● neposkytuje ani jedné úrovni řízení v systému VaV zpětnou (mezinárodní) vazbu ohledně kvality řízení VaV, ● nereflektuje postavení a mise různých typů VO, ● realizuje se každý rok, výše institucionální financování se tak mění každoročně, ● nepodává žádnou informaci o sledování a dosahování cílů národních priorit či priorit poskytovatelů, ● nepodává informace o splnění cílů programů, ● nepodporuje excelenci. 7
Budoucí metodika hodnocení ● Národní program reforem 2014, ● Národní politika VaVaI ČR na léta 2009-2015 s výhledem do 2020, ● Strategie mezinárodní konkurenceschopnosti na období 2012-2020, ● Národní inovační strategie, usnesení vlády č. 77, 26. ledna 2011, ● Dlouhodobé principy hodnocení výsledků VO, RVVI, 263. zasedání, 25. březen 2011.
Změna současného hodnocení je nezbytná! 8
Národní inovační strategie
● Prioritní osa „Excelentní výzkum“ obsahuje opatření Efektivní využívání veřejných prostředků na VaV ● zajistit dlouhodobý koncepční rozvoj VO, pro které musí být vytvořeny jasné a stabilní podmínky pro rozdělování institucionální podpory výzkumu na základě hodnocení podporujícího excelenci ● hodnocení všech programů účelové podpory musí být založeno na základě hodnocení skutečných přínosů a zejména dopadů podpořeného VaV ● ustanovit systém hodnocení velkých výzkumných infrastruktur 9
IPN Metodika, projekt MŠMT ● Koncepce projektu respektuje všechny citované strategické dokumenty a ověřenou mezinárodní praxi 2011 měsíc aktivita 2012 měsíc aktivita
2013 měsíc aktivita
leden
únor
březen duben květen červen červenec srpen září říjen listopad Příprava projektu, veřejné diskuse, projednání na RVVI, oponentní řízení CERA a Expertní skupina, schválení projektu
leden vedením MŠMT
únor Zahájení projektu
březen duben květen červen červenec Sestavení týmů KA, zahájení činnosti v KA, dozorčí rada, presentace projektu, příprava 1. zadávací dokumentace pro veřejnou zakázku, projednání a schválení na MŠMT, předání zadávací dokumentace do kabinetu ministra
leden vlastními realizátory projektu (harmonogram, personální zajištění, podoba VZ)
únor březen duben Omezení aktivit směrem k plnění hlavních cílů projektu, práce na přípravě podstatné změny, konzultace podstatné změny s děkany PřF, členy dozorčí rady, zástupci RVŠ a AV ČR
květen Finální verze Situační zprávy (příloha žádosti o PZ), Memorandum o spolupráci s RVVI, mezinárodní seminář 1.5. uzavřeny DPČ s garanty KA
1. 4. uzavřena DPČ s hl. odborným garantem 2014 měsíc aktivita
2015 měsíc aktivita
leden únor Výběrové řízení ukončeno 6.3.2014, revitalizace KA
leden
únor
březen
březen
duben
duben
květen
květen
červen
srpen září říjen Omezení aktivit směrem k plnění hlavních cílů projektu – pozastavení uzavírání nových dohod členů týmu, jednání o věcném obsahu VZ
červen červenec Příprava žádosti o podstatnou změnu, 2.7. předložena Řídicímu orgánu, 30. 7. předložena poradě vedení – vysloven souhlas, konzultace druhu zadávacího řízení s Mgr. Sixtou (MMR) červenec
červen Konec projektu
srpen
srpen 19. 8. Podstatná změna nabyla účinnosti dodatkem, obnoveno řešení projektu
září
prosinec
listopad prosinec Omezení aktivit směrem k plnění hlavních cílů projektu – jednání se zástupci MŠMT a
září říjen listopad prosinec Příprava 2. zadávací dokumentace, vyhlášení a realizace výběrového řízení
říjen
listopad
prosinec
10
IPN Metodika, projekt MŠMT ● Zpracování podrobných a strukturovaných návrhů oborových metodik hodnocení hodnocených jednotek v rámci VO s prvky mezinárodního oborového informovaného peer-review ● Využití relevantních bibliografických, citačních a dalších databází vědeckých výsledků a jejich analytických nástrojů k zajištění zadání včetně přípravy specialistů ● Vypracování podrobného návrhu procesních pravidel hodnocení ● Návrh systému institucionálního financování VaV (rozpočet podle předpisu a výkonnostní kontrakt) a jeho vazeb na výsledky hodnocení ● Malé pilotní ověření nového systému hodnocení VO ● Analýza účelového financování ve vztahu a v interakci k financování institucionálnímu ● Velké pilotní ověření ● Doporučení pro vznik a fungování instituce organizující hodnocení 11
IPN Metodika, projekt MŠMT ● Základní pojetí hodnocení ● Hodnocená jednotka, přihlášení ke zhodnocení v oboru (typicky v.v.i. nebo fakulta). ● Odhad 5 – 8 panelů, cca 25 oborových subpanelů. ● Soubor indikátorů podle oboru a postavení HJ v systému VaVaI. ● Dvoukolové hodnocení, mezinárodní oborové peer-review. ● Sebehodnotící zpráva. ● Nebudou se hodnotit všechny výsledky. ● Hodnocení organizující instituce. ● Realizace 1krát za cca 5 let.
12
IPN Metodika, projekt MŠMT ● Bibliometrie VVŠ
• WoS, heslo „Czech Republic“, 25.1.2014, roztřídění podle instituce
13
IPN Metodika, projekt MŠMT ● Institucionální financování
14
IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory
15
IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory
16
IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory
●
zdroj: Výroční zprávy VVŠ o hospodaření 2012 17
IPN Metodika, projekt MŠMT Institucionální financování, indikátory externí podpory
18
Proč potřebuje ČR jiné hodnocení?
• •
• • •
Zajištění informací pro posílení efektivity řízení a strategického rozhodování (dnes není k dispozici). Pravidelné vyhodnocování vědecké výkonnosti a fungování institucí, které realizují výzkum a nárokují si veřejnou institucionální podporu (dnes není k dispozici). Srovnání kvality všech HJ vůči světové úrovni a standardům (dnes není k dispozici) Informace o využívání a potřebnosti velkých a nákladných výzkumných infrastruktur (dnes není k dispozici) Srovnání hodnocených jednotek (HJ) v oborech v ČR (dnes není k dispozici) 19
Je jednoduché zavést nové hodnocení? ● ● ● ●
není žádné ideální a nekonfliktní řešení metodicky velmi složité nyní samostatný vědní obor metodika není 100 % přenositelná ze země do země
● ● ● ●
hledání konsensu otevřené jednání všech zúčastněných stran vysvětlování, diskuse, ochota jednat dlouhodobý proces, přechodné období 20
