MINISTERSTVO DOPRAVY Odbor fondů Evropské unie
Plán hodnocení O 430 na roky 2007-2013
Aktualizace říjen 2009
WWW.OPD.CZ
Plán hodnocení O 430 na roky 2007-2013
OBSAH:
OBSAH:..................................................................................................................................... 2 1.
ÚVOD ................................................................................................................................ 3
2.
PLÁN HODNOCENÍ....................................................................................................... 5 2.1.
ŘÍDÍCÍ STRUKTURY ODPOVĚDNÉ ZA HODNOCENÍ ......................................................... 6
2.1.1. 2.1.2. 2.1.3.
2.2.
OBSAHOVÁ NÁPLŇ PLÁNU HODNOCENÍ O430 2007-2013............................................ 8
2.2.1. 2.2.2. 2.2.3.
2.3. 2.4. 2.5.
2.5.1.1. 2.5.1.2.
2.5.2. 2.5.3.
Evaluace implementace OPD 2007-2013 a OPI/FS 2004-2006................................. 11 Strategická hodnocení.......................................................................................................... 11 Operativní a tematická hodnocení ....................................................................................... 14
Příprava pro plánovací období 2014-2020................................................................. 16 Rozvoj evaluační kapacity........................................................................................... 18
EVALUAČNÍ PLÁN NA ROK 2010............................................................................ 20 3.1.
INDIKATIVNÍ POPIS PLÁNOVANÝCH AKTIVIT .............................................................. 20
3.1.1. 3.1.2.
3.2. 4.
Evaluace implementace OPD 2007-2013 a OPI/FS 2004-2006................................... 8 Příprava pro plánovací období 2014-2020................................................................... 8 Rozvoj evaluační kapacity............................................................................................. 8
ČASOVÝ PLÁN EVALUAČNÍCH AKTIVIT ........................................................................ 9 PLÁNOVANÉ FINANČNÍ ZDROJE.................................................................................. 10 NAVRHOVANÉ AKTIVITY PLÁNU HODNOCENÍ ............................................................ 11
2.5.1.
3.
Pracovní skupina pro evaluaci...................................................................................... 6 Schvalování a revize plánu hodnocení .......................................................................... 6 Realizace jednotlivých hodnotících aktivit .................................................................... 7
Aktivity v oblasti strategických evaluací ..................................................................... 20 Aktivity v oblasti operativních a tematických evaluací ............................................... 21
ČASOVÝ PLÁN AKTIVIT A PŘEDPOKLÁDANÉ FINANČNÍ ZDROJE .................................. 22
SEZNAM ZKRATEK.................................................................................................... 23
Říjen 2009
2
Plán hodnocení O 430 na roky 2007-2013
1. ÚVOD Předkládaný materiál „Plán hodnocení O 430 na roky 2007-2013“ slouží v rámci v rámci OP Doprava (OPD) jako osnova pro plnění povinnosti hodnocení. Hodnocení OP je prováděno v souladu s povinnostmi ustanovenými v rámci článků 47 až 49 Nařízení Rady (ES) č. 1083/2006 ze dne 11. července 2006 o obecných ustanoveních o Evropském fondu pro regionální rozvoj, Evropském sociálním fondu a Fondu soudržnosti a o zrušení Nařízení Rady (ES) č. 1260/2006 (dále jen „Obecné nařízení“), v souladu s metodickými pokyny Evropské komise a v souladu s metodickými pokyny NOK. Za zajištění hodnocení je odpovědný Řídící orgán OP Cílem hodnocení je dle čl. 47 odst. 1 Nařízení:
zvýšení kvality a efektivnosti pomoci poskytované z Fondů EU a její konzistence s cíli Evropské unie a České republiky, zdokonalení strategie a zefektivnění implementace operačního programu, zkoumání specifických strukturálních problémů České republiky a udržitelného rozvoje ve vztahu k předmětu operačního programu. Podle čl. 47 odst. 2 mohou být hodnocení:
strategické povahy za účelem posouzení vývoje programu ve vztahu k prioritám; operativní povahy za účelem podpory monitorování operačního programu. Podle čl. 48 odst. 2 a 3 obecného nařízení se jedná o:
hodnocení předběžné (ex-ante) operačních programů - pro zlepšení připravovaných programovacích dokumentů; průběžné hodnocení v průběhu implementačního období (na základě zkušeností z minulých období nahrazuje hodnocení střednědobé, tzv.mid- term evaluaci), které je nutné, zejména pokud monitorování odhalí významný odklon od stanovených cílů nebo je-li podán návrh na podstatnou revizi operačního programu podle čl. 33 obecného nařízení.
Pro účely plnění požadavků čl. 29 odst. 2 obecného nařízení je pak možno realizovat souhrnné hodnocení pro strategické zprávy. Povinnosti hodnocení OP jsou:
sestavování, realizace, aktualizace a vyhodnocování plánu hodnocení OP (ve vazbě na plán hodnocení NSRR vytvořený NOK); zajištění hlavních evaluací (ex-ante, průběžné - operativní a strategické); poskytování zdrojů a údajů pro provádění hodnocení a využití údajů a informací z monitorovacího systému pro průřezové hodnocení prováděné a organizované NOK
Říjen 2009
3
Plán hodnocení O 430 na roky 2007-2013
zejména však pro strategické zprávy 2009 a 2012 (čl. 29 odst. 2) a pro ex-post hodnocení prováděné EK; aktivní vzájemná spolupráce s evaluátory a pracovníky hodnocení na národní úrovni (s Evaluační jednotkou NSRR), na různých úrovních implementace OP a na různých úrovních implementace strukturálních fondů a Fondu soudržnosti v České republice; povinnost uveřejňování výsledků hodnocení, a to v souladu s požadavky odst. 3 článku 47 Nařízení Rady (ES) č. 1083/2006.
Předkládané aktualizované znění plánu v první řadě reflektuje schválený Evaluační plán (EP) NSRR a specifikuje aktivity evaluace OPD na rok 2010. V rámci aktualizace bylo pozměněno zaměření jedné aktivity (Hodnocení nastavení výběrových kritérií) a rozšířeno na Hodnocení přípravy a implementace vybraných kolových výzev a dále byl proveden posun časování jednotlivých aktivit. V návaznosti na upravený časový plán evaluačních aktivit byly vyčísleny předpokládané finanční náklady na jeho realizaci v roce 2010. Zároveň byly některé části textu doplněny či upraveny.
Říjen 2009
4
Plán hodnocení O 430 na roky 2007-2013
2. PLÁN HODNOCENÍ Prvním krokem přípravy evaluačního procesu bylo sestavení plánu hodnocení, jehož cílem je zlepšení řízení operačního programu v různých fázích implementace a zlepšení evaluační kapacity. Do plánu hodnocení jsou začleněny evaluační aktivity zaměřené na zlepšení strategie a řízení realizace pomoci, zejména strategická hodnocení (včetně součinnosti při hodnocení pro strategické zprávy podle čl. 29 odst. 2 obecného nařízení realizovaném EJ), operativní a tematická hodnocení a hodnocení ex-ante pro příští programovací období. Plán rámcově počítá s hodnoceními ad-hoc. Některá hodnocení typu ad-hoc, jejichž provedení se s vysokou pravděpodobností ukáží v budoucnu jako nezbytné, lze přímo zařadit do hodnotících aktivit. Plán také počítá se spoluprací s Evropskou komisí na přípravě evaluace ex-post. Své místo v evaluačním plánu mají rovněž aktivity směřující k optimalizaci evaluační kapacity. Hlavní položky plánu hodnocení budou diskutovány s evaluační jednotkou NSRR.
Plán hodnocení byl vypracován na celé programovací období, aktualizuje se vždy po roce a detailně se může rozpracovávat pro nejbližší příští kalendářní rok. Plán hodnocení obsahuje:
specifikaci řídící struktury odpovědné za hodnocení; indikativní časový plán evaluačních aktivit; plánované finanční zdroje; mechanismus možné revize plánu hodnocení.
Roční konkretizace plánu hodnocení obsahuje upřesnění obsahu jednotlivých aktivit a jejich rozpracování v podrobnosti na úrovni projektů:
plánované finanční zdroje (s rezervou pro hodnocení ad-hoc ap.); indikativní (měsíční) harmonogram evaluačních aktivit.
Hodnotící plány operačních programů se po projednání v Pracovní skupině pro evaluaci po projednání příslušnými monitorovacími výbory a po schválení stávají součástí souboru plánovaných evaluačních aktivit NSRR koordinovaných evaluační jednotkou NSRR. Plnění plánu hodnocení se vyhodnocuje v ročních intervalech. Informace o plnění hodnotícího plánu OPD jsou součástmi zpráv o realizaci OPD, předkládaných na konci roku.
Říjen 2009
5
Plán hodnocení O 430 na roky 2007-2013
2.1. ŘÍDÍCÍ STRUKTURY ODPOVĚDNÉ ZA HODNOCENÍ 2.1.1. PRACOVNÍ SKUPINA PRO EVALUACI Pracovní skupina pro evaluaci (PS) funguje jako jeden z pracovních orgánů Národního orgánu pro koordinaci (NOK). Pracovní skupinu tvoří zástupci a zástupkyně řídicích orgánů sektorových a regionálních operačních programů, Evaluační jednotky NSRR, platebního orgánu a případně dalších zainteresovaných subjektů. Pracovní skupina připomínkuje plán hodnocení a jeho roční aktualizaci. Vzájemná výměna informací mezi odd. evaluace a analýz MMR a evaluačními pracovišti OP umožňuje provázanost jednotlivých evaluačních aktivit. PS pro evaluaci koordinuje MMR. Pracovní skupina projednává:
přípravu plánu hodnocení; aktualizaci plánu hodnocení pro další rok; postup přípravy realizace evaluačních aktivit a významných projektů; vytváření vnitřní kapacity pro evaluaci; věcnou přípravu realizace plánu hodnocení.
Vzájemná komunikace mezi Evaluační jednotkou NSRR (nacházející se na MMR) a evaluačními pracovníky OP je zásadní pro úspěšnou realizaci projektů, pro šíření evaluačních doporučení a pro jejich konečné zapracování. Začlenění OP do odborných skupin rozšiřuje úhel pohledu na zadání, průběh i závěrečná doporučení projektu a umožňuje, aby přitom byly zahrnuty evaluační potřeby OP. Zároveň je rozšířena spoluzodpovědnost OP za kvalitu výstupů projektu a jejich adekvátní využití.
2.1.2. SCHVALOVÁNÍ A REVIZE PLÁNU HODNOCENÍ Pro programové období 2007-2013 ŘO zajišťuje hodnocení, které se provádí v souladu s hlavou IV kapitolou I nařízení Rady (ES) č.1083/2006, přičemž postupuje dle Manuálu pracovních postupů O 430. Prvním krokem přípravy evaluačního procesu bylo sestavení plánu hodnocení, který navazuje na Evaluační plán NSRR. Tento plán hodnocení obsahuje především účel hodnocení, harmonogram a finanční rozpis. ŘO zajišťuje následující činnosti:
Říjen 2009
6
Plán hodnocení O 430 na roky 2007-2013
připravuje plán hodnocení OP v návaznosti na plán hodnocení Evaluační jednotky NSRR (co hodnotit, kdy hodnotit); připravuje projekty hodnocení a evaluace; zajišťuje hodnocení u externích dodavatelů; spolupracuje při zpracovávání výročních zpráv; komunikuje s Evaluační jednotkou NSRR a účastní se odborných skupin zaměřených na evaluaci.
Plán hodnocení projednal Monitorovací výbor OPD a schválil ŘdO 430. Plán hodnocení bude v případě potřeby upraven, aby odpovídal skutečným potřebám O 430. Revizi plánu hodnocení provádí EV a schvaluje ŘdO 430.
2.1.3. REALIZACE JEDNOTLIVÝCH HODNOTÍCÍCH AKTIVIT Dle čl. 47, bodu 3 obecného nařízení musí být hodnotitelé nezávislí. Požadavek EK na nezávislost hodnotitelů se odráží ve způsobu zadávání evaluačních projektů a jejich řízení. U evaluačních projektů realizovaných externími evaluátory jsou pracovníci ŘO věcnými garanty projektu, jsou zodpovědní za koordinaci jednotlivých evaluačních projektů včetně zpracování zadání, uskutečnění výběrového řízení na řešitele, komunikaci s řešiteli a odbornými skupinami. Externí řešitelé (jak firmy, tak výzkumné nebo akademické subjekty aj.) jsou vybíráni formou veřejné soutěže v souladu se zákonem č. 137/2006 Sb. o veřejných zakázkách, vyhláškou č. 330/2006 Sb. o uveřejňování vyhlášení pro účely zákona o veřejných zakázkách, Metodikou zadávání veřejných zakázek, Závaznými postupy pro zadávání zakázek spolufinancovaných ze zdrojů EU nespadajících pod aplikaci zákona č. 137/2006 Sb., o veřejných zakázkách v programovém období 2007-2013, vnitřními předpisy MD a Manuálem pracovních postupů O 430.
Říjen 2009
7
Plán hodnocení O 430 na roky 2007-2013
2.2. OBSAHOVÁ NÁPLŇ PLÁNU HODNOCENÍ O430 2007-2013 2.2.1. EVALUACE 2004-2006
IMPLEMENTACE
OPD 2007-2013
A
OPI/FS
Strategická hodnocení:
Souhrnná strategická evaluace Posouzení vhodnosti a plánovaných hodnot indikátorů Hodnocení plnění cílů OPD a provázanosti realizace OP s realizací národních programů a strategií Hodnocení dopadů realizace OP na horizontální témata a environmentálních dopadů OPD Ex-post hodnocení přínosů OPI a FS 2004-2006 Hodnocení přínosů, dopadů a efektivnosti vybraných projektů
Operativní a tematická hodnocení:
Průběžná evaluace, roční problémové vyhodnocování, ad-hoc a ostatní evaluace Hodnocení systémových, administrativních a vnějších vlivů na implementaci OPD Hodnocení prostorového rozložení a územních přínosů infrastrukturních investic z Evropských fondů Benchmarking analýza projektů Hodnocení přípravy a implementace vybraných kolových výzev
2.2.2. PŘÍPRAVA PRO PLÁNOVACÍ OBDOBÍ 2014-2020
Analýzy makroekonomických vlivů Ex-ante analýzy OP pro období 2014-2020 SEA OP pro období 2014-2020 Ostatní dílčí analýzy pro podporu plánování Příprava OP pro období 2014-2020 Ostatní
2.2.3. ROZVOJ EVALUAČNÍ KAPACITY
Semináře a školení ve vztahu k evaluaci, prohlubování odborných znalostí a vědomostí pracovníků zapojených do evaluace Zpracování metodických pomůcek a technicko-informačních materiálů Ostatní
Říjen 2009
8
Plán hodnocení O 430 na roky 2007-2013
2.3. ČASOVÝ PLÁN EVALUAČNÍCH AKTIVIT 2007
2008
2009
2010
Strategická evaluace I.
2011
Posouzení indikátorů Plnění cílů a provázanost
2013
2014
2015
Posouzení indikátorů Plnění cílů a provázanost
Plnění cílů a provázanost
Strategické evaluace
2012
Strategická evaluace II.
Hor.priority a env.dopady
Hor.priority a env.dopady
Ex-post OPI a FS Hod. vybraných projektů
Hod. vybraných projektů
Ex-post 2007-2013 2007
2009
2008
2010
2011
2012
2013
2014
2015
2014
2015
2014
2015
Roční, průběžná, ad-hoc evaluace Hodnocení vlivů na impl.OPD
Operativní a tematické evaluace
Benchmarking analýza Prostor. rozmístění projektů Hodnocení kolových výzev 2007
2008
Prostor. rozmístění projektů
Hodnocení kolových výzev 2009
2010
2011
2012
OP 2014 -2020
SEA OP 2014-2020 Ostatní 2007
Evaluační kapacita
Říjen 2009
2013 Ex-ante 2014-2020
2008
2009
2010
2011
2012
2013
Vzdělávání v evaluaci Rozvoj eval.nástrojů
9
2.4. PLÁNOVANÉ FINANČNÍ ZDROJE Předpokládané Kdo Předpokládaný náklady zajišťuje harmonogram 1. Evaluace implementace OPD 2007-2013 a OPI/FS 2004-2006 Název aktivity
Strategická hodnocení Souhrnná strategická evaluace Posouzení vhodnosti a plánovaných 5 000 000,hodnot indikátorů Hodnocení plnění cílů OPD a provázanosti realizace OP s realizací 6 000 000,národních programů a strategií Hodnocení dopadů realizace OP na plnění horizontálních priorit a 5 000 000,environmentálních dopadů OPD Ex-post hodnocení přínosů OPI a FS 4 000 000,2004-2006 Hodnocení přínosů, dopadů a 5 000 000,efektivnosti vybraných projektů Operativní a tematická hodnocení Průběžná evaluace, roční problémové vyhodnocování, ad-hoc a ostatní 12 000 000,evaluace Hodnocení systémových, administrativních a vnějších vlivů na 2 000 000,implementaci OPD Hodnocení prostorového rozložení a územních přínosů infrastrukturních 5 500 000,investic z Evropských fondů Benchmarking analýza projektů 6 000 000,Hodnocení přípravy a implementace 4 000 000,vybraných kolových výzev Celkem 54 500 000,2. Příprava pro plánovací období 2014-2020 Analýzy makroekonomických vlivů Ex-ante analýzy OP pro období 20142020 SEA OP pro období 2014-2020 Ostatní dílčí analýzy pro podporu plánování (např. PPP atp.) Celkem 3. Rozvoj evaluační kapacity Semináře a školení ve vztahu k evaluaci, prohlubování odborných znalostí a vědomostí pracovníků zapojených do evaluace
Prosinec 2008
0,-
MMR MD
2009 a 2011 2009-2010, 2012
MD
2008, 2009 a 2012
MD MMR
2009-2010 2012
MD
2010
MD
2010, 2013
MD
Průběžně, 1x ročně
MD
2009
MD
2010, 2012-2013
MD MD
2011 2008, dále dle potřeb
MMR
-
5 000 000,-
MD
1.pol. 2013
3 000 000,-
MD
2012/2013v
4 000 000,-
MD
2013
12 000 000,Realizováno a hrazeno v rámci projektu TA zaměřeného na
MD
Průběžně
10
Plán hodnocení O 430 na roky 2007-2013
vzdělávání. Zpracování metodických pomůcek a technicko-informačních materiálů Celkem
Celkem (1+2+3)
7 500 000,-
MD
Průběžně
7 500 000.-
74 000 000,-
2.5. NAVRHOVANÉ AKTIVITY PLÁNU HODNOCENÍ 2.5.1. EVALUACE 2006
IMPLEMENTACE
OPD 2007-2013
A
OPI/FS 2004-
2.5.1.1. STRATEGICKÁ HODNOCENÍ Název aktivity Cíl
Souhrnná strategická evaluace Strategické evaluace se zaměří zejména na vývoj OP ve vztahu k prioritám ES a prioritám ČR. Jak přispívá OPD k naplňování priorit ES a priorit ČR? Klíčová otázka Předmět a průběh ČR má dle odst. 2 čl. 29 Obecného nařízení povinnost do konce roků 2009 a 2012 předložit Evropské komisi Strategické zprávy o příspěvku hodnocení z programů financovaných z Fondů k cílům politiky soudržnosti, k naplňování úkolů jednotlivých fondů, k Strategickým obecným zásadám Společenství a NSRR a k plnění cílů pro růst a zaměstnanost. Evaluace bude zásadním způsobem přispívat k podkladům pro tyto Zprávy. ŘO OPD bude poskytovat potřebnou součinnost EJ, která tuto evaluaci bude realizovat. Ve svém souhrnu poskytnou strategické evaluace podklady pro Výstupy strategické zprávy podle článku 29 obecného nařízení a pro strategie vlády ČR. V průběhu roku 2009 – dle konkrétního návrhu EJ. Harmonogram
Název aktivity Cíl
Posouzení vhodnosti a plánovaných hodnot indikátorů Zhodnocení vhodnosti indikátorů OPD, určení jejich plánovaných a dosažených hodnot a upřesnění metodiky jejich sledování. Jaká je vypovídací schopnost a celková vhodnost stávajících indikátorů Klíčové otázka v systému? Jaké by měly být/jsou dosažené hodnoty indikátorů? Předmět a průběh Hodnocení bude směřováno do následujících oblastí: hodnocení Určení chybějících výchozích a cílových hodnot indikátorů na základě dosud předložených projektů. Vyhodnocení vhodnosti nastavení z hlediska věcné náplně sady indikátorů, zde bude hodnocena vypovídací schopnost indikátorů a jejich provázanost s cíli. Vyhodnocení vhodnosti nastavení z hlediska možnosti kvantifikace jednotlivých indikátorů.
Říjen 2009
11
Plán hodnocení O 430 na roky 2007-2013
Určení dosažených hodnot indikátorů v průběhu / po skončení realizace projektů/programu. Výstupy
Harmonogram Název aktivity Cíl
Klíčová otázka Předmět a průběh hodnocení
Výstupy Harmonogram Název aktivity Cíl
Klíčová otázka Předmět a průběh hodnocení
Říjen 2009
Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli vč. formulace doporučení k úpravám. V rámci závěrečné zprávy budou metodicky vymezeny definice indikátorů, jakož i způsob a frekvence jejich měření a vykazování. Součástí výstupů budou rovněž určené výchozí a cílové hodnoty indikátorů. Doba realizace – cca 6 měsíců Hodnocení plnění cílů OPD a provázanosti realizace OP s realizací národních programů a strategií Zhodnotit pokrok v naplňování cílů OPD v širším kontextu a přispět k větší koordinovanosti a synergii všech investic do rozvoje dopravní infrastruktury a k vhodnějšímu rozložení investic dle aktuálních potřeb a s cílem plnění strategických cílů OPD a Dopravní politiky. Jak reálně přispívá implementace OPD k plnění svých cílů, cílů dopravní politiky ČR a k řešení problémů a potřeb v oblasti dopravy v ČR? Aktivita bude plněna formou série studií hodnotících příspěvek OPD v rámci širších strategických cílů ČR a dlouhodobějších potřeb rozvoje dopravní infrastruktury a jednotlivých modů dopravy ČR. V rámci aktivity bylo zahrnuto také vytvoření rozvojových sektorových strategií pro oblasti dopravní infrastruktury relevantní vzhledem k zaměření OPD. Tato aktivita bude navázana na Dopravní politiku České republiky 20052013 resp. její aktualizace, které by měly být provedeny na konci let 2009 a 2011. Výsledky budou interpretovány v podobě hodnotících studií a jejich prezentací zadavateli. Doba realizace – cca 5 měsíců. Analýzy a hodnocení dopadů realizace OP na plnění horizontálních priorit a environmentálních dopadů Cílem hodnocení bude posouzení toho, zda a jak realizace Prioritních os OPD přispívá k naplnění horizontálních priorit a jaký má vliv na životní prostředí a posoudit efektivnost sledování a vyhodnocování dopadů programu dle požadavků SEA. Nakolik přispívá realizace OPD k zohlednění horizontálních témat, jaké jsou její environmentální dopady a jak je sledováno plnění požadavků SEA? Předmětem hodnocení bude zejména: zda jsou horizontální témata zohledněna, zda a jak to lze sledovat a hodnotit; jaké jsou dopady implementace OPD na životní prostředí, jakým způsobem a na jaké úrovni je vhodné tyto dopady sledovat a hodnotit; jak jsou plněny požadavky SEA a jak lze jejich plnění zefektivnit. V rámci této aktivity se počítá se zajištěním průběžného/závěrečného zhodnocení sledovaných skutečností a dopadů.
12
Plán hodnocení O 430 na roky 2007-2013
Výstupy Harmonogram Název aktivity Cíl Klíčová otázka Předmět a průběh hodnocení
Výstupy Harmonogram Název aktivity Cíl
Klíčová otázka Předmět a průběh hodnocení
Výstupy Harmonogram
Říjen 2009
Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli. Doba realizace – cca 6 měsíců. Ex-post hodnocení přínosů OPI a FS 2004-2006 v oblasti dopravy Cílem hodnocení bude základní posouzení přínosů realizace OPI a projektů FS v oblasti dopravy. Jaké jsou reálné přínosy OPI a projektů FS 2004-2006 v oblasti dopravy? Předmětem hodnocení bude zejména: míra splnění plánovaných cílů vzhledem k dosaženým hodnotám indikátorů; proč nebylo některých cílů dosaženo a jak realisticky byly cíle stanoveny; reálný přínos pro řešení problémů a potřeb v oblasti dopravy v ČR; jaké závěry lze učinit pro zlepšení implementace OPD. Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli. Doba realizace cca 10 měsíců Hodnocení přínosů, dopadů a efektivnosti vybraných projektů Cílem je zhodnotit či odhadnout dosažené přínosy a dopady vybraných projektů jak z pohledu plnění cílů OPD, tak z pohledu srovnání s plánovanými hodnotami v projektové dokumentaci a z pohledu dopadů na ekonomiku a životní prostředí. Jaké jsou skutečné přínosy projektů oproti předpokladům a jaké jsou jejich širší přínosy? Předmětem hodnocení bude zejména: zda projekty v realitě dosáhly plánovaných kvantifikovaných hodnot indikátorů; zda jsou charakteristiky ekonomické a finanční efektivnosti a celospolečenských přínosů projektů v souladu s předpoklady; jaké jsou efekty projektů na ekonomiku a životní prostředí v jejich okolí. Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli. Doba realizace – cca 6 měsíců.
13
Plán hodnocení O 430 na roky 2007-2013
2.5.1.2. OPERATIVNÍ A TEMATICKÁ HODNOCENÍ Název aktivity
Průběžná evaluace, roční problémové vyhodnocování, ad-hoc a ostatní evaluace Hlavním cílem je posouzení pokroku, který přinesla dosavadní realizace Cíl programu, a identifikace a zhodnocení řešení hlavních problémů při implementaci. Jak uspokojivé je čerpání prostředků a plnění hodnot indikátorů OPD a Klíčové otázky v kterých oblastech by měly být podniknuty nápravné kroky? Jaké byly hlavní problémy a překážky v implementaci OPD v předchozím roce, byly tyto problémy řešeny či přetrvávají a jaké představují riziko? Předmět a průběh Na začátku roku bude vždy provedeno vyhodnocení dosaženého čerpání hodnocení a hodnot indikátorů (plánovaných, dosažených) za předcházející rok na základě monitorovacích dat, posouzení problémů a překážek v implementaci identifikovaných během uplynulého roku a vývoje jejich řešení popř. důvodů jejich přetrvávání. U identifikovaných přetrvávajících závažných problémů bude zadáno externímu zpracovateli provedení rychlé ad-hoc evaluace, což bude možné rovněž i na základě průběžného hodnocení implementace OPD během roku. Výsledky budou interpretovány v podobě hodnotící zprávy, v případě Výstupy ad-hoc evaluací bude závěrečná zpráva předložena a prezentována zadavateli. Doba realizace – průběžně, 1x za rok vyhodnocení Harmonogram Název aktivity Cíl
Klíčové otázky
Předmět a průběh hodnocení
Říjen 2009
Hodnocení systémových, administrativních a vnějších vlivů na implementaci OPD Cílem oblasti evaluace je vyhodnocení problematických činitelů, vazeb a vnějších vlivů implementace prioritních os OPD a následné sestavení doporučení pro vylepšení systému implementace a pro předcházení problematickým vnějším vlivům. Jak efektivně pracuje implementační struktura v sektoru doprava? Jaké jsou hlavní faktory ovlivňující implementaci OPD na straně příjemců a v širším administrativním a legislativním prostředí? Hodnocení bude probíhat jednak v oblastech implementační struktury a administrace jako jsou: Rozhodovací procesy Kontrolní mechanismy Monitorování Platby Nesrovnalosti Komunikace s okolím, publicita IT Ve výše uvedených oblastech bude provedeno hodnocení efektivnosti zejména s důrazem na dostupné kapacity a jejich využití, termíny a
14
Plán hodnocení O 430 na roky 2007-2013
Výstupy Harmonogram
kompatibilitu činností u jednotlivých článků implementace, pracovní postupy – transparentnost, přehlednost. Hodnocení bude dále probíhat v následujících oblastech: Příprava, předkládání, výběr a schvalování projektů v ČR i na straně EK Finanční a legislativní rámec přípravy a realizace projektů V těchto oblastech budou zejména identifikovány problematické vlivy, které brzdí implementaci či zvyšují nejistotu v procesu rozhodování. Aktivita bude realizována prostřednictvím jedné či série více tematických studií. Výsledky budou interpretovány v podobě studií a jejich prezentací zadavateli. Dle potřeb.
Název aktivity
Hodnocení prostorového rozložení a územních přínosů infrastrukturních investic z Evropských fondů Cílem bude zjištění rozložení a přínosů podpory z fondů EU z hlediska Cíl regionálního i širších prostorových vazeb. Odpovídá prostorové rozložení infrastrukturních investic z fondů EU Klíčová otázka reálným potřebám a jaké jsou přínosy těchto investic z územního hlediska? Předmět a průběh Hodnocení prostorového rozmístění projektů financovaných z EU bude směřováno do následujících oblastí: hodnocení Prostorové rozmístění projektů Prostorové rozmístění finančních prostředků Prostorový dopad pomoci z Evropských fondů Pro účely hodnocení a sledování územního rozložení investic bude vytvořena databáze údajů o projektech v prostředí GIS. Výsledky budou interpretovány v podobě závěrečné zprávy Výstupy s grafickými a mapovými výstupy a její prezentace zadavateli. Dále bude vytvořena elektronická GIS databáze a metodika pro její využití a rozšiřování. Doba realizace studie - cca 4 měsíce. Harmonogram Doba tvorby databáze - cca 4 měsíce. Název aktivity Cíl
Benchmarking analýza projektů Cílem bude ověření srovnatelnosti vybraných projektů s obdobnými projekty v zahraničí (zejména ve střední Evropě) a identifikace využitelné zahraniční dobré praxe. Jak srovnatelné jsou poměrné náklady, doba realizace, parametry a Klíčová otázka kvalita staveb realizovaných v rámci projektů OPI/FS/OPD v mezinárodním srovnání projektů spolufinancovaných z evropských fondů? Předmět a průběh Hodnocení srovnatelnosti projektů financovaných z fondů EU bude směřováno do následujících oblastí: hodnocení Vyhodnocení zvolených charakteristik u vybraných projektů ČR a
Říjen 2009
15
Plán hodnocení O 430 na roky 2007-2013
Výstupy Harmonogram Komplementární aktivity Název aktivity Cíl Klíčová otázka
Předmět a průběh hodnocení
Výstupy Harmonogram
zahraničních. Vyhodnocení charakteristik, ve kterých se projekty ČR podstatně liší od obdobných projektů v zahraničí a analýza důvodů těchto odlišností. Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli vč. formulace doporučení k možnému využití zahraničních příkladů pro zlepšení implementace projektů OPD. Doba realizace studie – cca 6 měsíců. Jako jeden z podkladů bude využita část výstupů aktivity Hodnocení přínosů, dopadů a efektivnosti vybraných projektů. Hodnocení přípravy a implementace vybraných kolových výzev Zhodnocení adekvátnosti postupů v průběhu přípravy a implementace kolových výzev ve vybraných Prioritních osách OPD Do jaké míry byly nastavení, průběh a výsledky vyhlašovaných kolových výzev ve vybraných oblastech podpory prioritních os OPD v souladu s požadavky na efektivní a transparentní výběr projektů a na zajištění maximálního příspěvku k dosažení cílů těchto priorit? Hodnocení bude směřováno do následujících oblastí: Nastavení (vč. příslušných dokumentů), proces přípravy a vyhlášení kolové výzvy a. Vhodnost nastavení kritérií pro výběr projektu Proces výběru projektů Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli vč. formulace doporučení ke zlepšení. Doba realizace studie – cca 2 měsíce.
2.5.2. PŘÍPRAVA PRO PLÁNOVACÍ OBDOBÍ 2014-2020 Název aktivity Cíl Klíčová otázka Předmět a průběh hodnocení
Výstupy
Říjen 2009
Analýzy makroekonomických vlivů Cílem hodnocení bude posouzení možných makroekonomických dopadů realizace projektů v sektoru dopravy. Existuje možnost kvantifikace makroekonomických dopadů dopravních projektů pro potřebu přípravy OP a pro potřeby posuzování projektů při jejich výběru? Předmětem hodnocení budou zejména následující oblasti: Metody kvantifikace dopravních projektů a jejich použitelnost pro potřeby procesu programování a realizace programů Vyčíslení makroekonomických dopadů hlavních typů projektů, které jsou podporovány ze SF - dopady na HDP, zaměstnanost - komparace s nulovou variantou Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli vč. formulace doporučení ke zlepšení.
16
Plán hodnocení O 430 na roky 2007-2013
Harmonogram
Doba realizace – cca 6 měsíců.
Název aktivity Cíl
Ex-ante analýzy OP pro období 2014-2020 Zhodnocení připravovaného OP z hlediska jeho předpokládané efektivity. Je navržený programový dokument v navrhované podobě sestaven tak, aby jeho budoucí předpokládaná realizace byla z hlediska celkových dopadů maximálně efektivní? Hodnocení bude probíhat především v následujících oblastech: Relevance analytické části Provázanost se strategickými dokumenty (ČR a EU) Posouzení struktury priorit z hlediska - relevance vůči identifikovaným potřebám; - zaměření a finanční alokace x potřeby a absorpční kapacita; - komplementarity s ostatními programy (národními i EU); - kontinuity s předchozími (stávajícími) OP a národními programy.
Klíčová otázka Předmět a průběh hodnocení
Posouzení alokací Indikátory + kvantifikace, výběrová kriteria Příjemci, toky informací, publicita Řídící, kontrolní a platební mechanismy Implementační struktura, finanční toky Kontrolní mechanismy
Výstupy
Výsledky budou interpretovány v podobě závěrečné zprávy a její prezentace zadavateli vč. formulace doporučení ke zlepšení.
Harmonogram
Doba realizace – v závislosti na průběhu tvorby OP.
Název aktivity Cíl Klíčová otázka
SEA OP pro období 2014-2020 Posouzení připravovaného OP z hlediska SEA. Je připravovaný OP v souladu s požadavky legislativy na ochranu životního prostředí? Posuzování vlivů koncepcí na životní prostředí zajišťuje soulad koncepce s požadavky na ochranu životního prostředí a navíc umožňuje zapojení veřejnosti, které legislativa pro koncepční činnosti až na stavební zákon nezajišťuje. Posuzování je upraveno zákonem č. 100/2001 Sb., o posuzování vlivů na životní prostředí a o změně některých souvisejících zákonů (zákon o posuzování vlivů na životní prostředí), v platném znění. V rámci procesu SEA jsou posuzovány koncepce uvedené v § 3 písm. b) a § 10a odst. 1) zákona. Z praktického hlediska a vzhledem k návaznosti na přípravu koncepce musí být zajištěna: Včasnost,
Předmět a průběh hodnocení
Říjen 2009
17
Plán hodnocení O 430 na roky 2007-2013
Výstupy
Integrace do zpracovávání koncepce, Zapojení veřejnosti.
Výsledky budou interpretovány v podobě závěrečné zprávy zahrnující:
Posouzení kvality popisu a hodnocení trendů ve vývoji životního prostředí, které souvisí s dosavadním rozvojem koncepce, Posouzení, zda byly zapracovány cíle ochrany životního prostředí do cílů koncepce, Posouzení souladu navrhovaných řešení problémů dané koncepce s cíli ochrany ŽP a s limity pro využívání území, které byly stanoveny ve schválené územně plánovací dokumentaci pro dané území, Posouzení vlivů specifických aktivit a projektů na ŽP dle požadavků zákona, Posouzení systému sledování reálných vlivů dokumentu a návrh pro zajištění jeho environmentálně šetrné realizace.
Veřejné projednání bude zajištěno Ministerstvem dopravy ve spolupráci s hodnotitelem. Proces SEA OP bude ukončen vydáním stanoviska Ministerstva životního prostředí. Harmonogram
Současně s přípravou OP a s hodnocením ex-ante.
2.5.3. ROZVOJ EVALUAČNÍ KAPACITY Název aktivity Cíl
Semináře a školení ve vztahu k evaluaci, prohlubování odborných znalostí a vědomostí pracovníků zapojených do evaluace Cílem je prezentace evaluační činnosti a výsledků prvních dílčích analýz. Prohlubování odborných znalostí a vědomostí pracovníků zapojených do evaluace.
Klíčová otázka Předmět a průběh hodnocení
n/a Bude realizováno v rámci projektů TA v projektech zaměřených na školení a semináře v jednotlivých letech implementace. Je uvažováno též setkání se zahraničními odborníky. Položka, mimo jiné, zahrnuje výdaje spojené s náklady na účast na debatách, konzultacích a tématických cestách, konferencích, atp. Tím dojde k žádoucímu formování evaluační kapacity MD.
Výstupy Harmonogram Komplementární aktivity
Prezentace, semináře, vzdělávací akce, konzultace. Položka bude čerpána dle identifikovaných potřeb. Bude dbáno na komplementaritu s aktivitami NOK zaměřenými na rozvoj evaluační kapacity a aktivity NOK budou v maximální možné míře využity k pokrytí potřeb MD v této oblasti. Zadané aktivity budou zaměřeny na pokrytí případných úzce sektorově zaměřených potřeb.
Říjen 2009
18
Plán hodnocení O 430 na roky 2007-2013
Název aktivity Cíl
Zpracování metodických pomůcek a technicko-informačních materiálů Cílem činnosti je zpracování materiálů prezentujících evaluační/hodnotící činnost SF a tvorba metodických pomůcek
n/a Zpracováním uvedených výstupů budou prohloubeny obecné znalosti a vědomosti v oblasti evaluace/hodnocení. V aktivitě bude MD spolupracovat, mimo jiné, s evaluační jednotkou MMR. Metodické a vzdělávací pomůcky, informační materiály, další formy prezentace. Položka bude čerpána dle identifikovaných potřeb. Harmonogram Komplementární Bude dbáno na komplementaritu s aktivitami NOK zaměřenými na zpracování evaluačních pomůcek a aktivity NOK budou v maximální aktivity možné míře využity k pokrytí potřeb MD v této oblasti. Zadané aktivity budou zaměřeny na pokrytí případných úzce sektorově zaměřených potřeb. Klíčová otázka Předmět a průběh hodnocení Výstupy
Říjen 2009
19
Plán hodnocení O 430 na roky 2007-2013
3. EVALUAČNÍ PLÁN NA ROK 2010 3.1. INDIKATIVNÍ POPIS PLÁNOVANÝCH AKTIVIT V roce 2010 plánuje ŘO OPD uskutečnit evaluační aktivity jak strategické, tak i operativní a tematické povahy. V oblasti rozvoje evaluační kapacity se pak počítá jednak s realizací účasti pracovníků ŘO na akcích zaměřených na prohlubování a výměnu znalostí v oboru evaluace či s vlastním pořádáním takovýchto akcí podle aktuálních potřeb a možností. Níže uvedené aktivity představují úplné či dílčí plnění relevantních položek uvedených v oddíle 2.5.1. Plánu hodnocení O430.
3.1.1.
AKTIVITY V OBLASTI STRATEGICKÝCH EVALUACÍ
Posouzení vhodnosti, plánovaných hodnot a sledování indikátorů OPD V návaznosti na příručku Indikátory pro monitoring a hodnocení Operačního programu Doprava a v rámci plnění povinností předepsaných v programovém dokumentu OPD bude zpracována studie, která bude zohledňovat údaje z dosud realizovaných a předložených projektů. Cíli této studie bude: Posoudit vhodnost indikátorů OPD vzhledem k jejich vypovídací schopnosti a reálnosti jejich sledování. Určit cílové hodnoty indikátorů, u nichž je v programovém dokumentu OPD tento závazek, posoudit již dané cílové hodnoty u ostatních indikátorů a navrhnout jejich úpravy. Navrhnout úpravy soustavy indikátorů OPD ve smyslu možných vhodnějších alternativ, jimiž by mohly být nahrazeny některé indikátory, a specifikovat způsob, jakým budou hodnoty indikátorů určovány. Rámcové evaluační otázky: Jaké mají být cílové hodnoty indikátorů OPD a jsou stávající cílové hodnoty reálné? Jaká je vypovídací schopnost a sledovatelnost indikátorů OPD a je možno přínosy realizace programu sledovat vhodnějším způsobem? Posouzení možností sledování a hodnocení environmentálních dopadů OP, zohlednění horizontálních témat a plnění podmínek SEA Jedná se o součást plnění položky plánu „Analýzy a hodnocení dopadů realizace OP na plnění horizontálních priorit a environmentálních dopadů“. Tato aktivita má za cíl v první řadě posoudit, na jaké úrovni je zajištěno či vůbec možné monitorování dopadů na životní prostředí a plnění požadavků SEA. Na základě tohoto posouzení pak bude určeno, co lze sledovat na úrovni jednotlivých projektů, tj. jaké údaje lze požadovat či zpětně zjistit u jednotlivých projektů, a co a jak lze či je nutné sledovat na úrovni statistik a dostupných databází. Pro sledování mohou být navrženy alternativní indikátory dle povahy projektů resp. vhodnější zaměření celé sady environmentálních indikátorů na programové úrovni. Pro
Říjen 2009
20
Plán hodnocení O 430 na roky 2007-2013
navržené alternativní způsoby sledování a hodnocení by pak měla být vytvořena metodika popř. navržen výpočtový model. Dále bude posouzeno zohlednění horizontálních témat udržitelný rozvoj a rovnost příležitostí u jednotlivých typů projektů a navrženo, jak toto zohlednění zefektivnit v závislosti na zaměření projektů. Ex-post hodnocení přínosů OPI a FS 2004-2006 v oblasti dopravy Ex-post hodnocení OPI a intervencí FS 2004-2006 z pohledu MD coby ZS OPI a FS pro oblast dopravy je plánováno na rok 2010 vzhledem ke skutečnosti, že teprve v tomto roce již bude možné u většiny projektů relevantně vyhodnotit jejich dopady. V rámci aktivity budou nejprve vyhodnoceny dosažené hodnoty indikátorů převážně výstupu a výsledku a poté identifikovány ty indikátory, v jejichž případě bude dosažených výsledků a dopadů potřeba vyčíslit jiným způsobem (formou zvláštní studie apod.) nebo jimiž nemá smysl se např. z důvodu jejich nízké relevance vůbec zabývat. Dále bude proveden výběr vzorových projektů, u nichž budou hodnoceny přínosy, dopady a efektivnost v rámci příslušné aktivity plánu. Rámcové evaluační otázky: Do jaké míry je pravděpodobné, že bude dosaženo plánovaných výsledků a dopadů OPI v oblasti dopravy? Jsou indikátory OPI vhodným podkladem pro posouzení dosažených přínosů programu nebo je vhodné v některých případech použít jiné kvantifikace? Hodnocení přínosů, dopadů a efektivnosti vybraných projektů Vzhledem k tomu, že v roce 2010 uplyne polovina současného programového období, bude cílem plánované aktivity zhodnocení, případně expertní odhad dosažených přínosů a dopadů vybraných projektů OPD, a to jak z hlediska plnění cílů programu, tak z hlediska srovnání s plánovanými hodnotami v projektové dokumentaci a z hlediska dopadů na ekonomiku a životní prostředí. Předmětem hodnocení bude především: zda projekty v realitě dosáhly plánovaných kvantifikovaných hodnot indikátorů; zda jsou charakteristiky ekonomické a finanční efektivnosti a celospolečenských přínosů projektů v souladu s předpoklady; jaké jsou efekty projektů na ekonomiku a životní prostředí v jejich okolí.
3.1.2. AKTIVITY V OBLASTI OPERATIVNÍCH A TEMATICKÝCH EVALUACÍ Roční problémové vyhodnocení, průběžné hodnocení a možné návazné ad-hoc evaluace Převážně interně, tj. prostřednictvím EV ve spolupráci s ostatními útvary ŘO, popř. i ZS bude na začátku roku provedeno problémové vyhodnocení ve smyslu této aktivity pod bodem 2.5.1.2. a dále se počítá rovněž s dalšími součástmi této aktivity. Vytvoření GIS databáze údajů o dopravních infrastrukturních investicích z fondů EU
Říjen 2009
21
Plán hodnocení O 430 na roky 2007-2013
Tato aktivita je součástí Hodnocení prostorového rozložení a územních přínosů infrastrukturních investic z Evropských fondů. Cílem je vytvořit geoinformační databázi s údaji (vrstvami) o dopravních projektech OPD, OPI a FS, která bude jedním z podkladů pro další prostorové hodnocení infrastrukturních investic. Kromě základních údajů, jako je typ infrastruktury, a určení původu a zaměření podpory (OP, priorita, TEN-T atd.) by měly být v této databázi i další důležité informace, jako jsou náklady a časové údaje o daném projektu, délka infrastruktury či hodnoty vybraných indikátorů. Tato databáze by měla umožňovat tvorbu analytických kartografických výstupů a další aktualizaci a rozšiřování, k čemuž by měla být také vytvořena metodika pro uživatele. Hodnocení přípravy a implementace vybraných kolových výzev Hodnocení bude provedeno u vybraných prioritních os, resp. oblastí podpory a to u těch, kde jsou vyhlašovány jednorázové výzvy a dochází zde k soutěži mezi projekty. Cílem aktivity bude především zjištění, do jaké míry umožňuje nastavení a průběh sledovaných kolových výzev efektivní a transparentní výběr projektů a nakolik směřují jejich výsledky k dosažení cílů odpovídajících priorit. Posuzována bude rovněž relevance kritérií pro výběr projektů, jakož i vhodnost a logičnost způsobu jejich hodnocení a kvantifikace. Aktivita bude časována v závislosti na vyhlašování výzev.
3.2. ČASOVÝ
PLÁN
AKTIVIT
A
PŘEDPOKLÁDANÉ
FINANČNÍ
ZDROJE
Název aktivity
Předpokládané náklady Strategická hodnocení
Posouzení vhodnosti, plánovaných hodnot a 2 500 000,sledování indikátorů OPD Posouzení možností sledování a hodnocení environmentálních dopadů OP, zohlednění 3 000 000,horizontálních témat a plnění podmínek SEA Ex-post hodnocení přínosů OPI a FS 2004-2006 4 000 000,v oblasti dopravy Hodnocení přínosů, dopadů a efektivnosti vybraných 2 500 000,projektů Operativní a tematická hodnocení Roční problémové vyhodnocení, průběžné hodnocení a možné návazné ad-hoc evaluace Vytvoření GIS databáze údajů o dopravních infrastrukturních investicích z fondů EU Hodnocení přípravy a implementace vybraných kolových výzev Celkem
Říjen 2009
Předpokládaný harmonogram I. – VI. I. – VI. III. – XII. VI. – XII.
2 000 000,-
I. – II. průběžně
2 500 000,-
IV. –VII.
2 000 000,-
dle časového plánu výzev
18 500 000,-
22
Plán hodnocení O 430 na roky 2007-2013
4. SEZNAM ZKRATEK EJ EK EP ES EU EV FS MD MMR MV NOK NSRR O 430 Odd. 431 OP OPD OPI PS ŘdO 430 ŘO SEA TA ToR
Říjen 2009
Evaluační jednotka Evropská komise Evaluační plán Evropské společenství Evropská unie Evaluační úředník Fond Soudržnosti Ministerstvo dopravy Ministerstvo pro místní rozvoj Monitorovací výbor Národní orgán pro koordinaci Národní strategický referenční rámec Odbor fondů EU na Ministerstvu dopravy Oddělení metodik, koordinace a evaluace programů na Ministerstvu dopravy Operační program Operační program doprava Operační program infrastruktura Pracovní skupina pro evaluaci Ředitel Odboru fondů EU na Ministerstvu dopravy Řídící orgán Posuzování koncepcí na životní prostředí (Strategic Environmental Assessment) Technical Assistance (technická pomoc) Zadávací podmínky (Terms of Reference)
23