Vyhodnocení plnění monitorovacích indikátorů OP LZZ zjišťovaných evaluací
Vstupní zpráva
Verze 1.0 13. březen 2012 IREAS centrum, s. r. o. (zpracovatel)
1/36
OBSAH Seznam zkratek ................................................................................................................... 3 Úvod ..................................................................................................................................... 4 1. Představení řešitelského týmu ....................................................................................... 4 2. Představení celkového metodického přístupu .............................................................. 5 2.1 Sběr dat .................................................................................................................. 6 2.2 Základní metody hodnocení .................................................................................... 6 3. Popis průběžných a finálních výstupů z aktivit ............................................................. 7 4. Harmonogram realizace .................................................................................................10 5. Řešení jednotlivých evaluačních úkolů ........................................................................11 Nároková část zakázky .....................................................................................................11 Nenároková část...............................................................................................................25 Příloha 1 – Dotazníky .........................................................................................................28 Příloha 2 - Upřesněný vzorek podpořených osob (zástupců cílových skupin) evaluačního úkolu č. 4 .......................................................................................................31
2/36
Seznam zkratek Zkratka ČR ČSSZ ČSÚ IS EK ES ESF ERDF EU HSS MSSF NSRR OP OP LZZ PO ROV RLZ ŘO SF
Význam zkratky Česká republika Česká správa sociálního zabezpečení Český statistický úřad Informační systém Evropská komise Evropská společenství Evropský sociální fond European Regional Development Fund (Evropský fond regionálního rozvoje) Evropská unie Hospodářská a sociální soudržnost Monitorovací systém strukturálních fondů Národní strategický referenční rámec Operační program Operační program Lidské zdroje a zaměstnanost Prioritní osa Roční operační vyhodnocení Rozvoj lidských zdrojů Řídící orgán Strukturální fondy
3/36
Úvod Tento dokument představuje Vstupní zprávu, která byla vytvořena v rámci realizace projektu Vyhodnocení plnění monitorovacích indikátorů OP LZZ zjišťovaných evaluací. Hlavním cílem této vstupní zprávy je představit řešitelský tým a zapojení jeho jednotlivých expertů, časový harmonogram jednotlivých kroků, evaluační design tohoto projektu a detailní metodologii řešení jednotlivých evaluačních otázek. Vstupní zpráva se zaměřuje na praktické aspekty řešení evaluace. Zejména podrobněji rozebírá metodiku řešení jednotlivých evaluačních úkolů s ohledem na situaci v počáteční fázi projektu.
1. Představení řešitelského týmu K realizaci projektu byl vytvořen tým specialistů, kteří splňují vysoké požadavky na odbornost a znalosti v oblasti implementace programů financovaných z ESF, předpisů Evropského společenství a metodik pro SF EU, problematiky rozvoje lidských zdrojů, trhu práce a zaměstnanosti v ČR, evaluací programů financovaných ze SF, celkového kontextu politiky HSS v ČR i EU, statistiky a ekonomie, včetně znalostí odborné terminologie používané v rámci dané problematiky v ČR a v EU. Vedením projektu byl pověřen Ing. Petr Fanta, Ph.D. (PF), který odpovídá na straně řešitelského týmu za celkovou realizaci projektu, koordinuje aktivity jednotlivých členů týmu a deleguje odpovědnost v projektu dle aktuálních potřeb a specializace jednotlivých členů realizačního týmu. Zástupci vedoucího projektu jsou RNDr. Viktor Květoň, Ph.D. (VK) a Ing. Martin Pělucha, Ph.D. Odborní experti řešitelského týmu (abecední pořadí):
Ing. Petr Fanta, Ph.D. (PF)
RNDr. Viktor Květoň, Ph.D. (VK)
Ing. Martin Pělucha, Ph.D. (MP)
Ing. Oto Potluka, Ph.D. (OP)
Mgr. Pavel Říčka (PŘ)
Technická asistence v projektu Bc. Markéta Vaisová (MV)
V následující tabulce je uvedeno přiřazení jednotlivých expertů k příslušným evaluačním otázkám, včetně jejich předpokládané časové dotace.
4/36
Evaluační Evaluační úkol 5 úkol 4
Evaluační úkol 3
Evaluační úkol 2
Evaluační úkol 1
Přiřazení členů týmu k jednotlivým evaluačním otázkám Tabulka obsahuje zapojení expertů v jednotlivých evaluačních otázkách v předpokládaných člověkodnech. EVALUAČNÍ PF VK MP OP PŘ Celkem OTÁZKA evaluační 1.1
otázka
evaluační 1.2
otázka
evaluační 2.1
otázka
evaluační 2.2
otázka
evaluační otázka.3.1 evaluační 3.2 evaluační 3.3 evaluační 3.4 evaluační 4.1
15
10
2
15
10
2
27 27
20
15
10
5
20
15
10
5
50 50
15 otázka
10
otázka
evaluační 4.2
otázka
evaluační 5.1
otázka
10 15
otázka otázka
15
15
10 5
5
20
5
5
20
10 30 30
5
20 25
CELKEM
85
85
85
14
20
289
2. Představení celkového metodického přístupu Projekt „Vyhodnocení plnění monitorovacích indikátorů OPLZZ zjišťovaných evaluací“ vyplývá z nastaveného indikátorového systému OPLZZ, v rámci kterého je nezbytné u vybraných monitorovacích indikátorů (zpravidla indikátory dopadu) vytvořit metodologii jejich výpočtu a následně rovněž i provést příslušná zjištění a interpretaci výsledků. Metodika dvou takových indikátorů již byla vytvořena a jejich hodnota zjištěna v rámci projektu ROV 2010. Aktualizace výpočtu těchto indikátorů je specifikována v evaluačních úkolech č. 3 a 4 tohoto projektu. Evaluační úkol č. 1 a 2 jsou komplementární a zaměřují se na vytvoření metodiky pro výpočet hodnot, posouzení pokroku a aktuálního stavu monitorovacích indikátorů (07.42.80) Udržitelnost vytvořených partnerství a (07.60.10) Zlepšení podmínek pro slaďování rodinného a pracovního života, včetně interpretace hodnot. Důležitou součástí těchto úkolů je využití kvalitativní srovnávací analýzy. Evaluační úkol č. 5 zaměřený na zjištění hodnot, posouzení 5/36
pokroku a aktuálního stavu monitorovacích indikátorů (15.32.17) Zkrácení délky soudních řízení - Krajské soudy; (15.32.18) Zkrácení délky soudních řízení - Okresní soudy, nepředstavuje příliš složitou problematiku z hlediska metodiky postupu a dostupnosti dat. V dané věci byly z veřejně dostupných zdrojů získány potřebné údaje týkající se průměrné délky řízení zvlášť pro Krajské soudy a zvlášť pro Okresní soud v ČR. V rámci provedení srovnání pro doplňující šetření a pro provedení srovnání v intencích dalších parametrů (např. počet soudců přiřazených místně a funkčně) bude provedeno vyhodnocení zkrácení délky soudních řízení pro Krajské a Okresní soudy v rámci období 2007-2010, kdy údaje za rok 2011 ještě nejsou aktuálně k dispozici. Při řešení této zakázky bude realizační tým využívat několika různých typů metod.
2.1
Sběr dat
Při řešení evaluace využívá projektový tým následující zdroje dat: Primární zdroje dat:
data z nově vytvořeného dotazníkového šetření k řešeným oblastem evaluačních otázek; dotazníkové šetření bude využito u evaluačních úkolů 1, 2 a 3.
informace od realizátorů a zprostředkujících subjektů; bude využito u evaluačního úkolu 4.
Sekundární zdroje dat: •
data z monitorovacího systému;
•
data z České správy sociálního zabezpečení, případně z Úřadů práce
•
data ze stávajících šetření či předchozích hodnocení OP LZZ;
•
data z výročních zpráv a programových dokumentů;
•
národní statistické údaje z Českého statistického úřadu.
2.2
Základní metody hodnocení
Celkově lze rozdělit jednotlivé techniky/aktivity do následujících oblastí: 1.
Základní analýza (analýza programových podkladů, analýza základních dat);
2.
Výzkum prostřednictvím dotazníkového šetření;
3.
Komparace dat z šetření s daty ČSSZ
4.
Statistické analýzy
Blíže jsou používané metody rozepsány u jednotlivých úkolů.
6/36
3. Popis průběžných a finálních výstupů z aktivit Průběžné a finální výstupy z aktivit odpovídají požadovaným výstupům ze zadávací dokumentace. Požadované výstupy Vstupní zpráva
Konzultační workshop s předloženými podklady
Termín
Popis výstupu
Do 10 pracovních dnů od podpisu smlouvy návrh Vstupní zprávy, konečná verze do 5 pracovních dnů od doručení připomínek zadavatele.
Smyslem vstupní zprávy je odsouhlasení zvoleného evaluačního designu (tj. rozpracování metodologie uvedené v nabídce), tzn., že ve zprávě bude podrobně popsáno:
(rámcový termín: začátek března 2012) 6. 3. 2012
Závěrečná zpráva k úkolům č.1, č.3, č.4 a č.5 – Návrh
Návrh do 14. března 2012
Závěrečná zpráva k úkolům č.1, č.3, č.4 a č.5 10
28. 3. 2012
1. harmonogram realizace 2. identifikace potřebných informací pro odpověď na jednotlivé otázky či úkoly; 3. identifikace zdrojů dat pro každou otázku a instrumentů jejich sběru; 4. výzkumný design pro úkol č.1 a č.2 a č. 4; tj. Vstupní zpráva bude obsahovat Návrh metodik pro výpočet hodnot MI včetně stanovení velikosti vzorků 5. identifikace způsobu analýzy dat; 6. jmenovité určení všech zapojených expertů/ek do řešení jednotlivých úkolů této veřejné zakázky včetně rozsahu zapojení; 7. podrobné stanovení dílčích termínů evaluačních šetření stanovených ze strany zpracovatele.
Smyslem konzultačního workshopu je: 1. Předání výsledku plnění úkolu č. 3 v pracovní verzi 2. Předání výsledků plnění úkolu č. 5 v pracovní verzi 3. Prezentace prvních výsledků, zjištěných problémů a konzultace postupu u úkolu č. 1 4. Prezentace prvních výsledků, zjištěných problémů a konzultace postupu u úkolu č. 4 5. Prezentace prvních výsledků, zjištěných problémů a konzultace postupu u úkolu č. 2 Zpracovatel předloží zadavateli podkladové materiály ke všem úkolům nejméně 5 pracovních dní před dohodnutým dnem workshopu. Návrh závěrečné zprávy bude obsahovat: - všechny požadované výstupy dle zadání evaluačních úkolů - požadované metodiky - zdroje vstupních dat - výsledky šetření/odpovědi na evaluační otázky stanovené evaluátorem ve vstupní zprávě - zjištěné hodnoty indikátorů připravené k další interpretaci, např. pro Výroční zprávu OPLZZ Na úvod bude obsahovat manažerské shrnutí v rozsahu max. 4 stran ve formátu A4. Finální závěrečná zpráva bude zohledňovat připomínky k jejímu návrhu vzešlé z workshopu a připomínkového řízení. Bude finálním zpracováním všech výstupů směrem k zadavateli. Závěrečná zpráva bude obsahovat: - Manažerské shrnutí v rozsahu max. 4 strany ve formátu A4, které bude stručně a jasně podávat nejdůležitější výsledky, konkrétní a významná zjištění, získané hodnoty a 7/36
nejdůležitější aspekty jejich vývoje pro jednotlivé zkoumané indikátory. - Informačně plnohodnotnou zprávu v rozsahu max. 20 stan ve formátu A4 vhodnou pro šíření jako výstup z evaluace pro zainteresované subjekty. Tato zpráva bude předložena v českém jazyce a po schválení obsahu přeložena do AJ. - Technickou část zprávy, která bude obsahovat všechny relevantní údaje, zdroje dat a velmi detailní metodické postupy, která bude sloužit jako podklad pro aplikaci metod v dalších letech. Na schválenou závěrečnou zprávu, která obsahuje požadované výsledky, je navázána faktura č. 1. 5. Závěrečná zpráva k úkolu č.2 - Návrh
Návrh do 4. 7. 2012
6. Závěrečný workshop
Dle dohody se zadavatelem nebo do 10-ti pracovních dní od předložení návrhu závěrečné zprávy. 1. 9. 2012
Závěrečná zpráva k úkolu č.2
Návrh závěrečné zprávy k úkolu č.2 (interpretace hodnot zadaných monitorovacích indikátorů) bude obsahovat: - výsledky šetření/odpovědi na evaluační otázky ze ZD a stanovené evaluátorem ve vstupní zprávě. - zdroje vstupních dat - detailní popis průběhu řešení úkolu včetně objevených limitů a rizik využití QCA metod - doporučení za jakých okolností je vhodné metodu v oblasti ESF dále využívat Na úvod bude obsahovat manažerské shrnutí v rozsahu max. 4 stran ve formátu A4. Závěrečný workshop slouží k prezentaci výsledků obou závěrečných zpráv širšímu okruhu zástupců zadavatele, příjemců evaluačních výsledků a zájemců. Na závěrečném workshopu mohou být ze strany zadavatele vzneseny požadavky k revizi či doplnění prezentovaných výsledků.
Finální závěrečná zpráva bude zohledňovat všechny připomínky k jejímu návrhu vzešlé v průběhu realizace z komunikace se zadavatelem a připomínkového řízení. Bude finálním zpracováním všech výstupů směrem k zadavateli. Závěrečná zpráva bude obsahovat: - Manažerské shrnutí v rozsahu max. 4 strany ve formátu A4, které bude stručně a jasně podávat nejdůležitější výsledky, konkrétní a významná zjištění. - Informačně plnohodnotnou zprávu v rozsahu max. 20 stan ve formátu A4 vhodnou pro šíření jako výstup z evaluace pro zainteresované subjekty. Tato zpráva bude předložena v českém jazyce a po schválení obsahu přeložena do AJ. - Technickou část zprávy, která bude obsahovat všechny relevantní údaje, zdroje dat a velmi detailní metodické postupy, která bude sloužit jako podklad pro aplikaci metod v dalších letech. Na schválenou závěrečnou zprávu, která obsahuje požadované výsledky, je navázána faktura č. 2.
8/36
Průběžné zprávy o průběhu projektu (flash-reporty)
Každé dva týdny od podpisu smlouvy
Zprávy budou vždy obsahovat stručný neformální přehled realizovaných aktivit, jejich vyhodnocení, hlavní výstupy, potíže při realizaci zadání, sjednané schůzky s externími experty a konzultace a další kroky realizace. (Zprávy nejsou formálním oznámením, ale jedním z pracovních nástojů pro komunikaci zadavatele se zpracovatelem, který umožňuje eliminovat nedorozumění a vícepráce.)
Využití nenárokové části zakázky
2012-2015
Uplatnění nenárokové části zakázky na: -znovuvyhodnocení dosažených hodnot a analýzu vývoje indikátorů dle dohody a dále dle rozhodnutí zadavatele -možnost zadání analýzy indikátoru 07.46.16 Podíl úspěšně podpořených osob dle vybraných kategorií cílových skupin. Návrh na provedení prací bude v souladu se smluvními podmínkami zpracovateli zaslán pověřenou osobou zadavatele emailem. Na schválenou závěrečnou zprávu, která obsahuje požadované výsledky, je navázána faktura.
9/36
4. Harmonogram realizace Aktivita
Únor Březen Červenec Září 15 16 17 20 21 22 23 24 27 28 29 1 2 5 6 7 8 9 12 13 14 15 16 19 20 21 22 23 26 27 28 29 30 / 4 / 18 / 1
Podpis smlouvy
/
/
/
Návrh vstupní zprávy
/
/
/
Konečná verze vstupní zprávy
/
/
/
Konzultační workshop
/
/
/
/
/
/
/
/
/
Návrh závěrečné zprávy k úkolu 2
/
/
/
Závěrečný workshop
/
/
/
Závěrečná zpráva k úkolu 2
/
/
/
Flash reporty
/
/
/
Návrh závěrečné zprávy k úkolům 1, 3, 4 a 5 Závěrečná zpráva k úkolům 1, 3, 4 a 5
10/36
5. Řešení jednotlivých evaluačních úkolů Řešení evaluační zakázky je rozděleno do dvou částí: Nároková část – bude realizována v první polovině roku 2012 a zahrnuje celkem 5 evaluačních úkolů. Nenároková část – je rozdělena do dvou úkolů a bude realizována v letech 2014 – 2016 pouze na základě výzvy objednatele.
Nároková část zakázky Způsob řešení evaluační ho úkolu č. 1 - Vytvoření metodiky pro výpočet hodnot, posouzení pokroku a aktuálního stavu monitorovacích indikátorů (07.42.80) Udržitelnost vytvořených partnerství a (07.60.10) Zlepšení podmínek pro slaďování rodinného a pracovního života. Kontext a pochopení evaluační otázky Evaluační otázka má z našeho pohledu celkem dva dílčí cíle, kterými jsou: Navržení metodiky výpočtu dvou specifických monitorovacích indikátorů sledovaných v prioritní ose 5 (indikátor 07.42.80 Udržitelnost vytvořených partnerství) a oblasti podpory 3.4 (indikátor 07.60.10 Zlepšení podmínek pro slaďování rodinného a pracovního života). Vytvořená metodika je vytvořena tak, aby byla jednoznačná a univerzální a umožňovala kdykoli provést šetření opakovaně, a to i při různém počtu realizovaných (dokončených) projektů, přičemž získané výsledky v jednotlivých letech musí být srovnatelné pro možné porovnávání hodnot v čase. Stanovení a prvotní výpočet hodnoty obou indikátorů na vzorku dokončených projektů. Způsob řešení Metodiku stanovení a výpočtu obou jsme založili na osvědčeném způsobu dotazníkového šetření mezi příjemci podpory (realizátory projektu). S ohledem na zvýšení návratnosti i relativně malý objem zjišťovaných informací byl dotazník sestaven z 9, respektive 11 jednoduchých otázek, které budou společně s daty z Monit7+ poskytovat informace pro zodpovězení úkolu č. 1 a 2. Metodika řešení indikátoru 07.42.80 Udržitelnost vytvořených partnerství: Při zjišťování úrovně funkčnosti a hodnoty partnerství vychází dotazník i následné vyhodnocování odpovědí z podnětů evaluace „Hodnocení implementace principu partnerství v OP LZZ“, jejímž zpracovatelem byla naše společnost IREAS centrum s.r.o. Metodika a dotazník reflektují nejen to, zda je partnerství i po skončení projektu nadále funkční, ale i několikastupňovou úroveň toho, jak funkční partnerství je. Respondenti mají mj. na desetistupňové škále ohodnotit, jak subjektivně vnímají současnou funkčnost partnerství. Následující otázka zaměřená na předdefinovanou intenzitu spolupráce má za cíl do určité míry objektivizovat předchozí hodnocení.
11
Dotazníky byly rozeslány celkem 20 realizátorům, kteří dokončili projekty v prioritní ose 5.1 v rozhodném období, tedy v období 3 – 9 měsíců před realizací šetření. Kontaktní osoby jednotlivých projektů, které byly identifikovány z databáze Monit7+, byly osloveny emailem se žádostí o vyplnění vytvořeného dotazníku. Znění dotazníku je přílohou č. 1 této vstupní zprávy. K 22. 2. 2012 bylo shromážděno celkem 10 odpovědí, což představuje velmi dobrou návratnost s ohledem na velmi malý vzorek ukončených projektů (20 respondentů). Navrácené dotazníky budou statisticky vyhodnoceny a stručně zjištěné výsledky interpretovány na pětistupňové škále od „nefunkční partnerství“ po „plně funkční partnerství“. Metodika tedy umožňuje nejen stanovit, zda je vytvořené partnerství i po skončení projektu funkční, ale i do jaké míry je funkční. Na základě prvotního vyhodnocení výsledků dotazníkového šetření bylo zjištěno, že zvolenou metodu hodnocení funkčnosti partnerství je třeba upravit, neboť v situaci, kde respondenti dle zadání hodnotili pouze jedno partnerství, a to to nejlepší, docházelo ke zkreslení výsledků směrem k výrazně vyšším hodnotám indikátoru. V době zpracování vstupní zprávy bylo proto provedeno dodatečné telefonické šetření mezi realizátory, kdy byli požádáni o zhodnocení všech zahraničních partnerství. V první řadě byli dotazováni, zda s partnery stále spolupracují, a to v běžné činnosti, nikoli na dalším projektu financovaném z veřejných zdrojů. V případě kladné odpovědi byli požádáni, aby odhadli, jak často jsou s partnerem v kontaktu. Za funkční udržené partnerství přitom byl považován častější kontakt než jedenkrát za čtvrt roku. Metodika řešení indikátoru 07.60.10 Zlepšení podmínek pro slaďování rodinného a pracovního života: Metodika pro zjištění indikátoru 07.60.10 je založena také na dotazníkovém šetření, přičemž hlavním smyslem je zjišťovat, zda byly v podniku realizujícím projekt zavedeny flexibilní formy organizace práce, ale současně i to, jaké druhy flexibilní organizace práce či jiná opatření byly zavedeny. Výsledky potom umožní provést vyhodnocení, které z podporovaných forem jsou nejudržitelnější. Sledovány jsou zejména nejběžnější formy: Pružná pracovní doba či individuální úprava pracovní doby Možnost práce z domova Sdílení pracovního místa Vytvoření firemní školky jiné Dotazníkové šetření bylo adresováno všem projektům v oblasti podpory 3.4, které byly dokončeny v rozhodném období, tedy v období 3 – 9 měsíců před realizací šetření. Celkem byl dotazník rozeslán 87 realizátorům. Nicméně je důležité upozornit, že ne všechny dokončené projekty zaváděly nástroje pro slaďování rodinného a pracovního života. Museli tedy být osloveni všichni zástupci ukončených projektů v OP 3.4, přičemž dotazník měli vyplnit pouze ti respondenti, kteří implementovali některý z nástrojů pro slaďování rodinného a pracovního života. Kontaktní osoby jednotlivých projektů, které byly identifikovány
12
z databáze Monit7+, byly osloveny emailem se žádostí o vyplnění vytvořeného interaktivního dotazníku. K 22. 2. 2012 bylo shromážděno celkem 17 odpovědí, což lze opět označit za velmi dobrou návratnost s ohledem na celkový počet ukončených projektů v OP 3.4. Podoba dotazníku je přílohou č. 1 této vstupní zprávy. Vstupy Data z Monit7+, Informace z dotazníkového šetření, Závěrečná zpráva evaluace „Hodnocení implementace principu partnerství v OP LZZ“. Výstupy Vytvořená metodika pro zjišťování a hodnocení indikátoru 07.42.80 - Udržitelnost vytvořených partnerství Vytvořený dotazník pro zjišťování indikátoru 07.42.80 - Udržitelnost vytvořených partnerství Vytvořená metodika pro zjišťování a hodnocení indikátoru 07.60.10 - Zlepšení podmínek pro slaďování rodinného a pracovního života Vytvořený dotazník pro zjišťování indikátoru 07.60.10 - Zlepšení podmínek pro slaďování rodinného a pracovního života Vyhodnocené dotazníkové šetření a výsledek indikátoru Rizika a předpoklady Na počátku byla rizikem nízká návratnost dotazníků. Nicméně v době sestavování vstupní zprávy lze konstatovat, že rizika se podařilo eliminovat a návratnost pro hodnocení obou indikátorů je velmi dobrá. K eliminaci přispělo také dvojí upozornění a oslovení na vyplnění dotazníků (po prvotním ne zcela velkém zájmu a odezvě). Určitým rizikem spojeným s interpretací hodnot je i fakt, že zejména u zjišťování indikátoru 07.42.80 – Udržitelnost vytvořených partnerství je pouze velmi malý vzorek 20 aktuálně dokončených projektů, na kterých je průzkum a vyhodnocení prováděno. Způsob řešení evaluační ho úkolu č. 2 - Interpretace hodnot monitorovacích indikátorů z úkolu č. 1 (07.42.80) Udržitelnost vytvořených partnerství a (07.60.10) Zlepšení podmínek pro slaďování rodinného a pracovního života pomocí kvalitativní srovnávací analýzy (QCA). Kontext a pochopení evaluační otázky Smyslem evaluačního úkolu je identifikovat faktory, které mají, nemají či mohou mít vliv na dosažení sledovaných dvou indikátorů. Následně pomocí metody QCA ověřit to, zda tyto faktory případně jejich kombinace skutečně má vliv na sledovaný indikátor. Jak uvádí i zadávací dokumentace, evaluační úkol 2 navazuje na evaluační úkol č. 1. V realizovaném dotazníkovém šetření proto byly do dotazníků zakomponovány otázky na předpokládané nezávislé proměnné, které budou dále vyhodnocovány metodou QCA v rámci úkolu 2. Způsob řešení Klíčovou částí řešení je aplikace kvalitativní srovnávací analýzy (QCA), která je založena na principu booleovské algebry a řešitelský tým je seznámen s možnostmi aplikace této metody.
13
Metoda umožňuje srovnání, kde každý případ představuje kombinaci kauzálních podmínek a jejich důsledků. Jelikož mezi hlavní operace booleovské techniky patří disjunkce, konjunkce, minimalizace booleovských výrazů a implikace, tak bude postup následující: Prvním krokem metodologického postupu je vytvoření pravdivostní tabulky pro oba požadované indikátory. (07.42.80) Udržitelnost vytvořených partnerství Hlavní závisle proměnnou tvoří existence vytvořeného partnerství v OP LZZ. Vycházíme však ze znalostí a zkušeností z CIP EQUAL i z evaluace partnerství OP LZZ a proto jsme definovali několik faktorů a podmínek, které hrají důležitou roli při fungování partnerství. Teoretická východiska se vážou na jednotlivé nezávisle proměnné. Ty představuje: Velikost partnerství (počet partnerů zahrnutých do partnerství) Předchozí spolupráce partnerů Vnitrooborové partnerství (partneři jsou z jednoho oboru) Vnitrosektorové partnerství (partneři jsou jen z jednoho sektoru - veřejného, neziskového, podnikatelského) E. Majetkové propojení (sesterská společnost, mateřská společnost, dcera, apod.) F. Geografická poloha partnera (zda je partner ze stejného nebo sousedního státu) G. Velikost podniku realizátora A. B. C. D.
Návrh respektuje některé faktory sledované již v Hodnocení implementace principu partnerství OP LZZ. Šetření je v souladu s požadavky zadávací dokumentace prováděno na 20 dokončených projektech oblasti podpory 5.1 (resp. na aktuálním počtu vyplněných dotazníků). (07.60.10) Zlepšení podmínek pro slaďování rodinného a pracovního života U druhého indikátoru byly identifikovány také možné faktory, které budou následně zkoumány jako nezávisle proměnné: A. B. C. D. E. F.
Velikost podniku měřená dle počtu zaměstnanců Znalost potřeb cílových skupin Procentuální zastoupení žen Opatření (projekt) vznikl z iniciativy zaměstnavatele Kvalifikace / vzdělání cílových skupin Velikost a poloha obce
Kromě výše uvedených proměnných zjišťovaných pomocí dotazníkového šetření budou další informace zjištěny ze statistických databází ČSÚ. Jedná se např. o vybavenost obce (kde je projekt řešen) sociální infrastrukturu tj. např. dostupnost mateřských a základních škol apod. Celkově se tedy bude jednat o kombinaci kvalitativních a kvantitativních přístupů, které povedou ke zjištění nezávisle proměnných pro požadovanou QCA analýzu. Šetření je v souladu s požadavky zadávací dokumentace prováděno jako census na dokončených projektech oblasti podpory 3.4, přičemž ne všechny projekty zaváděly flexibilní formy organizace práce.
14
Klíčovou součástí pro vytvoření pravdivostní tabulky tvoří operacionalizace proměnných. Zkoumaná podmínka je přítomna (1) nebo přítomna není (0). To znamená, že by všechny zkoumané podmínky měly být nominálně změřitelné, resp. dichotomické. Intervalové proměnné proto budou transformovány do nominální stupnice měření. Všechny výše navržené nezávisle proměnné lze měřit a z toho důvodu je prováděno dotazníkové šetření, které umožní kvantifikovat jednotlivé faktory. Pro práci s daty, operacionalizaci proměnných, minimalizaci booleovských výrazů atd. bude využito freeware programu TOSMANA, který umožňuje jednoduchou aplikaci kvalitativní srovnávací analýzy (QCA). Tím budou následně identifikovány faktory či kombinace faktorů, které mají významný vliv na závislou proměnnou, v tomto případě na naplňování indikátoru. Vstupy Základními vstupy budou informace z dotazníkového šetření, metodika QCA, a data ze systému Monit7+ (viz výše popsaný postup řešení) Výstupy Faktory či kombinace faktorů ovlivňující naplňování indikátoru 07.42.80 Udržitelnost vytvořených partnerství Faktory či kombinace faktorů ovlivňující naplňování indikátoru 07.60.10 Zlepšení podmínek pro slaďování rodinného a pracovního života Rizika a předpoklady Hlavní riziko v tomto evaluačním úkolu spatřujeme ve správné identifikaci faktorů, které mohou ovlivňovat naplňování monitorovacích indikátorů, a v dostatečném počtu odpovědí, na kterých bude možné analýzu provést.
Způsob řešení evaluační ho úkolu č. 3 - Výpočet hodnot, posouzení pokroku a aktuálního stavu monitorovacích indikátorů (43.07.02) Efektivnost podpořených projektů a (43.07.00) Zvýšení efektivnosti strategií a politik v oblasti LZZ využitím metodiky poskytnuté zadavatelem, včetně kvalitativního slovního komentáře. Kontext a pochopení evaluačního úkolu Metodika, která je využita pro výpočet níže uvedeného indikátoru, je detailně stanovena v Ročním operačním vyhodnocení OPLZZ za rok 2010 (dále ROV 2010). Řešitelský tým tohoto projektu zpracovával uvedenou metodiku, tudíž ji na základě svých zkušeností bezvýhradně využil nejen pro výpočet hodnot, ale také k celkovému posouzení pokroku a aktuálního stavu v daném indikátoru. Znění evaluační otázky 3.1: Zjistěte hodnoty indikátoru 430702 „Efektivnost podpořených projektů“ pro rok 2011 podle vytvořené metodologie, včetně slovního kvalitativního komentáře. Způsob řešení Na tomto místě jsou uvedeny dílčí metodické poznámky.
15
Vytvořená metodologie má několik variant pro hodnocení efektivnosti na úrovni jednotlivých oblastí podpory (důvodem je vysoká variabilita realizovaných aktivit a výstupů napříč jednotlivými prioritními osami)
Navržená metodika je vhodná pro jednoduché a komplexní hodnocení velkého množství projektů a jejich výstupů, ale nezohledňuje efekt mrtvé váhy a další efekty, které jsou vhodné pro hodnocení dopadů
Celá metodika je založena na kombinaci kvantitativního a kvalitativního přístupu. Na jedné straně je silně akcentováno kvantitativní hodnocení dosažených hodnot indikátorů v monitorovacím systému OP LZZ, ale současně je do metodiky zakomponováno kvalitativní šetření v podobě webového dotazníku, kde je zjišťována zpětná vazba (účelnost či smysluplnost výstupů projektu) z pohledu zástupců cílových skupin.
Metodologie se vztahuje k dokončeným projektům a proto i ověření a výsledky se budou vztahovat k již ukončeným projektům OP LZZ v příslušných oblastech podpory.
Výsledná metodika pro jednotlivou prioritní osu / oblast podpory má charakter jednoduchého vzorce, který je složen z několika dílčích ukazatelů, které mají akcentovat hospodárnost, efektivnost i účelnost (viz metodické poznámky ROV 2010). Hodnota indikátoru je potom průměrem zmíněných dílčích vypočítaných hodnot ukazatelů.
Vstupy – aktuální stav řešení úkolu Z monitorovacího systému OP LZZ byla zpracována aktuální data (ke dni 14. 2. 2012), která kvantifikují ukazatele u ukončených projektů v požadovaných oblastech podpory. Při práci nebyl identifikován žádný problém. Všechny indikátory byly dostupné a jsou již zpracované ve formátu pro aplikaci metodiky z ROV 2010. Dne 14. 2. 2012 byl také rozeslán dotazník na všechny zástupce ukončených projektů s žádostí o přeposlání dotazníků všem cílovým skupinám, které „prošly“ nějakým vytvořeným produktem (vzdělávací kurzy, školení, semináře apod.) projektu. Zde je nutné zdůraznit, že byly využity zcela stejné otázky dotazníkového šetření jako v případě ROV 2010, aby byla možná komparace. Výstupy Zjištěné hodnoty indikátoru 430702 „Efektivnost podpořených projektů“ pro rok 2011 Slovní komentář dosažených výsledků Rizika a předpoklady Rizikem byla na počátku jednoznačně neochota cílových skupin zodpovědět webový dotazník, jehož výsledky jsou dílčí součástí výpočtu indikátoru. Na tento problém bylo upozorněno již při řešení ROV 2010. Nicméně je nutné konstatovat pozitivní skutečnost, že návratnost odpovědí ze strany cílových skupin je mnohanásobně vyšší, než v případě ROV 2010. Jako příklad lze uvést např. prioritní osu 1, kde k 22. 2. 2012 bylo evidováno 532 odpovědí, nebo v PO 4 232 odpovědí. Zde je tedy patrný velký posun, který je samozřejmě částečně způsoben vyšším počtem dokončených projektů a tedy větším množstvím potenciálních respondentů.
16
Znění evaluační otázky 3.2: Porovnejte hodnoty indikátoru 430702 „Efektivnost podpořených projektů“ za rok 2010 zjištěné v ROV 2010 s hodnotami za rok 2011 a kvalitativně okomentujte jejich vývoj. Způsob řešení Tento úkol logicky navazuje na předchozí evaluační otázku. Smyslem je vzájemná komparace dosažených výsledků za rok 2010 a 2011. Vhodným nástrojem pro vyhodnocení pokroku je využití indexu změny. Index změny vyjadřuje dynamiku nárůstu / poklesu intenzity sledovaných indikátorů. Tento ukazatel lze vyjadřovat jako absolutní číslo, nebo je možná relativizace a vyjádření jako %. Iz = X t+1 / X t , kde, X t+1 je hodnota sledovaného ukazatele v čase t+1, tj. pokud je referenční rok 2010, tak hodnoty navržených ukazatelů se vztahují k roku 2011, kdy proběhne první řádné vyhodnocení pokroku naplnění indikátoru. X t je hodnota sledovaného ukazatele v referenčním roce Zjištěné rozdíly (pokrok) budou vysvětleny v kontextu aktuálního vývoje OP LZZ. Znění evaluační otázky 3.3: Zjistěte hodnoty indikátoru 430700 „Zvýšení efektivnosti strategií a politik v oblasti LZZ“ pro rok 2011 podle vytvořené metodologie, včetně slovního kvalitativního komentáře. Způsob řešení Metodika výpočtu tohoto indikátoru je jasně zpracovaná v technické zprávě evaluačního projektu ROV 2010. Není tudíž nutné v této části vstupní zprávy projektu ji detailněji znovu rozebírat. Za důležité však považujeme uvedení postupných kroků, které provedeme pro výpočet hodnoty indikátoru 430700: 1) Z ČSÚ a VUPSV zajistí řešitelský tým aktuální data za ukazatele vybraných cílových skupin k termínu 31. 12. 2010, dle dostupnosti statistických údajů na jaře 2012. Je potřeba upozornit, že v ROV 2010 byly vypočteny hodnoty k 31. 12. 2008. 2) Bude proveden výpočet procentuální změny ve vývoji zapojení vybraných cílových skupin na trh práce a to ve dvou rovinách, tj: A. Výpočet změny v období 2008 a 2010, tj. zvýšení či snížení efektivnosti strategií od posledního měření; B. Výpočet změny v období 2006 a 2010, tj. zvýšení či snížení efektivnosti strategií od počátku současného programového období. 3) Sestavení kvalitativního komentáře k oběma výše uvedeným výsledkům. Nad rámec aktivit vymezených v zadávací dokumentaci tohoto projektu bude rovněž provedena v období od dubna – června 2012 kontrola a aktualizace vlivu projektů PO5 na cílové skupiny (tj. aktualizace tabulky č. 6 technické zprávy projektu ROV 2010). Tímto poskytne řešitelský tým zadavateli informaci o obsahovém vývoji tohoto indikátoru na úrovni projektů v PO5. V případě výraznější změny ve váze vlivu PO5 na cílové skupiny bude 17
řešitelským týmem sestavena alternativa výpočtu tohoto indikátoru ve vazbě na potřeby příštího programového období 2014 - 2020. Rozdělení váhy vlivu PO5 na cílové skupiny zjištěné v ROV 20101 považujeme pro současné programové období za neměnné. Vstupy A) Politika sociální integrace a rovné příležitosti – váha politiky 0,8 osoby se zdravotním postižením (statistika MPSV) – váha v rámci politiky 0,54 osoby nad 50 let věku (ČSÚ - tabulky statistik trhu práce) – váha v rámci politiky 0,17 ženy po mateřské, příp. rodiče (ČSÚ, VŠPS) – váha v rámci politiky 0,29 B)
Aktivní politika zaměstnanosti a adaptabilita podnikání – váha politiky 0,2 uchazeči o zaměstnání (ČSÚ, MPSV) – váha v rámci politiky 0,75 mladí lidé 15 – 19 let věku (ČSÚ - tabulky statistik trhu práce) – váha v rámci politiky 0,25
Výstupy Zjištěné hodnoty indikátoru 430700 „Zvýšení efektivnosti strategií a politik v oblasti LZZ“ pro rok 2011 podle vytvořené metodologie v ROV 2010; Slovní kvalitativní komentář k provedeným výpočtům vývoje tohoto indikátoru za období 2008 a 2010 (tj. od posledního měření) a dále také za období 2006 a 2010 (tj. od počátku současného programového období až po aktuálně měřený stav k 31. 12. 2010). Rizika a předpoklady U této evaluační otázky nejsou žádná rizika pro její realizaci. Předpoklady řešení této evaluační otázky vychází z nastavené metodiky výpočtu příslušného indikátoru v rámci projektu ROV 2010. Znění evaluační otázky 3.4: Porovnejte hodnoty indikátoru 430700 „Zvýšení efektivnosti strategií a politik v oblasti LZZ“ za rok 2010 zjištěné v ROV 2010 s hodnotami za rok 2011 a kvalitativně okomentujte jejich vývoj. Způsob řešení V rámci této evaluační otázky bude provedeno porovnání vývoje hodnoty indikátoru 430700 a jeho věcná analýza, která bude zahrnovat zhodnocení faktorů ovlivňujících vývoj ve vybraných politikách a ukazatelích ve sledovaném období. Účelem této evaluační otázky bude poskytnout zadavateli 1 až 2 odstavce výstižně popisující klíčové záležitosti, které formovaly úroveň efektivnosti strategií a politik v oblasti LZZ. Tento výstižný popis bude využit pro Výroční zprávu OPLZZ za rok 2011. 1
Váhy vlivu jednotlivých politik byly v projektu ROV 2010 stanoveny dle clusterování podporovaných projektů a jejich přiřazení k příslušným politikám, na které se po věcné stránce zaměřují. Dle tohoto přístupu byly stanoveny dominantní oblasti politik lidských zdrojů a zaměstnanosti. Váhy cílových skupiny byly stanoveny dle vyhodnocení jejich pokrytí projekty v PO5, přičemž ze 13 typů podporovaných cílových skupin bylo vybráno 5 z nich s největším zastoupením. Tyto cílové skupiny byly následně přiřazeny k příslušným politikám LZZ.
18
Pro sestavení shrnujících odstavců porovnávajících hodnoty tohoto indikátoru ve sledovaných letech však bude nezbytné sestavit dílčí analýzy za vývoj v jednotlivých politikách obsažených v indikátoru 430700. Dílčí analýzy budou sestaveny v rámci následujících krocích: 1) Desk-research dostupných analýz, komentovaných statistik ČSÚ a VÚPSV 2) Řízené expertní rozhovory na úrovni: programové – zástupci ŘO OPLZZ Gestor za Prioritní osu 2 Vedoucí oddělení 814 "Oddělení realizace OP LZZ - zaměstnanost a veřejná správa" Bc. Markéta Fuchsová Gestor za Prioritní osu 3 Vedoucí oddělení 815 "Oddělení realizace OP LZZ - sociální integrace a mezinárodní spolupráce" Mgr. Jana Jirků
tematicky expertní – zástupci VÚPSV Tematika APZ – Mgr. Jaromíra Kotíková -
[email protected] Mgr. Danica Krause -
[email protected], Tematika „Rodina“ VÚPSV - Mgr. Janu Paloncyovou Ph.D. –
[email protected].
akademické – odborníci v oblasti LZZ na Vysoké škole ekonomické v Praze Ing. Soňa Veverková, příp. Doc. Ing. Magdalena Kotýnková, CSc. 3) Syntéza provedeného desk-research a řízených rozhovorů 4) Vyhodnocení, porovnání a kvalitativní okomentování vývoje indikátoru 430700
Způsob řešení evaluační ho úkolu č. 4 - Vytvoření metodiky, kterou by bylo možné pravidelně stanovovat hodnoty a posoudit pokrok indikátoru (07.46.16) Podíl úspěšně podpořených osob, a dále výpočet hodnot a jejich posouzení v době sběru dat. Kontext evaluačního úkolu Evaluační úkol č. 4 identifikuje dlouhodobý problém nejen OPLZZ, ale i dalších operačních programů v České republice, tj. podchycení situace „what´s happend“. V rámci projektu ROV 2010 se pokusil řešitelský tým zjistit situaci změny u cílových skupin, nicméně narazil na problém s dostupností kontaktních údajů na zástupce cílových skupin. Provedení dotazníkového šetření nemělo téměř žádný význam (snad vyjma PO4) z důvodu zcela minimální návratnosti vyplněných dotazníků. Závěry tohoto ROV 2010 zdůrazňovaly tento zásadní problém spočívající v nedostatku validních dat a informací k jednoduchému a efektivnímu vyhodnocení dopadů programu. Probíhající „longitudinální evaluace“ zaměřená na vyhodnocení situace a změny na straně cílových skupin však s největší pravděpodobností rovněž nepřinese potřebné informace a zjištění, protože provedené dotazníkové šetření bylo zaměřeno pouze na názory organizací (žadatelů/konečných příjemců). Plánované kvalitativní metody v longitudinální evaluaci, jakými jsou fokusní skupiny či polostrukturované rozhovory se zástupci cílových skupin, nebudou mít s největší
19
pravděpodobností zcela ideální vypovídající hodnotu, protože evaluátor bude při navazování kontaktů s respondenty (se zástupci cílových skupin) plně závislý na ochotě oslovených organizací. Při snaze naplnit podmínky kritéria non-response bias není možné při takovém postupu odpovědně garantovat signifikantnost dosažených výsledků. Neexistuje téměř žádná jistota toho, jaké osoby z cílových skupin organizace nakonec vyberou, a které z nich vůbec odpoví v šetření. Je možné se domnívat, že budou mít spíše tendenci vybrat ty bezproblémové a nikoliv problematické. Pochopení tohoto kontextu je velmi důležité pro rozhodnutí o možné a odpovědné realizaci evaluačního úkolu č. 4. Dle výše uvedeného lze konstatovat, že stávajícími metodami běžné evaluační praxe (tj. dotazníková šetření, fokusní skupiny, expertní panely či polostrukturované rozhovory) nelze odpovědně garantovat úspěšné řešení evaluačního úkolu č. 4. Tyto metody jsou časově i finančně velmi nákladné a navíc při rostoucím počtu zástupců cílových skupin nemají potřebnou vypovídající hodnotu, validnost a signifikanci. Tento způsob tudíž není využitelný. Řešitelský tým se proto významně zamýšlel nad možným postupem řešení tohoto problému s vědomím výše uvedeného kontextu. Za současné konstelace nastavení MONIT7+, kdy neexistuje potřebná evidence o cílových skupinách na programové úrovni OPLZZ, je možné provést zjištění situace u cílových skupin z hlediska jejich pozice na trhu práce, tj. zda-li jsou či nejsou zaměstnaní. Detaily metodiky jsou uvedeny dále u evaluační otázky 4.1 Znění evaluační otázky 4.1: Navrhněte a vytvořte metodologii pro zjištění hodnoty indikátoru 074616 – „Podíl úspěšně podpořených osob.“ Návrh metodologie a její jednotlivé části podrobně zdůvodněte. Způsob řešení Monitorovací indikátor 074616 bude nezbytné sledovat na třech úrovních, tj. pro úroveň programu, prioritních os i oblastí podpory a zahrnuje PO1, PO2 a PO3. Hlavní charakteristika tohoto indikátoru spočívá dle Národního číselníku indikátorů (NČI) v tom, že se jedná o „Podíl podpořených osob v zaměstnání nebo dalším vzdělávání 6 měsíců po ukončení podpory (klienti služeb) (%).“ Průřezová charakteristika tohoto indikátoru napříč výše uvedenými prioritními osami je situace, kdy příslušný zástupce cílové skupiny je či není zaměstnaný 6 měsíců po ukončení podpory. Zadavatel daný interval upřesnil na 3 – 9 měsíců. Hlavní problém tudíž spočívá ve způsobu zjištění situace u zástupců cílových skupin. Pro tuto informaci však není potřeba realizovat náročná kvalitativní šetření, která navíc nikdy nemohou garantovat signifikanci výsledku. Proto bude použit následující postup: 1. Zadavatel umožní zástupcům řešitelského týmu přístup k evidenci / složkám ukončených projektů. V rámci této evidence budou vytaženy prezenční listiny z realizovaných seminářů či jiných aktivit projektů, ze kterých bude nutné sbírat údaje o podpořených osobách z dané cílové skupiny, tj. alespoň jméno a příjmení, datum narození. Zjištění těchto údajů bude provedeno buď na úrovni ŘO či zprostředkujícího subjektu, příp. přímo u vybraných konečných příjemců (zejména PO 1 a PO 3). 2. Seřazení vybraných zástupců cílových skupin do excelovské databáze.
20
3. V úzké součinnosti se zadavatelem (MPSV) bude provedeno zjištění u ČSSZ, zdali daná osoba je v evidenci k určitému datu (tj. dle evidence k SP). 4. Pokud podpořená osoba cílové skupiny bude v evidenci ČSSZ (dle vybraných kritérií), tak bude zařazena do kategorie úspěšně podpořených osob, které jsou v zaměstnání či podnikatelské činnosti. 5. Pro dvojí kontrolu může být případně provedeno obdobné zjištění u centrální evidence úřadů práce, nicméně dle stávajících jednání se jeví spolupráce s ČSSZ jako plně postačující. Dle jednání se zástupci ČSSZ2 dne 27. 2. 2012 vyplynulo, že: nejlepším identifikátorem je rodné číslo, které se však v současném programovém období v prezenčních listinách nesleduje;
místo trvalého bydliště není vhodný identifikátor – identifikace osob by nebyla přesná, a navíc by se jednalo o časově i finančně velmi náročný identifikátor k ověřování;
jedinou možnou variantou je členění „jméno, příjmení a datum narození“
ČSSZ spolu se svým externím dodavatelem sestaví skript a pomocí něj se bude hledat u dané osoby pojistný vztah. Dle evidence pak bude možné určit u podpořených osob, zdali jsou zaměstnané či OSVČ (tady jsou od roku 2009 i aktuální údaje, zobrazuje se výkon SVČ);
„ruční cesta“ ověřování podpořených osob je problematická a časově náročná, protože jde o ztotožňování osob, tak je potřeba rodné číslo. Vzhledem k tomu, že ověřování bude probíhat také v roce 2014/2015, tak bude nejvhodnější variantou sestavení skriptu;
Datum zjišťování: asi nejlépe ke konci roku 2011, tj. stav k 31. 12. 2011;
Počet excelovských tabulek pro agregaci – cca 12 až 15;
Počet osob pro ověření – ČSSZ potvrdila možnost ověření prostřednictvím skriptu, a proto počet osob nebude omezován, min. se bude ověřovat 2500 podpořených osob;
Znění zadání vypracování skriptu ze strany ČSSZ pro externí firmu: „Vstupem budou excelové tabulky s údaji jméno, příjmení, datum narození. Na tyto údaje bude probíhat ztotožnění. Pokud nedojde k jednoznačnému ztotožnění na základě vstupních údajů, bude osoba započítána do neztotožněných. Sestavy neztotožněných k ručnímu došetřování nepožadujeme. Výstupem za každou tabulku budou agregované údaje - u ztotožněných počet osob se zaměstnáním, SVČ, souběh zaměstnání a SVČ, vše k datu 31. 12. 2011, a dále počet osob neztotožněných. Stejné zjišťování proběhne ještě jednou v roce 2014 nebo 2015. Termín má MPSV 14. 3. 2012.“
Řešitelský tým bude pro tento způsob realizovat zjištění údajů na základě vzorku zástupců cílových skupin na úrovni 1-2 % z celkového počtu ve skupině ukončených projektů splňujících podmínku 3 – 9 měsíců od ukončení podpory. S ohledem na problematické získávání údajů o podpořených osobách (zejména u PO1 a PO3) byla úroveň vzorku 1 – 2 % posouzena jako postačující a byla dohodnuta se zadavatelem v rámci kick-off setkání dne 7. 2. 2012. Původní navrhovaná úroveň 5 % (cca 10 000 podpořených osob) by byla až příliš 2
Gesce této problematiky - vrchní ředitelka úseku řízení a správy údajové základny Ing. Michaela Hendrychová.
21
rozsáhlá pro ověřování. Upřesněný vzorek projektů a cílových skupin uvádíme v příloze této vstupní zprávy. Zástupci cílových skupin budou vybíráni náhodným způsobem tak, aby byly zastoupeny projekty v různých velikostních kategoriích dle jejich rozpočtu. Tímto bude také možné odlišit úspěšnost cílových skupin podpořených v rámci různě finančně rozsáhlých projektů. V komplexnějším pojetí pak bude možné vyvozovat dílčí závěry týkající se rovněž míry efektivnosti těchto skupin projektů. Vstupy
řízené rozhovory na úrovni ŘO a ZS ohledně struktury a možností zjištění údajů z prezenčních listin se seznamy podpořených osob (jméno a příjmení, datum narození);
Výstupy Metodologie pro zjištění hodnoty indikátoru 074616 – „Podíl úspěšně podpořených osob.“ Podrobné zdůvodnění návrhu metodologie a jejích jednotlivých částí. Rizika a předpoklady Rizika u této metody spočívají zejména v možnostech a časové flexibilitě ŘO a zejména zástupců zprostředkujícího subjektu poskytnout přístup pro opisování údajů za zástupce podpořených cílových skupin. V době zpracování této vstupní zprávy toto riziko nastalo na straně zprostředkujícího subjektu administrujícího PO3. Naopak lze velmi pozitivně hodnotit přístup a spolupráci nejen ze strany zadavatele (MPSV), ale také zástupců ČSSZ pro efektivní řešení tohoto úkolu. Znění evaluační otázky 4.2: Zjistěte hodnoty indikátoru 074616 v době sběru dat podle vytvořené metodologie, včetně slovního kvalitativního komentáře. Způsob řešení Řešitelský tým bude postupovat v následujících krocích dle výše naznačené metodiky: 1) V první fázi bude se zadavatelem dolaďovat metodiku ve vazbě na možnosti ŘO a zejména ZS z hlediska dostupnosti informací o podpořených cílových skupinách. 2) V druhé fázi bude proveden sběr základních údajů o podpořených osobách (vzorek), tj. jméno a příjmení, datum narození. 3) Ve třetí fázi bude řešitelský tým v úzké součinnosti s MPSV a ČSSZ ohledně zjištění situace u zástupců daných cílových skupin (zjištění ANO/NE). 4) Sumarizace a čištění dat pro finální výpočet. 5) Výpočet dle finálních údajů a kvalitativní komentář dle úrovně jednotlivých oblastí podpory, prioritních os a celkového pokroku na úrovni programu OPLZZ. 6) Expertní rozhovory ohledně vývoje situace u vybraných cílových skupin – budou realizovány podle časové možnosti ČSSZ zpracovat poskytnuté údaje o podpořených osobách. V návaznosti na zmíněnou aktivitu je pak vhodné provést řízené rozhovory k upřesnění situace cílových skupin na úrovni: - programové – zástupci ŘO OPLZZ - tematicky expertní – zástupci VÚPSV, ČMKOS, Hospodářská komora apod. - akademické – odborníci v oblasti LZZ (např. VŠE Praha) 22
7) Syntéza poznatků a interpretace vypočtených výsledků dle jednotlivých oblastí podpory, prioritních os a celkového pokroku na úrovni programu OPLZZ. Vstupy
prezenční listiny se seznamy podpořených osob (jméno a příjmení, datum narození); dle dohody a v úzké součinnosti se zadavatelem spolupráce s ČSSZ. případně i expertní rozhovory (dle časového průběhu a zvládnutí zpracování dat ze strany ČSSZ a následné syntézy).
Výstupy Zjištěné hodnoty indikátoru 074616 podle vytvořené metodologie, včetně slovního kvalitativního komentáře. Velkou výhodou tohoto přístupu je významnost zjištění, srovnatelnost mezi osami PO1, PO2 a PO3, a dále také snadná opakovatelnost takového přístupu, který nebude finančně a časově tak náročný, jako jsou dosud využívané přístupy o zjišťování situace u cílových skupin. Doporučení – řešitelský tým bude také dolaďovat doporučení pro příští programové období týkající se potřebných změn v MONIT7+ ve vazbě na evidenci informací o cílových skupinách. Základními informacemi o cílových skupinách bude ŘO schopen i sám si generovat příslušné statistiky jejich počtu a struktury. Prostřednictvím sdílení dat ve veřejné správě pak bude také schopen zjistit jejich situaci na trhu práce (tj. zda-li jsou či nejsou zaměstnaní či podnikající). Rizika a předpoklady Rizika tohoto přístupu jsou následující (vždy uvádíme i možnosti jejich eliminace): 1) Nemožnost získání potřebných informací o cílových skupinách na úrovni ŘO či ZS – toto riziko bylo zcela eliminováno již v počáteční fázi projektu při zajišťování potřebných údajů. Dílčí problémy nastaly v případě PO1 a PO3. Naopak sběr dat v PO2 byl zcela bezproblémový. 2) Duplicita jmen a příjmení a problém ve vyhledávání v evidenci ČSSZ – tento problém bude bezesporu vznikat a lze jej významně eliminovat právě paralelním zjištěním o datu narození či místa bydliště. V takovém případě pak budou tyto případy spíše ojedinělé, a celkový výsledek nebude významně zkreslován. Dle jednání se zástupci ČSSZ vyplynulo, že pokud nedojde k jednoznačnému ztotožnění podpořené osoby na základě vstupních údajů, bude taková osoba započítána do kategorie neztotožněných osob.
Způsob řešení evaluační ho úkolu č. 5: Zjištění hodnot, posouzení pokroku a aktuálního stavu monitorovacích indikátorů (15.32.17) Zkrácení délky soudních řízení - Krajské soudy; (15.32.18) Zkrácení délky soudních řízení - Okresní soudy. Způsob řešení Evaluační úkol č. 5 má specifický charakter díky svému tématu i nárokům na sběr dat. Požadované indikátory nebudou hodnoceny klasickými evaluačními postupy, ale úspěch
23
celého úkolu je závislý na získání a hodnocení externích dat. Z tohoto důvodu je v řešitelském týmu právník (advokát), který má přístup k nezbytným databázím a zkušenosti s podobnými analýzami. Proto bude tento evaluační úkol zpracovávat a současně garantovat. Smyslem je poukázat na vývoj resp. změny v délce soudních řízení na obou sledovaných úrovních v roce 2007 a v současnosti. Vstupy Již bylo uvedeno, že vstupy jsou zajišťovány z externích zdrojů i ze současné praxe hlavního řešitele tohoto úkolu. Proto je pracováno s: Veřejně dostupnou databází za roky 2000 – 2010, kde jsou dostupné informace o délkách soudních řízení členěno dle jednotlivých agend v agregátu a dále průměrná délka soudních řízení. Data za roky 2000-2010 týkající se průměrné délky soudních řízení jsou členěna agregátně pro úroveň krajských soudů a okresních soudů. Tyto údaje v agregované formě jsou dostatečně vypovídající pro řešení evaluačního úkolu č. 5. Analýza za jednotlivé roky po jednotlivých okresních a krajských soudech je nadbytečná a bez srovnávací vypovídací hodnoty, kdy údaje za jednotlivé soudy je možné získat na MsP ČR, avšak s ohledem na rozsáhlost (jedná se o 100 sestav za každý rok) a na obtížnost a časovou náročnost získání jednotlivých sestav je pracováno s agregátními údaji, které jsou sledovány již po delší časové období. Informace ze statistiky získané z MsP ČR týkající se personálního obsazení soudů a dále otázek změny legislativy, kdy tyto faktory mají vliv na změnu průměrné délky soudních řízení, tedy byly identifikovány dva hlavní důvody výrazného zkrácení délky řízení a to zlepšení personálního zázemí soudů a to jak v úrovní soudcovského tak i administrativního aparátu v provázání na zlepšení technického vybavení a dále změna legislativy. Dále je nezbytné upozornit, že změna délky soudních řízení je silně ovlivněna samotným počtem zahájených kauz – nápadem kauz a personální obsazení – počet chybějících soudců či počet soudců na počet případů napadlých na soudy, tj. počet zahájených řízení, kdy v rámci těchto ukazatelů v návaznosti na předchozí odrážku je možné vysledovat i případnou závislost efektivity řešení soudních kauz – z hlediska průměrné délky soudního řízení. Podstatná je i otázka vyznačování právní moci u kauz, kdy statistika průměrné délky řízení je vázána na datum dojití kauzy k soudu – zahájení kauzy u soudu a ukončení kauzy vyznačením právní moci. Bohužel, tato otázka je hodnotitelná jenom a pouze v rámci úvah, kdy není statistika nabytí rozhodnutí právní moci a data vyznačení této právní moci, která znamená statistické ukončení předmětné kauzy. Výstupy Výstupem by měly být hodnoty indikátoru zkrácení délky soudních řízení na krajské a okresní úrovni. Vypočítat jedno číslo pro krajskou a jedno pro okresní úroveň sice je možné (aritmetický průměr či medián), ale metodicky to nebude přesné. Důvodem jsou rozdílné počty řešených kauz, které se výrazně liší i mezi krajskými soudy navzájem (nemluvě o okresních soudech). Pro potřeby výroční zprávy OP LZZ tedy bude zvolen pragmatický přístup a požadované indikátory budou vypočítány (mediánová hodnota pro krajskou i okresní úroveň). Indikátory budou relevantně vysvětleny a popsány i s ohledem na stav justice v posledních letech a ve vazbě vlivu OP LZZ na zkrácení délky soudního řízení.
24
V rámci výstupů však budou kromě požadovaných výsledných indikátorů předány i rozšiřující podkladové tabulky pro obě úrovně se stručným komentářem a vysvětlením. Rizika a předpoklady S ohledem na zkušenosti a praxi řešitele i zjištěné podrobnosti o dostupnosti dat nepředpokládáme žádná rizika u tohoto úkolu. Hlavním rizikem je velké množství proměnných, tedy hodnocení trendů a výsledků průměrné délky soudních řízení nemusí být vypovídající s ohledem na průběžnou změnu legislativy a zatížení soudů zátěží starých nedořešených kauz. V důsledku tohoto stavu nastává mnohdy situace, kdy kauzy zahájené později jsou vyřešeny dříve, než staré „letité“ kauzy, a to v důsledku nástupu nových soudců a řešení rozdílení staré práce. Tyto faktory, spolu se stárnutím soudcovského stavu a předpokládanou obměnou mohou mít velmi zásadní vlivy na zkrácení délky řízení v budoucnu.
Nenároková část Nenároková část zakázky bude realizována na žádost zadavatele v delším časovém odstupu. Předpoklad je realizace v letech 2014-2016. Tato část má celkem dva úkoly. Způsob řešení nenárokového evaluačního úkolu č. 1 - Opakovaný výpočet hodnot, posouzení pokroku a aktuálního stavu níže uvedených monitorovacích indikátorů při využití zadané metodologie, která je již u zadavatele k dispozici, nebo vznikne během první, nárokové, části plnění této zakázky. Způsob řešení Evaluační úkol spočívá v opakovaném zjištění a výpočtu těchto monitorovacích indikátorů: a. (07.42.80) Udržitelnost vytvořených partnerství b. (07.60.10) Zlepšení podmínek pro slaďování rodinného a pracovního života c. (43.07.02) Efektivnost podpořených projektů d. (43.07.00) Zvýšení efektivnosti strategií a politik v oblasti LZZ e. (07.46.16) Podíl úspěšně podpořených osob f. (15.32.17) Zkrácení délky soudních řízení - Krajské soudy g. (15.32.18) Zkrácení délky soudních řízení - Okresní soudy Smyslem je zjistit hodnoty těchto indikátorů s odstupem času a posoudit jejich vývoj. Součástí úkolu je i komparace hodnot indikátorů zjištěných v roce 2012 a v opakovaném šetření. Vstupy Vstupy budou totožné s těmi, které jsou uvedeny u úkolů 1, 3, 4 a 5 nárokové části, na něž tento evaluační úkol navazuje. Navíc bude využito metodiky zjišťování a výpočtu indikátorů, které budou vyvinuty jako součást nárokové části zakázky. Výstupy Výstupem bude opakované zjištění hodnot výše uvedených indikátorů, jejich porovnání s výsledky zjištěnými v nárokové části a zhodnocení jejich vývoje v čase. Rizika a předpoklady S ohledem na zkušenosti a praxi řešitele i ověření způsobu zjištění hodnot MI v rámci nárokové části nepředpokládáme u tohoto úkolu žádná významnější rizika.
25
Způsob řešení nenárokového evaluačního úkolu č. 2 - Vypočítejte podíly úspěšně podpořených osob podle vybraných kategorií cílových skupin indikátoru 07.41.00 Počet podpořených osob včetně slovního kvalitativního komentáře. Pro vysvětlení získaných hodnot a stanovení faktorů úspěchu využijte kvalitativní srovnávací metody. Způsob řešení Dle zadávací dokumentace může zadavatel požadovat vypracování tohoto nenárokového evaluačního úkolu, tj. výpočet indikátoru 07.41.00 Počet úspěšně podpořených osob podle určitých kritérií. Maximálně se bude jednat o zjištění indikátoru u tří vybraných kategorií. V zadávací dokumentaci se předpokládá pravděpodobná identifikace kategorie „mladí lidé 15-24 let“ a „menšiny“, příp. jiné. Podle prvních zkušeností z počáteční fáze tohoto projektu však bude možné rozdělit zástupce cílových skupin zejména podle jejich věku (data narození, příp. jen roku narození). Identifikace podle typu znevýhodnění cílových skupin je relevantní zejména v prioritní ose 2 a 3. V případě prioritní osy 3 není ze strany zprostředkujícího subjektu velká ochota ke spolupráci. V rámci sběru údajů o podpořených osobách bylo ze strany ZS sděleno, že koneční příjemci projektů neměli povinnost zasílat prezenční listiny, přesto u většiny z nich je mají k dispozici. V těchto prezenčních listinách však nejsou uvedena základní požadovaná data (datum narození, adresa trvalého bydliště apod.). Případná osvědčení v kontextu prezenčních listin jsou kontrolována ze strany ZS při kontrolách na místě. Na druhou stranu je však nutné dodat, že při přímé komunikaci expertů IREAS s některými konečnými příjemci v únoru 2012 vyplynulo, že potřebné údaje pro identifikaci cílových skupin koneční příjemci evidují a průběžně je zasílají v monitorovacích zprávách ZS. Např. zástupce KP projektu CZ.1.04/3.4.04/26.00150 potvrdil, že průběžně posílali údaje v členění na vzdělání, postavení na trhu práce, případné znevýhodnění, datum narození, adresu, telefon a emailový kontakt. Bohužel, k těmto údajům se zástupci řešitelského týmu IREAS nedostali. Proto bude nezbytné ze strany ŘO OPLZZ připravit podmínky pro úspěšné řešení nenárokového evaluačního úkolu č. 2 tak, aby: 1) Nedocházelo k opakovanému sběru údajů o cílových skupinách na úrovni konečných příjemců, což zbytečně navyšuje transakční náklady všech zapojených subjektů; 2) Prostřednictvím interního metodického pokynu pro ZS zajistí, aby byly dostupné údaje dle požadovaných identifikátorů již na úrovni ZS, které následně tyto údaje poskytnou pro zpracování nenárokového evaluačního úkolu č. 2. Způsob řešení bude založen na metodice navržené pro evaluační úkol 4 nárokové části, tj. zjištění podpořených osob a zjištění, zda jsou tyto osoby úspěšně podpořeny, tj. zda jsou 6 měsíců po skončení podpory v zaměstnání. Způsob zhodnocení účelnosti podpory bude s ohledem na delší časový odstup definitivně rozhodnut až na základě výsledků nárokové části, zda budou použity standardní evaluační metody (fokusní skupiny, statistické vyhodnocení, řízené rozhovory, apod.) nebo metoda QCA použitá u evaluačního úkolu 2 nárokové části. Vstupy Vstupy budou totožné se vstupy uvedenými u evaluačního úkolu 4 nárokové části, pouze doplněné o identifikátor, který umožní zjištění dané kategorie cílových skupin. Výstupy Výstupem bude vypočtená hodnota indikátoru pro požadovanou kategorii v členění na jednotlivé prioritní osy a oblasti podpory a dále kvalitativní zhodnocení výsledné hodnoty.
26
Rizika a předpoklady Hlavní riziko spatřujeme v identifikaci některých skupin podpořených osob. První zkušenosti z počátku řešení naznačují, že lze relativně snadno získat základní informace o cílových skupinách (jméno, příjmení, datum narození), avšak zjišťování informací například o menšinách či znevýhodněných skupinách spatřujeme jako vážnou bariéru případného řešení.
27
Příloha 1 – Dotazníky V této příloze jsou uvedeny texty dotazníků, které byly rozeslány příslušným respondentům. Dotazníky navržené a použité v rámci této evaluační zakázky jsou rovněž dostupné na internetových adresách.
Dotazník pro cílové skupiny u jednotlivých prioritních os (PO1 – PO4). Dílčí vstup pro hodnocení Efektivnosti podpořených projektů. 1. Zhodnoťte prosím přínos produktu (školení, vzdělávání či jiné aktivity), která byla financována Evropským sociálním fondem (ESF) a které jste se zúčastnil(a): Hodnocení proveďte na stupnici 1 až 10, kde 1=nejlepší (nejpřínosnější) a 10 = nejméně přínosné 2. Napište prosím stručně, v čem Vám účast na školení, kterého jste se zúčastnil(a) nejvíce pomohla. ………………… 3. Co byste očekávali od podobných aktivit do budoucna? Tzn. na co by měly být podle Vás podobné projekty zaměřeny? Webové linky: www.ireas.cz/dotaznik17, www.ireas.cz/dotaznik18, www.ireas.cz/dotaznik19, www.ireas.cz/dotaznik20.
Dotazník pro hodnocení indikátoru 07.60.10 Zlepšení podmínek pro slaďování rodinného a pracovního života Vážená paní, Vážený pane, Obracíme se na Vás jako na kontaktní osobu projektu podpořeného z operačního programu Lidské zdroje a zaměstnanost. Naše společnost IREAS Centrum s.r.o. byla pověřena Ministerstvem práce a sociálních věcí ČR, aby provedla evaluaci některých monitorovacích indikátorů, které jsou v OPLZZ sledovány. V této souvislosti si Vás dovolujeme požádat o vyplnění krátkého dotazníku k Vašemu projektu, který dokončen v loňském roce. Předem Vám velmi děkujeme za zodpovězení dotazníku, který se nachází na této internetové adrese. Jeho zodpovězení by Vám nemělo zabrat více než 5 minut. Webový link: www.ireas.cz/dotaznik21 Za řešitelský tým Ing. Petr Fanta, Ph.D. IREAS Centrum s.r.o.
28
Vyberte prosím, které z následujících nástrojů pro slaďování rodinného a pracovního života u Vás byly zavedeny v průběhu realizace projektu OP LZZ: Vytvoření firemní školky (nebo obdobného mateřského centra) Možnost práce z domova Pružná pracovní doba či individuální úprava pracovní doby Sdílení pracovního místa Jiné (prosím uveďte): ……………………. Které z výše uvedených nástrojů se Vám daří udržet a využívat i v současné době tj. po ukončení realizace projektu OP LZZ: žádné Vytvoření firemní školky (nebo obdobného mateřského centra) Možnost práce z domova Pružná pracovní doba či individuální úprava pracovní doby Sdílení pracovního místa Jiné (prosím uveďte): ……………………. Ohodnoťte, prosím, na škále 1 až 10, jak se výše uvedené nástroje osvědčily? (pokud jste zavedli více nástrojů pro flexibilní organizaci práce, tak prosím odhadněte průměrnou známku, 1= nástroj se neosvědčil a není příliš využívaný, 10 = nástroj se osvědčil a budeme ho nadále udržovat). Pozn. Uvést škálu 1 – 10 tak, aby bylo možné zaškrtnout pouze jednu možnost. Do jaké velikostní kategorie patří Vaše firma, ve které byly zavedeny některé z výše uvedených flexibilních forem organizace práce: 1 – 9 zaměstnanců 10 – 49 zaměstnanců 50 – 99 zaměstnanců 100 – 249 zaměstnanců 250 – 499 zaměstnanců 500 a více zaměstnanců Ohodnoťte, prosím, na škále 1 až 10, do jaké míry jste zjišťovali (a znali) potřeby zaměstnanců před tím, než jste začali zavádět některé z uvedených opatření pro slaďování rodinného a pracovního života (1 = potřeby jsme nezjišťovali, 10 = znali jsme detailně poptávku zaměstnanců) Pozn. Uvést škálu 1 – 10 tak, aby bylo možné zaškrtnout pouze jednu možnost. Uveďte, případně odhadněte prosím, procentuální zastoupení žen ve firmě, kde byly nástroje na slaďování rodinného pracovního života zavedeny. 0 -4% 5 – 19 % 20 – 29 % 30 % - 49 % 50 % a víc
29
Uveďte, prosím, kdo inicioval zavedení jednoho z výše uvedených nástrojů pro slaďování rodinného pracovního života (kdo byl prvotním a největším nositelem celé myšlenky projektu) Zaměstnanci Vedení firmy (ředitel nebo někdo z managementu firmy) Externí poradenská firma Jiné (prosím uveďte): ……………………. Jaká je kvalifikace resp. vzdělání osob, které nejčastěji využívají vytvořených nástrojů pro slaďování rodinného pracovního života: Základní vzdělání Střední vzdělání bez maturity Střední vzdělání s maturitou Vyšší nebo vysokoškolské vzdělání Ve kterém městě se nachází Vaše provozovna (podnik/firma), v níž bylo zaveden nástroj pro slaďování pracovního a rodinného života? Prosím uveďte: ………………………
Dotazník pro hodnocení vytvořených partnerství
indikátoru
07.42.80
Udržitelnost
Vážená paní, Vážený pane, Obracíme se na Vás jako na kontaktní osobu projektu podpořeného z operačního programu Lidské zdroje a zaměstnanost. Naše společnost IREAS Centrum s.r.o. byla pověřena Ministerstvem práce a sociálních věcí ČR, aby provedla evaluaci některých monitorovacích indikátorů, které jsou v OPLZZ sledovány. V této souvislosti si Vás dovolujeme požádat o vyplnění krátkého dotazníku k Vašemu projektu, který dokončen v loňském roce. Předem Vám velmi děkujeme za zodpovězení dotazníku, který se nachází na této internetové adrese. Jeho zodpovězení by Vám nemělo zabrat více než 5 minut. Webový link: www.ireas.cz/dotaznik22 Za řešitelský tým Ing. Petr Fanta, Ph.D. IREAS Centrum s.r.o. Dotazník: 1. Kolik bylo do Vašeho projektu zapojeno partnerů? Zaškrtnout 1,2, 3, 4, 5, více V následujících otázkách, prosím, charakterizujte spolupráci s partnerem, se kterým udržujete nejintenzivnější spolupráci po skončení projektu. 2. Ohodnoťte na škále 1 až 10, jak je nyní, po skončení projektu, funkční vytvořené partnerství. 1 – plně funkční, 10 – nefunkční.
30
3. Jak byste charakterizovali současnou spolupráci s partnerem (partnery)? Můžete zvolit i více odpovědí: Plně funkční partnerství (intenzívně spolupracujeme s partnery v běžné činnosti nebo na dalších projektech) Dobře funkční partnerství (vzájemně intenzívně komunikujeme a konzultujeme pracovní záležitosti) Funkční partnerství (průběžně s partnerem komunikujeme a vyměňujeme si informace na bázi organizace případně osobních vazeb) Málo funkční partnerství (s partnerem udržujeme občasný formální kontakt) Nefunkční partnerství (s partnerem dále nespolupracujeme ani nekomunikujeme) 4. S partnery (partnerem) jsme spolupracovali již dříve před realizací projektu. Ano – ne 5. Partner je ze stejného nebo příbuzného oboru? Ano – ne 6. Je partner ze stejného sektoru? (veřejný, neziskový, soukromý sektor) Ano -ne 7. Existuje mezi Vaší organizací a partnerskou organizací majetkové propojení? (například sesterská společnost, mateřská společnost, zahraniční kancelář stejné organizace apod.) Ano – ne 8. Je partner ze sousedního státu? Ano – ne Pokud ano – ze kterého?.....SK, A, D, PL 9. Odhadněte prosím kilometrickou (vzdušnou) vzdálenost mezi Vámi a partnerskou institucí. …… km 10. Do jaké velikostní kategorie patří Vaše firma? 1 – 9 zaměstnanců 10 – 49 zaměstnanců 50 – 99 zaměstnanců 100 – 249 zaměstnanců 250 – 499 zaměstnanců 500 a více zaměstnanců 11. Bylo pro Vás vytvořené partnerství v rámci OP LZZ první zkušeností nebo jste již v minulosti byli zapojeni do jiných partnerství (např. v rámci jiných projektů apod.)? Ano – ne Velmi Vám děkujeme za Vaši pomoc při zodpovězení dotazníku.
Příloha 2 - Upřesněný vzorek podpořených osob (zástupců cílových skupin) evaluačního úkolu č. 4 Řešitelský tým bude pro tento způsob realizovat zjištění údajů na základě vzorku zástupců cílových skupin na úrovni cca 1-2 % z celkového počtu ve skupině ukončených projektů splňujících podmínku 3 – 9 měsíců od ukončení podpory, tj. ukončení projektu v termínu od května 2011 do listopadu 2011. Zástupci cílových skupin budou vybíráni náhodným způsobem tak, aby byly zastoupeny projekty v různých velikostních kategoriích dle jejich rozpočtu. Tímto bude také možné odlišit úspěšnost cílových skupin podpořených v rámci různě finančně rozsáhlých projektů. 31
V komplexnějším pojetí pak bude možné vyvozovat dílčí závěry týkající se rovněž míry efektivnosti těchto skupin projektů. Způsob výběru projektů z databáze MONIT7+: 1) Výběr projektů za každou oblast podpory s předpokladem ukončení realizace od května do listopadu 2011. 2) Klíčový je vstupní monitorovací indikátor 074100 - Počet podpořených osob celkem 3) Souhrn údajů dle dat ROV 2010 květen-listopad 2011 Počet ukončených projektů dle ToR
OP
1.I 1.II 2.I 2.II 3.I 3.II 3.III 3.IV
Počet ukončených projektů dle ROV 2010
350 1 23 1 70 11 9 110 575
CELKEM
288 1 17 1 45 5 14 88 461
074 100 Počet podpořených osob - cílová hodnota
1-2 % vzorek projektů, příp. návrh počtu analyzovaných projektů
35 712 200 128 569 0 4 118 2 596 385 22 816 197 968
10 1 5 0 4 1 3 5 29
1-2 % vzorek podpořených osob
165* 30 3 141** 0 191 144 15 57*** 3 743
* U dalších přepsaných 325 podpořených osob neznáme data narození, která jsou pro databázi ČSSZ klíčová. ** V oblasti podpory 2.1 byly realizovány 3 velké projekty v gesci MPSV (viz dále), ve kterých bylo podpořeno celkově 125 500 osob. V ostatních 14 ukončených projektech realizovaných úřady práce v ČR dosahovaly počtu podpořených osob v desítkách, příp. stovkách, a jejich celkový počet dosáhl 3069 osob. V oblasti podpory 2.1 tak bylo celkem podpořeno 128 569 osob. *** U dalších přepsaných 472 osob neznáme data narození, která jsou pro databázi ČSSZ klíčová.
Oblast podpory 1.1 OP 1.1
Počet projektů
0 Kč rozpočet 0,5 - 1,4 mil. Kč 1,5 - 2,4 mil. Kč 2,5 - 5 mil. Kč 5 - 8 mil. Kč 8 - 13 mil. Kč Celkem
Počet do vzorku
9 18 56 152 47 6 288
0 1 2 4 2 1 10
Výběr projektů 1.1 Registrační číslo
KP
Rozpočet
CZ.1.04/1.1.04/60.00029
Suchánek & Walraven, s.r.o.
1 067 092,88
CZ.1.04/1.1.02/23.00442
ABS WYDA, s.r.o.
1 502 622,00
32
Ind. 074100 - Z toho cílová hodnota náhodně vybrat počet podpořených osob 26 68 68*
34
CZ.1.04/1.1.02/35.00403
GEFCO ČESKÁ REPUBLIKA s.r.o.
1 526 239,00
CZ.1.04/1.1.02/35.00320
PIVOVAR SVIJANY, a.s.
2 595 504,00
CZ.1.04/1.1.02/35.00190
Imperial Karlovy Vary a. s.
3 002 377,00
CZ.1.04/1.1.02/35.00281
FONTEA a.s.
4 029 393,00
CZ.1.04/1.1.02/35.00146
ALTA, akciová společnost; Zkratka: ALTA, a.s.
4 906 174,00
CZ.1.04/1.1.02/35.00036
BONATRANS GROUP a.s.
5 312 809,28
CZ.1.04/1.1.02/35.00084
Fosfa akciová společnost
6 957 000,00
CZ.1.04/1.1.02/35.00197
Heineken Česká republika, a.s.
54
22
28
32
327 90* 117 36* 80 38* 104 12* 263
13 387 069,60
77
341 81*
Celkem podpořených osob
1 408 165 * U údajů označených * chybí data narození, proto nejsou ani sčítány do políčka „Celkem podpořených osob“. Dohromady se jedná o 325 osob, u nichž nemáme data narození, a proto jsou pro práci s databázemi ČSSZ nepoužitelné.
Oblast podpory 1.2 – je jasná, ověřit 10 podpořených osob CZ.1.04/1.2.00/37.00005
ÚŘAD PRÁCE V ČESKÉ LÍPĚ
Celkem bylo vybráno a již přepsáno do excelu 30 podpořených osob.
Oblast podpory 2.1 U této oblasti podpory je specifikum u 3 projektů (v koordinaci MPSV), které podpořily cca 125 tis. osob a jsou i z hlediska rozpočtu nejrozsáhlejší. Ostatní projekty této oblasti podpory podpořily většinou desítky nebo stovky osob. Tři specifické projekty oblasti podpory 2.1 Indikátor 074100
Reg. Číslo
KP
CZ.1.04/2.1.00/03.00001
MPSV
1 772 350 000
19 500
CZ.1.04/2.1.00/03.00002
MPSV
1 521 340 000
31 000
CZ.1.04/2.1.00/03.00003
MPSV
957 200 000
75 000
OP 2.1
Rozpočet
Počet projektů
3-6 mil. Kč 6-30 mil. Kč 30 - 40 mil. Kč 900 - 1800 mil. Kč Celkem
Počet do vzorku
7 4 3 3 17
1 1 1 2 5
Výběr projektů 2.1 Registrační číslo
KP
Rozpočet
CZ.1.04/2.1.01/44.00084
ATHENA - Společnost pro vzdělávání a rozvoj žen
CZ.1.04/2.1.00/13.00022
Úřad práce Varech
v
Karlových
33
Ind. 074100 - Z toho cílová hodnota náhodně vybrat počet podpořených osob
4 859 657
50
53
25 343 900
340
151
CZ.1.04/2.1.00/13.00022
ÚP Cheb (v rámci KV)
x--//--x
x--//--x
143
CZ.1.04/2.1.00/13.00022
ÚP Sokolov (v rámci KV)
x--//--x
x--//--x
192
CZ.1.04/2.1.00/13.00053
ÚŘAD PRÁCE V LIBERCI
39 626 711
800
982
CZ 1.04-2.1.00-03.00001
Úřad práce Příbram
19 500
113
CZ.1.04-2.1.00-03.00001
Úřad práce Ostrava
1 772 350 000 x--//--x
x--//--x
780
CZ.1.04-2.1.00-03.00001
ÚP Ústí nad Labem
x--//--x
x--//--x
50
CZ.1.04-2.1.00-03.00001
ÚP České Budějovice
x--//--x
x--//--x
70
CZ.1.04-2.1.00-03.00001
ÚP Hradec Králové
x--//--x
x--//--x
51
CZ.1.04-2.1.00-03.00001
ÚP Karlovy Vary
x--//--x
x--//--x
30
CZ.1.04-2.1.00-03.00001
ÚP Pardubice
x--//--x
x--//--x
56
CZ.1.04-2.1.00-03.00001
ÚP Brno
x--//--x
x--//--x
50
CZ.1.04-2.1.00-03.00001
ÚP Praha
x--//--x
x--//--x
319
CZ.1.04-2.1.00-03.00003
ÚP Ústí nad Labem
957 200 000
75 000
54
CZ.1.04-2.1.00-03.00003
ÚP Ostrava
x--//--x
x--//--x
100
CZ.1.04-2.1.00-03.00003
ÚP Olomouc
x--//--x
x--//--x
202
CZ.1.04-2.1.00-03.00003
ÚP Brno
x--//--x
x--//--x
95
CZ.1.04-2.1.00-03.00003
ÚP České Budějovice
x--//--x
x--//--x
123
CZ.1.04-2.1.00-03.00003
ÚP Liberec
x--//--x
x--//--x
40
CZ.1.04-2.1.00-03.00003
ÚP Karlovy Vary
x--//--x
x--//--x
22
CZ.1.04-2.1.00-03.00003
ÚP Praha
x--//--x
x--//--x
83
CZ.1.04-2.1.00-03.00003
ÚP Vysočina
x--//--x
x--//--x
50
CZ.1.04-2.1.00-03.00003
ÚP Zlín
x--//--x
x--//--x
197
CZ.1.04-2.1.00-03.00003
ÚP Pardubice
x--//--x
x--//--x
200
CZ.1.04-2.1.00-03.00003
ÚP Hradec Králové
x--//--x
x--//--x
78
CZ.1.04-2.1.00-03.00003
ÚP Zlín
x--//--x
x--//--x
141
95 640
3 141
Celkem podpořených osob
* Jedná se o přesné počty podpořených osob s údaji o datu narození tak, jak byly zaslány jednotlivými úřady práce.
Oblast podpory 2.2 – je jasná, ověřit stávající stav počtu podpořených osob. V tabulkách ROV 2010 byla cílová hodnota „0“! CZ.1.04/2.2.00/11.00001
MINISTERSTVO PRÁCE A SOCIÁLNÍCH VĚCÍ
Oblast podpory 3.1 OP 3.1
0,5-1 mil. Kč 1-2 mil. Kč 2-4 mil. Kč 4-6 mil. Kč 8-32 mil. Kč Celkem
Počet projektů
12 9 15 5 4 45
Počet do vzorku
1 1 1 0 1 4
Výběr projektů 3.1
34
Registrační číslo
KP
CZ.1.04/3.1.03/45.00053
AKLUB Centrum vzdělávání a poradenství Sociální služby Karviná, příspěvková organizace RATOLEST BRNO, občanské sdružení Liberecký kraj
CZ.1.04/3.1.03/22.00060 CZ.1.04/3.1.02/21.00009 CZ.1.04/3.1.00/05.00032
Rozpočet
Ind. 074100
Z toho náhodně vybrat počet podpořených osob
783 413
53
58
1 673 902
52
63
3 403 250
56
30
32 011 419
539
40
700
191
Celkem podpořených osob
Oblast podpory 3.2 V oblasti podpory 3.2 bylo ukončeno 5 projektů, v nichž se podpořilo 2596 osob. Velmi ochotně poskytla údaje obec Obrnice s celkovým počtem podpořených osob 144 (tj. 5,5 % z celkového počtu). Výběr projektů 3.2 Registrační číslo
KP
Rozpočet
CZ.1.04/3.2.01/19.00122
OBEC OBRNICE
Ind. 074100
6 948 276
Celkem podpořených osob
Z toho náhodně vybrat počet podpořených osob 100
144
100
144
Oblast podpory 3.3 OP 3.3
Počet projektů
1-3 mil. Kč 3-5 mil. Kč 5-6 mil. Kč Celkem
5 6 3 14
Počet do vzorku
1 2 0 3
Výběr projektů 3.3 Registrační číslo
KP
CZ.1.04/3.3.05/31.00271
Diakonie ČCE - středisko Vsetín IMPULS TŘEBÍČ
2 004 389
20
5
3 606 552
35
5
Centrom, sdružení
4 590 202
30
5
85
15
CZ.1.04/3.3.05/31.00167 CZ.1.04/3.3.05/31.00275
Rozpočet
občanské
Celkem podpořených osob
Oblast podpory 3.4 OP 3.4
0,8-3 mil. Kč 3-4 mil. Kč 4-5 mil. Kč
Počet projektů
23 18 28
Počet do vzorku
1 1 1
35
Ind. 074100
Z toho náhodně vybrat počet podpořených osob
5-6 mil. Kč Celkem
19 88
2 5
Výběr projektů 3.4 Registrační číslo
KP
CZ.1.04/3.4.04/26.00262
BAZILIKA o.p.s.
1 439 836
100
12*
CZ.1.04/3.4.04/26.00150
Vzdělávací středisko Dany Luňákové s.r.o. EuroProfis, s.r.o.
3 276 506
185
67
4 238 594
200
83*
Centrum pro rodinu a sociální péči o.s. Oblastní charita Ústí nad Labem
5 146 863
473
290*
5 331 532
221
87*
CZ.1.04/3.4.04/26.00253 CZ.1.04/3.4.04/26.00320 CZ.1.04/3.4.04/26.00264
Rozpočet
Celkem podpořených osob
Ind. 074100
Z toho náhodně vybrat počet podpořených osob
1 179 67 * U údajů označených * chybí data narození, proto nejsou ani sčítány do políčka „Celkem podpořených osob“. Dohromady se jedná o 472 osob, u nichž nemáme data narození, a proto jsou pro práci s databázemi ČSSZ nepoužitelné.
36