Vstupní zpráva k veřejné zakázce Evaluace monitorovacích indikátorů v oblasti podpory 4.1 OP LZZ
Leden 2013 AQE advisors, a.s.
1
OBSAH 1. ZÁKLADNÍ PŘÍSTUP K EVALUACI .............................................................................. 3 2. PŘÍSTUP K EVALUACI JEDNOTLIVÝCH INDIKÁTORŮ ........................................ 4 2.1 ROZVOJ HODNOCENÍ DOPADU REGULACE (KÓD 15.32.13) ................................................. 4 2.1.1 Základní přístup k evaluaci indikátoru ...................................................................... 4 2.1.2 Specifikace věcného obsahu definice indikátoru ....................................................... 5 2.1.3 Evaluační otázky a jejich řešení ................................................................................ 5 2.1.4 Výstupy k danému monitorovacímu indikátoru.......................................................... 7 2.2.1 Základní přístup k evaluaci indikátoru ...................................................................... 8 2.2.2 Specifikace věcného obsahu definice indikátoru ....................................................... 8 2.2.3 Evaluační otázky a jejich řešení ................................................................................ 9 2.2.4 Výstupy k danému monitorovacímu indikátoru........................................................ 10 Pro daný monitorovací indikátor budou zpracovány následující výstupy:....................... 10 2.3 ZLEPŠENÍ KVALITY REGULACE (KÓD 15.31.00) ................................................................ 11 2.3.1 Základní přístup k evaluaci indikátoru .................................................................... 11 2.3.2 Specifikace věcného obsahu definice indikátoru ..................................................... 12 2.3.3 Evaluační otázky a jejich řešení .............................................................................. 12 2.3.4 Výstupy k danému monitorovacímu indikátoru........................................................ 13 Pro daný monitorovací indikátor budou zpracovány následující výstupy:....................... 13 2.4 MÍRA ADMINISTRATIVNÍ ZÁTĚŽE KÓD (KÓD 15.37.00)..................................................... 14 2.4.1 Základní přístup k evaluaci indikátoru .................................................................... 14 2.4.2 Specifikace věcného obsahu definice indikátoru ..................................................... 15 2.4.3 Evaluační otázky a jejich řešení .............................................................................. 15 2.4.4 Výstupy k danému monitorovacímu indikátoru........................................................ 16 2.5 ZVÝŠENÍ EFEKTIVNOSTI ÚZEMNÍ VEŘEJNÉ SPRÁVY (KÓD 43.07.01) ................................. 17 2.5.1 Základní přístup k evaluaci indikátoru .................................................................... 17 2.5.2 Specifikace věcného obsahu definice indikátoru ..................................................... 17 2.5.3 Evaluační otázky a jejich řešení .............................................................................. 18 2.5.4 Výstupy k danému monitorovacímu indikátoru........................................................ 19 3. PODROBNÝ HARMONOGRAM REALIZACE EVALUACE ................................... 20 4. REALIZAČNÍ TÝM A JEHO ZAPOJENÍ DO EVALUACE....................................... 22
2
1. Základní přístup k evaluaci V následujícím přehledu je uveden základní přístup k evaluaci jednotlivých indikátorů, který je následně v podobě strukturovaných tabulek rozpracován postup evaluace pro jednotlivé včetně evaluačních a metodických otázek pro jednotlivé indikátory, zdrojů dat a způsobu jejich sběru. Struktura následující kapitoly bude tak pro každý monitorovací indikátor zahrnovat: • základní přístup k evaluaci indikátoru • specifikace věcného obsahu definice indikátoru (detailní popis pochopení obsahu definice indikátoru a míra jeho vazby na PO 4 OP LZZ) • evaluační otázky a jejich řešení (navrhované metody, předpokládaný rozsah šetření, navrhované datové zdroje k získání informací) • výstupy k danému monitorovacímu indikátoru V rámci jednotlivých podkapitol věnovaných jednotlivým indikátorů, jsou pak k jednotlivým evaluačním či metodickým otázkám a úkolům přiřazeny zdroje dat a informací s tím, že pro některé otázky a úkoly jsou určité zdroje dat společné. Současně jsou uvedeny instrumenty sběru těchto informací a dat včetně jejich specifikace (například vymezení skupiny respondentů v rámci dotazníkového šetření). Obecně pak bude pro jednotlivé evaluační otázky v rámci Evaluační zprávy II. významným zdrojem dat Evaluační zpráva č. I a dílčí výstupy analýz v ní uvedených (zejména pak v rovině komparace vývoje za sledované období). U jednotlivých monitorovacích indikátorů bude relevantně zohledněn vliv projektů OP LZZ v oblasti podpory 4.1 na hodnotu sledovaného indikátoru, a to zejména prostřednictvím využití evaluačních metod vždy na relevantním vzorku (projekty OP LZZ v oblasti podpory, příjemci, resorty s nejvyšším objemem dokumentace podléhajícím RIA, atd.). V rámci specifikace věcného obsahu indikátoru je posouzena i míra vlivu projektů v oblasti podpory 4.1 OP LZZ na jednotlivé monitorovací indikátory. Významnou součástí evaluace budou i metodické otázky týkající se jednotlivých indikátorů, které mají za cíl specifikaci dílčích aspektů věcného obsahu monitorovacích indikátorů. Přehled metodických otázek týkajících se věcného obsahu jednotlivých indikátorů ve vazbě na jejich definici je uveden v rámci specifikace věcného obsahu definice indikátoru.
3
2. Přístup k evaluaci jednotlivých indikátorů 2.1 Rozvoj hodnocení dopadu regulace (kód 15.32.13) 2.1.1 Základní přístup k evaluaci indikátoru Indikátor s měrnou jednotkou %, kde cílová hodnota je stanovena ve výši 100%. Výchozí hodnota indikátoru bude stanovena na základně jednotlivých analýz, procesů či evaluačních rozhovorů s odpovědnými osobami na jednotlivých orgánech ústřední státní správy, které provádějí RIA (s akcentem na resorty, ve kterých vzniká nejvíce předpisů Ministerstvo financí, Ministerstvo vnitra, Ministerstvo průmyslu a obchodu, Ministerstvo práce a sociálních věcí, Ministerstvo zdravotnictví). Vzorek pro kvalitativní analýzu bude zahrnovat minimálně 2-3 náhodně zvolené materiály, které prošly procesem RIA, v případě resortů s významným objemem předpisů pak 3-4 materiály. Členové realizačního týmu v rámci získání hodnot pro tento indikátor provedou analýzu dokumentů, které se vážou k problematice RIA ve výchozím roce (legislativní prameny, procesní metodiky, apod.), analýzu vzorku nejméně 25 % právních předpisů schválených vládou v referenčním období s ověřením skutečnosti, zda u nich byla povinnost provést RIA a případně v jakém rozsahu (zda byla formálně provedena v souladu s pravidly tzv. „malá“ x „velká“ RIA). Přehled použitých metod a datových zdrojů: Specifikace použitých metod • Analýza dokumentů vážících se k problematice RIA ve výchozím roce (legislativní prameny, procesní metodiky, apod.) • Analýza vzorku nejméně 25 % právních předpisů schválených vládou v referenčním období s ověřením skutečnosti, zda u nich byla povinnost provést RIA a případně v jakém rozsahu (zda byla formálně provedena v souladu s pravidly tzv. „malá“ x „velká“ RIA) • Statistická analýza podílu právních předpisů schválených vládou za výchozí rok, u kterých baly provedena RIA • Komparativní analýza na základě analýzy dostupných dat – jednak mezi jednotlivými resorty, tak i v rámci celého vzorku RIA • Evaluační rozhovory se zástupci resortů (ministerstev) – identifikace postupů a procesů používaných k realizaci RIA ve výchozím roce • Evaluační rozhovory se zástupci Pracovní komise Legislativní rady vlády pro hodnocení dopadů regulace • Případová studie best practices v oblasti provádění RIA¨ • Fokusní skupina1 • Delphi panel 1
Datové zdroje •
• •
• •
•
Analýzy, studie, evaluace a metodiky v oblasti hodnocení dopadu regulace Data ze systému eKLEP Informace a data z jednotlivých resortů a Grémia pro reformu a regulaci ve veřejné správě Vzorek RIA Informace získané v rámci evaluačních rozhovorů od zástupců resortů odpovědných za RIA Podklady pro stanovení výchozí hodnoty monitorovacího indikátoru Zlepšení kvality regulace
Bude uspořádána jedna společná fokusní skupina pro tento monitorovací indikátor a monitorovací indikátory Zveřejňování formou dálkového přístupu (kód 15.36.00) a Zlepšení kvality regulace (kód 15.31.00).
4
Návrh složení společné fokusní skupiny: • 4-5 zaměstnanců odborů jednotlivých resortů (ministerstev) s akcentem na resorty, ve kterých vzniká největší objem dokumentů podléhajících RIA2 • 1-2 zástupci Pracovní komise Legislativní rady vlády pro hodnocení dopadů regulace • 1-2 zástupců vědeckých či vysokoškolských institucí, které se zabývají problematikou regulace Návrh oslovení respondentů pro evaluační rozhovory: • Zástupci resortů odpovědných za zpracování RIA • Zástupci Pracovní komise Legislativní rady vlády pro hodnocení dopadů regulace • Zástupci Grémia pro reformu a regulaci ve veřejné správě • Zástupci příjemců projektů zaměřených na rozvoj hodnocení dopadu regulace
2.1.2 Specifikace věcného obsahu definice indikátoru Monitorovací indikátor je definován jako „Podíl právních předpisů schválených vládou, u kterých byla provedena RIA“. Věcná specifikace indikátoru bude reflektovat skutečnost, že se hodnota indikátoru musí týkat pouze relevantních právních úkonů, u kterých lze RIA provádět, tj. cílová hodnota indikátoru (100%) nebude vyjadřovat „všechny právní úkony“, ale pouze relevantní právní úkony, u kterých lze RIA provádět. Pro specifikaci věcného obsahu definice tohoto monitorovacího indikátoru je zařazena následující metodická otázka: • Jaké rezorty zahrnete do šetření a jak zjistíte, zda byla RIA provedena? Vazba monitorovacího indikátoru na oblast podpory 4.1 OP LZZ bude dle prvotní analýzy relativně slabší (stejně jako v případě dalších dvou indikátorů souvisejících s RIA) a bude zohledněna výběrem resortů pro analýzy na základě analýzy projektů jednotlivých resortů v rámci výzev č. 32, 59, 62, 64 a pro další fázi evaluace projekty v rámci výzvy 983.
2.1.3 Evaluační otázky a jejich řešení Evaluační / Indikátor metodická otázka či úkol Rozvoj hodnocení Jaké rezorty zahrnete dopadu regulace do šetření a jak (kód 153213) zjistíte, zda byla RIA provedena? podíl právních
Zdroj(e) dat a informací •
2
Data ze systému eKLEP - Počty dokumentů, u kterých byla
Instrument(y) pro sběr dat a informací • Desk research informací ze systému eKLEP a informací
Výběr účastníků fokusní skupiny bude závislý na výsledcích analýzy objemu a rozsahu dokumentace podléhající RIA, proto na úrovni vstupní zprávy nejsou uvedeny konkrétní odbory. 3 S ohledem na skutečnost, že plánovaný harmonogram projektu „Vytvoření podmínek pro systematické zkvalitňování procesu hodnocení dopadů regulace (RIA)“, který je přímo na zefektivnění RIA ve více aspektech pokryt, je do 16. 9. 2014, bude vazba tohoto indikátoru na oblast podpory 4.1 OP LZZ významně precizněji posouzena v rámci druhé fázi evaluace.
5
Indikátor předpisů schválených vládou, u kterých byla provedena RIA
Evaluační / metodická otázka či úkol
Zdroj(e) dat a informací provedena RIA •
Vyhodnoťte způsob provádění RIA na jednotlivých rezortech v rámci důvodové zprávy, kdy RIA je součástí důvodové zprávy u vzniku každého zákona
•
•
•
Proveďte komparaci provádění RIA na jednotlivých resortech včetně identifikace příkladů dobré a špatné praxe
•
•
• • Jak pomoci k zefektivnění procesu RIA?
•
•
4
Data ze systému eKLEP Vzorek dokumentů, u kterých byla provedena RIA4 Informace od Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace Vzorek dokumentů, u kterých byla provedena RIA Informace od zástupců relevantních resortů provádějících RIA Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace Výstupy předchozích analýz Výstupy evaluačních rozhovorů a fokusní skupiny Informace o postupu realizace RIA v jiných zemích Informace od Pracovní komise
Instrument(y) pro sběr dat a informací poskytnutých jednotlivými resorty • •
•
•
•
•
Oslovení resortů, které provádějí RIA Evaluační rozhovory se zástupci Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace Evaluační rozhovory se zástupci resortů, případně fokusní skupina Evaluační rozhovory se zástupci Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace Analýza realizace procesu RIA a obdobných v zahraničí Evaluační rozhovory se zástupci Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace
Vzorek pro kvalitativní analýzu bude zahrnovat minimálně 2-3 náhodně zvolené materiály, které prošly procesem RIA, v případě resortů s významným objemem předpisů pak 3-4 materiály
6
Indikátor
Evaluační / metodická otázka či úkol
Zdroj(e) dat a informací
• Existují resorty (subjekty) s nedostatečným podílem provádění RIA? Pokud ano, jaká přijmout opatření k zefektivnění podílu RIA?
•
•
Legislativní rady vlády pro hodnocení dopadů regulace Přehled dokumentů, u kterých byla provedena – data ze systému eKLEP Informace od Pracovní komise Legislativní rady vlády pro hodnocení dopadů regulace Výstupy předchozích analýz
Instrument(y) pro sběr dat a informací
• • •
Desk research Syntéza výstupů předchozích analýz Evaluační rozhovory se zástupci Pracovní komisi Legislativní rady vlády pro hodnocení dopadů regulace
2.1.4 Výstupy k danému monitorovacímu indikátoru Pro daný monitorovací indikátor budou zpracovány následující výstupy: Kvalitativní výstup(y) Kvantitativní výstup(y)
Popis procesu provádění RIA při schvalování předpisů Případové studie best practices v oblasti provádění RIA Hodnota indikátoru v % k 31.12.2012 Hodnota indikátoru v % k 31.12.2013
7
2.2 Zveřejňování formou dálkového přístupu (kód 15.36.00) 2.2.1 Základní přístup k evaluaci indikátoru Indikátor s měrnou jednotkou %, kde cílová hodnota je stanovena na 90%. Pro získání výchozí hodnoty indikátoru bude provedena analýza dat získaných v rámci nastavení výchozí hodnoty monitorovacího indikátoru Rozvoj hodnocení dopadu regulace. Jako referenční datum bude stanoveno 1. 7. 2010 s ohledem zahájení opětovné koordinované vykonávání RIA od tohoto data. Dále bude provedena statistická analýza vzorku RIA – určení podílu provedených RIA, které byly zveřejněné formou dálkového přístupu a také analýza procesu přípravy RIA. Pro oba tyto pohledy budou použita data ze systému eKLEP a informace od jednotlivých resortů, které nejvíce aplikují provádění RIA. Dále pak bude využívána komparativní analýza na základě analýz dostupných dat – jednak mezi jednotlivými resorty, tak i v rámci celého vzorku RIA. Následovat budou evaluační rozhovory se zástupci resortů (ministerstev). Realizační tým bude postupovat obdobně jako při sledování hodnot indikátorů 15.32.13, 15.31.00 a 15.36.00, kdy díky provázanosti těchto indikátorů je možné vycházet ze stejných zdrojů a aplikovat evaluační metody výše uvedené. Přehled použitých metod a datových zdrojů: Specifikace použitých metod • Analýza dat získaných v rámci nastavení výchozí hodnoty monitorovacího indikátoru Rozvoj hodnocení dopadu regulace • Statistická analýza vzorku RIA – určení podílu provedených RIA, které byly zveřejněné formou dálkového přístupu • Komparativní analýza na základě analýzy dostupných dat – jednak mezi jednotlivými resorty, tak i v rámci celého vzorku RIA • Evaluační rozhovory se zástupci resortů (ministerstev) • Dotazníkové šetření zástupců zainteresovaných stran5 • Fokusní skupina • Delphi panel
Datové zdroje • •
• • •
Analýzy, studie, evaluace a metodiky v oblasti zajištění dálkového přístupu u RIA Vzorek ukončených RIA, které byly součástí zveřejněné důvodové zprávy vlády z hlediska zveřejnění formou dálkového přístupu Postupy při zveřejňování RIA Data o počtu RIA zveřejněných formou dálkového přístupu Výstupy z evaluačních rozhovorů a dotazníkového šetření
Návrh oslovení respondentů pro evaluační rozhovory: • Zástupci resortů odpovědných za zpracování RIA
2.2.2 Specifikace věcného obsahu definice indikátoru Monitorovací indikátor je definován jako „Podíl provedených RIA zveřejněných formou dálkového přístupu (umožňující přístup všech zainteresovaných stran)“.
5
Zde bude skupina respondentů zvolena v návaznosti na strukturu dokumentace podléhající RIA -
8
Pro specifikaci věcného obsahu definice tohoto monitorovacího indikátoru je zařazena následující metodická otázka: • Jak definujete dálkový přístup pro všechny zainteresované strany? Při řešení této metodické otázky bude evaluátor vycházet z různých definic dálkového přístupu s akcentem na legislativní vymezení dálkového přístupu a komparace přístupu jednotlivých resortů k dálkovému přístupu. V souladu s tím chápe evaluátor dálkový přístup v rozšířené podobě, tedy nejen v Knihovně připravované legislativy Úřadu vlády (http://eklep.vlada.cz), ale také na Portálu veřejné správy (http://portal.gov.cz), což je v souladu se zákonem č. 106/1999 Sb., o svobodném přístupu k informacím, v platném znění a také Obecnými zásadami pro hodnocení dopadů regulace (RIA) schválené usnesením vlády č. 877/2007. V takovém případě lze RIA skutečně považovat za zveřejněnou formou dálkového přístupu tak, aby umožňovala přístup všech zainteresovaných stran. Co se týče vymezení termínu zainteresované strany, evaluátor bude vycházet z rozšířené definice, kdy kromě dalších resortů zařazuje mezi zainteresované strany též další subjekty, na které bude mít daný předpis dopad, přičemž vymezení zinteresovaných stran bude vždy odvislé od konkrétního právního předpisu. Obecně pak lze mezi zainteresované strany zařadit profesní sdružení a asociace, podnikatelské subjekty, subjekty státní správy či samosprávy V nejširší definici pak zainteresované strany zahrnují i veřejnost, ať už odbornou, tak i širokou veřejnost. Vazba monitorovacího indikátoru na oblast podpory 4.1 OP LZZ bude dle prvotní analýzy relativně slabší (stejně jako v případě dalších dvou indikátorů souvisejících s RIA) i s ohledem na skutečnost, že indikátor se týká pouze jednoho aspektu regulace – dálkového přístupu v rámci procesu RIA. Primární vazba indikátoru na oblast podpory 4.1 OP LZZ je v rovině projektů výzvy č. 98, částečně pak dalších systémových projektů ústředních orgánů státní správy.
2.2.3 Evaluační otázky a jejich řešení Indikátor Zveřejňování formou dálkového přístupu (kód 153600) - podíl provedených RIA zveřejněných formou dálkového přístupu
Evaluační / metodická otázka či úkol
Zdroj(e) dat a informací •
Jak definujete dálkový přístup pro všechny zainteresované strany? •
9
Dokumentace týkající se dálkového přístupu v rámci procesu RIA (legislativní, procesní dokumentace) Informace od zástupců resortů
Instrument(y) pro sběr dat a informací
• •
Desk research Evaluační rozhovory se zástupci resortů
Indikátor (umožňující přístup všech zainteresovaných stran)
Evaluační / metodická otázka či úkol Analyzujte již ukončené RIA, které byly součástí zveřejněné důvodové zprávy vlády.
Zdroj(e) dat a informací • •
• Zhodnoťte přístup zainteresovaných subjektů a cílových skupin k přípravě regulace a jejich možnost konzultovat a zapojovat se do koncipování regulace a být součástí RIA
• •
Vyhodnoťte stávající postup uplatňovaný pro zveřejňování formou dálkového přístupu v prostředí ústřední státní správy • Na základě vytvořené metodiky vypočtěte • hodnotu indikátoru k 31. 12. 2012 a 31. 12. 2013
Data ze systému eKLEP Vzorek dokumentů, u kterých byla provedena RIA Dokumentace týkající se zapojení dalších subjketů a cílových skupin do procesu RIA (legislativní, procesní dokumentace) Informace od zástupců resortů Dokumentace týkající se dálkového přístupu v rámci procesu RIA (legislativní, procesní dokumentace) Informace od zástupců resortů Výstupy předchozích analýz
Instrument(y) pro sběr dat a informací
•
Desk research
•
Procesní analýza procesu RIA Evaluační rozhovory / Fokusní skupina
•
• •
Desk research Evaluační rozhovory
•
Syntéza výstupů předchozích analýz
2.2.4 Výstupy k danému monitorovacímu indikátoru Pro daný monitorovací indikátor budou zpracovány následující výstupy: Definice dálkového přístupu a zainteresovaných stran Kvalitativní výstup(y) Hodnota indikátoru v % k 31.12.2012 Kvantitativní výstup(y) Hodnota indikátoru v % k 31.12.2013
10
2.3 Zlepšení kvality regulace (kód 15.31.00) 2.3.1 Základní přístup k evaluaci indikátoru Měrná jednotka indikátoru je uvedena v %, výchozí hodnota tohoto indikátoru je 0, cílová a dosažená hodnota není stanovena. Použité metody tohoto indikátoru budou: analýza dat o kvalitě regulace v ústřední státní správě (zejména www stránky MVČR věnované RIA, stránky eKLEP (eklep.vlada.cz) včetně zahraničních informačních zdrojů týkajících se problematiky RIA (např. Better Regulation – iniciativa pro lepší regulaci), stránky jednotlivých resortů, komparativní analýza na základě analýzy dostupných dat – jednak mezi jednotlivými resorty, tak i v rámci celého vzorku RIA. Pro další měření budou následovat evaluační rozhovory se zástupci relevantních resortů a fokusní skupina nad návrhem výchozí hodnoty tohoto monitorovacího indikátoru Členové realizačního týmu pro zjištění cílové a dosažené hodnoty využijí dostupné dokumentace související s problematikou regulace v ústřední správě (analýzy, studie, metodiky), data ze systému eKLEP, procesní dokumentace RIA, informace a data poskytnutá jednotlivými resorty, výstupy evaluačních rozhovorů, fokusních skupin a případové studie ze zahraničí. Přehled použitých metod a datových zdrojů: Specifikace použitých metod • Analýza dat o kvalitě regulace v ústřední státní správě (zejména www stránky MVČR věnované RIA, stránky eKLEP (eklep.vlada.cz) včetně zahraničních informačních zdrojů týkajících se problematiky RIA (např. Better Regulation – iniciativa pro lepší regulaci), stránky jednotlivých resortů • Komparativní analýza na základě analýzy dostupných dat a vzorku – jednak mezi jednotlivými resorty, tak i v rámci celého vzorku RIA6 • Evaluační rozhovory se zástupci relevantních resortů • Zpracování případových studií ze zahraničí (2 případové studie zaměřené na příklady dobré praxe v oblasti řízení kvality regulace v ústřední státní správě), jejichž součástí bude i benchmarking příklady nejlepší praxe v oblasti zlepšování kvality regulace 7 • Delphi panel
Datové zdroje •
• • • • •
Dokumentace související s problematikou regulace v ústřední správě (analýzy, studie, metodiky) Data ze systému eKLEP Procesní dokumentace RIA Informace a data poskytnutá jednotlivými resorty Výstupy evaluačních rozhovorů Případové studie ze zahraničí včetně benchmarkingu
Návrh oslovení respondentů pro evaluační rozhovory: • Zástupci resortů odpovědných za zpracování RIA • Zástupci příjemců projektů zaměřených na zlepšení kvality regulace
6
Komparační analýza se zaměří jednak na komparaci objemu dokumentů podléhajících RIA i jejich rozsahu, tak i na porovnání postupů a procesů při realizaci RIA s akcentem na identifikaci příkladů dobré a špatné praxe. 7 Evaluátor předpokládá zpracování případových studií z Německa a vybrané severské země.
11
2.3.2 Specifikace věcného obsahu definice indikátoru Monitorovací indikátor je definován jako „Vytvoření fungujícího systému řízení kvality regulace na úrovni ústřední státní správy“. Pro specifikaci věcného obsahu definice tohoto monitorovacího indikátoru je zařazena následující metodická otázka: • Pro stanovení dosažené hodnoty monitorovacího indikátoru určete resorty, kde vzniká většina legislativy podléhající RIA a zhodnoťte jejich specifika Vazba monitorovacího indikátoru na oblast podpory 4.1 OP LZZ bude dle prvotní analýzy relativně slabší a bude primárně na úrovni projektů výzvy č. 98, která je přímo zaměřená na zlepšení kvality regulace (název výzvy: „Výzva pro předkládání IP 4.1 – Podpora koordinovaného přístupu v oblasti regulace a využívání ICT ve veřejné správě).
2.3.3 Evaluační otázky a jejich řešení Evaluační / metodická otázka či úkol Proveďte analýzu vývoje a stávajících procesů vytváření systému řízení kvality regulace na ústřední státní správě v ČR. Pro stanovení dosažené hodnoty monitorovacího indikátoru určete resorty, kde vzniká většina legislativy podléhající RIA a zhodnoťte jejich specifika Identifikujte procesy k zlepšení kvality regulace, především přezkoumávání a zjednodušování regulace a nastavení kontrolních mechanismů k zajištění správného směřování procesů. Definujte postupy a procesy pro zvýšení 8
Zdroj(e) dat a informací •
•
• •
• • •
•
Dokumentace související s problematikou regulace v ústřední správě (analýzy, studie, metodiky) Data ze systému eKLEP8
Data ze systému eKLEP data o objemu legislativy podléhající RIA Vzorek dokumentů, u kterých byla provedena RIA za jednotlivé resorty
Procesní dokumentace týkající se RIA Informace od zástupců resortů Výstupy předchozích analýz
Informace od zástupců resortů
Instrument(y) pro sběr dat a informací
• •
Desk research Oslovení resortů s žádostí o poskytnutí dokumentace
•
Dotazníkové šetření v rámci resortů Evaluační rozhovory se zástupci jednotlivých resortů
•
• • •
•
Přístup do systému eKLEP bude zajištěn v součinnosti se zadavatelem
12
Oslovení resortů s žádostí o poskytnutí dokumentace Evaluační rozhovory se zástupci jednotlivých resortů Syntéza výstupů předchozích analýz Evaluační rozhovory se zástupci resortů, případně
Evaluační / metodická otázka či úkol kvality regulace v rámci ústřední státní správy v ČR
Zdroj(e) dat a informací •
Výstupy předchozích analýz
Instrument(y) pro sběr dat a informací •
fokusní skupina Syntéza výstupů předchozích analýz
2.3.4 Výstupy k danému monitorovacímu indikátoru Pro daný monitorovací indikátor budou zpracovány následující výstupy:
Kvalitativní výstup(y)
Kvantitativní výstup(y)
Hodnotící studie kvality regulace k 31.12.2012 Hodnotící studie kvality regulace k 31.12.2013 obsahující porovnání zlepšení za období 2012-2013 Případové studie – příklady dobré praxe v oblasti řízení kvality regulace v ústřední státní správě včetně benchmarkingu (příklady nejlepší praxe v oblasti zlepšování kvality regulace z ČR i zahraničí s akcentem na resorty s velkým objemem vznikající legislativy) Komparační analýza resortů, kde vzniká stěžejní objem legislativy podléhající RIA Hodnota indikátoru v % jako součást hodnotící studie k 31.12.2012 Hodnota indikátoru v % jako součást hodnotící studie k 31.12.2013
13
2.4 Míra administrativní zátěže kód (kód 15.37.00) 2.4.1 Základní přístup k evaluaci indikátoru Měrnou jednotku tohoto indikátoru jsou %, výchozí hodnota indikátoru je 0. Pro zjištění dosažené hodnoty bude probíhat statistická a kontingenční analýza dat – analýza počtu úředníků ve vazbě na rozpočty samosprávných celků a jejich kompetence, provedení analýzy na vzorku životních situací - délka trvání jednotlivých situací ve výchozím roce, komparativní analýza – srovnání délky trvání jednotlivých životních situací mezi jednotlivými typy subjektů územní veřejné správy (ORP, statutární města, městské části), včetně komparace statistických charakteristik jednotlivých životních situací, terénní dotazníkové šetření mezi uživateli veřejných služeb na vzorku klientů služeb veřejné správy ve vazbě na vybraný vzorek, tedy 15 životních situací. Následovat budou evaluační rozhovory s vybranými zástupci veřejné správy. Členové realizačního týmu budou v rámci zjišťování hodnot provádět analýzy, studie, evaluace a metodiky v oblasti měření administrativní zátěže, portfolio životních situací a procesní analýzu jednotlivých životních situací. Pro kvalitní výstupy budou sloužit informace z dotazníkového šetření mezi klienty veřejných služeb a výstupy evaluačních rozhovorů zaměřených na téma měření administrativní zátěže. Přehled použitých metod a datových zdrojů: Specifikace použitých metod • Statistická a kontingenční analýza dat – analýza počtu úředníků ve vazbě na rozpočty samosprávných celků a jejich kompetence • Provedení analýzy na vzorku životních situací délka trvání jednotlivých situací ve výchozím roce včetně zpracování komplexního procesního modelu pro portfolio životních situací9 • Komparativní analýza – srovnání délky trvání jednotlivých životních situací mezi jednotlivými typy subjektů územní veřejné správy (ORP, statutární města, městské části) včetně komparace statistických charakteristik jednotlivých životních situací • Terénní dotazníkové šetření mezi uživateli veřejných služeb na vzorku klientů služeb veřejné správy ve vazbě na vybraný vzorek 15 životních situací10 • Evaluační rozhovory s vybranými zástupci veřejné správy • Delphi panel
9
Datové zdroje •
•
•
•
Analýzy, studie, evaluace a metodiky v oblasti měření administrativní zátěže Portfolio životních situací a procesní popisy jednotlivých životních situací Informace z dotazníkového šetření mezi klienty veřejných služeb Výstupy evaluačních rozhovorů na téma měření administrativní zátěže
Životní situace budou zvoleny tak, aby korespondovaly se zaměřením projektů v oblasti podpory 4.1 OP LZZ zejména na úrovni územní samosprávy. 10 Evaluátor pro přípravu metodiky stanovení výchozí hodnoty a dosažené hodnoty tohoto indikátoru využije již existující metodiky měření spokojenosti a administrativní zátěže využívané v podnikatelském sektoru, jakož i zahraniční metodologie pro měření snižování administrativní zátěže jak na straně úřadů, tak i uživatelů veřejných služeb.
14
Návrh respondentů pro evaluační rozhovory: Zástupci veřejné správy – subjektů, které jsou současně příjemci v rámci projektů oblasti podpory 4.1 OP LZZ v členění: • Ústřední orgány státní správy • Kraje • Statutární města • Obce s rozšířenou působností • Další města a obce
2.4.2 Specifikace věcného obsahu definice indikátoru Monitorovací indikátor je definován jako „% snížení administrativní zátěže“. Pro specifikaci věcného obsahu definice tohoto monitorovacího indikátoru je zařazena následující metodická otázka: • Jak zajistíte, aby se životní situace vztahovaly k Prioritní ose 4? Vazba monitorovacího indikátoru na oblast podpory 4.1 OP LZZ je poměrně vysoká, projekty zaměřené na snížení administrativní zátěže identifikoval evaluátor v rámci následujících výzev: • 27 (systémové projekty MV ČR a jeho útvarů) • 42 (projekty krajů) • 48 (projekty subjektů ústřední státní správy a jimi zřizovaných organizací) • 53 (projekty územní správy – města o obce) • 59 (projekty subjektů ústřední státní správy a jimi zřizovaných organizací) • 62 (systémové projekty subjektů státní správy i samosprávy) • 64 (systémové projekty na podporu koordinace a implementace strategie Smart Administration) • 89 (projekty územní správy – města o obce) Životní situace budou zvoleny i s ohledem na to, jak mohly být ovlivněny projekty v oblasti podpory 4.1 OP LZZ, u kterých byli příjemci subjekty ústřední státní správy a samosprávy.
2.4.3 Evaluační otázky a jejich řešení Evaluační / metodická otázka či Zdroj(e) dat a informací úkol Které životní situace jsou z hlediska jejich • Informace o frekvenci výskytu nejčastější a životních situací od nejvýznamnější zástupců veřejné správy a z pohledu míry uživatelů služeb administrativní zátěže? Jak zajistíte, aby se • Informace o projektech životní situace uložené v IS Monit vztahovaly k Prioritní • Informace poskytnuté ose 4? příjemci v rámci 15
Instrument(y) pro sběr dat a informací
• •
Desk research Dotazníkové šetření mezi zástupci veřejné správy
•
Poskytnutí informací o projektech ze strany zadavatele Dotazníkové šetření
•
Evaluační / metodická otázka či úkol
Zdroj(e) dat a informací dotazníkového šetření a evaluačních rozhovorů
Vytvořte portfolio 15 typických životních situací občana při setkávání s veřejnou • správou a vyhodnoťte míru zátěže v každé životní situaci dle vlastní vytvořené metodologie Analyzujte vliv a • souvislost zlepšování kvality regulace.
Dokumentace k životním situacím (legislativa, interní předpisy, procesní postupy)
Výstupy předchozích analýz
Instrument(y) pro sběr dat a informací •
Evaluační rozhovory
•
Evaluační rozhovory se zástupci veřejné správy Dotazníkové šetření uživatelů služeb
•
•
Syntéza výstupů předchozích analýz
2.4.4 Výstupy k danému monitorovacímu indikátoru Pro daný monitorovací indikátor budou zpracovány následující výstupy: Hodnotící studie portfolia 15 životních situací a evaluace míry administrativní zátěže ke každé z nich k 31.12.2012 Hodnotící studie portfolia 15 životních situací a evaluace Kvalitativní výstup(y) míry administrativní zátěže ke každé z nich k 31.12.2013 obsahující porovnání snížení zátěže za období 2012-2013 Komplexní procesní model pro portfolio životních situací. Hodnota indikátoru v % jako součást hodnotící studie k 31.12.2012 Kvantitativní výstup(y) Hodnota indikátoru v % jako součást hodnotící studie k 31.12.2013
16
2.5 Zvýšení efektivnosti územní veřejné správy (kód 43.07.01) 2.5.1 Základní přístup k evaluaci indikátoru Nastavení výchozí, dosažené a cílové hodnoty bude provedeno na základě samostatné evaluační studie. Nastavení hodnot tohoto indikátoru bude provázáno s indikátorem 15.37.00. Přehled použitých metod a datových zdrojů: Specifikace použitých metod • Kvalitativní analýza životních situací na základě vymezeného portfolia životních situací – v návaznosti na vymezení vzorku životních situací bude provedena jejich důkladná analýza z kvalitativního hlediska • Procesní analýza vybraného vzorku samosprávných činností • Statistická analýza dat – průměrná doba řešení jednotlivých životních situací v prostředí veřejné správy • Statistická a kontingenční analýza dat – analýza počtu úředníků ve vazbě na rozpočty samosprávných celků a jejich kompetence • Evaluační rozhovory s vybranými zaměstnanci veřejné správy na téma efektivnosti veřejné správy a jejího zvyšování • Terénní dotazníkové šetření mezi uživateli veřejných služeb na vzorku klientů služeb veřejné správy ve vazbě na vybraný vzorek 15 životních situací – kvalitativní pohled • Delphi panel
Datové zdroje •
•
•
•
Analýzy, studie, evaluace a metodiky v oblasti měření efektivnosti veřejné zprávy Portfolio životních situací a procesní popisy jednotlivých životních situací Informace z dotazníkového šetření mezi klienty veřejných služeb Výstupy evaluačních rozhovorů na téma měření administrativní zátěže
Návrh respondentů pro evaluační rozhovory: Zástupci územní samosprávy – subjektů, které jsou současně příjemci v rámci projektů oblasti podpory 4.1 OP LZZ v členění: • Kraje • Statutární města • Obce s rozšířenou působností • Další města a obce
2.5.2 Specifikace věcného obsahu definice indikátoru Věcný obsah monitorovacího indikátoru není definován, přičemž v rámci vymezení tohoto indikátoru je uvedenou pouze „vyhodnocení na základě evaluačních studií“. Pro specifikaci věcného obsahu definice tohoto monitorovacího indikátoru je zařazena následující metodická otázka: • Definujte, která samosprávné činnosti jsou vykonávány v rámci přenesené působnosti, a zhodnoťte kvalitu poskytovaných služeb. • Jaké subjekty územní správu zahrnete? 17
•
Jaké samosprávné činnosti v rámci přenesené působnosti budou zahrnuty?
Vazba monitorovacího indikátoru na oblast podpory 4.1 OP LZZ je stejně jako u předchozího poměrně vysoká, projekty zaměřené na snížení administrativní zátěže identifikoval evaluátor v rámci následujících výzev: • 42 (projekty krajů) • 53 (projekty územní správy – města o obce) • 89 (projekty územní správy – města o obce)
2.5.3 Evaluační otázky a jejich řešení Evaluační / metodická otázka či úkol Jaké subjekty územní správy zahrnete?11
Zdroj(e) dat a informací • •
Jaké samosprávné činnosti v rámci přenesené působnosti budou zahrnuty?
•
• Využijte metodiku, data a výstupy z předcházejícího měření administrativní zátěže na konkrétních • životních situacích a • vyhodnoťte je z kvalitativního hlediska Určete z kvalitativního a
•
Relevantní projekty ve vazbě na OP LZZ 4.1 Dokumentace týkající se samosprávných činností v rámci přenesené působnosti (legislativa, interní předpisy, procesní postupy) Subjekty územní veřejné správy s relevantními projekty ve vazbě na OP LZZ 4.1 Výstupy předchozích analýz týkající se administrativní zátěže s vazbou na územní veřejnou správu Uživatelé veřejných služeb Zástupci poskytovatelů veřejných služeb – příjemci u projektů na zefektivnění veřejných služeb Výstupy předchozích analýz týkající se snížení
11
Instrument(y) pro sběr dat a informací •
Desk research – analýza projektů
• •
Desk research Dotazníkové šetření
• •
Syntéza předchozích analýz Dotazníkové šetření mezi uživateli veřejných služeb Dotazníkové šetření mezi zástupci poskytovatelů veřejných služeb – příjemci u projektů na zefektivnění veřejných služeb Evaluační rozhovory se zástupci poskytovatelů veřejných služeb – příjemci u projektů na zefektivnění veřejných služeb
•
•
•
Syntéza předchozích analýz
Na základě prvotní analýzy projektů předpokládá evaluátor zahrnutí následujících typů subjektů územní správy: • Kraje • Statutární města • Obce s rozšířenou působností • Ostatní obce S přičemž mezi těmito typy subjektů bude provedena i komparační analýza.
18
Evaluační / metodická otázka či úkol kvantitativního hlediska efektivitu územní správy Definujte, která samosprávné činnosti jsou vykonávány v rámci přenesené působnosti, a zhodnoťte kvalitu poskytovaných služeb.
Zdroj(e) dat a informací administrativní zátěže a efektivity veřejné správy •
•
• Posuďte efektivitu práce územní veřejné správy – počet úředníků vzhledem k rozpočtu a kompetencím Jaká opatření lze uplatnit k efektivnímu snížení míry administrativní zátěže, která zajistí současně měřitelnost tohoto snížení?
Instrument(y) pro sběr dat a informací
• •
•
Legislativa týkající se samosprávných činností vykonávaných v rámci přenesené působnosti Informace o spokojenosti s kvalitou poskytovaných služeb
• • •
Desk research Dotazníkové šetření uživatelů veřejných služeb Dotazníkové šetření subjektů územní veřejné správy
Statistiky počtu úředníků v rámci územní veřejné správy Přehledy rozpočtů subjektů územní samosprávy Dokumentace vymezující kompetence úředníků územní samosprávy
•
Desk research
Výstupy předchozích analýz týkající se snížení administrativní zátěže a efektivity veřejné správy
•
Syntéza předchozích analýz
2.5.4 Výstupy k danému monitorovacímu indikátoru Pro daný monitorovací indikátor budou zpracovány následující výstupy: Kvalitativní výstup(y) Kvantitativní výstup(y)
Evaluační studie za období k 31.12.2013 -
19
3. Podrobný harmonogram realizace evaluace Harmonogram realizace je pro první fázi evaluace rozepsán v podrobnosti na týdny, následně pak v podrobnosti na měsíce (s hlavními výstupy v podobě Vstupní zprávy, Metodiky na stanovení výchozích hodnot MI a měření dosažených hodnot MI a Evaluační zprávy I.). Pro druhou fázi evaluace v roce 2014 je harmonogram zpracován na měsíce s tím, že průběh evaluace bude strukturován obdobně jako v první fázi s posílením časové dotace na komparativní analýzu (vývoj dosažených hodnot MI za 2013 a 2012).
20
21
4. Realizační tým a jeho zapojení do evaluace S ohledem na časový harmonogram zakázky a zajištění maximální kvality výstupů evaluace se evaluátor rozhodl pro rozšíření realizačního týmu oproti nabídce o dalšího člena – Ing. Daniela Fencla a sponzora projektu – Ing. Jana Havránka, MBA. Přehled kompletního realizačního týmu: Jméno člena realizačního týmu Ing. Jan Havránek, MBA Ing. Martin Krištof Ing. Jan Obrovský Bc. Martin Havlík Mgr. Jan Eberhard Ing. Lukáš Nehyba RNDr. David Brtna Ing. Daniel Fencl
Pozice Garant projektu Vedoucí realizačního týmu Evaluátor - analytik Evaluátor – metodik Evaluátor - analytik Evaluátor – analytik Evaluátor - analytik Evaluátor - analytik
Zpracování vstupní zprávy Komunikace se zadavatelem
Zajištění kvality výstupů Zpracování výstupů evaluace (Vstupní zpráva, Metodika, EZ I., EZ II.) Vypořádání připomínek k výstupům evaluace X Nastavení designu dotazníkového šetření a evaluačních rozhovorů Realizace evaluačních rozhovorů Realizace dotazníkového šetření Vyhodnocení výsledků dotazníkového šetření Realizace procesní analýzy Provedeni komparační analýzy Organizace workshopů X Prezentace výstupů zadavateli a dalším zainteresovaným subjektům Reporting vůči zadavateli (flash reporty) X
22
G G
Ing. Daniel Fencl
RNDr. David Brtna
X
X X
X X
X X
X X
X X
X X
X
X
X
X X
X
X X
X X X
G
Ing. Lukáš Nehyba X
G
G X G G
Mgr. Jan Eberhard
G X X G
Bc. Martin Havlík
X G G X
Ing. Jan Obrovský
Ing. Martin Krištof
Aktivity a činnosti v rámci zakázky
Ing. Jan Havránek, MBA
V následující tabulce je provedeno určení všech zapojených expertů do řešení jednotlivých aktivit této veřejné zakázky včetně rozsahu zapojení v podobě počtu osobodní.
X
X X X
G G X
X G
X
X X X
X
X
X
X
X
X
X
X
X
X
X
X X
X X
Legenda: G – garant aktivity (činnosti) X – zapojen do dané aktivity (činnosti) Člen týmu Ing. Jan Havránek, MBA Ing. Martin Krištof Ing. Jan Obrovský Bc. Martin Havlík Mgr. Jan Eberhard Ing. Lukáš Nehyba RNDr. David Brtna Ing. Daniel Fencl
Rozsah zapojení v osobodnech 10 35 20 20 15 20 15 20
23
