Hodnocení projektů 7.RP; Praktické zkušenosti z hodnocení projektů Seminář MANAGEMENT PROJEKTŮ 7.RP 1. den: Jak úspěšně podat návrh projektu do 7.RP 9. května 2011 Technologické centrum AV ČR RNDr. Zuzana BOUKALOVÁ
[email protected]
KDO HODNOTÍ PROJEKTY FP7? Nezávislý expert, který je registrovaný v databázi EK (https://cordis.europa.eu/emmfp7/index.cfm) Jeho zaměření odpovídá volané prioritě Je předběžně poptán REA Obdrží tzv. „APPOINTMENT LETTER“ a „INNVITATION“ z REA pro dané hodnocení Dodrží pravidla (potvrdí své osobní údaje, prohlášení o nezávislosti a mlčenlivosti, vyloučení střetu zájmů).
ČASOVÁ OSA
„Appointment letter“ pro potenciálního hodnotitele z REA (Research Executive Agency)
VÝZVA Příprava a podání návrhu projektu (EPSS) Uzávěrka Hodnocení návrhu projektu nezávislými hodnotiteli Negociace Podpis Grantové dohody s EK + podpis Konsorciální smlouvy mezi partnery Realizace projektu
EXPERTNÍ HODNOCENÍ:
Jednokolové (velmi časté do konce roku 2010) Dvojkolové (hodnocení projektu předchází výběr z návrhů projektů, které jsou pro EK zajímavé; 1 stage: short proposal; 2 stage: full proposal) U jednokolového hodnocení, příp. ve 2. fázi dvojkolového hodnocení: „REMOTE“ hodnocení (ve 2 etapách; 1.etapa: na dálku/ individuální hodnocení, 2. etapa centrálně v Bruselu/ konsensus, panel). „CENTRAL EVALUATION“: Hodnocení pouze v Bruselu (jednorázové, po dobu 4 – 5 dní) – výhledově končí v roce 2011 a bude nahrazeno výhradně REMOTE přístupem. Odehrává se např. v případě INCO výzev.
KDE PROBÍHÁ HODNOCENÍ V BRUSELU?
V COVENT GARDEN
KAŽDÝ PROJEKT HODNOTÍ 3 – 5 EVALUÁTORŮ
JAK POSTUPUJE PROJEKT PO ODEVZDÁNÍ DO VÝZVY: Hodnotitelé
Příklad
Úvod k 7.RP, a Návrhy projektů v prioritě: počet ccafinance 30 management
KONTROLA FORMÁLNÍ SPRÁVNOSTI Evropská komise (EK) Vyřazeno: cca 5 PRŮBĚH HODNOCENÍ Externí nezávislí hodnotitelé
Průběh hodnocení
Hodnotitel A Individuální posudek
Hodnotitel B
Hodnotitel C
Individuální posudek
Individuální posudek
SETKÁNÍ HODNOTITELŮ Hodnotitelé A,B,C (zpravodaj) + moderátor z EK Společný hodnotící posudek Pod prahem: cca 15 PŘEZKOUMÁNÍ PANELEM Evropská komise + vybraní hodnotitelé „Evaluation summary report“ Seznam projektů podle bodů Seznam projektů k financování Vyřazeno: cca 8 DO NEGOCIACE jdou 2 PROJEKTY
KONTROLA FORMÁLNÍ SPRÁVNOSTI
Před tím,než začne samostatné hodnocení nezávislými experty, EK zkontroluje, že návrh projektu splňuje podmínky uznatelnosti dané výzvy a typu projektu („eligibility criteria“):
Uzávěrka výzvy (datum a hodina) Typ projektu Úplnost (část A i část B) Partneři (min. počet) Limity pro požadovaný příspěvek ES Další specifika požadovaná ve výzvě .
Pokud není splněno, projekt není postoupen k hodnocení nezávislými experty.
Výběr hodnotitelů pro výzvu Z databáze z CORDIS vybere EK vhodné hodnotitelé pro danou výzvu s ohledem na: - kvalifikaci a schopnosti; - rovnováhu mezi soukromou a veřejnou sférou; - rovnost pohlaví; - vhodné geografické rozdělení; -pravidelnou rotaci expertů; -- znalost konkrétní problematiky v případě SICA výzev.
HODNOCENÍ - HODNOTITELÉ
EVALUACE Nezávislí experti jsou vždy seznámeni: S výzvou Pravidly hodnocení Specifickými přístupy (požadavky) volané priority; S vyhlášenými sub-prioritami (topics) a finančními možnostmi v rámci výzvy - podle kterých mohou odhadnout počet maximálně financovaných projektů (viz další slide – příklad) Manuálem hodnotitele Využíváním databáze EK: RIVET (každý dostane vlastní log-in informace, vše probíhá v maximálním utajení): http://www.ess-fp7.org/ (V případě Marie Curie Actions se hodnotí pomocí webového nástroje EMEX: Expert Management External přes individuální ESAC account: https://webgate.ec.europa.eu/cas/ec/init/passwordResetRequest.do). Proběhne výběr reportérů (kteří jsou zodpovědní za finalizaci Konsensus Reportu, většinou se i podílí na hodnocení projektu jako individuální expert – ne vždy!).
PŘÍKLAD HODNOCENÉ VÝZVY (ROK 2009) SPACE (topic 9.3: cross-cutting activities):
9.3.2 International Cooperation collaborative projects SPA.2010.3.2.-01 (EU-Russia Cooperation in GMES); SPA.2010.3.2-02 (Deforestration) SPA.2010.3.2.-03 (EU – South Africa Cooperation in GMES) SPA.2010.3.2.-04 (EU-Russia Cooperation for Strengthening Space Foundation 9.3.5 European Space Policy Support SPA.2010.3.5-01 (European Space Policy Studies – CA action)
8 MEur
1 MEur
HODNOCENÍ – HODNOTÍCÍ KRITÉRIA (V PŘÍPADĚ „FULL“ PROJEKTU)
Každý projekt je hodnocen odděleně většinou třemi nezávislými hodnotiteli, podle předem daných kritérií (hodnotící kritéria): 1. 2. 3.
Vědeckotechnická kvalita Implementace Dopad (Impact)
Každé kritérium 0-5 bodů (score) Obvykle nutno dosáhnout min. 3 body v každém kritériu a min. 10 bodů celkem (threshold) V některých výzvách mohou mít kritéria různou váhu.
HODNOCENÍ – HODNOTÍCÍ KRITÉRIA
HODNOCENÍ - PRŮBĚH
Většina hodnocení probíhá vzdáleně – tj. od hodnotitele z domu či kanceláře (REMOTE), někdy CENTRAL – v Bruselu Každý hodnotitel pročte návrh projektu a vyplní vlastní „Individual Assessment Report“ ; pracuje přes RIVET – databázi EU Čas, který je věnován jednomu návrhu projektu: cca 2.5 hod!!! Hodnotitelé se poprvé potkají/poznají v Bruselu na „consensus meeting“, kde se dohodnou na společném výsledku hodnocení (počtu bodů a komentáře) Moderátor: EK Pokud se neshodnou – EK povolá 1 nebo 3 nové experty Výsledkem: „Consensus report“ (podepsaný všemi hodnotiteli) → „Evaluation Summary Report“ – zasílán koordinátorovi
Ještě není jasné, které projekty budou financovány
VÝBĚR PROJEKTŮ PRO FINANCOVÁNÍ Panel meeting
Consensus report odchází do panelu, kde se setkávají hodnotitelé z celé širší priority nebo tematické oblasti, Experti se snaží hierarchicky srovnat projekty od nejhoršího k nejlepšímu napříč širší tematické oblasti v rámci 1 balíku financí. Projekty, které mají šanci uspět, musí překročit tzv. „threshold“, neboli práh. Reálnou šanci však mají až projekty nad 12,5 bodů, spíše 13,5 bodů…..
VÍCE PROJEKTŮ SE STEJNÝM BODOVÝM HODNOCENÍM (NAPŘ. 13,5 BODŮ): Vedlejší kriteria:
Projekt má více bodů za impakt než ostatní V případě že všechny projekty mají stejné body v rámci 3. kriteria (impakt), rozhoduje, který z nich má více bodů za 1. kriterium (vědeckou myšlenku) V projektu jsou zohledněna tzv. „gender issues“ Konsorcium je vyrovnané a obsahuje i SME Projekt dodržuje doporučený stránkový limit V případě, že širší tematická priorita zahrnuje i subpriority orientované na třetí země, tzv. SICA projekt (tedy projekt pro třetí země) vždy přeskočí tzv. „ne-SICA“ projekty, orientované „pouze“ na vědu a výzkum v Evropě. Atd…
PO PŘEZKOUMÁNÍ PANELEM
EK sestaví seznam projektů, které budou financovány (s ohledem na dostupný rozpočet pro výzvu) a „reserv list“.
Oficiální dopis s datem zahájení negociací je zaslán žadatelům, kteří byli úspěšně vybráni k financování (Letter of Invitation to Negotiations).
OPRAVNÉ ŘÍZENÍ
Možnost „odvolat se“ proti hodnocení projektu
Redress procedure
Do 30ti dní od obdržení informačního dopisu s výsledky hodnocení (ESR) NE proti odborné stránce hodnocení a expertíze hodnotitelů Pouze pokud by přezkoumání mohlo vést k financování Pouze koordinátor Prostřednictvím šablony: http://cordis.europa.eu/fp7/redress_en
EK svolá speciální komisi, která může rozhodnout o přehodnocení projektu (celého či pouze jeho části) koordinátor obdrží informace do 2 týdnů Více informací:
[email protected]
RADY NA ZÁVĚR…
Připravte návrh v souladu se zadáním výzvy a jejími cíly Sestavte kompetentní a komplementární konsorcium Připravte dobrý „management plan“ Nezapomínejte na evropskou přidanou hodnotu Nezapomínejte na vědeckou excelenci projektu Čemu věnovat pozornost
Respektujte omezené časové možnosti hodnotitelů
Abstrakt – Čeho se projekt týká? Konkrétní výsledky a inovativní nápady? Seznam partnerů – Kdo je do projektu zahrnut? Několik prvních stránek návrhu – Porozumění konceptu Rozpočet – Dostatečné zdroje? Popis zdrojů!
Dodržujte požadovanou strukturu Využívejte obrázky a tabulky
Dobrý návrh projektu je stručný, jasný a výstižný!!!!!!
RADY PRO NADCHÁZEJÍCÍ VÝZVU (WP 2012): V této výzvě se očekává výrazná převaha dvoukolového hodnocení projektů (two-stagecall) Důraz na „additional eligibility criteria“ specifikovaná v rámci jednotlivých sub-priorit (např.: horní hranice EU příspěvku, EU příspěvek jde z 15 /30 a více % do SMEs – pro SMEs orientované výzvy, limit počtu stránek – nadpočetné stránky budou skartovány, atd.)
DVOUKOLOVÉ HODNOCENÍ
„Eligibility criteria“ se budou posuzovat u obou kol hodnocení; 1.kolo: part A (eligibility vzhledem k limitům rozpočtu, daným výzvou), part B (eligibility vzhledem k počtu partnerů projektu). 2.kolo: pouze část A (pro posouzení eligibility projektu). Individuální hodnocení projektů bude VŽDY probíhat na dálku (remotely). Projekty úspěšné v 1.kole: koordinátor obdrží pozvání k podání „full“ projektu do 2.kola Očekávaná data podání projektů (odhad): 1.kolo: Říjen 2011 (hodnocení ukončeno do konce Prosince 2011); 2.kolo: Březen 2012 (hodnocení – konec Března, Duben 2012). Negociace vítězných projektů by měly být zahájeny v Červnu 2012.
PRVNÍ KOLO:
Kolo 1
DRUHÉ KOLO: Minimální threshold
Kolo 2
Minimální threshold
VaV kvalita (S/T quality)
4/5
VaV kvalita (S/T quality)
4/5
Dopad (Impact)
3/5
Implementace (Implementation)
3/5
Dopad (Impact)
3/5
Celkový práh (Overall threshold)
10/15
Celkový práh (Overall threshold)
8/10
HODNOCENÍ PŘI „TWO-STAGE-CALLS“
INDIVIDUÁLNÍ HODNOCENÍ PROJEKTŮ PROBĚHNE VÝHRADNĚ NA DÁLKU Minimální threshold VaV kvalita (S/T quality)
3/5
Implementace (Implementation)
3/5
Dopad (Impact)
3/5
Celkový práh (Overall threshold)
10/15
OČEKÁVANÝ ČASOVÝ PLÁN:
Uzávěrka nové výzvy začátkem Března 2012 Hodnocení bude probíhat koncem Března – začátkem Dubna 2012
HODNOCENÍ U JEDNOKOLOVÝCH PODÁNÍ PROJEKTŮ
HODNĚ ŠTĚSTÍ!!!
Děkuji za pozornost
