Ověřitelnost výsledků vykazovaných v RIV

Komise pro hodnocení výsledků výzkumu a vývoje Rada pro výzkum, vývoj a inovace

24-6-A

- znění materiálu předkládaného na 248. zasedání Rady, dne 11.prosince 2009

Ověřitelnost výsledků vykazovaných v RIV (podklad pro hlasování KHV se všemi navrženými změnami) Úkol byl uložen na 246. zasedání Rady ze dne 9.10.2009. KHV bylo uloženo předložit do 15. prosince 2009 Radě materiál, ve kterém budou navrženy principy a metody ověřitelnosti jednotlivých druhů výsledků, tj. kontroly pro posouzení oprávněnosti vykazovaných výsledků výzkumných aktivit. Materiál není zaměřen na hodnocení vědecké úrovně jednotlivých výsledků, úroveň hodnotí jednotliví poskytovatelé prostřednictvím svých odborných poradních orgánů – komisí. Cílem materiálu je navržení a stanovení nezpochybnitelných postupů pro ověřování pravdivosti předaných dat do RIV a to z hlediska: -

splnění definice příslušného druhu výsledku; stanovení rozhodujících kritérií pro posouzení správného zařazení ke konkrétnímu druhu výsledku; způsobu ověřitelnosti rozhodujících údajů vykázaných v RIV pro ověření jejich pravdivosti, tj. existence výsledku.

Komise navrhuje založit ověřitelnost výsledků vykazovaných v RIV na následující principech: 1. Navržené principy a metody ověřitelnosti budou platné pro všechny druhy výsledků evidované v RIV, které vstupují do Hodnocení. 2. Pro každý druh výsledku jsou stanoveny 2 až 3 rozhodující kritéria, která mají jednoznačně stanovenou ověřitelnost, tj. pokud nebude splněno jedno z nich, výsledek bude z Hodnocení vyřazen. 3. V opodstatněném případě jsou navrženy změny, úpravy či doplnění struktury RIV (týká se pouze rozhodujících kritérií). 4. Tato „kontrolní kritéria“ budou zapracována do textu Metodiky 2010, jako samostatná kapitola. 5. U jiných než SW proveditelných verifikací je doporučen způsob zajištění provedení kontroly. 6.

U všech typů výsledků bude prováděna fyzická kontrola splnění kriterií u náhodně vybraných výsledků.

Odůvodnění: Bez kompletních fyzických kontrol většiny druhů výsledků nebude možno ověřit věrohodnost údajů uvedených v RIV ani opodstatněnost zařazení (reálnou shodu s kompletní definicí). Fyzické kontroly výsledků jsou nezbytné, protože praxe prokazuje, že Metodika hodnocení je pod tlakem systémových ekonomických motivací přebírána i na nižších úrovních alokace institucionálních prostředků a motivace ke zkreslování informací a podsouvání výsledků nesplňující definice jsou silnější, než hrozba případných sankcí. Uvedením tohoto postupu v Metodice hodnocení výsledků VaVaI, by Rada neměla být napadána, že kritéria pro vyřazení výsledků nejsou předem známa či že nejsou dostatečně „průhledná“.

24-6-A

1/6

Komise pro hodnocení výsledků výzkumu a vývoje Rada pro výzkum, vývoj a inovace V uvedené tabulce je Komisí předkládán podrobnější návrh kritérií pro jednotlivé druhy výsledků Radě. Tabulka 1.: Podrobný návrh kritérií

Druh výsledku

Kritérium § 12 odst 1) zákona č.130/2002 Sb. pravdivost z hlediska každého určujícího kritéria pro jednotlivé druhy výsledků § 32 odst 3) zákona č.130/2002 Sb. popis, dříve anotace

hlavní obor výsledku

ZDROJ ověření údajů RIV

Způsob verifikace

Je uvedeno níže pro jednotlivé druhy výsledků, vždy binární rozhodnutí: ANO x NE

Je uveden níže pro jednotlivé druhy výsledků

RIV (dat. pole R42), údaj neuveden nebo shoda s názvem výsledku RIV (dat. pole R04), shoda s hl. oborem výzkumné aktivity, binární rozhodnutí ANO x NE (Lze použít pouze v případě, že výsledek bude provázán na konkrétní výzkumnou aktivitu evidovanou v IS VaVaI)

Platí pro všechny druhy výsledků

J – článek v odborném periodiku (časopise)

24-6-A

SW algoritmus porovnání dvou polí RIV SW algoritmus porovnání dvou polí CEP a RIV externí ověření se nepředpokládá

U náhodně vybraných výsledků provést U některých druhů výsledků nelze bez jejich fyzickou kontrolu, podrobnější fyzické prostřednictvím kontroly ověřit jejich poskytovatele, pravdivost. Především zda výsledek se jedná o publikační Bez expertní fyzické výsledky, z pohledu, existuje (např. kontroly výsledku nelze ověření, že zda článek (J, D) byl ověřit jiným než článek otištěn-uplatněn. Dále subjektivním způsobem. v uvedeném o některé aplikované výsledky druhu Z periodiku vyšel – fotokopie (poloprovoz, ověřená vydaného článku, technologie, prototyp, kopie uzavřené funkční vzorek, N smlouvy o (památkový postup). využití výsledku, …) V rozsahu a struktuře namátkově vybraných výsledků zohlednit výši bodového hodnocení. SW algoritmus existence ISSN kontrolní součet numerická kontrola Databáze: Web of Science + SW algoritmus příslušnost k příznaky článků, ERIH, vyhledání hodnoceným SCOPUS, Seznam českých v příslušné databázím recenzovaných časopisů databázi

2/6

Komise pro hodnocení výsledků výzkumu a vývoje Rada pro výzkum, vývoj a inovace Druh výsledku

B – odborná kniha

Kritérium


min. počet stran = 2

údaj RIV

existence ISBN

kontrolní součet


údaj RIV

§ 3 odst 1) zákona č. 37/1995 Sb. předání povinných výtisků (lze použít pouze

Způsob verifikace SW algoritmus externí ověření je možné, prostřednictvím poskytovatele SW algoritmus numerická kontrola SW algoritmus externí ověření je možné u namátkových vzorků

Národní knihovna

fyzická kontrola, způsob zatím není dojednán

U sporných výsledků expertní kontrola splnění definice

Expertní kontrola u poskytovatele

fyzická kontrola výtisku

existence ISBN

kontrolní součet

U sporných výsledků expertní kontrola splnění definice

Expertní kontrola u poskytovatele

existence ISSN nebo ISBN

kontrolní součet

příslušnost k hodnoceným databázím

databáze Web of Science + příznaky


údaj RIV

v případě knih vydaných v ČR)

C – kapitola v odborné knize

D – článek ve sborníku

P – patent

Z – poloprovoz

24-6-A

SW algoritmus numerická kontrola fyzická kontrola výtisku SW algoritmus numerická kontrola SW algoritmus vyhledání v příslušné databázi SW algoritmus externí ověření je možné, prostřednictvím poskytovatele

DOPLNIT do def. Upřesnění pro účely hodnocení: D – článek ve sborníku má minimální rozsah 3 stran textu. č. rozhodnutí (nikoliv databáze příslušného Ruční dohledání č. přihlášky) patentového úřadu všech výsledků který patentový úřad udělil Subjektivní posouzení Jde o výrobní postup? RIV - popis (dat. pole R42) externí ověření je možné, prostřednictvím

3/6


Kritérium

Jde o výrobní postup?

Z –ověřená technologie

Z – odrůda

Z - plemeno

Z – poloprovoz, ověřená technologie,

F – užitný vzor F – průmyslový vzor

24-6-A


RIV - popis (dat. pole R42)

Způsob verifikace poskytovatele u všech výsledků Subjektivní posouzení externí ověření je možné, prostřednictvím poskytovatele u všech výsledků Ruční dohledání externí ověření je možné, prostřednictvím poskytovatele u všech výsledků

Pokud jde o výrobní postup, pak musí být při uplatnění výsledku RIV – zatím neeviduje uzavřena smlouva o jeho licenčním využití Existuje shoda údajů s popisem výsledku? Subjektivní (technické parametry., RIV – technické parametry posouzení u je nutno definovat tak, (dat. pole R37) všech výsledků aby nedocházelo k vzájemné záměně) č. rozhodnutí o udělení ochrany, nikoliv č. přihlášky Ruční dohledání databáze ÚKZÚZ udělení ochrany práv všech výsledků (zákon č. 408/2000 Sb.), nikoliv datum registrace odrůdy Odůvodnění doplnění definice: - jedná se o dvě rozdílné kategorie, které jsou na sobě nezávislé, tj. lze je udělit samostatně - registrace znamená, že subjekt si registruje již uznanou odrůdu, aby ji mohl „uvést do oběhu“ (komerční činnost), tj. nejedná se o výsledek VaV (nic „nevyšlechtil“) DOPLNIT do def. Odrůda: Jedná se o výsledek, kdy vznikla nová rostlinná odrůda má udělenou ochranu práv podle zákona č. 408/2000 Sb., o ochraně práv k odrůdám, ve znění pozdějších předpisů. Registrace pro uvedení odrůdy do oběhu není považována za výsledek Z-odrůda. č. rozhodnutí, nikoliv databáze ČPI Ruční dohledání č. přihlášky Externí ověření je možné, Důkaz o realizaci, např. doklad o převzetí a prostřednictvím poskytovatele u zaplacení za převzetí vybraných případů. č. rozhodnutí, nikoliv databáze příslušného pat. Ruční dohledání č. přihlášky úřadu všech výsledků č. rozhodnutí, nikoliv databáze příslušného pat. Ruční dohledání č. přihlášky úřadu všech výsledků

4/6

Komise pro hodnocení výsledků výzkumu a vývoje Rada pro výzkum, vývoj a inovace Druh výsledku G - prototyp

G – funkční vzorek

G – prototyp + funkční vzorek

H – výsledky promítnuté do právních předpisů a norem

H – výsledky promítnuté do směrnic a předpisů nelegislativní povahy závazných v rámci kompetence příslušného poskytovatele

N – certifikovaná metodika

24-6-A

Kritérium


Způsob verifikace

Subjektivní posouzení všech výsledků Subjektivní Lze jej průmyslově RIV - popis (dat. pole R42) posouzení všech vyrábět? výsledků SW algoritmus externí ověření je Je uzavřena sml. na možné, ANO x NE prostřednictvím průmyslové využití? poskytovatele u všech výsledků uplatnění = zveřejnění Ruční dohledání Sbírka zákonů ve sbírce zákonů všech výsledků Návrh doplnit do definic upřesnění pro uznávání výsledku typu H: bude akceptován +1 rok nad údaj uvedený v poli „rok uplatnění výsledku“ (pole R09) ČSN – databáze ČSN uplatnění = zveřejnění normalizačního úřadu normy Věstník - datové pole pro Ruční dohledání ostatní identifikaci (č.) Věstníku všech výsledků uplatnění = zveřejnění RIV – zatím neeviduje ve Věstníku poskytovatele Odůvodnění doplnění definice: Pokud se bude jednat o certifikaci státní správou, musí být certifikace udělena věcně příslušným odborným útvarem ministerstva nebo jiného orgánu státní správy, který má věcně příslušnou kompetenci (např. SUJB, ÚKZÚZ apod.) DOPLNIT do def. Upřesnění pro hodnocení: Podmínkou je udělení mezinárodně uznávané certifikace (akreditace) u příslušného odborného certifikačního (akreditačního) orgánu nebo osvědčení příslušného odborného orgánu státní správy, který je věcně odpovědný za oblast, ve které jsou metodika nebo postup uplatňovány. V případě kdy certifikaci uděluje věcně příslušný poskytovatel, musí být taková certifikace udělena odborným útvarem (odborem) poskytovatele na základě vypracování dvou nezávislých oponentních posudků. Metodiky nebo postupy bez takového schválení (akreditace, certifikace) nebudou ohodnoceny. U výsledku léčebné postupy bude rozhodující zveřejnění ve Věstníku Ministerstva zdravotnictví (v případě humánních léčebných postupů) nebo schválení kompetenčně příslušnou autoritou. datové pole pro identifikaci datové pole pro Ruční dohledání (č.j.) identifikaci udělené RIV – zatím neeviduje všech výsledků certifikace – čj. Lze jej průmyslově vyrábět?

RIV- popis (dat. pole R42)

datové pole pro identifikaci certifikačního orgánu

databáze certifikačních orgánů

5/6

SW algoritmus vyhledání v databázi


N – léčebný postup

Kritérium Humánní medicína: zveřejnění ve Věstníku MZd Veterinární medicína

N – památkový postup N – specializovaná mapa s odborným obsahem

R – software

V – výzkumná zpráva

A - audiovizuální tvorba M - uspořádání konference W - uspořádání workshopu E - uspořádání výstavy O - ostatní


Způsob verifikace

datové pole pro identifikaci (č.) Věstníku MZd RIV – zatím neeviduje

ruční vyhledání v databázi

certifikace SVS RIV – zatím neeviduje

ruční vyhledání v databázi

Nutno vyjasnit s MK Subjektivní RIV - popis (dat. pole R42) posouzení všech výsledků web adresa Ruční dohledání Veřejná dostupnost RIV – zatím neeviduje všech výsledků Ruční dohledání Pro získání SW je RIV – zatím neeviduje nutné nabytí licence ANO X NE všech výsledků V případě, že se bude jednat o nabytí licence, nelze výsledek kontrolovat. (Platí pouze u výsledků spolufinancovaných do výše 50% uznaných nákladů). Předání předepsaným způsobem pro nakládání s utajovanými informacemi (viz zákon č. 148/1998 Sb., Tajná spisovna Ruční dohledání 412/2005 Sb., vyhláška poskytovatele všech výsledků č. 244/2005 Sb. a 56/1999 Sb.), tj. utajovaný dokument lze předat pouze prostřednictvím tajné spisovny Není v Hodnocení Existence sborníku Není v Hodnocení Informace na www Není v Hodnocení Vydání katalogu Není v Hodnocení nelze specifikovat Není v Hodnocení Jde o mapu se spec. obsahem?

Pozn.: - pole šedě podbarvená znamenají vzájemnou ověřitelnost pouze na základě dat předaných do IS VaVaI, - žlutá pole představují nově navrhovaná kritéria, případně možnost rozšíření struktury RIV - SW algoritmus – označení způsobu kontroly dat, kdy jsou na jedné straně data kontrolovány proti konkrétní databázi, za využití programového vybavení (tzv. „strojová kontrola“).

Příloha č. 1 – Výsledky hlasování členů Komise pro hodnocení výsledků 30.11.2009

24-6-A

6/6

Ověřitelnost výsledků vykazovaných v RIV

Recommend Documents