Kvantilová metoda hodnocení pro cenu děkana PřF UP Olomouc E. Tkadlec Hlavní princip Hlavní myšlenka návrhu na udělování ceny děkana PřF UP za mimořádnou vědeckou publikaci stojí na představě, že budou odměňovány publikace zveřejněné v „horních 20% časopisů“ v daném vědním oboru. Technicky lze tento návrh řešit pomocí žebříčků impaktových faktorů (IF) vědeckých časopisů publikovaných na stránkách ISI Web of Knowledge (WOK) (http://isi10.isiknowledge.com/portal.cgi), přesněji v rubrice ISI Journal Citation Reports (JCR). Na základě takto publikovaných přehledů IF lze stanovit 80. kvantil (percentil) jako hraniční kriterium pro udělení ceny děkana v daném oboru. To je taková hodnota IF, že z celkového počtu časopisů v daném oboru má 20% z tohoto souboru vyšší IF a 80% časopisů nižší IF než daná hodnota. Výhody Jde o systémový přístup, který se opírá o moderní scientometrická kriteria hodnocení vědecké práce na celém světě, v němž stránky WOK hrají důležitou roli. Lze se tak vyhnout lobbyistickým tlakům z jednotlivých oborů na dosažení co nejnižší úrovně kriteria, snahám předkládat vlastní oborové návrhy, podle kterých by měly být hodnoceny publikace z daného oboru, a zamezit poměrně účinně mezioborové, ale i vnitro-oborové nespravedlnosti, která by tak nevyhnutelně následovala. Problémy Obory jsou poměrně diverzifikované. I v rámci jednoho oboru na PřF existuje více možných časopisových klastrů na JCR, které se liší velikostí 80. kvantilu. To může vést k tomu, že některé obory jsou extrémně zvýhodněny, jiné naopak silně znevýhodněny. Jeden časopis může být v JCR zařazen v několika klastrech. To může svádět k tomu, aby daná publikace byla vykázána v klastru s nejnižší hodnotou 80. kvantilu. Návrh na řešení Problém elementární spravedlivosti mezi vědními obory lze řešit výpočtem váženého 80. kvantilu ze všech klastrů, v nichž se daný časopis podle JCR vyskytuje. Hranice mohou být proto pro jednotlivé obory stanoveny jen orientačně, jako vodítko, bez rozhodujícího významu. Skutečné vlastní kriterium se pro každou konkrétní publikaci navrženou na cenu děkana vypočítá až na základě následujícího postupu založeném na scientometrických přehledech WOK. Nejlépe lze postup vysvětlit na příkladě. Časopis BEHAV ECOL SOCIOBIOL s IF 2.649 je v klastru Behav. Sci. (39 časopisů) s kvantilem 2.905, je také ale v klastrech Ecology (105 časopisů) s kvantilem 2.452 a Zoology (107 časopisů) s kvantilem 1.478. Podle klastru Behav. Sci. by IF publikace nepřekročil 80. kvantil. Kdyby ovšem stejná publikace byla vykázána mezi zoologickými publikacemi, hranice by byla překročena. V takovém případě lze problém řešit tak, že hraniční 80. kvantil vypočítáme ze všech 3 sloučených klastrů (229 časopisů po vyloučení dublujících se periodik). V daném případě má 80. kvantil hodnotu 2.135 a publikace v časopise BEHAV ECOL SOCIOBIOL tak překročila kriterium pro udělení ceny děkana. Informace o tom, ve kterých klastrech se daný časopis vyskytuje, je na JCR snadno dostupná pro všechny časopisy. Implementace Je běžné, že taková data a výpočty připravují ve vědeckých ústavech pracovníci knihoven, kteří nejen shromažďují publikace a vydávají přehledy publikací, ale také se podílí na jejich vyhodnocování. Fakultní postup by mohl být založen na návrhu z jednotlivých kateder s již předpočítaným IF, který bude finálně ověřen knihovnou. Znamená to, že autor významné publikace by si měl dopředu vypočítat, zda překročí nebo nepřekročí kriterium pro udělení ceny. Alternativně může také požádat pracovníky knihovny, zda by mu daný výpočet neprovedli. Výpočet 80. kvantilu Lze provést ve kterémkoliv statistickém programu (např. JMP, SAS apod.), tabulkovém editoru (např. Excel) nebo s pomocí kalkulačky. V posledních dvou případech je postup následující (příklad): a)
Časopis se nachází ve 3 klastrech, v nichž je dohromady N = 229 různých časopisů. Časopisy seřadíme podle velikosti jejich IF (např. v Excelu) od nejnižšího k nejvyššímu. Pořadí pro 80. kvantil zjistíme podle vzorce: 0.8 × (N + 1) = 0.8 × (229 + 1) = 184. Výsledkem je celé číslo. To znamená, že 80. kvantil je IF časopisu, který je na 184. místě. Tam se nachází časopis Oikos s IF 2.135. To je 80. kvantil.
b) Může se stát, že pořadí 80. kvantilu není celé číslo. Potom je nutné použít interpolaci. Např. časopis BIOL FERT SOILS má IF 1.152 a nachází se pouze v klastru Agriculture, Soil Science, v němž je celkem 28
1
časopisů. Pořadí 80. kvantilu je 0.8 × (28 + 1) = 23.2. Najdeme proto časopisy na 23. a 24. místě, které mají IF 1.31 a 1.483. Hodnotu 80. kvantilu q80 najdeme interpolací podle vzorce q80 = 0.8 × IF23 + 0.2 × IF24 = 0.8 × 1.31 + 0.2 × 1.483 = 1.345. Publikace v časopise BIOL FERT SOILS tudíž nepřekročila požadované kriterium. Takové řešení zajišťuje základní mezioborovou i vnitro-oborovou spravedlivost při hodnocení vědeckých publikací, je flexibilní a adaptivní a není zapotřebí ho neustále měnit podle okamžité situace. Umožňuje ocenit práce pocházející z jednoho oboru, ale které se přitom významně liší ve velikosti IF. Lze je snadno zavést do agendy pracovníků fakultních knihoven.
Orientační přehled 80. kvantilů pro jednotlivé obory podle JCR 2004 Obor matematika KATEDRA MATEMATICKÉ ANALÝZY A APLIKACÍ MATEMATIKY Vědecké zaměření: dynamické systémy, matematická statistika, numerické metody, matematické modelování v mechanice. KATEDRA ALGEBRY A GEOMETRIE Vědecké zaměření: univerzální algebra, uspořádané algebraické struktury, uspořádané množiny, incidenční struktury, diferenciální geometrie ve varietách a jejich morfizmy, koordinatizace projektivních rovin, humanizace matematického vzdělávání. Parametr Počet čas. (n)
math 174
math-appl 153 3.529
math-interd 42 6.701
stat-prob 75
max
3.647
6.701
min
0.054
0.099
0.214
0.099
mean
0.534
0.739
1.148
0.867
median
0.421
0.623
0.781
0.598
80.kvantil
0.678
1.0332
1.426
1.093
Průměrný 80. kvantil = 1.057
KATEDRA INFORMATIKY Výzkumné a vývojové aktivity: teoretická informatika, analýza dat, softwarové inženýrství, informační technologie, počítačová grafika. Parametr n
comp-info 78
comp-sci 81
max
4.545
6.701
min
0.024
0.107
mean
1.145
1.009
median
0.842
0.672
80.kvantil
1.806
1.251
Průměrný 80. kvantil = 1.528
Obor fyzika KATEDRA TEORETICKÉ FYZIKY Vědecké zaměření: teorie kondenzovaných látek, optická aktivita krystalů, nerovnovážná termodynamika, kvantová fyzika. KATEDRA EXPERIMENTÁLNÍ FYZIKY Vědecké zaměření: biofyzika fotosyntézy, Mössbauerova spektroskopie, teorie optického zobrazení, didaktika fyziky. KATEDRA OPTIKY A LABORATOŘ KVANTOVÉ OPTIKY Vědecké zaměření: moderní optika, zejména kvantová a nelineární optika.
2
SPOLEČNÁ LABORATOŘ OPTIKY UP A FYZIKÁLNÍHO ÚSTAVU AKADEMIE VĚD ČESKÉ REPUBLIKY Jeho posláním je základní a částečně také aplikovaný výzkum v oborech kvantová optika, vlnová optika, holografie, přístrojová optika a fyzika, návrh a stavba specializovaných optických, optomechanických a optoelektronických přístrojů a zařízení. V posledním období například řeší problémy v oblasti kvantového šíření světla prostředím, kvantové komunikace a kryptografie, kvantového měření fáze, koherentní zrnitosti (včetně aplikací v mechanice kontinua), holografické optiky apod. Physics
Physics
Physics
Physics
Physics
Physics
Physics
Appl.
At-mol-ch
cond
Fluids-pl
math
Multidisc.
Nucl.
Physics
Parametr
Biophys
Optics
n
65
53
max
13.351
6.077
10.032
5.971
13.087
5.108
2.202
28.172
8.75
8.667
3.643
7.364
min
0.179
0.019
0.033
0.44
0.152
0.227
0.311
0.029
0.097
0.145
0.349
0.17
mean
2.737
1.287
1.321
1.844
1.553
1.420
1.043
1.855
2.312
2.430
1.329
1.729
median
2.135
1
1.046
1.453
0.998
0.863
1.064
0.978
1.467
1.345
0.974
1.333
80.kvantil
3.485
1.989
1.935
2.529
1.695
2.180
1.588
1.937
3.886
4.599
2.405
2.42
75
31
56
21
31
68
22
part
Crystallogr
19
23
Spectroscopy 39
Průměrný 80. kvantil = 2.566
Obor chemie KATEDRA ANALYTICKÉ CHEMIE Vědecké zaměření: separační, zvláště elektromigrační metody, analýza organických sloučenin, polutantů, biologicky významných látek včetně biomakromolekul, separace chirálních látek. KATEDRA ANORGANICKÉ CHEMIE Vědecké zaměření: Koordinační sloučeniny prvků triady železa s S, P, N, O ligandy, fotochemické a chemiluminiscenční reakce, fotodynamická terapie. KATEDRA BIOCHEMIE Ve výzkumné činnosti je hlavní oblastí zájmu rostlinná biochemie, enzymologie a zvláště pak studium molekulárních vlastností a fyziologické funkce aminoxidas a cytokininoxidas. KATEDRA FYZIKÁLNÍ CHEMIE Zaměření katedry: studium fyzikálně-chemických vlastností látek, povrchová a koloidní chemie, fotochemie a chemiluminiscence, počítačová chemie. KATEDRA ORGANICKÉ CHEMIE Vědecké zaměření katedry je především na syntézu nových heterocyklických sloučenin a studium reakčních mechanismů a dějů v roztocích. Parametr
chem-anal
chem-appl
n
7
max
5.25
4.2
min
0.224
0.087
mean
1.562
1.009
median
1.308
0.704
80.kvantil
2.238
1.505
chem-inorg
56
46 8.5
chem-med 35
chem-multi
chem-org
121
53
7.788
21.036
7.529
0.231
0.41
0.081
0.113
1.811
2.041
1.660
1.960
1.278
1.517
0.789
2.738
3.103
2.344
chem-phys 98 12.65
electrochem 15
polymer-sci 72
2.742
7.759
0.113
0.122
0.133
2.060
1.491
1.109
1.597
1.423
1.996
0.73
2.959
3.167
2.349
1.396
Průměrný 80. kvantil = 2.422
Biochemistry, cell biology, physiology Parametr n
biochem-molbiol 261
cell-biol 154
biochem-research-m 49 8.316
physiology 74
max
37.647
35.041
36.831
min
0.050
0.278
0.447
0.111
mean
3.308
4.131
2.460
2.737
median
2.240
2.338
2.015
1.632
80.kvantil
4.393
4.995
3.547
3.682
3
Průměrný 80. kvantil = 4.154
Obor biologie KATEDRA BOTANIKY Hlavní směry výzkumu: anatomie rostlin, floristika a taxonomie rostlin, fytocenologie a ekologie rostlin, ochrana fytogenofondu, rostlinná fyziologie a biotechnologie, fytopatologie. Parametr n
plant-sci 136
agronomy 52
mycology 16
max
15.615
2.571
2.746
min
0.035
0.01
0.182
mean
1.550
0.768
1.127
median
0.896
0.583
0.884
80.kvantil
1.867
1.235
1.936
Průměrný 80. kvantil = 1.679
KATEDRA ZOOLOGIE A ANTROPOLOGIE A ORNITOLOGICKÁ LABORATOŘ Hlavní směry výzkumu: systém, ekologie a etoekologie hmyzu, obojživelníků, plazů a ptáků. KATEDRA EKOLOGIE A ŽIVOTNÍHO PROSTŘEDÍ Hlavní směry výzkumu: krajinná ekologie, hydrobiologie, agroekologie, ekologie půdy, revitalizace vodních a suchozemských ekosystémů a ochrana přírody. Biology, zoology, ecology, environmental sci Parametr n
biology 63
evol-biol
zoology
30
107
max
7.172
12.449
min
0.022
mean
1.428
ornithology
limnology
15
fisheries
12
entomology
39
64
3.672
1.597
3.329
2.432
6.887
0.571
0
0.187
0.216
0.091
2.868
0.945
0.718
1.169
ecology 105
biodiv-conserv
env-sci
21
13
12.449
4.152
4.152
0
0.039
0.121
0.116
0.863
0.866
1.662
1.302
1.167
median
0.972
2.075
0.798
0.638
1.032
0.778
0.638
1.23
0.701
0.954
80.kvantil
2.119
3.766
1.478
1.208
1.864
1.263
1.231
2.452
2.594
1.726
Průměrný 80. kvantil = 1.971
Ecology, Environmental Sciences Parametr n
ecology 105
biodiv-conserv 21
env-sci 13
water-res 35
entomology 64
zoology 107
max
12.449
4.152
4.152
1.812
6.887
3.672
min
0.039
0.121
0.116
0.57
0
0 0.945
mean
1.662
1.302
1.167
0.964
0.866
median
1.23
0.701
0.954
0.874
0.638
0.798
80.kvantil
2.452
2.594
1.726
1.265
1.231
1.478
Průměrný 80. kvantil = 1.791
Agro-ecology, soil ecology Parametr n
agro-soil 28
agronomy 52
max
1.915
2.571
min
0.023
0.01
mean
0.856
0.768
4
median
0.889
0.583
80.kvantil
1.345
1.235
Průměrný 80. kvantil = 1.236
Hydrobiology, hydrology Parametr
biology
n
63
limnology 12
fisheries 39
water-resources 35
max
7.172
3.329
2.432
1.812
min
0.022
0.216
0.091
0.57
mean
1.428
1.169
0.863
0.964
median
0.972
1.032
0.778
0.874
80.kvantil
2.119
1.864
1.263
1.265
Průměrný 80. kvantil = 1.628
KATEDRA BUNĚČNÉ BIOLOGIE A GENETIKY Hlavní směry výzkumu: genetika buněčných manipulací in vitro, biologie buňky, cytogenetika, mutagenní aplikace a molekulární fytopatologie. Garantuje studium molekulární a buněčné biologie. LABORATOŘ RŮSTOVÝCH REGULÁTORŮ UP A AV ČR
Parametr n
biochem-molbiol 261
gen-her 115
cell-biol
biochem-research-m
154
physiology
49
74
max
37.647
26.494
35.041
8.316
36.831
min
0.050
0.021
0.278
0.447
0.111
mean
3.308
3.602
4.131
2.460
2.737
median
2.240
2.379
2.338
2.015
1.632
80.kvantil
4.393
4.306
4.995
3.547
3.682
Průměrný 80. kvantil = 4.184
Obor geografie a geologie KATEDRA GEOLOGIE Vědecké zaměření: geologický výzkum jesenické oblasti, trilobitová fauna středočeského paleozoika, ichnofauna paleozoika až terciéru, strukturně geologický výzkum moravského kulmu. KATEDRA GEOGRAFIE Vědecké zaměření: geografické informační systémy, modelování přírodních jevů, globální změny fyzickogeografické sféry, mapování přírodních zdrojů studium složek fyzickogeografické sféry a socioekonomické sféry, výzkum a mapování krajiny a jejich dílčích složek, dálkový průzkum Země v geografii, tvorba učebnic zeměpisu. KATEDRA GEOINFORMATIKY Vědecké zaměření : geografické informační systémy, počítačová kartografie, dálkový průzkum Země. Parametr n
geochem
geography
geology
52
31
32
geosci-multi 127
mineralogy 24
paleontology 29
remote-sens 11
env-sci 131
max
9.226
3.181
3.065
4.014
2.831
3.048
2.641
4.152
min
0.176
0.229
0.195
0.026
0.057
0.123
0.196
0.116
mean
1.440
1.210
1.019
1.119
1.105
0.967
0.925
1.167
median
0.928
1.080
0.82
0.899
0.944
0.816
0.832
0.954
80. kvantil
2.317
1.923
1.475
1.682
1.681
1.513
1.516
1.726
Průměrný 80. kvantil = 1.729
5
