Zkušenosti Knihovny Akademie věd ČR Mgr. Pavel Mika 10. 10. 2014 KRE 2014
Osnova • Bibliometrické metody - možnosti a omezení jejich použití • Dostupné informační zdroje • Možnosti základních analýz • Hodnocení pracovišť AV ČR • IPN Metodika – KA1
Respektované bibliometrické „zásady“ • San Francisco Declaration on Research Assessment (DORA) „General recommendation: Do not use journal-based metrics, such as Journal Impact Factors (JIFs), as surrogate measures of the quality of individual research articles, to assess an individual scientist’s contributions, or in hiring, promotion, or funding decisions.“
• Nepoměřujeme počty citací (nebo průměrné počty citací na článek) mezi různými obory • Z toho vyplývají jistá omezení a nutnost využití sofistikovaných citačních indikátorů • nejsou dostupné z WoS/Scopus přímo http://www.ascb.org/dora/
Dostupné informační zdroje • ASEP, Analytika ASEP • WoS • Scopus • Další (IS VaVaI - RIV, Google Scholar, …) Zatím pouze k testování • InCites • SciVal
Analytika ASEP • Bibliografické přehledy a grafické výstupy výsledků základního výzkumu oblastí, ústavů, útvarů a vědeckých pracovníků AV ČR. • Analýza typů dokumentů • Přehled časopisů, ve kterých entita publikuje • Přehled ústavů http://www.lib.cas.cz/arl/
Ukázka Analytika ASEP
Možnosti základních analýz • • • •
Druhy dokumentů Počty dokumentů Obory Zahraniční spolupráce – Míra – Počet zemí – Korespondenční autoři
• Percentilové rozdělení na základě citačního ohlasu časopisu • Analýza adres
Počty dokumentů 16000
14000
10000
8000
ČR UNI
6000
AVČR
4000
2000
Roky
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS
2012
2011
2010
2009
2008
2007
2006
2005
2004
2003
2002
2001
2000
1999
1998
1997
1996
1995
1994
1993
1992
1991
1990
1989
0
1988
Počet dokumentů
12000
Oborové rozdělení AV ČR 2% 3% 1% 1. Natural Sciences 9%
2. Engineering and Technology 3. Medical and Health Sciences
21%
4. Agricultural Sciences
64%
5. Social Sciences 6. Humanities
-
OECD klasifikace Typ dokumentu: article, proceedings paper, review Zdroj dat: WoS Kumulativně data z let 1988-2012
TOP obory 1.03 Physical sciences and astronomy 1.06 Biological sciences
18%
1.04 Chemical sciences 2.05 Materials engineering 4%
18%
4%
1.05 Earth and related environmental sciences 1.01 Mathematics
5% 8% -
3.01 Basic medical research
17%
OECD klasifikace Typ dokumentu: article, proceedings paper, review Zdroj dat: WoS Kumulativně data z let 1988-2012
Zahraniční spolupráce 4500 4000 AV ČR vše 3500 AV ČR zahr. spol. Koresp. aut. CZ 2500 2000 1500 1000 500
Roky
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS
2012
2011
2010
2009
2008
2007
2006
2005
2004
2003
2002
2001
2000
1999
1998
1997
1996
1995
1994
1993
1992
1991
1990
1989
0
1988
Počet dokumentů
3000
Rozložení zahraniční spolupáce a korespondenčních autorů
19% Zahraniční spolupráce - CZ koresp. autor Zahraniční spolupráce zahr. koresp. autor
54%
CZ autoři (bez zahr. spol) 27%
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS - Kumulativně data z let 1988-2012
Podíl zahraniční spolupráce (%) 60
49
50
48
48
2009
50
51
2008
50
2007
49
2006
50
2005
49
2004
47
2003
47
49
53
2002
47
1997
50
1996
51
49
42 40
40
29 24
23
1988
1989
30
30
32
33
20
10
Roky
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS
2012
2011
2010
2001
2000
1999
1998
1995
1994
1993
1992
1991
1990
00
Porovnání spolupráce a citačního ohlasu (%)
80
70
60
%
50
40
30 podíl zahraniční spolupráce 20 podíl citací dokumentů v zahr. Spol. (zahr/všechny)
10
Roky
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS
2012
2011
2010
2009
2008
2007
2006
2005
2004
2003
2002
2001
2000
1999
1998
1997
1996
1995
1994
1993
1992
1991
1990
1989
1988
00
Počet zemí v mezinárodní spolupráci 120
108 88 90
56 57 56
60
40 39 38
42 44
34 33 31 30 30
37
41
61 61 63 45
48 48
68 61
52 54
80
76 77
71 71
49
99
101 94
73 71
75
2010
80
40
95
2008
100
80 79
57 59 59 54 56 52
34
20
Roky
- Typ dokumentu: article, proceedings paper, review - Zdroj dat: WoS
2012
2011
2009
2007
2006
2005
2004
2003
2002
2001
2000
1999
1998
1997
1996
1995
1994
1993
1992
1991
1990
1989
1988
0
Kvartilová distribuce na základě IF časopisu 100% 90% 80% 70% 60%
Q4 Q3
50%
Q2 40%
Q1
30% 20% 10% 0% AV ČR
- Typ dokumentu: article - Zdroj dat: WoS; data za rok 2012
celá ČR
ČR bez AV
31 35
Ústav biologie obratlovců
45
Centrum výzkumu globální změny
39
Biologické centrum
58 57 56
Botanický ústav
36
Ústav živočišné fyziologie a genetiky
45 43
Fyziologický ústav
Ústav experimentální medicíny
54
Ústav experimentální botaniky
62 61
Mikrobiologický ústav
Ústav molekulární genetiky
65
Biofyzikální ústav
Biotechnologický ústav
42
Ústav makromolekulární chemie
52
Ústav anorganické chemie
59
Ústav organické chemie a biochemie
63
Ústav chemických procesů
66
Ústav fyzikální chemie J. Heyrovského
70
Ústav analytické chemie
20
Ústav geoniky
Geologický ústav
Geofyzikální ústav
29
Ústav struktury a mechaniky hornin
49
Ústav fyziky atmosféry
30
Ústav pro hydrodynamiku
33
Ústav fyziky plazmatu
30 35
Ústav termomechaniky
39 38
Ústav teoretické a aplikované mechaniky
40
Ústav přístrojové techniky
50
Ústav fotoniky a elektroniky
54 53
Ústav fyziky materiálů
35
Ústav teorie informace a automatizace
Matematický ústav
40
Ústav informatiky
%
Ústav jaderné fyziky
60
Fyzikální ústav
80
Astronomický ústav
Pořadí podle 1. kvartilu - % článků 74 60
42 35
25
10 11
00
Analýza CZ vs Praha Distribuce dokumentů podle afiliace 100% 90% 80%
Praha, CZ a zahraničí
70%
Praha a CZ
60%
Praha a zahraničí
50%
Praha
40%
CZ a zahraničí mimo Prahu
30%
CZ mimo Prahu
20% 10% 0% 2002
2003
2004
2005
2006
2007
2008
Rok
Zdroj dat: WoS
2009
2010
2011
2012
2013
Analýza CZ vs Praha Počet publikací podle afiliace, 2002-2013 45000 40000
40287
38934 35000 30000
29948 25000 20000 17503
15000 10000
6951
5000
3719 0 CZ mimo Prahu
CZ a zahraničí mimo Prahu
Praha
Praha a zahraničí
Praha a CZ
Praha, CZ a zahraničí
Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za období 2010-2014 • KNAV spolupracuje na přípravě dat pro bibliometrické analýzy • Zavedení identifikátoru ResearcherID – Všichni vědečtí pracovníci publikující v časopisech indexovaných ve WoS
IPN Metodika • Jedním z cílů: navrhnout a pilotně ověřit systém hodnocení výzkumných organizací. • Projekt rozdělen do 7 klíčových aktivit.
KA1 Informační podpora • Bibliometrie důležitou součástí této KA • Proběhlo testování analytických nástrojů InCites/SciVal – pro pilotní ověření byl vybrán nástroj InCites • V rámci bibliometrie probíhá diskuze a komentování navržené sady indikátorů • Návrh na vylepšení IS VaVaI
Poznatky z testování analytických nástrojů • Klíčové se jeví správné namapování dat • Otázka pokrytí vs. kvalita dat • Společný problém – není řešena frakcionalizace (prozatím) – rozdělení podílu na vzniku práce • Pružnost ve vývoji nástrojů
Poznatky z testování analytických nástrojů-přehled metrik: InCites SciVal Normalized Citation Impact Field-Weighted Citation Impact (FWCI)
S
Scolarly Output
S
Citation Count
S
% Documents cited
Citation per Publication
S
% International Collaborations
Cited Publications
International Collaborations
Collaboration (not just international)
% Documents in Top 1% (normalized)
Outputs in Top Percentiles (non-normalized)
% Documents in Top 10%(normalized)
h-indicies
H-Index
h-index (Hirsch index)
Journal normalized citation impact
g-index (high cited publications)
Average percentile
m-index (h-index/publication years)
ESI Most Cited
Publications in Top Journal Percentiles
S
THE Ranked Organization Type
Collaboration Impact
S
% Highly Cited Papers
Journal Count
Highly Cited Papers
Number of Citing Countries
% Hot Papers
Journal Category Count
% Industry Collaborations (useless for CR)
Academic-Corporate Collaboration
S
Impact Relative to World
Academic-Corporate Collaboration Impact
S
Web of Science Documents Times cited Citation Impact
S
S
Závěr • Možnosti převážně retrospektivních základních analýz • Pokročilé citační analýzy se odvíjejí od dostupnosti nástrojů – případně zdrojových dat • Stále chybí jasné standardy použití bibliometrie – na mezinárodní úrovni diskuze – vznikají různá doporučení (Leiden Manifesto) • Na národní úrovni by mohly posloužit výstupy z projektu IPN Metodika
Děkuji za pozornost
Kontakt:
[email protected]
