Zkušenosti Knihovny Akademie věd ČR (Pavel Míka, AV ČR)

Zkušenosti Knihovny Akademie věd ČR

Mgr. Pavel Mika10. 10. 2014

KRE 2014

Osnova

• Bibliometrické metody - možnosti a omezení jejich použití

• Dostupné informační zdroje

• Možnosti základních analýz

• Hodnocení pracovišť AV ČR

• IPN Metodika – KA1

Respektované bibliometrické „zásady“

• San Francisco Declaration on Research Assessment (DORA)„General recommendation: Do not use journal-based metrics, such as Journal Impact Factors (JIFs), as surrogate measures of the quality of individual research articles, to assess an individual scientist’s contributions, or in hiring, promotion, or funding decisions.“

• Nepoměřujeme počty citací (nebo průměrné počty citací na článek) mezi různými obory

• Z toho vyplývají jistá omezení a nutnost využití sofistikovaných citačních indikátorů

• nejsou dostupné z WoS/Scopus přímohttp://www.ascb.org/dora/

Dostupné informační zdroje

• ASEP, Analytika ASEP

• WoS

• Scopus

• Další (IS VaVaI - RIV, Google Scholar, …)

Zatím pouze k testování

• InCites

• SciVal

Analytika ASEP

• Bibliografické přehledy a grafické výstupy výsledků základního výzkumu oblastí, ústavů, útvarů a vědeckých pracovníků AV ČR.

• Analýza typů dokumentů

• Přehled časopisů, ve kterých entita publikuje

• Přehled ústavů

http://www.lib.cas.cz/arl/

Ukázka Analytika ASEP

Možnosti základních analýz

• Druhy dokumentů• Počty dokumentů• Obory• Zahraniční spolupráce

– Míra– Počet zemí– Korespondenční autoři

• Percentilové rozdělení na základě citačního ohlasu časopisu

• Analýza adres

Počty dokumentů

0

2000

4000

6000

8000

10000

12000

14000

160001

98

8

19

89

19

90

19

91

19

92

19

93

19

94

19

95

19

96

19

97

19

98

19

99

20

00

20

01

20

02

20

03

20

04

20

05

20

06

20

07

20

08

20

09

20

10

20

11

20

12

Po

čet

do

kum

en

tů

Roky

ČR

UNI

AVČR

- Typ dokumentu: article, proceedings paper, review- Zdroj dat: WoS

Oborové rozdělení AV ČR

64%

21%

9%

2% 3% 1%

1. Natural Sciences

2. Engineering andTechnology

3. Medical and HealthSciences

4. Agricultural Sciences

5. Social Sciences

6. Humanities

- OECD klasifikace- Typ dokumentu: article, proceedings paper, review- Zdroj dat: WoS- Kumulativně data z let 1988-2012

TOP obory

18%

18%

17%8%

5%

4%

4%

1.03 Physical sciences andastronomy1.06 Biological sciences

1.04 Chemical sciences

2.05 Materials engineering

3.01 Basic medical research

1.05 Earth and relatedenvironmental sciences1.01 Mathematics

- OECD klasifikace- Typ dokumentu: article, proceedings paper, review- Zdroj dat: WoS- Kumulativně data z let 1988-2012

Zahraniční spolupráce

0

500

1000

1500

2000

2500

3000

3500

4000

4500

19

88

19

89

19

90

19

91

19

92

19

93

19

94

19

95

19

96

19

97

19

98

19

99

20

00

20

01

20

02

20

03

20

04

20

05

20

06

20

07

20

08

20

09

20

10

20

11

20

12

Po

čet

do

kum

en

tů

Roky

AV ČR vše

AV ČR zahr. spol.

Koresp. aut. CZ


Rozložení zahraniční spolupáce a korespondenčních autorů

19%

27%

54%

Zahraniční spolupráce - CZkoresp. autor

Zahraniční spolupráce -zahr. koresp. autor

CZ autoři (bez zahr. spol)

- Typ dokumentu: article, proceedings paper, review- Zdroj dat: WoS- Kumulativně data z let 1988-2012

Podíl zahraniční spolupráce (%)

24 23

2930

3233

4042

47 4749

4749

5150 49

50 50 49 5048 48

5149

53

00

10

20

30

40

50

60

19

88

19

89

19

90

19

91

19

92

19

93

19

94

19

95

19

96

19

97

19

98

19

99

20

00

20

01

20

02

20

03

20

04

20

05

20

06

20

07

20

08

20

09

20

10

20

11

20

12

Roky


Porovnání spolupráce a citačníhoohlasu (%)

00

10

20

30

40

50

60

70

80

19

88

19

89

19

90

19

91

19

92

19

93

19

94

19

95

19

96

19

97

19

98

19

99

20

00

20

01

20

02

20

03

20

04

20

05

20

06

20

07

20

08

20

09

20

10

20

11

20

12

%

Roky

podíl zahraniční spolupráce

podíl citací dokumentů v zahr. Spol.(zahr/všechny)


Počet zemí v mezinárodní spolupráci

40 39 3842 44

56 57 5661 61 63

71 71

6168

76 77

88 90

80

9599

94101

108

33 31 3034

3037

3441

4548 48

52 5449

54 5652

57 59 59

73 7175

80 79

0

20

40

60

80

100

120

19

88

19

89

19

90

19

91

19

92

19

93

19

94

19

95

19

96

19

97

19

98

19

99

20

00

20

01

20

02

20

03

20

04

20

05

20

06

20

07

20

08

20

09

20

10

20

11

20

12

Roky


Kvartilová distribuce na základě IF časopisu

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

AV ČR celá ČR ČR bez AV

Q4

Q3

Q2

Q1

- Typ dokumentu: article- Zdroj dat: WoS; data za rok 2012

Pořadí podle 1. kvartilu - % článků74

54 53

4035

30

49

39 3835

3329

25

52

4236

31

11

6663

5954

45 43

6562 61

58 57 56

3935

60

4542

35

00

10

20

30

40

50

60

70

80

Ast

ron

om

ický

úst

av

Fyzi

káln

í úst

av

Úst

av ja

der

né

fyz

iky

Úst

av in

form

atik

y

Mat

em

atic

ký ú

stav

Úst

av t

eo

rie

info

rmac

e a

au

tom

atiz

ace

Úst

av f

yzik

y m

ate

riál

ů

Úst

av f

oto

nik

y a

ele

ktro

nik

y

Úst

av p

říst

rojo

vé t

ech

nik

y

Úst

av t

eo

reti

cké

a a

plik

ova

né

me

chan

iky

Úst

av t

erm

om

ech

anik

y

Úst

av f

yzik

y p

lazm

atu

Úst

av p

ro h

ydro

dyn

amik

u

Úst

av f

yzik

y at

mo

sfé

ry

Úst

av s

tru

ktu

ry a

me

chan

iky

ho

rnin

Geo

fyzi

káln

í úst

av

Geo

logi

cký

úst

av

Úst

av g

eon

iky

Úst

av a

nal

ytic

ké c

he

mie

Úst

av f

yzik

áln

í ch

em

ie J

. He

yro

vské

ho

Úst

av c

he

mic

kých

pro

cesů

Úst

av o

rgan

ické

ch

emie

a b

ioch

emie

Úst

av a

no

rgan

ické

ch

emie

Úst

av m

akro

mo

leku

lárn

í ch

em

ie

Bio

tech

no

logi

cký

úst

av

Bio

fyzi

káln

í úst

av

Úst

av m

ole

kulá

rní g

en

eti

ky

Mik

rob

iolo

gick

ý ú

stav

Úst

av e

xper

imen

táln

í bo

tan

iky

Úst

av e

xper

imen

táln

í me

dic

íny

Fyzi

olo

gick

ý ú

stav

Úst

av ž

ivo

čišn

é fy

zio

logi

e a

gen

eti

ky

Bo

tan

ický

úst

av

Bio

logi

cké

cen

tru

m

Ce

ntr

um

výz

kum

u g

lob

áln

í zm

ěn

y

Úst

av b

iolo

gie

ob

ratl

ovc

ů

%

Analýza CZ vs Praha

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013

Rok

Distribuce dokumentů podle afiliace

Praha, CZ a zahraničí

Praha a CZ

Praha a zahraničí

Praha

CZ a zahraničí mimo Prahu

CZ mimo Prahu

Zdroj dat: WoS

Analýza CZ vs Praha

38934

17503

40287

29948

6951

37190

5000

10000

15000

20000

25000

30000

35000

40000

45000

CZ mimo Prahu CZ a zahraničí mimoPrahu

Praha Praha a zahraničí Praha a CZ Praha, CZ a zahraničí

Počet publikací podle afiliace, 2002-2013

Hodnocení výzkumné a odborné činnosti pracovišť AV ČR za období

2010-2014

• KNAV spolupracuje na přípravě dat pro bibliometrické analýzy

• Zavedení identifikátoru ResearcherID

– Všichni vědečtí pracovníci publikující v časopisech indexovaných ve WoS

IPN Metodika

• Jedním z cílů: navrhnout a pilotně ověřit systém hodnocení výzkumných organizací.

• Projekt rozdělen do 7 klíčových aktivit.

KA1 Informační podpora

• Bibliometrie důležitou součástí této KA

• Proběhlo testování analytických nástrojů InCites/SciVal – pro pilotní ověření byl vybrán nástroj InCites

• V rámci bibliometrie probíhá diskuze a komentování navržené sady indikátorů

• Návrh na vylepšení IS VaVaI

Poznatky z testování analytických nástrojů

• Klíčové se jeví správné namapování dat

• Otázka pokrytí vs. kvalita dat

• Společný problém – není řešena frakcionalizace (prozatím) – rozdělení podílu na vzniku práce

• Pružnost ve vývoji nástrojů

Poznatky z testování analytických nástrojů-přehled metrik:

InCites

Normalized Citation Impact

Web of Science Documents

Times cited

Citation Impact

% Documents cited

% International Collaborations

International Collaborations

% Documents in Top 1% (normalized)

% Documents in Top 10%(normalized)

H-Index

Journal normalized citation impact

Average percentile

ESI Most Cited

THE Ranked Organization Type

% Highly Cited Papers

Highly Cited Papers

% Hot Papers

% Industry Collaborations (useless for CR)

Impact Relative to World

SciVal

Field-Weighted Citation Impact (FWCI) S

Scolarly Output S

Citation Count S

Citation per Publication S

Cited Publications

Collaboration (not just international) S

Outputs in Top Percentiles (non-normalized)

h-indicies S

h-index (Hirsch index)

g-index (high cited publications)

m-index (h-index/publication years)

Publications in Top Journal Percentiles S

Collaboration Impact S

Journal Count

Number of Citing Countries

Journal Category Count

Academic-Corporate Collaboration S

Academic-Corporate Collaboration Impact S

Závěr

• Možnosti převážně retrospektivních základních analýz

• Pokročilé citační analýzy se odvíjejí od dostupnosti nástrojů – případně zdrojových dat

• Stále chybí jasné standardy použití bibliometrie –na mezinárodní úrovni diskuze – vznikají různá doporučení (Leiden Manifesto)

• Na národní úrovni by mohly posloužit výstupy z projektu IPN Metodika

Děkuji za pozornost

Kontakt: [email protected]

mailto:[email protected]

Education

Zkušenosti Knihovny Akademie věd ČR (Pavel Míka, AV ČR)