62
Il sonno della ragione genera anamorfosi bibliometriche I criteri della VQR spiegati mediante Escher Prof. Giuseppe De Nicolao Università degli Studi di Pavia, ROARS Lunedì 21 dicembre 2015 - ore 18:00 Aula Bruni - Collegio Ghislieri Piazza Ghislieri, 5 27100 Pavia

Il sonno della ragione genera anamorfosi bibliometriche

Embed Size (px)

Citation preview

Il sonno della ragione genera anamorfosi

bibliometriche

I criteri della VQR spiegati mediante Escher

Prof. Giuseppe De Nicolao Università degli Studi di Pavia, ROARS

Lunedì 21 dicembre 2015 - ore 18:00 Aula Bruni - Collegio Ghislieri

Piazza Ghislieri, 5 27100 Pavia

Quos vult Iupiter perdere

dementat prius

In principio era il quadrato

Magico

In principio era il quadrato

Magico

Valutarelepoesie

...determinarelagrandezzadiunapoesiadiventaunaques4onerela4vamentesemplice.Sesegniamolaperfezionediunapoesiasull'asseorizzontalediungraficoelasuaimportanzasuquellover4cale,saràsufficientecalcolarel'areatotaledellapoesia,permisurarnelagrandezza.

IMPACTFACTOR

#CITATIONS

Valutarelaricerca

ForthematrixentrieslabeledIRwerelyontheinformedpeerreview

ANVURproposal:Usebibliometry,#ofcitaAons(andinformedpeerreview)

7

A

B

C

D

Cita=o

ns

A

B

C

D

A B C D

A

B

C

D

Cita=o

ns

A

B

C

D

A B C D

A A A?

D D

D

A

A

A?

D

IR

IR

IR

IRIR

IRIR

IR IR

IR

IR

IR IRIR

Bibliometry(IF,…) Bibliometry(IF,…)

Recent articles

Old articles

IduevolAdelquadratomagicodelGEV09

BEST

WORST

Loschemabase...

...haduevarianA...

Qualebersagliopreferite?

0 punti 0 punti

ING-INF/05 RestodelGEV09

JOURNAL RANKING JOURNAL RANKING

CITATIONS

BEST BEST

WORST WORST

0,5 pti

1 punto 1 punto

0,8 punti 0,8 punti

0,5 pti

E = 1 B = 0,8 A = 0,5 L = 0

20%

20%

10%

50%

Iveri“bersagliVQR”sonodiversidaquelloteoricoecambianodaareaadarea

Tipiacevincerefacile?

40%

25%

14%

21%

22%

21%

13%

44% IngegneriaIndustrialee

dell’Informazione

Scienze

Mediche

Morale:Lefor4variazioniinter-arearendonoivo4

incomparabilitraareediverse

L’ANVURlosaepredicabene...

L’ANVURhaleideemoltochiare...

Pertanto, le tabelle che per comodità di visualizzazione riuniscono nel rapporto i risultati delle valutazioni nelle varie Aree non devono essere utilizzate per costruire graduatorie di merito tra le aree stesse, un esercizio senza alcun fondamento metodologico e scientifico.

Rapporto Finale ANVUR – Parte I, p. 7

...marazzolamaleediffondeallastampala

graduatoriadelleareeicuipunteggieranostaAdichiaraA

“incomparabili”

1°2°

Il“bersagliofacile”portal’area09sulpodio:terzidopochimiciefisici

...eilSole24Oreabboccasubito

maquestoèfolklore(anchesefinoaduncertopunto,vedidopo)

LaveraquesAoneèun’altra...

Cosamancanell’AppendiceA?

•  Mancanole%nellaproduzionemondialediE,B,A,LperidiversiSSD(ibersaglidiogniSSD)

•  Conoscerelevariazioniintra-areapermeNerebbedivalutareseequantosonoscalibratetralorolevalutazionidegliSSD

•  Perchénonsonoriportate?•  NOTA:Convariazioniintra-areasimiliaquelleinter-areal’interaVQRsarebbeinvalidata

2015:ANVURammeNecheRoarsavevaragione

(laVQR2004-2010erascalibrata)

Collezione VQR 2011-2014: Va di moda la cravatta

(regimental)

Journalmetricindex(IPP)

Citazion

i

2013-Scopus

Journal metric index (IPP)

Cita

zion

i

6citazionibastanoperessereEccellente

9citazionibastanoperessereEccellente

35(maanche70)citazioninonbastanoperessereEccellente:contanocome3citazioni

2citazionibastanoperessereElevato

Discreto

2013-Scopus

B = 0,9⋅G + 1⋅C

voto articolo

percentile citazioni

percentile voto rivista

sensitività rispetto a G: 0,9 “ “ a C: 1,0

B = 0,9⋅G + 1⋅C

voto articolo

percentile citazioni

percentile voto rivista

sensitività rispetto a g: 0,9⋅dG/dg “ “ a c: 1,0⋅dC/dc

dG/dg e dC/dc sono FORTEMENTE NON LINEARI

8 citazioni

35 p

unti

25 citazioni (o più) 10 p

.ti

2 citazioni

40 p

unti

2 p.ti IPP

60 p

unti

2 p.ti IPP 30

pun

ti

4 p.ti IPP (o più) 10 p

.ti

Anamorfosianvuriana2013 Scalanaturale

0citazioni

1citazione

2citazioni

209citazioni

3citazioni

*

Anamorfosianvuriana2014 Scalanaturale

0citazioni

1citazione

2citazioni

258citazioni

3citazioni

«MancolebasidelmesAere!»

“Therubberruler”

“Percentile ranks cannot be added”: nella letteratura pedagogica

è cosa ben nota

FARRALL,MelissaLee.Readingassessment:Linkinglanguage,literacy,andcogni4on.JohnWiley&Sons,2012,p.66

ARY,Donald,etal.Introduc4ontoresearchineduca4on.CengageLearning,2013.p.134

RAVID,Ruth,etal.Prac4calsta4s4csforeducators.Rowman&LiNlefield,2014,p.97

hkp://star.cde.ca.gov/star2001/help/ScoreExplanaAons.html

SIDHU, Kulbir Singh. Statistics In Education And Psychology. Sterling Publishers Pvt. Ltd, 2006, p. 10

ARY,Donald,etal.IntroducAontoresearchineducaAon.CengageLearning,2013.p.122

SATTLER,JeromeM.;HOGE,RobertD.Assessmentofchildren:Behavioral,social,andclinicalfounda=ons.USA:PublisherInc,2006.

“Percentile ranks cannot be added”: anche nella letteratura psicometrica è cosa ben nota

https://quizlet.com/6778553/psychometrics-study-guide-flash-cards/

“Percentile ranks cannot be added”: lo insegnano nel programma di algebra dell’ high school

MALCZEWSKI, Jacek. GIS‐based multicriteria decision analysis: a survey of the literature. International Journal of Geographical Information Science, 2006, 20.7: 703-726, p. 8

“Percentile ranks cannot be added”: lo sanno anche chimici e geografi

DEAN, John R. Practical skills in chemistry. Pearson Education, 2002, p. 65

ROBINSON,Rick(ed.).FoundaDonsofforensicvocaDonalrehabilitaDon.SpringerPublishingCompany,2013,p.100

“Percentile ranks cannot be added”: lo sanno anche i giuristi che raccomandano ai valutatori di evitarli se non vogliono essere portati in giudizio con l’accusa di “decisioni arbitrarie”

ANVUR Science

Valutazione&conformismo

«Alla guida del veicolen defe sedere �il piloten più experten, uno ingegnerie … »

SARÀ EIN LUNGO VIAGGEN