La VQR di Area13: una riflessione di sintesi. Le slides presentate alla tavola rotonda: "Le esperienze e le evidenze della valutazione della ricerca nell’area 13" organizzata nel convegno della Società Italiana di Statistica Cagliari il'11 giugno 2014
I risultati della valutazione condotta dal GEV13 non sono credibili. Peer review e bibliometria hanno dato risultati non concordanti. Ma nelle altre aree non è andata meglio. Con alcune lezioni per il futuro.
La VQR di Area13: una riflessione di sintesi. Le slides presentate alla tavola rotonda: "Le esperienze e le evidenze della valutazione della ricerca nell’area 13" organizzata nel convegno della Società Italiana di Statistica Cagliari il'11 giugno 2014
1. La VQR di area13: una riflessione
di sintesi
Alberto Baccini (DEPS Unisi e www.roars.it)
SIS2014: Tavola rotonda
Cagliari 11 giugno 2014
2. Alberto Baccini, VQR di area13
Composizione del GEV13: un problema di fairness
http://www.roars.it/online/gli-esperti-di-valutazione-allitaliana/
3. Alberto Baccini, VQR di area13
L’adozione di classifiche di riviste è un problema
http://am.ascb.org/dora/
9596 sottoscrittori individuali; 409 organizzazioni
8. Alberto Baccini, VQR di area13
Non c’è concordanza tra bibliometria e peer review
http://www.roars.it/online/lo-strano-caso-delle-
concordanze-della-vqr/
11. Alberto Baccini, VQR di area13
E perché la varietà dei metodi di valutazione
avrà effetti settoriali differenziati
Fonte: A. Baccini, «Napoléon et l’évaluation bibliométrique de la recherche : le cas de l’Italie », Colloque Bibliométrie et indicateurs
de la recherche: enjeux et perspectives, Toulouse, 11 giugno 2013
19. Alberto Baccini, VQR di area13
Ma come sono fatti i bersagli VQR veri?
Ce lo dice l’ANVUR: infatti, la Tabella A1.1 ci fornisce proprio le
dimensioni degli anelli del bersaglio per ciascuna area CUN
20. Alberto Baccini, VQR di area13
I bersagli veri cambiano da area ad area e sono
molto diversi dal bersaglio teorico
21. Alberto Baccini, VQR di area13
40%
25%
14%
21%
22%
21%
13%
44%
«Vincere facile»
Ingegneria
Industriale e
dell’Informazione
Scienze
Mediche
23. Alberto Baccini, VQR di area13
Non c’è concordanza tra peer review e
bibliometrica per cui
24. Alberto Baccini, VQR di area13
Confronto tra prodotti eccellenti nella VTR e
nella VQR
25. Alberto Baccini, VQR di area13
Conclusioni
Se si vuole comparabilità tra aree si deve adottare
peer review
Nessun esercizio nazionale di valutazione prevede bibliometria coon
valutazione fine del singolo prodotto della ricerca
Se esistesse anagrafe nazionale della ricerca
(ANPRES) si potrebbero condurre analisi
bibliometriche a cadenze regolari
Comportamenti opportunistici
Riduzione del pluralismo