Riformare l'Anvur

30
1 Riformare l’Anvur Francesco Sylos Labini Centro Enrico Fermi & Istituto dei Sistemi Complessi, CNR, Roma

Transcript of Riformare l'Anvur

Page 1: Riformare l'Anvur

1

Riformare l’Anvur

Francesco Sylos Labini

Centro Enrico Fermi & Istituto dei Sistemi Complessi,

CNR, Roma

Page 2: Riformare l'Anvur
Page 3: Riformare l'Anvur
Page 4: Riformare l'Anvur

ANVUR è una

«agenzia amministrativa»

«SOTTOPOSTA ALLA VIGILANZA DEL MINISTRO»

(art. 1, comma 3, del D.P.R. 76/2010)

Page 5: Riformare l'Anvur

Compiti Anvur

• Valutazione strutture (VQR)

• Valutazione docenti (ASN)

• Accreditamento corsi di laurea (AVA)

Page 6: Riformare l'Anvur

Non è un problema burocratico o

un problema di risorse e/o di personale:

Problema Anvur

Page 7: Riformare l'Anvur

Non è un problema burocratico o

un problema di risorse e/o di personale:

Il problema è architettonico oltre che di

competenze specifiche delle persone

Problema Anvur

Page 8: Riformare l'Anvur

• Il ministro stabilisce le regole tecniche della valutazione

• La griglia di valutazione per la VQR (50:10:20:20)

• I punteggi per i singoli prodotti (1:0,8;0,5;0)

• Le penalizzazioni (-0,5) per ogni prodotto mancante

• Confusione di ruoli istituzionali (i valutatori dettano le policy, il ministro le regole per la valutazione)

Chi valuta la ricerca?

Page 9: Riformare l'Anvur

• I 7 membri del consiglio direttivo sono nominati dal ministro da una rosa scelta da un comitato.

• I 7 membri hanno nominato i presidenti dei GEV

• I 7 membri ed il presidente di ogni GEV hanno nominato i membri dei GEV

• Il presidente di ogni GEV con i membri dei GEV hanno nominato i revisori della VQR

• I 7 membri hanno nominato i GDL per le liste di riviste delle abilitazioni

E chi nomina i valutatori?

Page 10: Riformare l'Anvur

E chi nomina i valutatori?

Politica Valutazione

Ricerca

Page 11: Riformare l'Anvur

E chi nomina i valutatori?

Politica

Ricerca

Page 12: Riformare l'Anvur
Page 13: Riformare l'Anvur

Is there a ranked list of institutions’ results?

RAE2008 results are in the form of a quality profile for each

submission made by an HEI. We have not produced any ranked

lists of single scores for institutions or UoAs, and nor do

we intend to.

Page 14: Riformare l'Anvur

Is there a ranked list of institutions’ results?

RAE2008 results are in the form of a quality profile for each

submission made by an HEI. We have not produced any ranked

lists of single scores for institutions or UoAs, and nor do

we intend to.

Page 15: Riformare l'Anvur

Report on the pilot exercise to develop bibliometric indicators

for the REF

Bibliometrics are not sufficiently robust at this stage to be used

formulaically or to replace expert review in the REF

VQR: gli indicatori bibliometrici

• l’Impact Factor di Journal Citation Reports di Thomson Reuters (IF) della rivista nell’anno di pubblicazione;

• il numero di citazioni ricevute dal prodotto fino al 31 dicembre 2011;

bibliometry

Page 16: Riformare l'Anvur
Page 17: Riformare l'Anvur
Page 18: Riformare l'Anvur
Page 19: Riformare l'Anvur
Page 20: Riformare l'Anvur
Page 21: Riformare l'Anvur

BIBLIOMETRY

Page 22: Riformare l'Anvur

Perché questo disastro?Clima culturale avverso all’università ed ai baroni

Assenza di «cultura della valutazione»

Creazione di una struttura di valutazione istituzionalmente inadeguata (perché dipendente direttamente dalla politica)

Struttura di valutazione organizzativamente inadeguata

Consiglio direttivo «tecnicamente inadeguato»

Rivista Numero articoli di membri del consiglio direttivo

Research Evaluation 2 (Bonaccorsi)

Research Policy 6 (Bonaccorsi)

Scientometrics 4 Bonaccorsi

Journal of Informetrics 0

JASIST 0

Page 23: Riformare l'Anvur

Un futuro per la valutazione in ItaliaIl sistema attuale attribuisce ai politici e ad una ristrettissima élite di consulenti un potere enorme e senza contrappesi sul sistema della ricerca.

La valutazione guidata da una lobby di accademici e politici può devastare ciò che di buono è stato fatto dal mondo della ricerca italiano.

 E' necessaria pertanto una modifica radicale dell’assetto istituzionale del sistema di valutazione della ricerca.  

Page 24: Riformare l'Anvur

Ipotesi 1. Agenzia autonoma sul modello AERES?

Ridisegno di ANVUR

Page 25: Riformare l'Anvur

Ipotesi 1. Agenzia autonoma sul modello AERES?

Ma in Francia nel frattempo ….

Ridisegno di ANVUR

Page 26: Riformare l'Anvur

Valutazione/Anvur

Page 27: Riformare l'Anvur

Ridisegno di ANVUR

Ipotesi 1. Agenzia autonoma sul modello AERES?

Ipotesi 2. Agenzie separate per valutazione della ricerca e attività di valutazione ed accreditamento delle università e dei corsi di studio.

Page 28: Riformare l'Anvur

Il ruolo del CUN

 Il CUN assume la funzione di rappresentanza istituzionale della comunità.

Ad esso spetta di definire, in raccordo trasparente e formalizzato con le comunità scientifiche e con le agenzie di valutazione, i criteri di massima da usare per la realizzazione delle attività di valutazione

Page 29: Riformare l'Anvur
Page 30: Riformare l'Anvur

Solo gli apprendisti stregoni credono nelle ricette magiche

•Competenza scientifica

•Studio delle esperienze internazionali

•Un’agenzia di valutazione tecnicamente ed eticamente adeguata