La Valutazione Ricerca e Terza MissioneVQR, SUA‐RD e Accreditamento Periodico

Giuseppe Conti & Maria SchiavoneSotto Gruppo Valutazione Gruppo CODAU RICERCA

Roma – 31 Marzo 2017

Premessa: 15 anni di valutazione della Ricerca

SUA RD 2011 ‐ 2013 (Scheda Unica Annuale Ricerca Dipartimentale)

VQR 2011 – 2014 (Valutazione Qualità Ricerca)

SUA RD 2014 – 2016

Il gruppo di lavoro (prima e seconda SUA RD)

Conclusione

Dalla VTR (Valutazione Triennale Ricerca) a livello nazionale.. 15 anni

Premessa: 15 anni di valutazione della Ricerca

Anno 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016

MIUR VTR L.2402010 ASN1  ASN2

CIVR pre‐VTR  VTR VTR esiti

ANVUR 

pre‐VQR1VQR1 VQR1 VQR1 esiti pre‐VQR2

VQR2VQR2

VQR2 esiti

pre‐SUA‐RD1

SUA‐RD1esiti SUA‐RD1

pre‐SUA‐RD2

Iniziata come una maratona ma sono 400 metri (processo non regolare)

Dalla VTR a livello nazionale.. 15 anni

Alla valutazione esterna aggiunta l’autovalutazione (SUA RD) .. Esi passa al decathlon

Premessa: 15 anni di valutazione della Ricerca

Anno 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016

MIUR VTR L.2402010 ASN1  ASN2

CIVR pre‐VTR  VTR VTR esiti

ANVUR 

pre‐VQR1VQR1 VQR1 VQR1 esiti pre‐VQR2

VQR2VQR2

VQR2 esiti

pre‐SUA‐RD1

SUA‐RD1esiti SUA‐RD1

pre‐SUA‐RD2

Verso la certezza dell’esercizio … e dei tempi (1 SUA ognianno e 1 VQR ogni 5 anni*)

Stabilizzazione e peso crescente della valutazione per lerisorse ad Atenei (VQR: quota premiale FFO) e dipartimenti(SUA RD: dipartimenti eccellenti ?)

Accreditamento: requisito R4 (Valutazione della ricerca e TerzaMissione), indicatori R4a – R4b (accertare che l’Ateneo elabori,dichiari e persegua adeguate politiche volte a realizzare la propria visionedella qualità della ricerca e Terza Missione)

Premessa: 15 anni di valutazione della Ricerca

* L. 11/12/2016, n. 232 ‐ Bilancio di previsione dello Stato per l'anno finanziario 2017 e bilanciopluriennale per il triennio 2017‐2019, art. 1, c. 339«i‐bis) svolge, con cadenza quinquennale, la valutazione della qualità della ricerca delle università edegli enti di ricerca, sulla base di un apposito decreto del Ministro dell'istruzione, dell'università edella ricerca, emanato entro il 31 marzo dell'anno successivo al quinquennio oggetto di valutazione,e diretto a individuare le linee guida concernenti lo svolgimento della medesima valutazione e lerisorse economiche a tal fine necessarie. La valutazione della qualità della ricerca deve essereconclusa entro il 31 dicembre dell'anno successivo all'emanazione del decreto di cui al precedenteperiodo».

SUA RD ... Come eravamo ... 

Allegato X ‐ Attori, compiti e tempi delle procedure di Accreditamento delle sedi e dei corsi di studio e di Valutazione Periodica 

Data  Attore  Compito  Fase … … … …

31/12/2013  Dipartimenti  Redazione della Scheda Annuale per la Ricerca Dipartimentale  Ciclica permanente 

ANVUR , Autovalutazione, Valutazione e Accreditamento del Sistema Universitario Italiano(Documento approvato dal Consiglio Direttivo dell’ANVUR il 19 dicembre 2012)

C.5.1. – Scheda Unica Annuale della Ricerca Dipartimentale (SUA‐RD) • Compilata e aggiornata annualmente, elaborata e approvata dal Consiglio di Dipartimento e resa pubblica entro il 31 dicembre.• Conservata in un archivio informatizzato e resa disponibile a soggetti autorizzati• Contenuti:  

- obiettivi di ricerca del Dipartimento; - qualità e impatto della produzione scientifica dei docenti e dei ricercatori afferenti al Dipartimento; - responsabilità scientifica di progetti di ricerca internazionali e nazionali ammessi al finanziamento sulla base di bandi competitivi; - coordinamento di network internazionali di ricerca; - fondi per la ricerca disponibili nell’anno precedente; - direzione di riviste, collane editoriali, enciclopedie e trattati di riconosciuto prestigio;- partecipazione a comitati editoriali di riviste, collane editoriali, enciclopedie e trattati di riconosciuto prestigio;- partecipazione a comitati di programma di congressi internazionali di riconosciuto prestigio;- attribuzione di incarichi di insegnamento o fellowship ufficiale presso atenei e istituti di ricerca, esteri e internazionali, di alta qualificazione;- direzione o responsabilità scientifica/coordinamento di enti o istituti di ricerca pubblici o privati di alta qualificazione nazionale o internazionale;- partecipazione ad accademie aventi prestigio nel settore;- conseguimento di premi e riconoscimenti per l’attività scientifica;- risultati nel trasferimento tecnologico (creazione di spin off, sviluppo, impiego e commercializzazione di brevetti, altre attività di terza missione)- attività di formazione permanente; - breve analisi dei risultati ottenuti con la proposta degli interventi migliorativi

Inizio di interazione e scambi tra Atenei e ANVUR

Decisioni e modifiche del processo: Introdotta fase di sperimentazione Differita scadenza compilazione Revisione parziale del modello (sezioni, definizioni, tipologie di dati..) Collaborazione stretta con gruppo di lavoro Cineca

Nasce il primo gruppo di lavoro sulla valutazioneall’interno del CODAU Ricerca (estate 2013) che hacontribuito al raggiungimento dell’obiettivo di ANVURrazionalizzando il carico di lavoro per gli Atenei

SUA RD 2011 ‐2013 ... Inizio di un percorso condiviso

Politecnico di Milano

Università Cattolica

Università di Bologna

Università di Brescia

Università di Messina

Università di Milano

Università di Milano Bicocca

Università di Padova

Università di Pavia

Università di Torino

Università Roma La Sapienza

SUA RD 2011 ‐2013 ... Primo sottogruppo Codau Ricerca «per SUA RD»

94 Atenei – adesione elevata – 96.060 prodotti – 6,2%prodotti mancanti

Processo competitivo – complessità gestione dei rapportiistituzionali per pericolo di conflitto di interesse

Estate 2015 (richiesta ANVUR): coordinamento dellaraccolta delle osservazioni su bando VQR

Partecipazione degli atenei‐uffici al focus group CINECAdedicato al modulo «valutazione» di IRIS utilizzato perl’esercizio VQR convergenza di interessi

Auspicabile collaborare sempre, sul piano tecnico, dove sipuò per massimizzare efficacia ed efficienza dei processi

VQR 2011 ‐2014

Pubblicazione nuove linee guida maggio 2016 con elementiad elevato impatto organizzativo (i.e produzione scientifica)

Percorso definizione contenuti e metodi non più condiviso?

Nel dicembre 2016 il confronto riprende su propostaANVUR: tavolo tecnico CODAU‐ANVUR‐CINECA (22 dicembre2016 e 13 gennaio 2017) Dal macro (gruppi di ricerca, riesame..) al micro (ridefinizione del

personale –quadro C2, codici ERC, rivalutazione attrezzature) Aspetti di processo (riuso dei dati della prima SUA RD e nuovo modello di

gestione della produzione scientifica – quadro D)

Altro stop.. lavori in corso? necessario intervento del MIURDecreto Ministeriale 12 dicembre 2016 n. 987Autovalutazione ,valutazione, accreditamento iniziale e periodico delle sedi e dei corsi di studio universitari. Art. 9 (Banche dati di riferimento) comma 2. I contenuti e il funzionamento e i termini di compilazione delle banche dati di cui al presente articolo [nota: anche SUA RD]  sono definiti con apposito Decreto direttoriale.

SUA RD 2014 ‐2016 ... Tra una VQR e l’altra…

Anticipazioni del MIUR su nuova versione SUA‐RD

Volontà di creare unica base di dati per molteplici utilizzi (noinserimento ripetuto stessi dati e precompilazione dei campi)

Convergenza di autovalutazione, accreditamento e monitoraggio(politiche, dati e risultati)

Tra le novità: aggiunta di politiche di programmazione delpersonale, mappature spazi e laboratori dei dipartimenti, siabbandona la cassa e si passa al principio di competenza perprogetti competitivi…

Attenzione alle DEFINIZIONI (progetti)

al PROCESSO (azioni richieste agli individui e al dipartimento)

e ai TEMPI (partenza ??.. Scadenza 30.09 !! differenziare..

SUA RD 2014 ‐2016 ... LAST NEWS…

Il gruppo di lavoro Codau – Ricerca – Valutazione (dal 2015)

42 persone

25 università

LUISSPolitecnico di BariPolitecnico di Milano*Università BocconiUniversità Ca' Foscari di VeneziaUniversità Cattolica*Università dell’InsubriaUniversità di Bologna*Università di CamerinoUniversità di FerraraUniversità di FirenzeUniversità di MilanoUniversità di Milano Bicocca

Università di Modena e ReggioUniversità di PadovaUniversità di Pavia

Università di PerugiaUniversità di Pisa

Università di Roma “Tor Vergata”Università di Salerno*

Università di SienaUniversità di Torino*Università di TrentoUniversità di Verona

Università Roma La Sapienza*Università Suor Orsola Benincasa

Cresciuto interesse, competenze e partecipazione ma discontinuità nelle azioni ed alto costo di coordinamento (comunicazione)

Relazione più stretta VQR – SUA RD ??

Uso più esteso dei dati per l’ allocazione delle risorse ??

Collaborare, collaborare, collaborare..Gruppo di lavoro CODAU – CRUI – ANVUR – MIUR

Il futuro alle porte…

LINEE GUIDA per la compilazione della Scheda Unica Annuale della Ricerca Dipartimentale degli anni 2014, 2015 e 2016 – Ultima versione online.«[…] la SUA‐RD è quindi uno strumento per analizzare il quadro della ricerca dipartimentale negli anni che intercorrono tra due esercizi VQR. Mediante la SUA‐RD si mette a disposizione del Ministero e degli Atenei lo strumento per una più tempestiva distribuzione della parte premiale del FFO nei periodi intermedi tra una VQR e la successiva» 

NOTA  MIUR 10 marzo 2017 ‐ Aggiornamento SUA‐RD. Validazione dipartimenti e docenza afferente al 1 gennaio 2017«[…] tale quadro informativo va aggiornato e, ove possibile, semplificato e integrato con altri importanti e delicati processi previsti dalla normativa, anche con riferimento alla valutazione e al finanziamento dei “dipartimenti di eccellenza”, ai sensi dell’art. 1, commi 314‐ 337 della legge 11 dicembre 2016, n. 232».