La valutazione della qualità della didattica nell’Università

La valutazione della qualità La valutazione della qualità della didattica nell’Universitàdella didattica nell’Università

Nucleo di Valutazione dell’Università Nucleo di Valutazione dell’Università di Pisadi Pisa

II

Salerno 12 novembre1999Salerno 12 novembre1999

A PA P

C DC D

VVII

NNVVII

NN

La Valutazione della Didattica nell’Università di Pisa

L’opinione degli studenti

Venerdì 4 LuglioVenerdì 4 Luglio 22

IndiceIndice

• Obiettivi del nucleo di valutazione dell’Università di Pisa

• Le aree di valutazione nell ’università

• La valutazione della didattica nell’Università

• La metodologia Campusone CRUI

• L’opinione degli studenti


• Verificare la corretta gestione delle Verificare la corretta gestione delle risorse pubbliche, la produttività risorse pubbliche, la produttività

della ricerca e della didattica, nonché della ricerca e della didattica, nonché l’imparzialità e il buon andamento l’imparzialità e il buon andamento

dell’azione amministrativadell’azione amministrativa• Determinare i parametri di Determinare i parametri di

riferimento per il controlloriferimento per il controllo• Attuazione delle azioni di controllo Attuazione delle azioni di controllo

Funzioni del Nucleo di Funzioni del Nucleo di ValutazioneValutazione

(Legge 29/93 e ss) (Legge 29/93 e ss)


LA POLITICA DEL NUCLEO DI LA POLITICA DEL NUCLEO DI VALUTAZIONE DELL’UNIVERSITÀ VALUTAZIONE DELL’UNIVERSITÀ

DI PISADI PISA • svolgere i compiti assegnati dalla legge tramite il coinvolgimento e la

responsabilizzazione di tutte le strutture dell’ateneo

• privilegiare lo sviluppo di modelli di valutazione finalizzati

all’autocontrollo ed al miglioramento continuo


IndiceIndice







• PIANIFICAZIONE STRATEGICA– OBIETTIIVI E STRATEGIE

– VALUTAZIONE CRE

• AMMINISTRAZIONE E GESTIONE– CONTROLLO DI GESTIONE

– EFFICIENZA ED EFFICACIA DEI PROCESSI

• RICERCA– VALUTAZIONE INDIVIDUALE (INDICATORI CRUI, DATA BASE

PUBBLICAZIONI)

– VALUTAZIONE DELLE STRUTTURE

• DIDATTICA– AUTOVALUTAZIONE RICORRENTE E VALUTAZONE ESTERNA

PERIODICA (PEER REVIEW)

– MIGLIORAMENTO CONTINUO

– TRASPARENZA ED IMMAGINE (SINTESI DEI RISULTATI DELL’AUTOVALUTAZIONI MESSI A DISPOSIZIONE DI TUTTE LE PARTI INTERESSATE SU SITO WEB DELLA CRUI)


IndiceIndice







La riforma “3+2”: le originiLa riforma “3+2”: le origini

Rapporto Martinotti 1997: obiettivi della riforma:

– Contrattualità del rapporto studenti-ateneo– Differenziazione competitiva tra gli atenei– Flessibilità curriculare– Accreditamento dei corsi di studio– Adozione del sistema dei crediti educativi– Adozione di sistemi di valutazione– Trasparenza


Adozione di sistemi di Adozione di sistemi di valutazionevalutazione

(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)

Autonomia:• nella definizione degli obiettivi, dei

curricula, delle scelte attuative, delle azioni di “controllo”

• nel processo di programmazione didattica, come adempimento dal lato della struttura didattica, della pluralità di “contratti formativi” conseguenti al perfezionamento delle iscrizioni


Adozione di sistemi di valutazioneAdozione di sistemi di valutazione(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)

Responsabilità• nei confronti degli studenti, che nella

scelta del corso di studio danno fiducia ed investono in una proposta formativa

• a fronte degli investimenti e delle aspettative delle “parti interessate”– famiglie– docenti, Ateneo, Murst– lo “stato” ovvero la società– il mondo del lavoro– i “partners”


Adozione di sistemi di Adozione di sistemi di valutazionevalutazione

(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)

Valutazione• interna, attraverso processi più o meno formali

di autovalutazione, anche in collegamento a modelli condivisi a livello settoriale o intersettoriale

• esterna, come valutazioni indipendenti di confronto tipo peer review o di assesment a fronte di Modelli di riferimento (tipo premi internazionali per la qualità o l’eccellenza) o inserendosi in sistemi di accreditamento (di seconda parte, di agenzia, di settore) o di certificazione di terza parte (ISO 9001)


Valutazione/Valutazione/AccreditamentoAccreditamento

La valutazione analizza, in un processo dialettico, i punti forti e quelli deboli pertinenti agli aspetti della formazione negli istituti superiori, al fine di poterne

in primo luogo individuare le cause e, di conseguenza, fornire una serie di utili indicazioni che consentano sia una garanzia, sia un miglioramento

dell’attività didattica nel suo complesso, senza tener conto dei livelli raggiunti sino a quel momento dai

singoli istituti in questione

L’accreditamento consiste in un’operazione di analisi preventiva, che ha come oggetto la previsione della

possibilità o meno che un singolo corso di studio o un istituto superiore siano in grado di raggiungere uno

standard minimo

la valutazione potrebbe corrispondere alla manutenzione ‘di routine’ di

un’autovettura da parte del proprietario (controlli a intervalli

regolari in un’officina autorizzata), mentre l’accreditamento

corrisponderebbe al controllo tecnico periodico statale per la revisione o per

il ‘bollino blù


Accreditamento dei corsi di Accreditamento dei corsi di studiostudio

• prospettiva derivante dalla progressiva erosione del valore legale del titolo di studio e dall’ampio livello di autonomia concesso

• da un accreditamento “legale” sulla base di un formale rispetto da parte di tutti gli atenei dei requisiti ministeriali (il che potrebbe ridursi ad una mera fictio iuris) ad un accreditamento sostanziale, legato a tre criteri:– valore culturale del titolo proposto,– rispondenza a esigenze sociali o economiche,– adeguatezza delle risorse messe a disposizione

ed efficienza /efficacia della loro gestione


IndiceIndice







IL “SISTEMA CLIENTE” DEL CSIL “SISTEMA CLIENTE” DEL CS

Interazione con Clienti e PI

Progettazione del CS

Specifica di erogazione e

controllo del CS

Specificadel CS

Processo di erogazione

del CS

Valutazione da parte dell'organizzazione

Analisi e miglioramento delle prestazioni

del servizio

Valutazione da parte del cliente

Risultati del CS

come

che cosa

che cosa

DCSDCS

AziendeAziendeEnti territorialiEnti territoriali

StudentiStudenti SocietàSocietà

Plan Do

CheckAct

Obiettivi di apprendimento

Esigenze ed

obiettivi


Parti InteressateParti Interessate

Gli studenticome utilizzatori diretti del servizio formativo

Le organizzazioni, imprese, singole persone

ovvero gli utilizzatori finali o beneficiari, che fruiranno o

potranno trarre benefici dalla professionalità acquisita

dallo studente nel Corso di Studio

L’Ateneo di appartenenza, il MURST, il

personale docente e non docente, i partners e i

fornitori, la comunità civile.


CRITERI DI VALUTAZIONECRITERI DI VALUTAZIONE

• VALORE DEGLI OBIETTIVI

• VALORE DEI RISULTATI

• VALORE DELL’ORGANIZZAZIONE E

DEI PROCESSI


ASPETTI CHIAVE PER LA ASPETTI CHIAVE PER LA VALUTAZIONEVALUTAZIONE

•ORGANIZZAZIONE•ESIGENZE ED OBIETTIVI•RISORSE•PROCESSI•RISULTATI


VALUTAREVALUTAREA COSA CI SI PUO’ RIFERIREA COSA CI SI PUO’ RIFERIRE

Insieme di proprietà e caratteristicheche conferiscono ad un prodotto, un servizio, un processo, un’organizzazione, una persona

la capacità di soddisfare esigenze esplicite od implicite di una parte interessata


RISULTATO DI UN PROCESSO O DI UNA SERIE RISULTATO DI UN PROCESSO O DI UNA SERIE DI PROCESSIDI PROCESSI

COSA PREME ALLA PARTE INTERESSATACOSA PREME ALLA PARTE INTERESSATALA DIDATTICA

ELA RICERCA

Equazioni di

Maxwell


Un insieme di elementi e relazioni interagenti tra loro al

fine di svolgere una o più funzioni.

SISTEMASISTEMA

(COME RISPONDERE AL MEGLIO ALLE ESIGENZE DELLE PARTI INTERESSATE

CON LE “RISORSE” DISPONIBILI)

Gli elementi e le relazioni del sistema che consentono di svolgere le funzioni previste sono

collegati tra loro in una catena di processi IL SISTEMA DI GESTIONEL’ORGANIZZAZIONE

(Ateneo, Dipartimento,Corso di Studio, Corso di Dottorato)


LA VALUTAZIONELA VALUTAZIONE

• IL CONTROLLO DEL SISTEMA IL CONTROLLO DEL SISTEMA

(QUALITA’ SISTEMA) (QUALITA’ SISTEMA)

• IL CONTROLLO DEI RISULTATI IL CONTROLLO DEI RISULTATI

(QUALITA’ PRODOTTO)(QUALITA’ PRODOTTO)

CERTIFICAZIONE ISOCERTIFICAZIONE ISO

PRODOTTO & SISTEMA

VALUTAZIONEVALUTAZIONEPER UN’PER UN’

ECCELLENZAECCELLENZASOSTENIBILE NEL TEMPOSOSTENIBILE NEL TEMPO

ACCREDITAMENTOACCREDITAMENTO


IndiceIndice







Adozione di sistemi di Adozione di sistemi di valutazione: opinione degli valutazione: opinione degli

studentistudenti• adempimento di una disposizione legislativa (art 1 L

370/99) che delega al NdV di ogni Ateneo l’organizzazione di tale attività, presidiata da severe sanzioni in tema di allocazione di risorse ministeriali (uno degli elementi richiesti da un possibile accreditamento ministeriale)

• elemento di monitoraggio/controllo dei processi formativi, di quelli gestionali od organizzativi e di contesto (supporto, orientamento, assistenza e tutorato, placement) ai fini di miglioramento del servizio


Risultati e Risultati e ControlloControllo

La Misura dei La Misura dei Risultati come Risultati come

elemento di Controllo elemento di Controllo del Sistema di del Sistema di Conduzione Conduzione dell’Impresadell’Impresa

PLANPLANPLANPLAN

DODODODOCHECKCHECKCHECKCHECK

ACTACTACTACT


Il Controllo dei RisultatiIl Controllo dei Risultati• Chi:• Cosa:

• Perché:

• Quando:

• Come:

Le posizioni di responsabilità del CdScapacità di attrazione, opinioni degli studenti

giudizio delle Parti Interessate

verificare l’efficacia dell’azione di Controllo del Sistema a fronte degli obiettivi stabiliti (target), degli “altri” e dei First Of Class

periodicamente, in relazione alla dinamica di variazione

dei fattori di controllo

tecniche di controllo qualitative e quantitative

(gli “indicatori”)


RisultatiRisultati

• Capacità di attrazione

• Efficacia interna

• Opinioni degli studenti

• Efficacia esterna•questionari di soddisfazione

sia sui singoli corsi che sul CdS nel suo complesso

•tempo di inserimento nel mondo del lavoro•livello di soddisfazione delle imprese

•soddisfazione dei laureati a X anni dalla laurea

•n° studenti immatricolati•valore degli studenti all’ingresso

•risultati della selezione o dell’orientamento

•% laureati•durata media degli studi

•indici di avanzamento negli studi


Sistema di gestioneSistema di gestione

StruttureStrutture

FornitoriFornitori

PersonalePersonaleCostiCosti

Processie

ProcedureD

ipar

tim

ento

AD

ipar

tim

ento

A

Seg

rete

rie

Seg

rete

rie

Fac

olt

àF

aco

ltà

Uff

icio

Tec

nic

oU

ffic

io T

ecn

ico

Am

min

istr

azio

ne

Am

min

istr

azio

ne

Risorse

Struttura Organizzativa


• Valutazione formale effettuata dal CdS relativamente allo stato e all’adeguatezza del Sistema di gestione a fronte degli obiettivi stabiliti ed alla Politica.

• Elementi da considerare– risultati (capacità di attrazione, efficacia

interna della formazione, opinione degli studenti, efficacia esterna della formazione, soddisfazione dei laureati e delle PI...)

– interventi correttivi, azioni di miglioramento– Indicatori e dati derivanti dalla gestione del

Sistema

RiesameRiesame


L 370/99 questionari agli studenti frequentanti 3+2

L 370/99 questionari agli studenti frequentanti 3+2

L 370/99 questionari ai dottorandiL 370/99 questionari ai dottorandi

L 370/99 questionari agli specializzandi e agli iscritti ai Master di 1° e 2° livello

L 370/99 questionari agli specializzandi e agli iscritti ai Master di 1° e 2° livello

L 370/99 questionari specifici per i laureandi - primo e secondo livello

L 370/99 questionari specifici per i laureandi - primo e secondo livello

a.a. 01/02 – 02/03 questionario del NVI a distribuzione cartacea e data entry manuale

a.a. 01/02 – 02/03 questionario del NVI a distribuzione cartacea e data entry manuale

a partire dalle prossime sessioni di laurea sarà disponibile una sezione valutativa affiancata al questionario informativo di DIOGENE

a partire dalle prossime sessioni di laurea sarà disponibile una sezione valutativa affiancata al questionario informativo di DIOGENE

a.s. 2002 – questionario NVI -ADI, compilabile via WEB

a.s. 2002 – questionario NVI -ADI, compilabile via WEB

a.a. 03/04 – questionario del NVI a distribuzione manuale, ma con lettura ottica dei moduli

a.a. 03/04 – questionario del NVI a distribuzione manuale, ma con lettura ottica dei moduli

NVI indagini

conoscitive rivolte agli studenti

NVI indagini

conoscitive rivolte agli studenti

DOC 09/02CNVSU

“Proposta di un insieme minimo di domande per la valutazione della didattica da parte degli studenti”

DOC 4/03CNVSU

“Proposta di un insieme minimo di domande per gli studenti che concludono

gli studi”


““ORA, ECCO, VEDI, CI VUOLE TUTTA LA ORA, ECCO, VEDI, CI VUOLE TUTTA LA VELOCITÀ DI CUI SEI CAPACE PER VELOCITÀ DI CUI SEI CAPACE PER RESTARE ALLO STESSO POSTO.RESTARE ALLO STESSO POSTO.

SE VUOI ARRIVARE IN QUALCHE ALTRO SE VUOI ARRIVARE IN QUALCHE ALTRO POSTO DEVI CORRERE ALMENO DUE POSTO DEVI CORRERE ALMENO DUE

VOLTE DI PIÙ.”VOLTE DI PIÙ.”

““Alice nel paese delle meraviglie”Alice nel paese delle meraviglie”

Lewis Carroll - 1872Lewis Carroll - 1872

UN BRANO FAMOSO...UN BRANO FAMOSO...

La valutazione della qualità della didattica nell’Università

Documents

Transcript of La valutazione della qualità della didattica nell’Università