Monitoraggio e valutazione dei servizi formativi

DOCENTIEmmanuele Crispolti (moduli 1 e 3)Alessandro Chiozza (moduli 2 e 4)

Monitoraggio e valutazione dei servizi formativi

Modulo 1 Monitoraggio e valutazione: principali aspetti teorici

Modulo 2Monitoraggio e valutazione: la strumentazione

Modulo 3Project work

Modulo 4Project work

Monitoraggio e valutazione dei servizi formativi

Aspetti terminologici e concettuali

DOCENTIEmmanuele Crispolti (moduli 1 e 3)Alessandro Chiozza (moduli 2 e 4)

Monitoraggio e valutazione dei servizi formativi

MONITORAGGIO processo di verifica dello stato di avanzamento di una azione o di un percorso formativo attraverso l’acquisizione di dati

VALUTAZIONEprocesso di sintesi volto a fornire un giudizio sull’efficacia e l’efficienza di un’azione o di un percorso rispetto al contesto, ovvero sulla sua capacità di raggiungere gli obiettivi prefissati

Ex ante

Fattibilità tecnica e finanziaria

Rapporto costi-benefici

Analisi della coerenza interna

del progetto

Ex post

Benefici prodottiAnalisi

dell’apprendimento e delle

modifiche del comportamento

sul lavoro

In itinere

Gradimento e taraturaAnalisi di

linguaggio, tempi, fasi, strumenti, apprendimento

I tempi della valutazione

Ex ante

Ci permette di capire se

l’intervento presenta, in partenza, le

condizioni per raggiungere gli

obiettivi

Ex post

Ci descrive il raggiungimento degli obiettivi prefissati e ci permette di ritarare o

modificare le successive edizioni

In itinere

Ci consente di capire se

l’intervento sta procedendo come

prevedevamo

Gli obiettivi della valutazione

Gradimento

reazioni emotive

immediate

Cambiamento sul lavoro

modifiche su modalità e contenuto

tecnico/ruoloApprendimento

acquisizione di conoscenze,

abilità, modifica atteggiamenti

Che cosa si valuta

contenuti

adeguatezzachiarezzapertinenza

attrezzature/ logistica

qualitàadeguatezza

formatori ed operatori

competenzadisponibilitàchiarezza

Valutazione del gradimento

metodologie didattiche

efficaciaadeguatezzachiarezzapertinenza

Conoscenze Acquisizione di nuovi concetti,

teorie, informazioni, schemi logici

AtteggiamentiMutamento orientativo all’azione al giudizio, alla

reazione emotiva

Abilità Acquisizione di

capacità operative ed applicative

Valutazione dell’apprendimento

Monitoraggio e valutazione dei servizi formativi

PARAMETRI

Costituiscono il tipo di metro con il quale si ragiona su un servizio, un progetto o una azione formativa (coerenza, efficienza, trasferibilità, ecc.)

INDICATORI

Sono variabili quantitative e qualitative che ci permettono di misurare le acquisizioni ed i cambiamenti realizzatisi a seguito di un intervento e dunque di valutare se un’azione formativa ha conseguito gli obiettivi prefissati

Monitoraggio e valutazione dei servizi formativi

PARAMETRI

•Coerenza•Adeguatezza e rispondenza

•Efficienza •Efficacia

•Riproducibilità•Trasferibilità•Sostenibilità

Monitoraggio e valutazione dei servizi formativi

Parametri

COERENZA • adeguatezza metodologica, tecnica e logica dell’intervento rispetto agli obiettivi prefissati

ADEGUATEZZA – RISPONDENZA • corretta taratura dell’intervento sui fabbisogni di partenza

Monitoraggio e valutazione dei servizi formativi

Parametri

EFFICACIA• capacità del percorso elaborato di raggiungere gli obiettivi prefissati

EFFICIENZA – ECONOMICITA’ •convenienza del percorso nei termini della sua capacità di raggiungere gli obiettivi prefissati in poco tempo e con costi ridotti

Monitoraggio e valutazione dei servizi formativi

Parametri

RIPRODUCIBILITA’• possibilità di riprodurre l’intervento formativo in risposta a problemi analoghi

TRASFERIBILITA’ • possibilità di riprodurre l’intervento formativo in risposta a problemi ed in contesti differenti

SOSTENIBILITA’•capacità dei benefici derivanti dall’azione di sopravvivere alla fine dell’intervento stesso

Monitoraggio e valutazione dei servizi formativi

Indicatore

Costituisce una misura qualitativa o quantitativa che “indica” lo stato di realizzazione di un’attività o il raggiungimento di un risultato

Gli indicatori devono prevedere un preciso riferimento al termine di comparazione a cui

si riferiscono

Monitoraggio e valutazione dei servizi formativi

Indicatori

Di realizzazione fisica •rappresentano le realizzazioni materiali riferite all’attività svolta

Di risultato•sono gli effetti diretti e immediati sui destinatari degli interventi formativi

Di impatto•Sono gli effetti a lunga scadenza sull’organizzazione

Monitoraggio e valutazione dei servizi formativi

Esempi di indicatori

Di realizzazione fisica • n° corsi realizzati• n° ore di corso realizzate• n° iscritti• n° partecipanti

Di risultato• n° partecipanti che hanno concluso il corso• n° partecipanti che hanno superato la prova finale• competenze acquisite da un singolo allievo• capacità acquisite da un singolo allievo

Di impatto• n° ordini evasi in un mese dall’azienda• n° progetti gestiti in un anno dall’agenzia formativa• n° utenti che si sono ripresentati allo sportello informativo• utili fatturati dall’azienda nell’ultimo anno

Monitoraggio e valutazione dei servizi formativi

La soglia

La soglia indica il valore minimo (generalmente espresso in %) che si considera soddisfacente rispetto alla realizzazione di una attività o al raggiungimento di un risultato

Monitoraggio e valutazione dei servizi formativi

Indicatori di realizzazione fisica Soglie

n° corsi realizzati(ad es. % corsi realizzati nel corso dell’ultimo anno rispetto a quelli dei previsti)

100%

n° ore di corso realizzate (ad es. % ore di corso realizzate sul totale previsto)

100%

n° iscritti(ad es. % richieste di iscrizione rispetto ai posti disponibili)

+50%

n° partecipanti (ad es. % partecipanti rispetto agli iscritti)

100%

Monitoraggio e valutazione dei servizi formativi

Indicatori di risultato Soglie

n° partecipanti che hanno concluso il corso(% di allievi che hanno concluso il corso rispetto ai partecipanti ad inizio corso)

75%

n° partecipanti che hanno superato la prova finale(% di allievi che hanno superato la prova finale rispetto agli iscritti o ai partecipanti ad inizio corso)

70%

competenze acquisite da un singolo allievo(punteggi conseguiti nei questionari di valutazione delle competenze)

punteggio minimo

accettabile

capacità acquisite da un singolo allievo(punteggi conseguiti nelle prove di valutazione delle competenze)

punteggio minimo

accettabile

Monitoraggio e valutazione dei servizi formativi

Indicatori di impatto Soglie

n° ordini evasi in un mese dall’azienda(ad es. n° ordini evasi nel corso dell’ultimo anno rispetto ai 3 anni precedenti)

+ 20%

n° progetti gestiti in un anno dall’agenzia formativa(ad es. n° progetti gestiti nell’ultimo anno rispetto ai 3 anni precedenti)

+ 10%

n° utenti che si sono ripresentati allo sportello informativo(ad es. n° utenti ritornati nel corso dell’anno rispetto a quanto avvenuto nell’anno precedente)

+ 15%

utili fatturati dall’azienda nell’ultimo anno

+10%