U.O. MONITORAGGIO E ANALISI

29
U.O. MONITORAGGIO E ANALISI Gli esiti occupazionali delle attività formative finanziate dal Fondo Sociale Europeo La valutazione degli esiti occupazionali in Liguria: acquisizioni e proposte per la nuova programmazione 2007-2013 A cura di Elisabetta Garbarino Firenze – 22 aprile 2008

description

U.O. MONITORAGGIO E ANALISI. La valutazione degli esiti occupazionali in Liguria: acquisizioni e proposte per la nuova programmazione 2007-2013 A cura di Elisabetta Garbarino. Gli esiti occupazionali delle attività formative finanziate dal Fondo Sociale Europeo. Firenze – 22 aprile 2008. - PowerPoint PPT Presentation

Transcript of U.O. MONITORAGGIO E ANALISI

Page 1: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

Gli esiti occupazionali delle attività formative finanziate dal Fondo Sociale Europeo

La valutazione degli esiti occupazionali in Liguria: acquisizioni e proposte per la nuova programmazione

2007-2013

A cura di Elisabetta Garbarino

Firenze – 22 aprile 2008

Page 2: U.O. MONITORAGGIO E ANALISI

L’evoluzione

Le esigenze di monitoraggio e valutazione delle politiche attive del lavoro sono profondamente mutate, negli ultimi anni, in virtù di almeno due fenomeni significativi. – ampliamento della gamma degli interventi di

politica attiva del lavoro in generale e in particolare di quelli cofinanziati dal Fondo Sociale Europeo

– progressiva integrazione tra sistemi di istruzione e formazione

U.O. MONITORAGGIO E ANALISI

Page 3: U.O. MONITORAGGIO E ANALISI

ampliamento della gamma degli interventi di politica attiva del lavoro

• 1994-99 formazione come parte principale se non esclusiva

• 2000-2006 peso crescente degli interventi di politica attiva del lavoro “altri” rispetto alla formazione

– informazione, – orientamento, – servizi d’incontro tra domanda e offerta di lavoro, – work experience, ecc. – formazione continua

• Fondi Interprofessionali • lifelong learning e widelife learning, che rendono ancor più

riduttivo limitare la rilevazione ai soli esiti occupazionali dei corsi per inoccupati

• norme nazionali entrate in vigore nel periodo 2000-2006 – politiche dirette del lavoro: legge 30/2003, – politiche aventi finalità primarie diverse (ad es. in materia di

immigrazione) politiche di tipo trasversale, – pari opportunità – politiche di inclusione

U.O. MONITORAGGIO E ANALISI

Page 4: U.O. MONITORAGGIO E ANALISI

progressiva integrazione tra sistemi di istruzione e

formazione

• modifiche al Titolo V della Costituzione, • consolidamento degli IFTS • Istituzione ITS (e modifica del ruolo degli

IFTS)• percorsi sperimentali triennali di

istruzione e formazione• percorsi integrati • innalzamento dell’obbligo scolastico a 16

anni, fermo restando il limite per il diritto dovere all’istruzione e formazione a 18 anni

U.O. MONITORAGGIO E ANALISI

Page 5: U.O. MONITORAGGIO E ANALISI

Quali esigenze conoscitive

necessità di un piano di rilevazione degli esiti delle politiche attive del lavoro

molto più ampio di quello fin qui attuato, essenzialmente ma non esclusivamente,

attraverso la “tradizionale” indagine sugli esiti occupazionali della formazione

(per disoccupati)

U.O. MONITORAGGIO E ANALISI

Page 6: U.O. MONITORAGGIO E ANALISI

Quali esigenze operative

• La rete (perché aumentano i soggetti implicati)

• La regia regionale (la Regione non può fare tutto direttamente o tramite Enti strumentali)

• La necessità di produrre indicatori (omogenei nazionali e specifici per la Regione)

Page 7: U.O. MONITORAGGIO E ANALISI

La rete

• numerosità dei soggetti istituzionali interessati

• titolari di competenze concorrenti e non, subordinate o delegate dalla Regione,

• necessità di creare una rete tra i quanti sono interessati alle rilevazioni e al loro uso – Province, – Università – Ufficio Scolastico Regionale.

U.O. MONITORAGGIO E ANALISI

Page 8: U.O. MONITORAGGIO E ANALISI

La regia

• Regione regista di una complessa operazione di rilevazione degli esiti, in una logica di governance multilivello, al cui interno la Regione deve, – rilevare (direttamente o indirettamente) gli esiti

delle attività di istruzione e formazione cui partecipa direttamente con finanziamenti propri e,

– Coordinare le rilevazioni gestite da altri soggetti, anche confinanziandole nei casi in cui non siano ancora state avviate, ovvero vadano potenziate per garantire livelli minimi di comparabilità e di copertura dell’universo.

U.O. MONITORAGGIO E ANALISI

Page 9: U.O. MONITORAGGIO E ANALISI

Il quadro nazionale

Avvio di un processo di omogeneizzazione degli indicatori di monitoraggio regionali.

Obiettivo ambizioso, perché diversi fattori differenziano gli “stili” di monitoraggio regionali; in particolare:– la pluralità dei soggetti coinvolti nei processi di

formazione con diverse collocazioni (es. enti erogatori / soggetti fruitori);

– la pluralità degli enti che si occupano di diversi aspetti e/o di diversi oggetti dei monitoraggi (ISFOL, ISTAT, MIUR, MLPS);

– la parziale “opacità” di alcune procedure di rilevazione condotte a livello regionale;

– la difficoltà di relazione interna tra Centri per l’Impiego Provinciali e Regioni.

U.O. MONITORAGGIO E ANALISI

Page 10: U.O. MONITORAGGIO E ANALISI

Completezza e qualità delle informazioni

statistiche sulla Formazione professionale

U.O. MONITORAGGIO E ANALISI

Fonte: PRESIDENZA DEL CONSIGLIO DEI MINISTRI, COMMISSIONE PER LA GARANZIA DELL’INFORMAZIONE STATISTICA, “Completezza e qualità delle informazioni statistiche sulla Formazione professionale”

Page 11: U.O. MONITORAGGIO E ANALISI

Il lavoro svolto

• Ricognizione stato dell’arte:

- target oggetto della rilevazione

- censuaria o campionaria

- intervista telefonica o altro

- curata da chi

• Il caso ligure

Page 12: U.O. MONITORAGGIO E ANALISI

Una prima ricognizione a livello

nazionale

U.O. MONITORAGGIO E ANALISI

Quali sistemi di monitoraggio regionali?• Invio schede conoscitive ad alcuni referenti regionali

• Emilia Romagna• Friuli Venezia Giulia• Lazio• Piemonte• Provincia Autonoma Bolzano• Provincia Autonoma di Trento• Toscana• Valle d’Aosta• Veneto

• prima base informativa in merito alle dimensioni fondamentali delle rilevazioni condotte:

• universo di riferimento e relativo campione di indagato, • strumento di indagine • modalità di rilevazione, • soggetti titolari dell’indagine.

Page 13: U.O. MONITORAGGIO E ANALISI

Universo di riferimentoU.O. MONITORAGGIO E

ANALISI

Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

I dati attualmente disponibili mostrano una discreta omogeneità dei bacini di indagine considerati nei diversi territori: •i corsi per disoccupati vengono monitorati in tutte le regioni e, ad eccezione di una, l’indagine è estesa anche ad alcune tipologie di corsi per occupati (es. buoni formativi); •2 Regioni includono come oggetto di analisi anche i corsi svolti nell’ambito dell’assolvimento degli obblighi formativi.

Page 14: U.O. MONITORAGGIO E ANALISI

CampioneU.O. MONITORAGGIO E

ANALISI

Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

•In prevalenza le indagini sono censuarie; •In alcuni casi la rilevazione viene effettuata con modalità di

campionamento differenti:•Censuaria per i corsi per disoccupati, •campione stratificato sulla base di alcune caratteristiche degli altri corsi

Nel caso delle indagini campionarie, i criteri di estrazione rimandano

•alla misura FSE, •al genere•Al target

Page 15: U.O. MONITORAGGIO E ANALISI

StrumentoU.O. MONITORAGGIO E

ANALISI

Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

In prevalenza viene condiviso il questionario ISFOL adattato alle specificità locali

Page 16: U.O. MONITORAGGIO E ANALISI

Modalità di rilevazioneU.O. MONITORAGGIO E

ANALISI

Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

In prevalenza i questionari sono somministrati

telefonicamente

Page 17: U.O. MONITORAGGIO E ANALISI

Chi si occupa della rilevazione

U.O. MONITORAGGIO E ANALISI

Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

Ente strumentale regionale

1

Università1

Regione1Enti esterni

privati3

Agenzie formative titolari dei

corsi3

Page 18: U.O. MONITORAGGIO E ANALISI

Il quadro regionale U.O. MONITORAGGIO E

ANALISI

Dal 1996 la Regione Liguria ha sviluppato una propria metodologia di rilevazione diretta (interviste agli allievi della FP) e dal 2000 ha adottato la scheda di rilevazione ISFOL (Gruppo Placement).

strumento di rilevazione: questionario somministrato telefonicamente (metodo CATI, come da metodologia adottata dalle altre Regioni).

universo di indagine:gli interventi formativi rivolti a disoccupati

Le fasi dell’indagine:1.costruzione banca dati allievi, a partire dalla banca dati corsi (FP2000)2.somministrazione censuaria del questionario telefonico[1].

tempi di rilevazione – nel modello previsto da ISFOL – a 12 mesi dalla chiusura dell’intervento. In questi anni l’Agenzia è riuscita ad ‘allinearsi’, ma questo elemento rappresenta ancora un elemento di criticità.

Page 19: U.O. MONITORAGGIO E ANALISI

Le criticità dell’attuale sistema di rilevazione

U.O. MONITORAGGIO E ANALISI

creazione della banca dati allievi: • difficoltà di reperimento del materiale cartaceo nelle diverse Province e presso gli Uffici Regionali ( impossibile ricostruire l’universo di riferimento, ossia rintracciare tutti i verbali oggetto di indagine);• modulistica adottata, non sempre omogenea (ha reso impossibile per rintracciare il telefono di tutti gli allievi.i tempi della rilevazione: • senza una banca dati aggiornata in tempo reale, il momento del contatto con la persona è ritardato e comunque con un intervallo non omogeneo rispetto alla conclusione del corso (i 12 mesi appunto), elemento invece essenziale per la comparabilità interna ed interregionale dei dati stessi.Gli elementi di criticità riferiti alla costruzione della banca dati stanno via via diminuendo in relazione al sempre maggior uso in linea di FP2000, alimentato dagli Enti.

Page 20: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

• ridisegnare l’architettura generale dell’indagine sugli esiti a. messa a regime del sistema in tempo utile per l’avvio della nuova programmazioneb. ridefinizione dei compiti dei diversi soggetti implicati, anche nella prospettiva di valorizzare e razionalizzare le attività avviate nel tempo dalla Province

Prospettive di lavoro nel medio periodo

• estendere la rilevazione alle politiche attive del lavoro regionali e provincialia. individuazione delle politiche e degli interventib. Individuazione dei titolari delle rilevazioni e dei loro

contenutic. Avvio sperimentale delle rilevazioni e messa a regime

in tempi brevi

Page 21: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

 Presupposto è la condivisione con

il partenariato istituzionale e sociale

PROCESSO

Page 22: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

1.  QUANTITATIVA

2.   QUALI/QUANTITAVA

3. QUALITATIVA

TIPI DI RILEVAZIONE

Page 23: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

o integrazione tra database esiti e Rubens (compatibilità con FP 2000)

o Confronto/integrazione dati su Occupati Tipici e atipici Disoccupati No lavoro autonomo e soggetti IVA, individuabili con INPS (ma ad oggi non sembra possibile integrazione banche dati)

1. QUANTITATIVA: CONNESSIONI DA APPROVARE E VERIFICARE

o Verifica tempistica estrazioni datawarehouse e rilevazioni provinciali: allineare tempi scarico dati DWH con bd allievi corsio ipotesi integrazione banca dati tirocini e workexperienceso integrazione con procedure di Accreditamento (coinvolgimento Enti, collegato a processo di accreditamento: esiti come dati richiesti per accreditamento)o integrazione con le Provinceo Integrazione con altre Regionio Confluenza progetto esiti e laboratorio delle professioni di domani, in particolare rispetto al Datawarehouse in fase di costruzione, che prevede l’integrazione di fonti per la lettura del contesto e delle tendenze, attualmente in fase di progettazione e sperimentazione

Page 24: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

1. QUANTITATIVA: AZIONI

Soggetto attuatore:

realizzazione delle interviste all’intero universo, attraverso il ricorso alle strutture formative con queste specifiche:• definizione del set minimo di dati che dovranno essere inseriti nel sistema ed effettuazione delle conseguenti modifiche su FP2000, utilizzando una scheda di rilevazione derivata dall’attuale questionario ISFOL fortemente semplificato• avvio contestuale delle procedure di addestramento rilevatori degli Enti e delle ISA alla rilevazione dati e all’utilizzo delle procedure informatiche• affiancamento degli Enti nell’avvio della rilevazione• effettuazione di interviste di controllo su di un campione casuale, in concomitanza con l’avvio di rilevazioni in profondità da parte dell’Agenzia, che annualmente potrebbe utilizzare questionari più approfonditi su ambiti professionali o territoriali di interesse

Page 25: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

1. QUANTITATIVA: PUNTI DI ATTENZIONE

La rilevazione attraverso gli Enti costituisce l’aspetto che più di altri modifica la progettazione: o il ritorno al sistema di rilevazione attraverso gli Enti:

maggiore tempestività del dato e copertura pressoché totale dell’universo (perché gli allievi mantengono il contatto con le sedi formative e si attendono dagli Enti un supporto anche dopo la conclusione del percorso formativo). o presuppone una progettazione condivisa con le Province e l’individuazione di incentivi, motivazioni e forme di controllo a campione della rilevazione. punti di forzao tempi più rapidi di effettuazione, o copertura maggiore dell’universo, con minor numero di rifiuti o mancate interviste;

punti di debolezza: o minore certezza sull’affidabilità dei datio rischio che non tutte le strutture dispongano di persone capaci di effettuare la rilevazione, o resistenza delle strutture ad accollarsi un compito aggiuntivo

Page 26: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

1. QUANTITATIVA: UNIVERSO DI RIFERIMENTO E STRUMENTI DI RILEVAZIONE

o Strumento di rilevazione:

o predisposizione di strumenti di rilevazione informatizzati che prevedano l’invio del tracciato record all’Agenzia, che dopo una verifica di congruenza e pulizia dei dati invia a FP2000o riflessione critica e operativa sul questionario ISFOL attualmente in usoo comparabilità con le altre Regionio per le politiche “altre” da FP, predisposizione degli strumenti e delle procedure di rilevazione, anche perché in questo caso potranno essere individuate delle buone pratiche provinciali da diffondere

Page 27: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

1.QUANTITATIVA: RESTITUZIONE DEI RISULTATI

o elaborazione dei dati con produzione di report articolati per Provincia, ed eventuale filiera formativa, tipo di formazione (prima formazione, alta formazione, ecc.)

o messa a disposizione delle Province dei dati di sintesi, attraverso FP 2000; matrice dei dati resa anonima e solo per motivi di studio.

Page 28: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

2. QUALI/QUANTITATIVA: VALUTAZIONE DELLA QUALITA’ DEGLIOUTPUT FORMATIVI

o Rilevazione qualità degli output con i beneficiari intermedi e le imprese (schede stage, schede di gradimento)

o individuazione del possibile concorso dei beneficiari intermedi (imprese e istituzioni) alla valutazione della qualità degli output formativi;

o eventuale rilevazione sulla qualità percepita e sull’utilità della formazione presso i soggetti che danno occupazione ai formati dagli interventi cofinanziati. o predisposizione, nel medio periodo, di rilevazione quantitativa campionaria sulla soddisfazione dei “datori di lavoro” oCreazione di sedi di discussione (laboratorio professioni e poli formativi) per una riflessione critica sulle attività formative rivolta alla loro migliore programmazione.

Page 29: U.O. MONITORAGGIO E ANALISI

U.O. MONITORAGGIO E ANALISI

3. QUALITATIVA: ESITI DELLA FORMAZIONE CONTINUA

 avvio di una prima riflessione sulle modalità di rilevazione degli esiti della formazione continua (e permanente), in relazione con gli Enti Bilaterali, le Associazioni di categoria e le imprese o esplorazione presso le altre regioni “virtuose” per analizzare estensione e modalità di eventuali rilevazioni, per la formazione continua e permanenteo successive riunioni tecniche con le Parti sociali e alcuni Enti bilaterali per valutare le possibilità di sviluppo della rilevazioneo una prima fase sperimentale e pilotao approfondimento su alcuni strumenti, considerati buone prassi, sperimentati nella passata programmazione e riproposti in quella attuale, quali i voucher individuali