AUTOVALUTAZIONE,

VALUTAZIONE ESTERNA E

MIGLIORAMENTO DELLE SCUOLE

INDAGINE SULLE CONDIZIONI DI SUCCESSO

NEL CONTESTO DI UN PROGETTO PILOTA

ITALIANO

Dottoranda: Egle BASYTE FERRARI

Tutor: Bruno LOSITO

Co-tutor: Giuseppe BOVE 15 Giugno 2016

1. Perché studiare la

valutazione delle scuole?

2. Linee di tendenza

internazionali

3. Italia: dibattito e

sperimentazioni,

SNV, Vales

4. Riferimenti teorici

5. Finalità e disegno della

ricerca sul campo

6. Metodi e strumenti

7. Risultati

8. Conclusioni

AUTOVALUTAZIONE,

VALUTAZIONE ESTERNA E

MIGLIORAMENTO DELLE SCUOLE

INDAGINE SULLE CONDIZIONI DI SUCCESSO

NEL CONTESTO DI UN PROGETTO PILOTA

ITALIANO

1. Perché studiare la

valutazione delle scuole?

As individuals, as groups, as organisations

if we are blind to our faults and ignorant of

our strengths we are unlikely to grow.

MacBeath, 2006a, p.56

1. Perché studiare la

valutazione delle scuole?

Estensione dell’autonomia scolastica

Preoccupazione per la qualità

Ruolo strategico della valutazione dei sistemi d’istruzione

Diffusione del suo uso a molteplici livelli e scopi

Per poter migliorare è fondamentale la valutazione a livello

scuola

2. Linee di tendenza internazionali

Spostamento attenzione

dal controllo degli adempimenti formali

alla verifica della qualità dei processi e dei risultati

Visite di valutazione esterna: alleggerita, principio di

proporzionalità, maggior dialogo e collaborazione

Autovalutazione: valorizzata e sostenuta

Assenza unico modello del sistema di valutazione

3. Italia

3.1 Dibattito e sperimentazioni

Inizio dibattito anni ’70 dopo la Six Subjects Survey

Intensificazione anni ’90

Nascita SNQI, Cede Invalsi

Progetti ed esperienze ‘dal basso’ e ‘dall’alto’

Obiettivo

“miglioramento della qualita ̀

dell’offerta formativa e degli

apprendimenti”

(DPR 80/2013)

Fasi

Autovalutazione - a.s. 2014/2015

Valutazione esterna - 2016

Miglioramento - a.s. 2015/2016

Rendicontazione sociale - 2015

3. Italia

3.1 Sistema nazionale di valutazione (SNV)

3. Italia

3.1) Progetto pilota ValesValutazione e sviluppo scuola

Scopo

definizione strumenti, procedure e protocolli per il SNV

300 scuole autocandidatesi, 2/3 delle regioni PON

Valutatori esterni di profilo A (DS o docente) e

profilo B (esperto di ricerca sociale o delle organizzazioni)

IMPLEMENTAZIONE

2011/12 Adesione

2012/13 Autovalutazione

2013/14 Valutazione esterna

2014/15 Sviluppo del piano

di miglioramento

Contesto

Clima

Cultura

Leadership

Atteggiamento

alla valutazione

Autovalutazione

Comunicazione

Approccio partecipativo

Approccio sistematico strutturazione del percorso in modo

funzionale, rigoroso, realizzabile,

incorporato

Supporto esterno

4. Riferimenti teorici

Condizioni di successo dei processi

di valutazione delle scuole

Valutazione esterna

Comunicazione

Reciprocità

Non interrompe le normali

attività della scuola

Quadro di riferimento

rigoroso e contestualizzato

Professionalità valutatori

Feedback

5. Finalità e disegno

della ricerca sul campo

Indagare le condizioni in grado di contribuire a rendere piu ̀ efficace e

condivisibile da parte del personale scolastico il processo di autovalutazione e

di valutazione esterna delle scuole

Come? Rilevando le percezioni del personale delle scuole coinvolto nella

realizzazione del progetto Vales, sulla base dei costrutti identificati nella

letteratura

Questionario online per i DS di tutte le scuole Vales (dicembre 2014 –

aprile 2015)

Approfondimento qualitativo in 4 scuole Vales (settembre – dicembre

2015)

interviste individuali e focus group

Collaborazione scientifica tra il Dottorato e l’Invalsi

6. Metodi e strumenti

6.1 Questionario: tipologia delle domande

34 domande, per lo più a risposta chiusa:

dicotomiche (di cui 5 domande filtro)

a scelta multipla

a scala Likert a 5 alternative di risposta (di cui 12 scale multi item)

8 domande aperte (‘altro’/ azioni intrapprese / commenti / risposta univoca)

Sezioni Temi

I Adesione al progetto Aspetti motivazionali DS e volontà di aderire dei docenti

II Autovalutazione Azioni di sostegno al lavoro del Nucleo di autovalutazione

Utilità degli strumenti e del percorso e compatibilità degli

impegni e risorse

Iniziative di presentazione del Rapporto di autovalutazione (RA)

Azioni di sviluppo avviate prima della valutazione esterna

III Valutazione esterna Aspetti organizzativi

Atteggiamento del personale scolastico

Professionalità dei valutatori

Adeguatezza della scelta dei profili professionali diversi

Rapporto di valutazione (RV)

Visita di restituzione del Rapporto (soggetti coinvolti e utilità)

6. Metodi e strumenti

6.2 Questionario: temi indagati

Sezioni Temi

IV Esiti del progetto Collaborazioni, cambiamenti e azioni di sviluppo avviati oltre il

Piano di miglioramento

Accettazione degli esiti del percorso valutativo da parte della

scuola e la loro utilità nell’implementazione delle attività del

SNV

Effetti della partecipazione sul DS

V Neo-dirigenti Utilità del RA per comprendere il funzionamento della scuola

RV

Accettazione degli esiti del percorso valutativo da parte della

scuola e la loro utilità nell’implementazione delle attività del

SNV

VI Profilo del

dirigente scolastico

Anni e tipo di incarico

6. Metodi e strumenti

6.2 Questionario: temi indagati

Analisi delle scale: analisi di affidabilità, AFE

Nessuna ha la distribuzione normale delle risposte

10 su 12 scale hanno 𝛼 di Cronbach > 0.70

10 su 12 scale hanno struttura monofattoriale

Analisi descrittiva

Analisi delle correlazioni: matrice di correlazione tra le scale,

tabelle di contingenza e confronti tra medie

6. Metodi e strumenti

6.3 Questionario: analisi effettuate

Approfondimenti a partire delle risposte dei DS

Visitate 4 scuole i cui DS meno soddisfatti della realizzazione Vales

e presenti in tutte le fasi del progetto

3 al Sud, 1 al Nord

2 istituti comprensivi, 2 istituti tecnici

Interviste individuali con i DS

Focus group con i membri dei Nuclei di autovalutazione

Consultazione documenti e siti

6. Metodi e strumenti

6.4 Approfondimento qualitativo

Ragioni dell’adesione al progetto (solo con DS)

Autovalutazione:

Organizzazione e compatibilita ̀ degli impegni del progetto con

quelli ordinari

Disponibilita ̀ delle risorse professionali ed eventuale necessita ̀ di

un maggior supporto esterno

Utilita ̀ degli strumenti

6. Metodi e strumenti

6.5 Approfondimento qualitativo: temi trattati

Valutazione esterna:

Professionalità dei valutatori esterni

Utilità del Rapporto di valutazione e della visita di restituzione

Condivisione interna ed esterna delle attività e dei risultati

Cambiamenti apportati e giudizio complessivo

6. Metodi e strumenti

6.5 Approfondimento qualitativo: temi trattati

7. Risultati

Tasso di risposta al questionario 94% (269 su 287)

Soddisfazione complessiva

Presenti dall'adesione

61%Presenti dall'autovalutazione

10%

Presenti dalla valutazione esterna

13%

Neo-dirigenti 16%

L’apertura all’esterno come sostegno all’autovalutazione

è risultata legata a:

1. l’impegno nell’avviare azioni di sviluppo,

2. la disponibilita ̀ di condividere con l’esterno il RA,

3. l’accettazione degli esiti del percorso da parte del

personale della scuola

7. Risultati

7.1 Alcune correlazioni

Percezione circa l’utilità del percorso di autovalutazione è correlata

positivamente alla percezione del RV e degli effetti della partecipazione al

percorso

Importanza della comunicazione (correla con giudizi sui valutatori esterni e

sul RV)

Il giudizio su un valutatore influenza il giudizio sull’altro

Giudizi sui valutatori è legato a quello sul RV

Legame tra la percezione del RV e l’accettazione degli esiti del percorso

Visita di restituzione del RV: non basta che ci sia per essere utile

In linea a quanto rilevato nelle interviste e nei FG

7. Risultati

7.1 Alcune correlazioni

Interviste e FG:

Stimolo alla riflessione, dialogo, collaborazione

Visione più organica della scuola strumento per la leadership

Strumento di comunicazione interna ed esterna

Oltre alle specifiche attività avviate, soprattutto di formazione

7. Risultati

7.2 Benefici

Autovalutazione:

Coinvolgimento dei docenti, genitori, studenti

Compatibilità del percorso con i ritmi della scuola:

problema organizzativo del progetto e di mancanza di esperienza della scuola

Bisogno del supporto esterno, percepito dai docenti; tuttavia c’è scarsa

collaborazione con l’esterno (altre scuole, USR, università,…) Assenza

dell’iniziativa delle scuole o assenza del sostegno?

Qualche dubbio sulla funzionalità degli strumenti e aggregazione dei dati

restituiti

7. Risultati

7.3 Difficoltà

15.3

5.8

4.7

6.8

26.3

8.4

58.4

55.8

56.8

38.4

44.7

39.5

36.8

38.4

34.2

16.8

40.5

58.4

0 50 100

6.a Linee guida efficaci

6.b Indicatori Questionario Scuola utili per la stesura del RA

6.c Indicatori Questionario insegnanti, genitori, studenti utiliper la stesura del RA

6.d Impegni per l'elaborazione del RA compatibili con impegniordinari della scuola

6.e La scuola aveva risorse professionali in grado di condurrel'autovalutazione

6.f Percorso efficace per individuazione e definizione degliobiettivi di miglioramento

Per nulla d'accordo In disaccordo Né in accordo/né in disaccordo D'accordo Pienamente d'accordo

Utilità degli strumenti e del percorso e compatibilità degli impegni e risorse

7. Risultati

7.3 Difficoltà

Quanto è stata impegnativa la preparazione della documentazione alla

visita di valutazione esterna

3.2 17.6 39.4 31.7 8.1

0 50 100

5 Moltissimo 4 3 2 1 Per nulla

7. Risultati

7.3 Difficoltà

Domande sulla professionalità di alcuni valutatori esterni:

sensibilità al contesto, competenza nel campo della valutazione, conoscenza

del mondo della scuola, apertura al dialogo, capacità relazionale

Il 25% dei DS non sono molto convinti che le informazioni raccolte dai valutatori

fossero sufficientemente complete per poter valutare adeguatamente la loro scuola

e circa la metà non credono che i valutatori esterni hanno individuato dei punti di

forza o di debolezza nuovi

La maggiore critica espressa durante le visite di approfondimento

7. Risultati

7.3 Difficoltà

Comunicazione e dialogo con

le scuole

Selezione e formazione dei

valutatori esterni

Formazione degli operatori

scolastici

Accompagnamento

dell’autovalutazione e

miglioramento

Incoraggiamento delle scuole

ad aprirsi

Ruolo dei vari attori?

(Invalsi, Indire, USR, associazioni

professionali, università,…)

Rapporto autovalutazione –

valutazione esterna?

8. Conclusioni

Potenziali linee di intervento

e domande aperte