Analisi del report dei dati invalsi per pista

37
a.s. 2012 - 2013 1 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Transcript of Analisi del report dei dati invalsi per pista

Page 1: Analisi del report dei dati invalsi per pista

a.s. 2012 - 2013

1 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 2: Analisi del report dei dati invalsi per pista

Premessa : Processo di autovalutazione della scuola Quadro di riferimento

Strumenti di lavoro

Fascicolo scuola in chiaro

Processo di autovalutazione

Quali devono essere le caratteristiche del processo di autovalutazione

Chi gestisce il processo di autovalutazione

Novità normative

Dati prove INVALSI report classi I medie a.s. 2011 – 2012 Punteggi generali al netto del cheating

Distribuzione degli studenti per livelli di apprendimento

Risultati rispetto ai processi indagati nella prova d’italiano e di matematica

Correlazione tra la media dei voti del I quadrimestre e il punteggio conseguito nella prova

Fascicolo di matematica punti di forza e punti di criticità

Fascicolo d’italiano punti di forza e punti di criticità

2 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 3: Analisi del report dei dati invalsi per pista

Obiettivo: Mettere a disposizione del dirigente scolastico e della comunità professionale un sistema organico di dati per intraprendere un processo di autovalutazione sulla propria scuola e, dove questo processo fosse già presente, rafforzarlo con dati comparati e orientarlo verso indicatori comuni

Direttiva n. 85 del 12/10/2012 “Nel corso del triennio scolastico 2012/13 – 2014/15 l’Invalsi

presterà supporto ai processi di autovalutazione delle scuole fornendo loro strumenti di analisi dei dati resi disponibili dal sistema informativo del Ministero attraverso “scuola in chiaro” e dalle rilevazioni sugli apprendimenti degli studenti, nonché degli ulteriori elementi significativi integrati dalle scuole stesse … nella prospettiva di una progressiva estensione degli strumenti e generalizzazione dei processi di autovalutazione e valutazione a tutte le istituzioni scolastiche, in coerenza con lo schema di regolamento sul Sistema nazionale di valutazione in via di emanazione”.

3 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 4: Analisi del report dei dati invalsi per pista

Quadro di riferimento 1. analisi e verifica del proprio servizio sulla base

di: dati resi disponibili dal sistema informativo del

Miur rilevazioni sugli apprendimenti e elaborazioni sul

valore aggiunto dell'Invalsi ulteriori elementi significativi integrati dalla

scuola

2. elaborazione di un rapporto di autovalutazione

- formulazione di un piano di miglioramento

4 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 5: Analisi del report dei dati invalsi per pista

Strumenti di lavoro

Dati prove Invalsi Fascicolo “Scuola in chiaro” Strumenti di autovalutazione della scuola

5 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 6: Analisi del report dei dati invalsi per pista

FASCICOLO SCUOLA IN CHIARO Dati identificativi della scuola (per codice scuola) Tipologia, denominazione, contatti, ubicazione Dati di contesto Strutture - Laboratori, strutture sportive, servizi web Offerta formativa - Indirizzi di studio e classi Alunni Regolarità del percorso scolastico Provenienza da altre scuole Nazionalità Personale Dotazione organica (posti) Caratteristiche del personale docente (età, titoli professionali) Mobilità (domande di trasferimento presentate, accolte) Assenze 

6 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 7: Analisi del report dei dati invalsi per pista

FASCICOLO SCUOLA IN CHIARO  Esiti formativi ed educativi Abbandoni scolastici Trasferimenti in entrata e in uscita Assenze Esiti scrutini intermedi e finali Sospensione giudizio e attività di recupero Esami di Stato (ammessi, diplomati, votazioni) Stage formativi Soggiorni all’estero Immatricolazioni all’università Crediti al primo anno accademico Crediti al primo e al secondo Immatricolati senza crediti

7 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 8: Analisi del report dei dati invalsi per pista

FASCICOLO SCUOLA IN CHIARO

Risorse finanziarie Dati di bilancio della scuola per fonte di

finanziamento e di spesa (valori % e assoluti) Sono incluse le spese per il personale

sostenute dallo Stato

8 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 9: Analisi del report dei dati invalsi per pista

Processo di autovalutazione L’autovalutazione è un processo da promuove e

costruire all’interno della comunità professionale che non può essere chiuso e concluso all’interno di indicatori e dati comparati a livello nazionale.

È una riflessione sull’Istituto ed una sua rappresentazione sostenuta da evidenze e dai dati disponibili.

Tale rappresentazione è già un processo di valutazione e di miglioramento, inoltre costituisce la base necessaria e ineludibile per individuare alcune priorità di sviluppo e miglioramento.

9 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 10: Analisi del report dei dati invalsi per pista

Quali devono essere le caratteristiche del processo di autovalutazione• Situato: attento alle peculiarità dell’istituzione

scolastica, al contesto socio-ambientale e culturale

• Plurale: fondato su una molteplicità di evidenze quantitative e qualitative, in grado di restituire le diverse prospettive di analisi

• Partecipato: promosso dalle diverse componenti scolastiche, pur nella chiarezza dei ruoli e delle responsabilità

• Orientato: orientato allo sviluppo di un piano di miglioramento, il quale rappresenta il banco di prova dell’efficacia stessa del processo autovalutativo

10 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 11: Analisi del report dei dati invalsi per pista

Chi gestisce il processo di autovalutazione

La gestione della autovalutazione interna è affidata al Dirigente scolastico in collaborazione con il coordinatore dei processi di valutazione e il Nucleo di autovalutazione interno, con attenzione al coinvolgimento della comunità professionale e sociale.

La composizione del Nucleo può essere differenziata a seconda delle situazioni e delle modalità di analisi che si intendono intraprendere …

11 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 12: Analisi del report dei dati invalsi per pista

Novità normative  “Su proposta del ministro dell’Istruzione, università e

ricerca, il Consiglio dei ministri ha approvato in via definitiva il regolamento relativo all’istituzione e la disciplina del Sistema Nazionale di valutazione in materia di istruzione e formazione, per le scuole del sistema pubblico nazionale di istruzione e le istituzioni formative accreditate dalle Regioni (confronta comunicato stampa n. 43 del 24 agosto 2012)”. Lo rende noto un comunicato di Palazzo Chigi che spiega: “l’approvazione del regolamento consente di rispondere anche agli impegni assunti nel 2011 dall’Italia con l’Unione europea, in vista della programmazione dei fondi strutturali 2014/2020

Ogni singola scuola costruirà il proprio rapporto di autovalutazione secondo un quadro di riferimento comune e con i dati messi a disposizione dal sistema informativo del MIUR (Scuola in chiaro), dall'INVALSI e dalle stesse istituzioni scolastiche. Il percorso si concluderà con la predisposizione di un piano di miglioramento e la rendicontazione pubblica dei risultati. Previste anche le visite dei nuclei esterni di valutazione

12 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 13: Analisi del report dei dati invalsi per pista

Le novità nella restituzione dati Invalsi:

– Dati al netto del cheating– Apertura a una pluralità attori– Maggiori confronti (con scuole con simile

composizione di studenti)– Maggiori dettagli (su ambiti singole prove)– Sviluppo di alcuni focus specifici

Vedi Guida interattiva online

http://www.komedia.it/invalsi/guida_invalsi.html

13 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 14: Analisi del report dei dati invalsi per pista

14 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Nell’intento di fornire dati il più possibile reali, la percentuale di risposte corrette è riportata al netto del cheating, il cui valore è indicato nell’ultima colonna della tavola. Ciò vuol dire che il punteggio riportato nella prima colonna è stato ottenuto sottraendo dalla percentuale di risposte corrette rilevata (il cosiddetto punteggio grezzo) la percentuale di risposte corrette attribuite al cheating. Il cheating (letteralmente: barare, imbrogliare) è un fenomeno rilevato attraverso un controllo di tipo statistico sui dati e si riferisce a quei comportamenti “impropri” tenuti nel corso della somministrazione delle prove INVALSI. È stato, infatti, osservato come in alcuni casi, e secondo modi e forme differenti, gli studenti forniscano risposte corrette, non in virtù delle loro conoscenze, ma perché copiate da altri studenti o da libri e altre fonti (student cheating) o, persino, suggerite più o meno esplicitamente dai docenti (teacher cheating).

Page 15: Analisi del report dei dati invalsi per pista

15 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Media del punteggio

Differenza nei risultati

rispetto Punteggio Punteggio Punteggio Cheating

al netto del cheating

a classi/scuole

con Campania Sud Italiain

percentualebackground

familiare simile , ,

italiano 58,2 2,6       2,10%

matematica 36,2 - 0,9 11,2%

Page 16: Analisi del report dei dati invalsi per pista

Sono stati identificati 5 gruppi in base alla media dei livelli di apprendimento nazionale, con i valori disposti fra le seguenti soglie:

Livello 1 = studenti con risultati inferiori al 75% della media nazionale

Livello 2 = tra il 75 e l’95% della media nazionale Livello 3 = tra l’95 e il 110% della media nazionale Livello 4 = tra il 110 e il 125% della media nazionale Livello 5 = oltre il 125% della media nazionale

Se, ad esempio, la media nazionale di risposte corrette è pari al 60% del numero totale dei quesiti proposti, al primo livello si posizionano quegli studenti il cui numero di risposte corrette è minore o uguale al 45% del numero totale dei quesiti proposti (75% del 60%), mentre al livello 5 si posizionano quegli studenti il cui numero di risposte corrette è maggiore del 75% del numero totale dei quesiti proposti (125% del 60%).

16 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 17: Analisi del report dei dati invalsi per pista

Distribuzione degli studenti per livelli di apprendimento

Istituzione scolastica

  Prova di italiano

 Numero studenti

Numero studenti

Numero studenti

  livello 1-2 livello 3 livello 4-5

totale studenti 230  151 20 59

ProvaNumero studenti  

112 6 9di livello 1-2 127

MatematicaNumero studenti  

27 10 18 livello 3 55

Numero studenti  

12 4 32 livello 4-5 48

Note

Livello 1-2 punteggio minore o uguale al 95% della media nazionaleLivello 3 punteggio maggiore del 95% e minore o uguale del 110% della media nazionale

Livello 4-5 punteggio maggiore del 110% della media nazionale

17 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 18: Analisi del report dei dati invalsi per pista

risultati degli studenti rispetto ai diversi processi indagati nelle due prove, processi che sono stati individuati sulla base dei rispettivi quadri di riferimento curati e pubblicati dall’INVALSI sul proprio sito.

Una lettura attenta dei Quadri di Riferimento può sicuramente consentire di definire e circoscrivere il valore informativo dei risultati rappresentati in queste tavole.

ATTENZIONE: Anche nelle tavole di dettaglio, i dati percentuali sono sempre riportati al netto del cheating.

18 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 19: Analisi del report dei dati invalsi per pista

Ricostruire il significato del testo Riflessione sulla lingua Individuare informazioni

Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio

medio Italia medio Italia medio Italia

    59,1

62,7

71

69

46,2

55,8

    57,6 62,8 38,3

    51,8 71,1 35,1

    63,9 61 56,5

    47,6 53,2 37,5

    42,3 33,9 28,3

    60,9 68 47,1

    56,2 67,9 51,5

    53,5 64,1 51,7

    63,2 68,3 59,3

    62,1 66,8 53,6

    53,3 53,6 44,4

Punteggio medio scuola

   

55,96

61,81

45,79

19 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 20: Analisi del report dei dati invalsi per pista

20 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Istituzione scolastica

nel suo complesso   Concetti e procedure Rappresentazioni Modellizzazione Argomentazione Prova complessiva

Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio

medio Italia medio Italia medio Italia medio Italia medio Italia  33,6

40,3

59,3

69,9

36,9

43,7

33,1

42,3

37,4

44,7

  50,4 80,4 49,7 47,7 52,2  30 62,7 34,3 45,4 36,5  33,3 73 40,7 39,5 41,1  8,1 28,3 14,6 9,6 13,3  14,2 20,9 22,1 16,7 19,2  40,2 59,3 42,9 44,2 43,6  14,7 28,5 21,7 17,2 19,8  16,8 40,6 25,5 19,5 23,6  44 73 48 53,6 49,5  51 71,6 47,2 60,9 51,7  31,4 56 35,7 36,2 36,2

Punteggio scuola

30,64

54,47

34,94

35,30

35,34

Page 21: Analisi del report dei dati invalsi per pista

Nella tavola 6 è indicata la correlazione, per ogni classe, tra la media dei voti assegnati agli studenti nel primo quadrimestre dall’insegnante di italiano (o di matematica) e il punteggio conseguito dalla classe nella prova. Più la correlazione è alta, più la valutazione del docente risulta in linea con il risultato conseguito nelle prove. Il grado di correlazione, se significativo, può essere debole, medio-basso, medio, medio-alto o forte.

ATTENZIONE: Per la Prova Nazionale, il voto preso in considerazione è il voto globale di ammissione all’esame.

21 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 22: Analisi del report dei dati invalsi per pista

Tavola 6 - Correlazione tra risultati nelle prove INVALSI e voto di scuola1

Sia in negativo che in positivo 

Correlazione tra voto2 della scuola e Correlazione tra voto2 della scuola e

punteggio di Italiano alla Prova INVALSI

punteggio di Matematica alla Prova INVALSI

scarsamente significativa medio-bassa

  medio-bassa medio-bassa

  scarsamente significativa medio-bassa

  medio-bassa medio-bassa

  scarsamente significativa medio-bassa

  medio-bassa scarsamente significativa

  media media

  medio-bassa medio-bassa

  medio-bassa medio-bassa

  medio-bassa media

  medio-bassa medio-bassa

  medio-bassa scarsamente significativa1 I livelli di correlazione categorizzati sono i seguenti (in ordine crescente): scarsamente significativa; medio-bassa; media; medio-alta;forte.

2 Voto di ammissione all'esame di Stato22 I.C. Falcone Napoli - referenti

valutazione Teresa Cantiello e Francesca Di Fenza

Page 23: Analisi del report dei dati invalsi per pista

Nelle slide seguenti sono riportate alcune domande dei fascicoli INVALSI di matematica e d’italiano le cui risposte hanno dato risultati particolarmente positivi o negativi.

Tale esame dà uno spunto ad un lavoro che ciascun insegnante deve svolgere per la sua classe come strumento per il miglioramento degli apprendimenti

Il fascicolo preso in esame è quello delle I medie dell’a.s. 2011 - 2012

23 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 24: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

Ambito: Numeri

Quesito D26D26. Osserva la seguente espressione. (35 + a) * 2 = Se si sostituisce a con un numero naturale, il risultato A. sarà sempre un multiplo di aB. sarà sempre un multiplo di 35C. sarà sempre un numero dispariD. sarà sempre un numero pari

Punto di forza ha risposto correttamente in media il 63,2%

24 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Page 25: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

Ambito: NumeriQuesito D9

D9. Osserva questa espressione:

Quale dei seguenti problemi può essere

risolto con l’espressione nel riquadro? 3 * 3 + 6 : 3

Segna con una crocetta il problema.

Punto di criticità ha risposto correttamente in media il 5%

25 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

La mamma compra

Luigi compra per

Tre amiche Mario fa a piedi

per ognuno dei suoi

sé tre confezioni comprano tre chilometri al

tre bambini un da tre matite ognuna tre giorno per tre

quaderno che costa

ciascuna. Compra

caramelle e sei giorni consecutivi;

tre euro. anche una cioccolatini. Si il giorno

Compra anche sei

confezione da 6 dividono i dolci successivo fa sei

euro di materiale

matite che divide

tra loro in parti chilometri. Quanti

vario per la scuola.

con i suoi due uguali. Quanti chilometri ha

Quanto spende in

fratelli. Quante dolci avrà fatto in media al

tutto per ogni matite ha in tutto

ognuna di loro? giorno?

bambino? Luigi?    

problema A problema B problema C problema D

Page 26: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

26 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Dati e PrevisioniQuesito D12

Punto di forza ha risposto correttamente in media il 94,7%

Page 27: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

27 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Dati e PrevisioniQuesito D21c

Punto di criticità ha risposto correttamente in media il 4%

Page 28: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

28 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Spazio e figureQuesito D1a

Punto di forza ha risposto correttamente in media 89,5%

Page 29: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

29 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Spazio e figureQuesito D19b

Punto di criticità ha risposto correttamente in media il 10,5%

Page 30: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

30 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Relazioni e figureQuesito D3a

Punto di forza ha risposto correttamente in media il 73,7%

Page 31: Analisi del report dei dati invalsi per pista

Fascicolo di matematica punti di forza e punti di criticità

31 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Relazioni e funzioniQuesito D17b

Punto di criticità ha risposto correttamente in media il 4%

Page 32: Analisi del report dei dati invalsi per pista

32 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e

Francesca Di Fenza

Ambito: Testo narrativoQuesito A4

Punto di forza ha risposto correttamente in media il 90%

Page 33: Analisi del report dei dati invalsi per pista

33 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Ambito: Testo narrativoQuesito A18

Punto di criticità ha risposto correttamente in media il 15,8%

Page 34: Analisi del report dei dati invalsi per pista

34 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Ambito: Testo espositivoQuesito B5

Punto di forza ha risposto correttamente in media il 68,4%

Page 35: Analisi del report dei dati invalsi per pista

35 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Ambito: Testo espositivoQuesito B9

Punto di criticità ha risposto correttamente in media il 5,3%

Page 36: Analisi del report dei dati invalsi per pista

36 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Ambito: GrammaticaQuesito C2c

Punto di forza ha risposto correttamente in media il 93%

Page 37: Analisi del report dei dati invalsi per pista

37 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza

Ambito: GrammaticaQuesito C2c

Punto di criticità ha risposto correttamente in media il 14%