Analisi del report dei dati invalsi per pista
Transcript of Analisi del report dei dati invalsi per pista
a.s. 2012 - 2013
1 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Premessa : Processo di autovalutazione della scuola Quadro di riferimento
Strumenti di lavoro
Fascicolo scuola in chiaro
Processo di autovalutazione
Quali devono essere le caratteristiche del processo di autovalutazione
Chi gestisce il processo di autovalutazione
Novità normative
Dati prove INVALSI report classi I medie a.s. 2011 – 2012 Punteggi generali al netto del cheating
Distribuzione degli studenti per livelli di apprendimento
Risultati rispetto ai processi indagati nella prova d’italiano e di matematica
Correlazione tra la media dei voti del I quadrimestre e il punteggio conseguito nella prova
Fascicolo di matematica punti di forza e punti di criticità
Fascicolo d’italiano punti di forza e punti di criticità
2 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Obiettivo: Mettere a disposizione del dirigente scolastico e della comunità professionale un sistema organico di dati per intraprendere un processo di autovalutazione sulla propria scuola e, dove questo processo fosse già presente, rafforzarlo con dati comparati e orientarlo verso indicatori comuni
Direttiva n. 85 del 12/10/2012 “Nel corso del triennio scolastico 2012/13 – 2014/15 l’Invalsi
presterà supporto ai processi di autovalutazione delle scuole fornendo loro strumenti di analisi dei dati resi disponibili dal sistema informativo del Ministero attraverso “scuola in chiaro” e dalle rilevazioni sugli apprendimenti degli studenti, nonché degli ulteriori elementi significativi integrati dalle scuole stesse … nella prospettiva di una progressiva estensione degli strumenti e generalizzazione dei processi di autovalutazione e valutazione a tutte le istituzioni scolastiche, in coerenza con lo schema di regolamento sul Sistema nazionale di valutazione in via di emanazione”.
3 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Quadro di riferimento 1. analisi e verifica del proprio servizio sulla base
di: dati resi disponibili dal sistema informativo del
Miur rilevazioni sugli apprendimenti e elaborazioni sul
valore aggiunto dell'Invalsi ulteriori elementi significativi integrati dalla
scuola
2. elaborazione di un rapporto di autovalutazione
- formulazione di un piano di miglioramento
4 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Strumenti di lavoro
Dati prove Invalsi Fascicolo “Scuola in chiaro” Strumenti di autovalutazione della scuola
5 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
FASCICOLO SCUOLA IN CHIARO Dati identificativi della scuola (per codice scuola) Tipologia, denominazione, contatti, ubicazione Dati di contesto Strutture - Laboratori, strutture sportive, servizi web Offerta formativa - Indirizzi di studio e classi Alunni Regolarità del percorso scolastico Provenienza da altre scuole Nazionalità Personale Dotazione organica (posti) Caratteristiche del personale docente (età, titoli professionali) Mobilità (domande di trasferimento presentate, accolte) Assenze
6 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
FASCICOLO SCUOLA IN CHIARO Esiti formativi ed educativi Abbandoni scolastici Trasferimenti in entrata e in uscita Assenze Esiti scrutini intermedi e finali Sospensione giudizio e attività di recupero Esami di Stato (ammessi, diplomati, votazioni) Stage formativi Soggiorni all’estero Immatricolazioni all’università Crediti al primo anno accademico Crediti al primo e al secondo Immatricolati senza crediti
7 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
FASCICOLO SCUOLA IN CHIARO
Risorse finanziarie Dati di bilancio della scuola per fonte di
finanziamento e di spesa (valori % e assoluti) Sono incluse le spese per il personale
sostenute dallo Stato
8 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Processo di autovalutazione L’autovalutazione è un processo da promuove e
costruire all’interno della comunità professionale che non può essere chiuso e concluso all’interno di indicatori e dati comparati a livello nazionale.
È una riflessione sull’Istituto ed una sua rappresentazione sostenuta da evidenze e dai dati disponibili.
Tale rappresentazione è già un processo di valutazione e di miglioramento, inoltre costituisce la base necessaria e ineludibile per individuare alcune priorità di sviluppo e miglioramento.
9 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Quali devono essere le caratteristiche del processo di autovalutazione• Situato: attento alle peculiarità dell’istituzione
scolastica, al contesto socio-ambientale e culturale
• Plurale: fondato su una molteplicità di evidenze quantitative e qualitative, in grado di restituire le diverse prospettive di analisi
• Partecipato: promosso dalle diverse componenti scolastiche, pur nella chiarezza dei ruoli e delle responsabilità
• Orientato: orientato allo sviluppo di un piano di miglioramento, il quale rappresenta il banco di prova dell’efficacia stessa del processo autovalutativo
10 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Chi gestisce il processo di autovalutazione
La gestione della autovalutazione interna è affidata al Dirigente scolastico in collaborazione con il coordinatore dei processi di valutazione e il Nucleo di autovalutazione interno, con attenzione al coinvolgimento della comunità professionale e sociale.
La composizione del Nucleo può essere differenziata a seconda delle situazioni e delle modalità di analisi che si intendono intraprendere …
11 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Novità normative “Su proposta del ministro dell’Istruzione, università e
ricerca, il Consiglio dei ministri ha approvato in via definitiva il regolamento relativo all’istituzione e la disciplina del Sistema Nazionale di valutazione in materia di istruzione e formazione, per le scuole del sistema pubblico nazionale di istruzione e le istituzioni formative accreditate dalle Regioni (confronta comunicato stampa n. 43 del 24 agosto 2012)”. Lo rende noto un comunicato di Palazzo Chigi che spiega: “l’approvazione del regolamento consente di rispondere anche agli impegni assunti nel 2011 dall’Italia con l’Unione europea, in vista della programmazione dei fondi strutturali 2014/2020
Ogni singola scuola costruirà il proprio rapporto di autovalutazione secondo un quadro di riferimento comune e con i dati messi a disposizione dal sistema informativo del MIUR (Scuola in chiaro), dall'INVALSI e dalle stesse istituzioni scolastiche. Il percorso si concluderà con la predisposizione di un piano di miglioramento e la rendicontazione pubblica dei risultati. Previste anche le visite dei nuclei esterni di valutazione
12 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Le novità nella restituzione dati Invalsi:
– Dati al netto del cheating– Apertura a una pluralità attori– Maggiori confronti (con scuole con simile
composizione di studenti)– Maggiori dettagli (su ambiti singole prove)– Sviluppo di alcuni focus specifici
Vedi Guida interattiva online
http://www.komedia.it/invalsi/guida_invalsi.html
13 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
14 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Nell’intento di fornire dati il più possibile reali, la percentuale di risposte corrette è riportata al netto del cheating, il cui valore è indicato nell’ultima colonna della tavola. Ciò vuol dire che il punteggio riportato nella prima colonna è stato ottenuto sottraendo dalla percentuale di risposte corrette rilevata (il cosiddetto punteggio grezzo) la percentuale di risposte corrette attribuite al cheating. Il cheating (letteralmente: barare, imbrogliare) è un fenomeno rilevato attraverso un controllo di tipo statistico sui dati e si riferisce a quei comportamenti “impropri” tenuti nel corso della somministrazione delle prove INVALSI. È stato, infatti, osservato come in alcuni casi, e secondo modi e forme differenti, gli studenti forniscano risposte corrette, non in virtù delle loro conoscenze, ma perché copiate da altri studenti o da libri e altre fonti (student cheating) o, persino, suggerite più o meno esplicitamente dai docenti (teacher cheating).
15 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Media del punteggio
Differenza nei risultati
rispetto Punteggio Punteggio Punteggio Cheating
al netto del cheating
a classi/scuole
con Campania Sud Italiain
percentualebackground
familiare simile , ,
italiano 58,2 2,6 2,10%
matematica 36,2 - 0,9 11,2%
Sono stati identificati 5 gruppi in base alla media dei livelli di apprendimento nazionale, con i valori disposti fra le seguenti soglie:
Livello 1 = studenti con risultati inferiori al 75% della media nazionale
Livello 2 = tra il 75 e l’95% della media nazionale Livello 3 = tra l’95 e il 110% della media nazionale Livello 4 = tra il 110 e il 125% della media nazionale Livello 5 = oltre il 125% della media nazionale
Se, ad esempio, la media nazionale di risposte corrette è pari al 60% del numero totale dei quesiti proposti, al primo livello si posizionano quegli studenti il cui numero di risposte corrette è minore o uguale al 45% del numero totale dei quesiti proposti (75% del 60%), mentre al livello 5 si posizionano quegli studenti il cui numero di risposte corrette è maggiore del 75% del numero totale dei quesiti proposti (125% del 60%).
16 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Distribuzione degli studenti per livelli di apprendimento
Istituzione scolastica
Prova di italiano
Numero studenti
Numero studenti
Numero studenti
livello 1-2 livello 3 livello 4-5
totale studenti 230 151 20 59
ProvaNumero studenti
112 6 9di livello 1-2 127
MatematicaNumero studenti
27 10 18 livello 3 55
Numero studenti
12 4 32 livello 4-5 48
Note
Livello 1-2 punteggio minore o uguale al 95% della media nazionaleLivello 3 punteggio maggiore del 95% e minore o uguale del 110% della media nazionale
Livello 4-5 punteggio maggiore del 110% della media nazionale
17 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
risultati degli studenti rispetto ai diversi processi indagati nelle due prove, processi che sono stati individuati sulla base dei rispettivi quadri di riferimento curati e pubblicati dall’INVALSI sul proprio sito.
Una lettura attenta dei Quadri di Riferimento può sicuramente consentire di definire e circoscrivere il valore informativo dei risultati rappresentati in queste tavole.
ATTENZIONE: Anche nelle tavole di dettaglio, i dati percentuali sono sempre riportati al netto del cheating.
18 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ricostruire il significato del testo Riflessione sulla lingua Individuare informazioni
Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio
medio Italia medio Italia medio Italia
59,1
62,7
71
69
46,2
55,8
57,6 62,8 38,3
51,8 71,1 35,1
63,9 61 56,5
47,6 53,2 37,5
42,3 33,9 28,3
60,9 68 47,1
56,2 67,9 51,5
53,5 64,1 51,7
63,2 68,3 59,3
62,1 66,8 53,6
53,3 53,6 44,4
Punteggio medio scuola
55,96
61,81
45,79
19 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
20 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Istituzione scolastica
nel suo complesso Concetti e procedure Rappresentazioni Modellizzazione Argomentazione Prova complessiva
Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio Punteggio
medio Italia medio Italia medio Italia medio Italia medio Italia 33,6
40,3
59,3
69,9
36,9
43,7
33,1
42,3
37,4
44,7
50,4 80,4 49,7 47,7 52,2 30 62,7 34,3 45,4 36,5 33,3 73 40,7 39,5 41,1 8,1 28,3 14,6 9,6 13,3 14,2 20,9 22,1 16,7 19,2 40,2 59,3 42,9 44,2 43,6 14,7 28,5 21,7 17,2 19,8 16,8 40,6 25,5 19,5 23,6 44 73 48 53,6 49,5 51 71,6 47,2 60,9 51,7 31,4 56 35,7 36,2 36,2
Punteggio scuola
30,64
54,47
34,94
35,30
35,34
Nella tavola 6 è indicata la correlazione, per ogni classe, tra la media dei voti assegnati agli studenti nel primo quadrimestre dall’insegnante di italiano (o di matematica) e il punteggio conseguito dalla classe nella prova. Più la correlazione è alta, più la valutazione del docente risulta in linea con il risultato conseguito nelle prove. Il grado di correlazione, se significativo, può essere debole, medio-basso, medio, medio-alto o forte.
ATTENZIONE: Per la Prova Nazionale, il voto preso in considerazione è il voto globale di ammissione all’esame.
21 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Tavola 6 - Correlazione tra risultati nelle prove INVALSI e voto di scuola1
Sia in negativo che in positivo
Correlazione tra voto2 della scuola e Correlazione tra voto2 della scuola e
punteggio di Italiano alla Prova INVALSI
punteggio di Matematica alla Prova INVALSI
scarsamente significativa medio-bassa
medio-bassa medio-bassa
scarsamente significativa medio-bassa
medio-bassa medio-bassa
scarsamente significativa medio-bassa
medio-bassa scarsamente significativa
media media
medio-bassa medio-bassa
medio-bassa medio-bassa
medio-bassa media
medio-bassa medio-bassa
medio-bassa scarsamente significativa1 I livelli di correlazione categorizzati sono i seguenti (in ordine crescente): scarsamente significativa; medio-bassa; media; medio-alta;forte.
2 Voto di ammissione all'esame di Stato22 I.C. Falcone Napoli - referenti
valutazione Teresa Cantiello e Francesca Di Fenza
Nelle slide seguenti sono riportate alcune domande dei fascicoli INVALSI di matematica e d’italiano le cui risposte hanno dato risultati particolarmente positivi o negativi.
Tale esame dà uno spunto ad un lavoro che ciascun insegnante deve svolgere per la sua classe come strumento per il miglioramento degli apprendimenti
Il fascicolo preso in esame è quello delle I medie dell’a.s. 2011 - 2012
23 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Fascicolo di matematica punti di forza e punti di criticità
Ambito: Numeri
Quesito D26D26. Osserva la seguente espressione. (35 + a) * 2 = Se si sostituisce a con un numero naturale, il risultato A. sarà sempre un multiplo di aB. sarà sempre un multiplo di 35C. sarà sempre un numero dispariD. sarà sempre un numero pari
Punto di forza ha risposto correttamente in media il 63,2%
24 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Fascicolo di matematica punti di forza e punti di criticità
Ambito: NumeriQuesito D9
D9. Osserva questa espressione:
Quale dei seguenti problemi può essere
risolto con l’espressione nel riquadro? 3 * 3 + 6 : 3
Segna con una crocetta il problema.
Punto di criticità ha risposto correttamente in media il 5%
25 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
La mamma compra
Luigi compra per
Tre amiche Mario fa a piedi
per ognuno dei suoi
sé tre confezioni comprano tre chilometri al
tre bambini un da tre matite ognuna tre giorno per tre
quaderno che costa
ciascuna. Compra
caramelle e sei giorni consecutivi;
tre euro. anche una cioccolatini. Si il giorno
Compra anche sei
confezione da 6 dividono i dolci successivo fa sei
euro di materiale
matite che divide
tra loro in parti chilometri. Quanti
vario per la scuola.
con i suoi due uguali. Quanti chilometri ha
Quanto spende in
fratelli. Quante dolci avrà fatto in media al
tutto per ogni matite ha in tutto
ognuna di loro? giorno?
bambino? Luigi?
problema A problema B problema C problema D
Fascicolo di matematica punti di forza e punti di criticità
26 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Dati e PrevisioniQuesito D12
Punto di forza ha risposto correttamente in media il 94,7%
Fascicolo di matematica punti di forza e punti di criticità
27 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Dati e PrevisioniQuesito D21c
Punto di criticità ha risposto correttamente in media il 4%
Fascicolo di matematica punti di forza e punti di criticità
28 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Spazio e figureQuesito D1a
Punto di forza ha risposto correttamente in media 89,5%
Fascicolo di matematica punti di forza e punti di criticità
29 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Spazio e figureQuesito D19b
Punto di criticità ha risposto correttamente in media il 10,5%
Fascicolo di matematica punti di forza e punti di criticità
30 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Relazioni e figureQuesito D3a
Punto di forza ha risposto correttamente in media il 73,7%
Fascicolo di matematica punti di forza e punti di criticità
31 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Relazioni e funzioniQuesito D17b
Punto di criticità ha risposto correttamente in media il 4%
32 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e
Francesca Di Fenza
Ambito: Testo narrativoQuesito A4
Punto di forza ha risposto correttamente in media il 90%
33 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza
Ambito: Testo narrativoQuesito A18
Punto di criticità ha risposto correttamente in media il 15,8%
34 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza
Ambito: Testo espositivoQuesito B5
Punto di forza ha risposto correttamente in media il 68,4%
35 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza
Ambito: Testo espositivoQuesito B9
Punto di criticità ha risposto correttamente in media il 5,3%
36 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza
Ambito: GrammaticaQuesito C2c
Punto di forza ha risposto correttamente in media il 93%
37 I.C. Falcone Napoli - referenti valutazione Teresa Cantiello e Francesca Di Fenza
Ambito: GrammaticaQuesito C2c
Punto di criticità ha risposto correttamente in media il 14%