Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del...

32
Alessia Mattei Responsabile coordinamento prove INVALSI Le prove INVALSI di Italiano Roma 16112018

Transcript of Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del...

Page 1: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Alessia Mattei

Responsabile coordinamento prove INVALSI

Le prove INVALSI di Italiano 

Roma 16‐11‐2018

Page 2: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Europa 2020

Come rispondere alle richieste e agli obiettivi che sonocondivisi a livello europeo?

“L’obiettivo è […] migliorare la qualità generale di tutti i livellidell’istruzione e della formazione nell'UE, combinandoeccellenza e equità, […].”

[…] migliorare i risultati nel settore dell'istruzione in ciascunsegmento (prescolastico, elementare, secondario, professionalee superiore) nell'ambito di un'impostazione integrata checomprenda le competenze fondamentali e miri a ridurrel'abbandono scolastico; […]

Iniziativa faro Youth on the move

Page 3: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Europa 2020

Una misura di sistema

Le rilevazioni nazionali degli apprendimenticontribuisco alla costruzione di un sistema divalutazione credibile e riconosciuto, che a suavolta dovrebbe rappresentare uno strumentoessenziale per misurare il raggiungimento o menodi determinati traguardi formativi ritenutiessenziali per tutti e tutte.

Page 4: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Europa 2020

Gli strumenti

È indispensabile avere a disposizione strumentiscientificamente costruiti, socialmente riconosciuti econdivisi per orientarsi meglio, per chiedere, perfare proposte, per valutare risposte e produrrecambiamento.

Page 5: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Indicazioni curricolariPrimo ciclo di istruzione – testo normativo:D.M. 16 novembre 2011, n. 254 – “Indicazioni nazionali per il curricolo dellascuola dell'infanzia e del primo ciclo d'istruzione”.

Secondo ciclo di istruzione ‐ testi normativi:1) D.M. 22 agosto 2007, n.139 – “Regolamento recante norme in materia diadempimento dell'obbligo di istruzione”;2) D.I. 7 ottobre 2010, n. 211 ‐ Regolamento recante “Indicazioni nazionaliriguardanti gli obiettivi specifici di apprendimento concernenti le attività e gliinsegnamenti compresi nei piani degli studi previsti per i percorsi liceali di cuiall’articolo 10, comma 3, del decreto del Presidente della Repubblica 15marzo 2010, n. 89, in relazione all’articolo 2, commi 1 e 3, del medesimoregolamento”;3) D.P.R. 15 marzo 2010, art. 8, comma 3 – “Istituti Tecnici. Linee Guida per ilpassaggio al nuovo ordinamento”;4) D.P.R. 15 marzo 2010, n.87, art.8, comma 6 – “Istituti Professionali. LineeGuida per il passaggio al nuovo ordinamento”

Page 6: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Il Quadro di Riferimento

È il risultato di un lavoro condivisoDiverse professionalità – Diverse competenze

PerchéCornice teorica: definire il costrutto ‐ COSA viene rilevato

Scopo:esplicita i riferimenti teorici e i criteri operativi che siutilizzano per la costruzione della prova INVALSI diItaliano. Rendere trasparente l’impostazione della prova efavorire la successiva lettura dei risultati.

Page 7: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Padronanza linguisticaPossesso ben strutturato di una lingua assieme alla capacità 

di servirsene per i vari scopi comunicativi.

Le prove INVALSI sono circoscritte alla valutazione:

a) competenza di lettura: comprensione,interpretazione, valutazione del testo scritto

b) conoscenze e competenze grammaticalic) competenza semantico ‐ lessicale

Il Quadro di Riferimento

Page 8: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

La dimensione pragmatico‐testuale relativaalla lettura consiste nella capacità diricostruire, a partire dal testo, dal contesto(o “situazione”) in cui esso è inserito e dalleconoscenze “enciclopediche” del lettore,l’insieme di significati che il testo veicola (ilsuo senso), assieme al modo in cui essi sonoveicolati

La competenza di lettura

Page 9: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Per dimensione lessicale relativa alla letturasi intende specificamente la conoscenza o lacapacità di ricostruire il significato di unvocabolo in un determinato contesto e diriconoscere le relazioni di significato travocaboli

La competenza di lettura

Page 10: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Per dimensione grammaticale relativa allacomprensione del testo si intende lacapacità di ricorrere alla cosiddetta“grammatica implicita” ed eventualmenteanche alla “grammatica esplicita” per capireil testo e per risolvere dubbi dicomprensione

La competenza di lettura

Page 11: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

La comprensione di un testo implica l’esecuzione dimolteplici operazioni a diversi livelli di complessità edifficoltà, anche a seconda degli scopi che il lettore perseguein relazione a quel particolare testo e in quel determinatomomento.

Tre fondamentali macro‐aspetti:1) localizzare e individuare informazioni all’interno del testo;2) ricostruire il significato del testo, a livello locale o globale;3) riflettere sul contenuto o sulla forma del testo, a livello 

locale o globale, e valutarli.

Il Quadro di Riferimento

Page 12: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Il Quadro di Riferimento

Il testoL’oggetto della lettura, e insieme il veicolo delsignificato, è il testo così come descritto dallalinguistica testuale.

I testi categorizzati in base a criteri utili per le finalità della prova: la situazione comunicativa; il formato; la tipologia.

Page 13: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Il Quadro di Riferimento

La struttura della provaGrado 2 e 5 una parte di comprensione della lettura; una parte di riflessione sulla lingua.

Grado 8 una sezione di comprensione della lettura; una sezione di lessico; una sezione di riflessione sulla lingua.

Grado 10 – Grado 13 una sezione di comprensione della lettura; una sezione di riflessione sulla lingua.

Page 14: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Le prove INVALSI

Prove standardizzate Le prove standardizzate strutturalmente devono garantire a tutti isoggetti ai quali una prova è somministrata le stesse condizioni dilavoro: stessa prova e stesso tempo a disposizione.

Scopo: rendere i dati direttamente CONFRONTABILI‐COMPARABILI

OggettivitàUna prova si dice oggettiva quando la CORREZIONE avvienesecondo un protocollo stabilito a priori che rende l’esito dellacorrezione tendenzialmente INDIPENDENTE dal soggetto che laeffettua.

Page 15: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Il processo di costruzione delle prove

La costruzione di una prova standardizzata è il frutto di un lungo e articolato processo tecnico scientifico.

Processo condiviso: professionalità e competenze diverse.

Per costruire una prova standardizzata sono necessari nonmeno di 15‐18 mesi, tempo richiesto per la realizzazione ditutto il processo.

Page 16: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Domanda: i contenuti trattati in una prova sono un campionerappresentativo delle abilità che vogliamo misurare?

Garantire una buona Validità di contenuto 

Il processo di costruzione delle prove

Page 17: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Individuazione degli stimoli su cui costruire le domande

Costruzione delle domande

Analisi qualitativa

Pre‐test 

Analisi formale: analisi quantitativa e qualitativa

Convalida delle domande

Il processo di costruzione delle prove

Page 18: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Individuazione degli stimoli su cui costruire le domande

Per costruire le prove è necessario selezionare stimoli adeguati(principalmente per quanto riguarda la prova di italiano) e unnumero di domande adeguato.

A questo scopo la collaborazione di esperti del mondo dellascuola e dell’università rappresenta una garanzia per l’INVALSIsia rispetto alla possibilità di reperire una grande varietà distimoli e di quesiti (sia nella modalità di formulazione che neicontenuti) sia rispetto alla possibilità di essere garanzia per ilmondo della scuola stesso della conoscenza approfondita deiprogrammi, delle prassi, dei processi cognitivi e delle difficoltàdegli studenti.

Page 19: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Analisi qualitativa

Il gruppo di esperti effettua una prima valutazionequalitativa in funzione della rispondenza delle domandeal QdR, al grado scolastico per il quale devono essereproposte le prove e alla composizione del prove chedovranno andare al pre‐test.

Il gruppo di esperti è composto sia da ricercatoridell’INVALSI che da esperti (docenti e disciplinaristi)nell’ambito della costruzione di prove oggettive e delleanalisi psicometriche.

Page 20: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Tutte le prove, prima di arrivare agli studenti sono pre‐testate.

Il pre‐test riveste un’importanza notevole nell’intero processodi costruzione della prova ed è il momento in cui si hanno iriscontri empirici rispetto al lavoro realizzato.

Il pre‐test viene realizzato un anno prima dello studioprincipale. Il campione di studenti coinvolti nel pre‐testpresenta all’incirca le stesse caratteristiche (in termini di età emomento nel ciclo degli studi) dei destinatari dello studioprincipale.

Il pretest ‐ la verifica sul campo

Page 21: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Il campione per il pre‐test è rappresentativo per areageografica e, nel caso del secondo grado, per le diverse macro‐tipologie di scuole (licei, istituti tecnici, istituti professionali).

Inoltre, per garantire il rispetto di un protocollo disomministrazione uniforme in tutte le scuole, le prove sisvolgono alla presenza di un somministratore dell’INVALSI ecorrette centralmente.

Il pretest ‐ la verifica sul campo

Page 22: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Analisi formale 

Le prove standardizzate devono fornire misure sufficientementeattendibili del grado di padronanza di quelle conoscenze e diquei processi che sono l’oggetto della prova stessa.

In questa fase l’oggettività dei dati raccolti spesso chiarisce idubbi e le perplessità scaturiti durante il processo di costruzionedelle prove.

Le prove e quindi le risposte degli studenti ai singoli quesiti sonoanalizzate statisticamente secondo due approcci: quello dellateoria classica dei test e quello dell’Item Response Theory .

Page 23: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

La capacità misuratoria di ogni domanda viene analizzatamediante modelli statistici in grado di:

stabilire la coerenza di ciascuna opzione di risposta rispettoal costrutto oggetto di valutazione, rispetto al livello diabilità/competenza del rispondente e rispetto alla difficoltàspecifica della domanda stessa.

valutare il cosiddetto potere discriminante di ciascunadomanda, ovvero la capacità di ogni quesito di distinguereadeguatamente gli allievi in termini di abilità/competenzain funzione della risposta fornita (Falocci et al., 2010).

Analisi formale 

Page 24: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Analisi quali/quantitiva

Incontro tra la valutazione psicometrica e la valutazionedi contenuto.Solo quei quesiti che mostrano adeguati requisiti dichiarezza, affidabilità e validità possono essere inseritinelle prove definitive.

L’intero processo si conclude con la convalida delleprove che saranno somministrate durante la rilevazioneprincipale.

Page 25: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Page 26: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Esempio domanda Livello 1

Page 27: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Page 28: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Esempio domanda Livello 2

Page 29: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Page 30: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Classe seconda – Scuola secondaria di II grado

Esempio domanda Livello 3

Page 31: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Alcune considerazioni

La qualità dell’offerta formale di istruzione e formazionedipende anche dalla capacità del sistema di: individuare strategie che sostengano l’apprendimento; saper leggere i contesti, ovvero interpretare il nuovo; evidenziare bisogni.

Le prove standardizzate contribuiscono ad assicurare unalettura oggettiva dei contesti ma questo tipo di esperienzadeve essere integrata con puntuali interventi didattici checonsentono l’individuazione di specifici bisogni e prioritàlocali.

Page 32: Le prove INVALSI di Italiano - orientamentoirreer.it · proposte le prove e alla composizione del prove che dovranno andare alpre‐test. Il gruppo di esperti è composto sia da ricercatori

Grazie per l’attenzione