I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto...

35
I p r o g e t t i p i l o t a : a s p e t t i m e t o d o l o g i c i e r i s u l t a t i Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI “Somministrazione informatica Aspetti metodologici, operativi e risultati del progetto pilota 3” INValSI Roberto Melchiori Roma 3-4 giugno2004

Transcript of I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto...

Page 1: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Il progetto pilota

Secondo Seminario Nazionale INValSI

“Somministrazione informatica

Aspetti metodologici, operativi e risultati

del progetto pilota 3”

INValSIRoberto Melchiori

Roma 3-4 giugno2004

Page 2: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

La comunicazione ha come finalità la presentazione

delle scelte metodologiche, operative e i primi risultati di struttura della somministrazione informatica del Progetto pilota 3 che riguardano

Il monitoraggio

Il Questionario delle attività delle istituzioni scolastiche

Le Prove di apprendimento

Finalità della comunicazione

Alcune riflessioni

Page 3: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Il progetto pilota

Progetto pilota

Aspetti metodologici

Risultati Pp3

Sistema scolastico

I° livello

II° livelloUffici

regionali

III° livelloIstituti

scolastici

IV° livellosoggetti

Istituto scolastico

dati collettivi

dati singoli

fatti

eventi

oggetti

osservazioni

misurazioniscale diverse

beni invisibiliconoscenze tacite

riflessioni

Page 4: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

E’ stata realizzata una strumentazione comprendente:

un questionario, ovvero “Modulo di osservazione” da compilare a cura del coordinatore della scuola o del dirigente scolastico per le attività di compilazione del “Questionario di rilevazione delle attività”;

due questionari, ovvero “Questionario del coordinatore” e “Questionario del somministratore”, per seguire le attività relative alla compilazione delle prove di apprendimento;

una questionario, “Questionario dei docenti”, compilato da parte dei docenti disciplinari, preparato per il Piano sperimentale predisposto per seguire la compilazione delle prove di apprendimento;

i servizi di “Comunicazione”, ovvero “Help desk”, “Forum” ed “E-mail” che hanno permesso di gestire le relazioni con gli utenti del Progetto pilota 3.

Page 5: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

Istituzioni partecipanti

Regioni Questionari Parte 1 compilati

Moduli di osservazione

compilati Differenza Rispondenti

totale % totale % totale %

Abruzzo 193 2,9 150 3,0 43 77,7

Basilicata 124 1,9 93 1,9 31 75,0

Calabria 321 4,8 228 4,6 93 71,0

Campania 744 11,2 571 11,5 173 76,7

Emilia Romagna 431 6,5 318 6,4 113 73,8

Friuli 66 1,0 56 1,1 10 84,8

Lazio 572 8,6 408 8,2 164 71,3

Liguria 138 2,1 97 1,9 41 70,3

Lombardia 954 14,4 714 14,3 240 74,8

Marche 187 2,8 150 3,0 37 80,2

Molise 43 0,6 31 0,6 12 72,1

p.a. Bolzano 47 0,7 34 0,7 13 72,3

p.a. Trento 87 1,3 61 1,2 26 70,1

Piemonte 477 7,2 375 7,5 102 78,6

Puglia 555 8,4 452 9,1 103 81,4

Sardegna 180 2,7 123 2,5 57 68,3

Sicilia 675 10,2 508 10,2 167 75,3

Toscana 220 3,3 175 3,5 45 79,5

Umbria 106 1,6 86 1,7 20 81,1

Valle d'Aosta 14 0,2 13 0,3 1 92,9

Veneto 489 7,4 341 6,8 148 69,7

Totale 6.623 100,0 4.984 100,0 1.639 75,3

Page 6: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

Compilazione del questionario secondo la tipologia scolastica (valori percentuali e totali)

Questionario Parte 1 Questionario Parte 2 Modulo

Tipologia scolastica

Dirigente scolastico

Docente coordinatore

del PP3

Direttore dei servizi generali e

amm.

Altra figura

Dirigente scolastico

Docente coordinatore

del PP3

Altra figura

Dirigente scolastico

Docente coordinatore

del PP3

Altra figura

Scuola dell'Infanzia

45,7 41,0 7,6 5,7 45,7 50,0 4,3 49,5 40,0 10,5

Scuola Primaria 38,9 50,5 6,0 4,5 43,3 53,9 2,8 28,0 66,8 5,1

Scuola secondaria di I grado

35,8 54,2 6,6 3,3 43,2 54,6 2,2 27,3 68,7 4,0

Scuola secondaria di II grado

24,0 65,5 6,1 4,5 31,6 65,2 3,2 15,7 80,4 3,9

Istituti Comprensivi

30,1 56,8 7,0 6,1 34,4 62,6 3,0 19,9 74,5 5,6

Totale 31,8 56,9 6,5 4,8 37,4 59,7 2,9 22,6 72,6 4,9

Totale (numero) 1.472 2.635 299 223 1.763 2.810 137 1.086 3.491 234

dati mancanti 355 274 173 Totale complessivo

4.984 4.984 4.984

Page 7: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

Altra figura nella compilazione del questionario Questionario Parte 1 Questionario Parte 2 Modulo di

osservazioni

totali % totali % totali % altri docenti (funzioni - orientamento - qualità) 34 15,2 48 35,0 70 29,9 assistente amministrativo 77 34,5 11 8,0 93 39,7 collaboratore (D.S.; Ata) 11 4,9 8 5,8 6 2,6 docente vicario 42 18,8 33 24,1 37 15,8 gruppo di discussione (DS-coord-DSGA-docenti-genitori)

51 22,9 18 13,1 7 3,0

direttore servizi generali e amministrativi - - 8 5,8 12 5,1

altro (vicepreside - legale - gestore economo-nucleo autovalutazione)

8 3,6 11 8,0 9 3,8

Totale 223 100,0 137 100,0 234 100,0 dati mancanti 4761 4847 4750 Totale complessivo 4984 4984 4984

Page 8: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

6. Per la compilazione del Questionario - Parte II si è riunito un gruppo di discussione?

totale Scuola

dell'infanzia

Scuola primari

a

Scuola second

aria di I grado

Scuola second

aria di II grado

Istituto comp. e omnico

mp.

Si 77,3 66,1 80,9 77,6 72,8 79,3

No 22,7 33,9 19,1 22,4 27,2 20,7

Totale (%) 100,0 100,0 100,0 100,0 100,0 100,0

Totale (valore assoluto) 4.767 109 1.222 715 1.350 1.371

Risposte mancanti 217

Totale questionari 4.984

Page 9: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

7. Quali figure hanno composto il gruppo di discussione? Totale scuole% rispetto al

totale scuole

Numero medio

componenti

Dirigente scolastico (Dal Direttore o Preside per le scuole paritarie.) 3.196 86,7 -

Direttore amministrativo (Segretario per le scuole paritarie.) 2.141 58,1 -

Docente coordinatore del PP3 3.450 93,6 -

Docente Vicario 1.749 47,5 -

Docente con funzione strumentale 2.132 57,9 2,0

Docente/i 2.338 63,4 3,1

Genitore/i 2.078 56,4 2,0

Personale ausiliario/tecnico/i 793 21,5 1,0

Personale amministrativo/i 1.664 45,2 1,2

Studente/i 537 14,6 2,0

Totale scuole in cui si è riunito un gruppo di discussione 3.685 - 8,2

Page 10: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

9. Secondo Lei, in quale misura il lavoro nel gruppo di discussione ha permesso di:

Per niente Poco Abbastanza Molto Totale Rispondenti

Accrescere la conoscenza delle attività della istituzione scolastica

1,4 11,0 66,3 21,3 100,0 3.569

Condividere la conoscenza delle opinioni tra le diverse componenti della scuola

3,4 12,3 59,0 25,4 100,0 3.489

Migliorare i rapporti tra le componenti della scuola 5,7 22,4 51,9 20,0 100,0 3.482

Page 11: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della somministrazione informatica

2. Il Questionario - Parte I ha permesso di rilevare dati della Istituzione scolastica che sono utili per una rappresentazione efficace ed efficiente? Sì 4428 94,6 No 254 5,4 Totale 4682 100,0

11. Il Questionario - Parte II ha permesso di rilevare le attività della Istituzione scolastica in modo esaustivo?

Sì 4.206 89,7 No 482 10,3 Totale 4.688 100,0

10. Secondo quanto da Lei osservato, in che misura il Questionario - Parte II, come strumento di monitoraggio e valutazione interna consente di effettuare una riflessione approfondita sulle attività dell'Istituzione scolastica?

Pochissimo Poco Abbastanza Molto Totale Rispondenti

0,7 10,4 67,0 21,9 100,0 4.704

Page 12: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

Istituzioni partecipanti - regione Totale % Abruzzo 26 6,37 Basilicata 5 1,23 Calabria 20 4,90 Campania 29 7,11 Emilia 43 10,54 Friuli 3 0,74 Lazio 21 5,15 Liguria 5 1,23 Lombardia 36 8,82 Marche 17 4,17 Molise 7 1,72 Piemonte 39 9,56 Puglia 26 6,37 Sardegna 15 3,68 Sicilia 42 10,29 Toscana 30 7,35 Trento 2 0,49 Umbria 9 2,21 Valle d'Aosta 1 0,25 Veneto 32 7,84 Totale complessivo 408 100,00

Page 13: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

TIPOLOGIA Totale % Direzione didattica - primaria 52 12,50 Secondaria I grado 53 12,99 Secondaria II grado 240 58,82 Istituti comprensivi 63 15,44 Totale complessivo 408 100,00

Istituzioni partecipanti – tipologia secondarie II grado Totale % Licei 82 34,17 Tecnici 70 29,17 Professionali 36 15,00 Istituzioni secondarie superiori 52 21,67 Totale complessivo 240 100,00

Istituzioni partecipanti AREA GEOGRAFICA

TIPOLOGIA nordovest nordest centro sud sudisole

Totale complessivo

Direzione didattica - primaria 5 9 11 14 13 52 Secondaria I grado 11 8 7 17 10 53 Istituti comprensivi 16 12 15 11 9 63

Licei 18 12 15 21 16 82 Tecnici 14 18 11 15 12 70 Professionali 4 9 8 4 11 36

Secondaria II grado

Istituzioni secondarie superiori 13 12 10 6 11 52

Totale complessivo 81 80 77 88 82 408

Page 14: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

Prova di apprendimento Istituzioni

partecipanti II anno primaria 45 IV anno primaria 74 I anno secondaria I grado 107 I anno secondaria II grado 182 III anno secondaria II grado 234

Prova di apprendimento Numero di CLASSI

partecipanti II anno primaria 100 IV anno primaria 139 I anno secondaria I grado 300 I anno secondaria II grado 563 III anno secondaria II grado 710 totale complessivo 1.812

Prova di apprendimento Numero di STUDENTI

partecipanti II anno primaria 1.919 IV anno primaria 2.642 I anno secondaria I grado 6.528 I anno secondaria II grado 12.807 III anno secondaria II grado 14.485 totale complessivo 38.381

Page 15: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

Numero di STUDENTI partecipanti

Prova di apprendimento

Area geografica

II anno primaria

IV anno primaria

I anno secondaria I grado

I anno secondaria II grado

III anno secondaria II grado

nordovest303 292 1.302 2.606 2.661

nordest582 588 1.368 4.151 4.148

centro232 455 1.365 1.785 2.358

sud523 854 1.535 2.274 3.156

sudisole279 453 958 1.991 2.162

Totale complessivo

1.919 2.642 6.528 12.807 14.485

Page 16: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

Tipologia Somministrazione

on-line Totale

complessivo % Direzione didattica - primaria 9 52 17,31 Secondaria I grado 16 53 30,19 Secondaria II grado 60 240 25,00 Comprensivo 26 63 41,27 Totale complessivo 111 408 27,21

Numero CLASSI II anno primaria IV anno primaria

I anno secondaria I

grado

I anno secondaria II

grado

III anno secondaria II

grado

Totale prove svolte

Tipo somministrazione

totale % totale % totale % totale % totale % totale %

off-line 68 68,00 95 68,35 185 61,67 364 64,65 474 66,76 1186 65,45

on-line 32 32,00 44 31,65 115 38,33 199 35,35 236 33,24 626 34,55 Totale complessivo

100 100,00 139 100,00 300 100,00 563 100,00 710 100,00 1812 100,00

Page 17: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: monitoraggio della compilazione informatica

Numero STUDENTI

II anno primaria

IV anno primaria

I anno secondaria I

grado

I anno secondaria II

grado

III anno secondaria II

grado

Totale prove svolte

Tipo somministrazione

totale % totale % totale % totale % totale % totale %

off-line 1367 71,24 1849 69,98 4080 62,50 8355 65,24 9637 66,53 25288 65,89

on-line 552 28,76 793 30,02 2448 37,50 4452 34,76 4848 33,47 13093 34,11 Totale complessivo

1919 100,00 2642 100,00 6528 100,00 12807 100,00 14485 100,00 38381 100,00

prove valide italiano matematica scienze

totale studenti

partecipanti totale % totale % totale % II anno primaria 1919 1596 83,17 1616 84,21 1646 85,77 IV anno primaria 2642 2316 87,66 2321 87,85 2329 88,15 I anno secondaria I grado 6528 5424 83,09 5535 84,79 5512 84,44 I anno secondaria II grado

12807 9599 74,95 9575 74,76 9759 76,20

III anno secondaria II grado

14485 10728 74,06 10798 74,55 10633 73,41

totale prove 38381 29663 77,29 29845 77,76 29879 77,85

Page 18: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

Istituzioni scolastiche partecipanti

Regioni- Province autonome

PP1 PP2 PP3 incremento

tra PP3 e PP2

incremento % tra

PP3 e PP2

Totale censite

% partecipanti

Abruzzo 41 156 193 37 23,7 365 52,9

Basilicata 26 116 124 8 6,9 194 63,9

Calabria 51 283 321 38 13,4 765 42,0

Campania 138 574 744 170 29,6 1.828 40,7

Emilia Romagna

79 335 431 96 28,7 826 52,2

Friuli 32 54 66 12 22,2 266 24,8

Lazio 209 465 572 107 23,0 1.243 46,0

Liguria 64 140 138 -2 -1,4 393 35,1

Lombardia 404 654 954 300 45,9 2.088 45,7

Marche 71 178 187 9 5,1 330 56,7

Molise 7 34 43 9 26,5 97 44,3

p.a. Bolzano 6 16 47 31 193,8 144 32,6

p.a. Trento 26 36 87 51 141,7 134 64,9

Piemonte 108 434 477 43 9,9 989 48,2

Puglia 136 494 555 61 12,3 1.121 49,5

Sardegna 49 119 180 61 51,3 502 35,9

Sicilia 143 637 675 38 6,0 1.675 40,3

Toscana 165 239 220 -19 -7,9 744 29,6

Umbria 33 83 106 23 27,7 215 49,3

Valle d'Aosta 12 15 14 -1 -6,7 35 40,0

Veneto 138 357 489 132 37,0 1.184 41,3

Totale 1.938 5.419 6.623 1.204 22,2 15.138 43,8

Page 19: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

TS

GO

RN

NU

AG

TP

LE

TA

BA

CH

FO

SV

PV

BI

VC

VB

VC

AL

APPG

AR

FI

GR

SI

PI

LU

RE

MN

VR

TE

FG

IM

TO

AO

BO RA

PR

BGBS

VI

PD

VE

PN UD

BZ

CN

SR

RC

VV

MO

FE

BN

KR

PZ

LT

IS

PEVT

TR

MC

ANPS

NO

RM

SS

OR

CA

CL

RG

CTEN

PAME

CZ

CS

BRMT

AT

VACO

MI

GE

SP MS

LO CR

LCTV

RO

POPT

LI

AQ

CBFR

CE

AVNA

SA

BL

SOTN

PC

RI

Distrib. % partecipanti al PP3su totale censite*

da 63,4 a 74,7 (7)da 52 a 63,4 (25)da 40,6 a 52 (29)da 29,2 a 40,6 (33)da 17,8 a 29,2 (9)

Page 20: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

TS

GO

UD

BZ

SS

ORNU

CL

RGSR

EN

VV

BR

AO

IM

SV

AT

VB

VC

BI

VC

AL

PV

SP MS

PR

LO CR

LC

PN

MN

RE

RO

FE

RA

FO

FI

POLU PT

PI

LI

GR

SI

AR

AP

AQ

CB

BN

PS

CN

PC

NO

MC

TE

PE

TR

VT

IS

KR

TV

TN

PD

BSBG

MI

TO

RM

VI

VR

COVA

GE MO BO

AN

PG

CE

NA

SA

BA

TA

LE

CS

RC

CT

MEPA

BL

LTFR

CH

FG

AV

PZ

CZ

AG

VE

TP

CA

SO

RN

RI

MT

Distribuzione assolutaScuole partecipanti al PP3

da 87 a 409 (20)da 56 a 87 (20)da 40 a 56 (21)da 26 a 40 (21)da 10 a 26 (21)

Page 21: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

Tipologia scolastica

Regioni Scuola dell'Infanzia Scuola Primaria Scuola Secondaria

di I grado Scuola Secondaria

di II grado Istituti Comprensivi e

Omnicomprensivi Tutte le

tipologie

Totale % per

Regione Totale % per

Regione Totale % per

Regione Totale % per

Regione Totale % per

Regione totale

Valle d'Aosta 0 - 0 - 1 7,1 6 42,9 7 50,0 14

Piemonte 16 3,4 121 25,4 84 17,6 136 28,5 120 25,2 477

Liguria 4 2,9 56 40,6 28 20,3 37 26,8 13 9,4 138

Lombardia 15 1,6 199 20,9 130 13,6 295 30,9 315 33,0 954

Veneto 69 14,1 85 17,4 59 12,1 154 31,5 122 24,9 489

Friuli 2 3,0 16 24,2 8 12,1 23 34,8 17 25,8 66

Emilia Romagna 53 12,3 85 19,7 51 11,8 123 28,5 119 27,6 431

Toscana 2 0,9 51 23,2 22 10,0 65 29,5 80 36,4 220

Umbria 0 - 28 26,4 19 17,9 36 34,0 23 21,7 106

Marche 2 1,1 30 16,0 15 8,0 62 33,2 78 41,7 187

Lazio 1 0,2 160 28,0 105 18,4 167 29,2 139 24,3 572

Abruzzo 0 - 49 25,4 38 19,7 56 29,0 50 25,9 193

Molise 0 - 7 16,3 3 7,0 15 34,9 18 41,9 43

Campania 8 1,1 234 31,5 137 18,4 185 24,9 180 24,2 744

Puglia 3 0,5 173 31,2 126 22,7 155 27,9 98 17,7 555

Basilicata 0 - 24 19,4 13 10,5 33 26,6 54 43,5 124

Calabria 8 2,5 81 25,2 45 14,0 91 28,3 96 29,9 321

Sicilia 1 0,1 197 29,2 73 10,8 167 24,7 237 35,1 675

Sardegna 6 3,3 33 18,3 27 15,0 63 35,0 51 28,3 180

Bolzano Italiano 2 11,8 1 5,9 0 - 7 41,2 7 41,2 17

Bolzano Tedesco 0 - 3 13,0 2 8,7 9 39,1 9 39,1 23

Bolzano Ladino 0 - 0 - 0 - 3 42,9 4 57,1 7

Trento 25 28,7 5 5,7 1 1,1 17 19,5 39 44,8 87

Totale Regioni 217 3,3 1.638 24,7 987 14,9 1.905 28,8 1.876 28,3 6.623

Page 22: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

Istituzione scolastica totali %

Statale 5.816 87,8

Paritaria 807 12,2

Totale 6.623 100,0

Tipologia scolastica Istituzione scolastica

Statale Paritaria Totale

Scuola dell'infanzia 0,1 26,4 3,3

Scuola primaria 6,4 20,4 8,1

Scuola secondaria di primo grado 13,9 10,3 13,5

Scuola secondaria di secondo grado 20,2 12,5 19,2

Direzione didattica 17,4 2,2 15,6

Istituto comprensivo 31,4 11,0 29,0

Istituto omnicomprensivo 1,0 12,8 2,4

Istituto di istruzione secondaria superiore 9,5 4,4 8,9

Totale 100,0 100,0 100,0

Distribuzione sul territorio

Tipologia scolastica singolo edificio

più edifici aggregati in uno stesso complesso

più edifici separati

territorialmente totale

Scuola dell'Infanzia 92,8 5,3 1,9 100,0

Scuola Primaria 15,2 4,0 80,8 100,0

Scuola Secondaria di I grado 44,3 6,9 48,7 100,0

Scuola Secondaria di II grado 41,9 13,2 44,9 100,0

Istituti Comprensivi e Omnicomprensivi 1,1 3,3 95,6 100,0

Totale 25,7 6,9 67,3 100,0

Totale rispondenti 1.670 450 4.368 6.488

Page 23: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

Proprietà dell'edificio o degli edifici scolastici

Tipologia scolastica Stato Regione Provincia Comune ente pubblico

non territoriale altro ente

locale ente

privato

Scuola dell'Infanzia 0,5 0,0 0,0 17,5 0,9 2,3 76,0

Scuola Primaria 1,1 0,1 0,4 83,5 0,4 0,6 19,0

Scuola Secondaria di I grado 0,6 0,3 1,3 78,1 0,3 0,6 20,0

Scuola Secondaria di II grado 1,2 0,7 77,7 16,4 0,5 0,7 19,6

Istituto Comprensivo e Omnicomprensivo

0,7 0,2 0,6 97,8 0,3 0,8 4,4

Totale 0,9 0,3 22,8 65,3 0,4 0,7 17,1

Totale rispondenti 60 20 1.512 4.323 25 49 1.130

Anno di riorganizzazione per gli Istituti statali

N° Istituti % % cumulata

Prima del 1990 722 15,2 15,2

1990 - 1994 255 5,4 20,5

1995 - 1996 297 6,2 26,8

1997 - 1998 440 9,2 36,0

1999 470 9,9 45,9

2000 2.225 46,8 92,7

2001 - 2002 226 4,7 97,4

2003 123 2,6 100,0

Totale 4.758 100,0 -

Mancate risposte 978 - -

Totale Istituti statali 5.736 - -

Page 24: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I

Anno di inizio attività per gli Istituti paritari N° Istituti % % cumulata

Prima del 1900 78 10,2 10,2

1900 - 1949 231 30,1 40,3

1950 - 1979 242 31,6 71,8

1980 - 1989 61 8,0 79,8

1990 - 1994 25 3,3 83,1

1995 - 1999 30 3,9 87,0

2000 - 2003 100 13,0 100,0

Totale 767 100,0 -

Mancate risposte 29 - -

Totale Istituti paritari 796 - -

Page 25: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I - Sezione finanziaria

5816 5816 5816 5816 5816

5271 5271 5271 5271 5271

12,8 1,5 34,8 4,8 4,4

,0 ,0 ,0 ,0 ,0

100,0 100,0 100,0 100,0 100,0

807 807 807 807 807

487 487 487 487 487

19,7 1,2 6,8 1,5 4,4

,0 ,0 ,0 ,0 ,0

100,0 100,0 100,0 100,0 100,0

Conteggio

Casi validi

Media

Minimo

Massimo

1 Statale

Conteggio

Casi validi

Media

Minimo

Massimo

2 Paritaria

Istituzionescolastica

“19.Dotazione

Ordinaria% pubblici"

“19.Dotazione

perequativa% pubblici"

“19. Altrifinanziamenti

vincolati (Statoe Regioni)%

pubblici"

“19.Finanziamenti

per progettifinalizzati con

fondivincolati%

pubblici"

“19. Altrifinanziamenti% pubblici"

Entità e tipologia dei fondi pubblici

Page 26: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I - Sezione finanziaria

Entità e tipologia dei fondi privati

5816 5816 5816 5816

5271 5271 5271 5271

,4 ,1 1,1 7,1

,0 ,0 ,0 ,0

100,0 90,0 100,0 100,0

807 807 807 807

487 487 487 487

44,5 6,9 2,5 4,7

,0 ,0 ,0 ,0

100,0 100,0 98,0 100,0

Conteggio

Casi validi

Media

Minimo

Massimo

1 Statale

Conteggio

Casi validi

Media

Minimo

Massimo

2 Paritaria

Istituzionescolastica

“19.Dotazione

Ordinaria% privati"

“19.Dotazione

perequativa% privati"

“19. Altrifinanziamenti

vincolati (Statoe Regioni)%

privati"

“19. Altrifinanziamenti% privati"

Page 27: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I risultati: il Questionario parte I - Sezione finanziaria

5816 5816

5271 5271

35,7 ,6

,0 ,0

100,5 100,0

807 807

487 487

,5 2,8

,0 ,0

90,0 100,0

Conteggio

Casi validi

Media

Minimo

Massimo

1 Statale

Conteggio

Casi validi

Media

Minimo

Massimo

2 Paritaria

Istituzionescolastica

“19. Avanzo diamministrazione presunto% propri"

“19. Altrifinanziamenti% propri"

Entità e tipologia dei fondi propri

Page 28: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Riflessioni sul progetto pilota

Riflessioni Rilevazione delle attività

Focalizzazione sulle attività di organizzazione e sviluppo della istruzione/formazione

Integrazione dei dati di struttura e di contesto con altre fonti

Diffusione di profili per rendere possibile azioni di confronto

Prove di apprendimento Costruzione di prove ad hoc per la sessione informatica

parallele a quelle cartacee Piano sperimentale coinvolgente stesse istituzioni

scolastiche per prove cartacee e informatiche Diffondere l’uso di test standardizzati e utilizzabili in

modo indipendente dalle istituzioni scolastiche.

Page 29: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Finalità e obiettivi della somministrazione informatica

Le finalità assegnate alla somministrazione informatica sono le stesse per tutte le edizioni del Progetto pilota: per il Questionario delle attività, il mezzo di

pubblicazione e raccolta delle risposte assegnate dalle istituzioni scolastiche stesse;

per la compilazione delle prove di apprendimento, l’accertamento delle modalità, degli strumenti operativi e delle procedure per la possibile gestione automatizzata, tramite computer, della compilazione delle prove di apprendimento da parte degli studenti

Page 30: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Scuole partecipanti alla compilazione informatica delle prove d’apprendimento

La compilazione informatica delle prove di apprendimento degli studenti è utilizzata per verificare

se e in quale misura

è praticabile la compilazione informatica rispetto alle risorse tecnologiche delle istituzioni scolastiche

la prestazione degli stessi studenti viene influenzata

•dall’uso del computer (l’esposizione alla Ict influenza la prova),• dall’uso dello stesso formato delle prove cartacee.

Page 31: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I modelli organizzativi per l’organizzazione

Per tutte le edizioni del Progetto pilota sono stati utilizzati due modelli organizzativi:

il primo, o modello decentrato (distribuito),

•Istituzioni scolastiche, gestione somministrazione

•Referenti regionali coordinamento e la supervisione (a livello centrale sono state realizzate la produzione dei materiali, la definizione delle regole di somministrazione, la registrazione, la diffusione e il recupero dei fascicoli e l’elaborazione finale dei dati).

Page 32: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

I modelli organizzativi per l’organizzazione

Il secondo modello, o modello centralizzato,

• INValSI, gestione e controllo delle attività di compilazione del questionario e di somministrazione informatica

• Referenti regionali (selezione delle scuole partecipanti alla compilazione informatica e sorveglianza dello svolgimento delle attività).

Page 33: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Le dimensioni della valutazione con il Questionario

Struttura della istituzione scolastica Anagrafica, composizione istituto,

popolazione scolastica, risorse e dotazioni ( fisiche, tecnologiche, finanziarie).

Contesto (interno-esterno) Comunicazioni genitori, reti di

scuole, Enti locali e altri enti, accoglienza.

Organizzazione dell’istituto scolastico

Responsabilità, comunicazione, flessibilità, integrazione, monitoraggio e verifica delle attività, valutazione interna o autovalutazione.

Sviluppo dell’istruzione e della formazione

Organizzazione: costruzione del curricolo, insegnamenti integrativi, recupero, supporto,continuità , ecc. .

Didattica Programmazione, personalizzazione,

valutazione profitto, ecc.. Risultati Destinazione degli studenti,

soddisfazione degli utenti, miglioramento

Page 34: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Modello sperimentale per la compilazione informatica

MODELLO OPERATIVO

Offerta formativa scuola: verifiche

apprendimenti, verifiche interventi

individualizzati, attività

integrative, continuità,

organizzazione allievi.

Risultati prove

apprendimento di it. e mat. PP3.

Offerta insegnamento it. e mat.: argomenti svolti in it. e mat.

Attività studente: tempo libero, lettura, tv, compiti per

casa di it. e mat., corsi a scuola e fuori scuola, uso

pc.

Atteggiamenti famiglia: it.,

mat., scienze, pc, svago.

Atteggiamenti e percezioni

studente e gruppo dei pari: it., mat.,

scienze, pc, svago, clima di scuola, rapporto

con gli insegnanti.

Strategie insegnamento it. e

mat.: n. ore, attività didattiche, compiti a

casa, uso libro di testo, valutazione,

uso pc.

Strategie scuola: durata 1 h di

lezione, interventi migliorativi,

collaborazione tra insegnanti.

Caratteristiche scuola: n. allievi,

n. docenti, n. laboratori e aule

pc, n. pc, n. prestiti biblioteca; indirizzo (per le

superiori).

Caratteristiche insegnante it. e

mat.: età, genere, anni di

insegnamento, titolo di studio, aggiornamento professionale Caratteristiche

classe: n. allievi, n. allievi con codice di

esclusione.

Caratteristiche studente: voti di

it. e mat., debiti scolastici it. e mat,, assenze e

ritardi; ripetenze.

Caratteristiche famiglia:

livello socio-economico,

lingua parlata.

Studente Insegnante/classe

Scuola Famiglia

Pre

requisi

ti

Atte

ggia

ment

i

Attiv

ità

pro

cessi

Contesto dell’attività educativa

Page 35: I progetti pilota: aspetti metodologici e risultati Roberto Melchiori, 3-4 giugno 2004 Il progetto pilota Secondo Seminario Nazionale INValSI Somministrazione.

I pro

gett

i pilo

ta:

asp

ett

i m

eto

dolo

gic

i e r

isult

ati

Rob

erto

Mel

chio

ri, 3

-4 g

iugn

o 20

04

Le descrizione del sistema scolastico

Agenti del servizio scolastico

Soggetti esterni

ijXij

Fattori osservati

Direzione, responsabilità

Offerta formativa

Didattica

Curricoli, organizzazione

Flessibilità.. profilo

Livelli di apprendimento

misurazioneValutazione

…..

profilo

profilo

meso

macro

microIstituto scolastico

sintesi

sintesi

Sistema Sistema scolasticoscolastico