1 - Cos’è la valutazione · Ipotesi specifiche da verificare Ricerca sociale orientata dalle...
16
Transcript of 1 - Cos’è la valutazione · Ipotesi specifiche da verificare Ricerca sociale orientata dalle...
Claudio Bezzi
L’insieme delle attività collegate utili per esprimere un giudizio su una politica,
programma, progetto di natura non lucrativa, argomentato tramite processi di ricerca realizzabili durante tutto il ciclo di vita
progettuale o al suo termine
Modifica definitiva, 25 gen 2018, della definizione contenuta in C. Bezzi, Il nuovo disegno della ricerca valutativa, 2010 e altre pubblicazioni precedenti
Definizione di Valutazione [di Programma]
Bisogni → Decisione → Valutazione I bisogni e l’espressione di istanze
Settore (p.es. Sanità, Economia,
Agricoltura…)
Settore
SETTORE
Settore (p.es. Sanità, Economia,
Agricoltura…)Ambito
(Luogo, tempo, oggetto specifico di analisi)
AMBITO
CONTESTO
[SOCIALE]
Politica
PROGRAMMA
PROGRAMMA
Progetto
Progetto
BISOGNI
Progetto
ATTORI SOCIALI (portatori di
interessi)
ATTORI SOCIALI (ESPRIMONO BISOGNI)
VALUTAZIONE EX ANTE
ANALISI DEL CONTESTO
1
Bisogni → Decisione → Valutazione Decisione e programmazione
SETTORE
CONTESTO
[SOCIALE] Politica
PROGRAMMA
PROGRAMMA
Progetto
EFFE
TTI
ATTE
SI RISULTATI (netti)
IMPATTI (netti)
REALIZZAZIONI
IMPLEM
EN-
TAZION
E
Progetto Progetto
BISOGNI
ATTORI SOCIALI (portatori di
interessi)
ATTORI SOCIALI (BENEFICIARI)
TEORIA DEL PROGRAMMA
TEORIA DELL’ IMPLEMENTAZIONE
BISOGNI
ATTORI SOCIALI (DECISORI)
ATTORI SOCIALI (OPERATORI)
MECCANISMI IPOTIZZATI
2
Bisogni → Decisione → Valutazione Implementazione e effetti inattesi
SETTORE
CONTESTO
[SOCIALE]
Politica
PROGRAMMA
BISOGNI
(lordi)RISULTATI (netti)
Variabili intervenienti
(Moderator)
REALIZZAZIONI
IMPLEM
EN-
TAZION
E
Progetto Progetto
ATTORI SOCIALI (BENEFICIARI)
VALUTAZIONE DI PROCESSO
VALUTAZIONE IN ITINERE
ATTORI SOCIALI (OPERATORI)
Effetti inattesi e indesiderati
Retroazione
VALUTAZIONE INTERMEDIA
ATTORI SOCIALI (DECISORI)
3
Bisogni → Decisione → Valutazione Effetti programmati
SETTORE
CONTESTO
[SOCIALE]
Politica
PROGRAMMA
EFFE
TTI
(lordi)
(lordi)
RISULTATI (netti)
IMPATTI (netti)
REALIZZAZIONI
IMPLEM
EN-
TAZION
E
Progetto Progetto
ATTORI SOCIALI (BENEFICIARI)
ATTORI SOCIALI (DECISORI)
ATTORI SOCIALI (OPERATORI)
EFFICIENZA
EFFICACIA INTERNA (netta)
EFFICACIA ESTERNA (netta)
DEFINIZIONE MANDATO
VALUTAZIONE EX ANTE
4
Valutazione, ricerca, monitoraggio etc.
In relazione a interventoe funzione critica
Analisi, riflessione, critica
Inte
rven
to s
ul p
roce
sso
Ast
ensi
one
dall’
inte
rven
to
Valutazione
Certificazione
Audit
Registrazione, mera informazione
Monitoraggio
Ricerca di base
Benchmarking
Bilancio sociale
Valutazione
1
Valutazione, ricerca, monitoraggio etc.
Ricerca di base
Complessità epistemologico-metodologica
Cos
trut
tivis
mo
Rea
lism
o
Certificazione
Audit
Monitoraggio
Benchmarking
Valutazione
Semplicità epistemologico-metodologica
Bilancio sociale
In relazione a costruttivismo ecomplessità metodologica
Valutazione
2
Differenza fra ricerca sociale e valutativa
Problema sociale generale che fa
emergere un desiderio conoscitivo
Teorie sociali che potrebbero spiegare
il problema
Ipotesi specifiche da verificare
Ricerca sociale orientata dalle
ipotesi e dalla teoria
Analisi risultati per convalidare o meno
le ipotesi
Problema politico, gestionale o
amministrativo che deve essere risolto
Contesto e Meccanismi sociali
Mandato valutativo
Ricerca valutativa vincolata dal
Mandato
Giudizio valutativo che aiuta il decisore
Ricerca sociale
Ricerca valutativa
Tipi di valutazione secondo la conoscenza del metodo
Conoscenza del
programma
Conoscenza del metodo valutativo
Bassa
Media
Alta
Bassa Media Alta
Stereotipie
Pregiudizi
Tecnicismo
Specialismo dogmatico
Metodologia dogmatica
Valutazione spontanea
Valutazione competente
Valutazione esperta
Valutazione specialistica
Rigore nel metodo
STAN
DARD
NON
STAN
DARD
123
45
6
1 - statistici2 - economisti3 - sociologi
4 - epidemiologi 5 e 6 - tutti gli altri
C. Bezzi, in A. Marradi (curatore), Oltre il complesso d’inferiorità. Un'epistemologia per le scienze sociali, 2016
Mappa degli approcci e delle tecniche valutative
Ricerca valutativa
Controfattuale
Non controfattuale
Approccio manageriale
Ricerca sociale
Standard
Non standard
basate sull’interrogazione di individui
basate sull’interrogazione di gruppi
Gruppi reali
Gruppi nominali
Basata sull’interrogazione di individui
Basata sull’analisi di relazioni
basata su testi
Basata su testi
Basata sull’analisi di indicatori socio-economici
prevalentemente economici di primo e secondo livello
prevalentemente misti di secondo livello
Strategie di ricerca Tipi di tecniche
I box evidenziati configurano gruppi di tecniche omogenee
Metodi misti nella ricerca sociale e valutativa
Diversifica-zione delle
fontiDiversificazione delle tecniche
Entro la tecnica In parallelo In serie ma
integrateIn serie ma
giustapposte
Fra le tecniche
Delle
font
i
Delle
con
clusio
niDe
lle c
onclu
sioni
tra
mite
stu
di p
rees
isten
ti
Dive
rsific
azio
ne
dei r
icerc
ator
i
Dive
rsific
azio
ne
delle
teor
ie
Per la verifica di affidabilità e validitàPer una
maggiore estensione e intensione
dei dati
Trasformazione sociale realista
Ray Pawson e Nick Tilley, Realistic Evaluation, Sage, London 1997
M1
R1
C1
T1
M2
R2
C2
C = Contesto M = Meccanismo R = Risultato T = Tempo
Estensione e intensione
Golden Umbri
Inte
nsio
ne
Estensione
Mammiferi Abbaiano Pelo lungo
Taglia grande Color avorio-giallo
Buoni nuotatori Zampe palmate
ItalianiEuropei Di tutto il mondo
Esempio: cani Golden Retriever
Estensione e intensione
Bambini Umbri che arrotolano
gli spaghetti
Inte
nsio
ne
Estensione
Bambini fino a 5 anni Occidentali Forse italiani Classe media
Mangiatori di spaghetti Discreta manualità e autonomia
ItalianiEuropei Di tutto il mondo
Esempio: bambini che mangiano gli spaghetti con la forchetta
