Definizione di Valutazione
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
La valutazione è principalmente (ma non esclusivamente)
un’attività di ricerca sociale applicata, realizzata, nell’ambito
di un processo decisionale, in maniera integrata con le fasi di
programmazione, progettazione e intervento, avente come
scopo la riduzione della complessità decisionale attraverso
l’analisi degli effetti diretti e indiretti, attesi e non attesi,
voluti o non voluti, dell’azione, compresi quelli non
riconducibili ad aspetti materiali; in questo contesto la
valutazione assume il ruolo peculiare di strumento
partecipato di giudizio di azioni socialmente rilevanti,
accettandone necessariamente le conseguenze operative
relative al rapporto fra decisori, operatori e beneficiari
dell’azione.
Claudio Bezzi, Il disegno della ricerca valutativa,
Franco Angeli, Milano 2001, pp. 55-56
Valutazione e attività correlate in relazione
a epistemologia e metodologia
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Complessità epistemologico-metodologica
Valutazione
Benchmarking
Certificazione
Audit
Monitoraggio
Semplicità epistemologico-metodologica
Realismo
Costruttivismo
Ricerca di base
Valutazione e attività correlate
in relazione a intervento e criticità
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Analisi, riflessione, critica
Intervento sul processo
Astensione dall’intervento
Ricerca di base
Valutazione
Benchmarking
Audit
Certificazione
Monitoraggio
Registrazione, informazione
Gli attori sociali
rilevanti per la valutazione
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Decisione
Implementazione
Soggetti
deputati al
controllo
Eventuali soggetti convenzionati
Soggetto che
promuove
l’intervento
Valutatore
Alta dirigenza
Consulenti
Parti sociali
Gestione
Operatori
(Funzionari, quadri, consulenti)
Legenda:
Decisori
Operatori
Beneficiari
Fruizione
Beneficiari dell’intervento
(utenti, clienti, beneficiari indiretti, ‘vittime’)
Attori che presentano istanze
(Bisogni)
Efficacia, Efficienza
e il ciclo ProgrammazioneValutazione
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Valutazione
Attori implicati
Attori
implicati
Procedure
Procedure
Strumenti
Strumenti
Realizzazioni
Esiti
Effetti
Effetti
Impatti
Efficacia interna
Implementazione
Efficacia esterna
Coerenza
Vincoli/Risorse
Vincoli/Risorse
bisogni
bisogni
Obiettivi/Risultati attesi
Efficienzamanageriale
Decisione/
Programmazione
Efficienza istituzionale
finalità
finalità
Contesto
Contestoeconomico-sociale
economico-sociale
che
cheesprime
esprimedei
dei
Rilevanza
Contesto
Contestopolitico-istituzionale
politico-istituzionale
che
cheesprime
esprimedelle
delle
Decisione, gestione e cambiamento,
e il ruolo della valutazione
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
evento
turbolenza
equilibrio
evento
(precedenti)
valutazioni di varia
natura
decisione
implement.
gestione
adattamento
valutazione ex
ante di effetti e
impatti
val. in
itinere
monitoraggio
valutazione in itinere e
intermedia
valutazione in itinere ed
ex post degli effetti
sollecitazione
valutazione ex
post di impatti ed
ex ante
Tipi di risultati
dei programmi e interventi
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Programma
Programma
oointervento
interventoprogrammato
programmato
Fattori
Fattori
intervenienti
Conclusione,
valutazione intermedia
o t0 della Conclusione,
realizzazioni
esiti
effetti
effetti
impatti
Valutazione
Valutazione
orientata
orientataagli
agli
obiettivi
obiettivi
realizzazioni,
esiti,
effetti,
effetti,
impatti
impatti
Valutazione
Valutazione
svincolata
svincolata
dagli
dagliobiettivi
obiettivi
Risultati inattesi
Risultati
Risultati attesi
auspicati
e desiderati
e desiderati
o t0
La valutazione fra competenza
tecnica e conoscenza nel merito
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Conoscenza
nel merito
dell’evaluando
Bassa
Media
Alta
Competenza tecnico-scientifica della valutazione
Bassa
Media
Pregiudizio
Valutazione
spontanea
Specialismo
dogmatico
Alta
Metodologia
dogmatica
Valutazione
Valutazione
competente
esperta
Come realizzare un sistema di
valutazione?
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Autoritario
(solo l’Ente gestore)
Come (forse)
dovremo
iniziare
Facile da gestire
(ma poco sensibile)
Sensibile
(ma più complesso
da gestire)
Dialogico
(concertazione con gli altri
stakeholder rilevanti)
Come
(forse) lo
vorremmo
realizzare
Opportunità d'impiego di tecniche di valutazione di
progetti di rilievo economico
Importanza degli aspetti non monetizzabili
nell’ambito del progetto
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
molto
elevata
Analisi Multicriteri
elevata
Analisi CostiBenefici
scarsa
Analisi CostiEfficacia
modeste
significative
Dimensioni economiche del progetto
elevate
Opportunità d'impiego di tecniche di valutazione di
progetti di rilievo sociale
Importanza dell’opinione degli utenti-esperti
nella definizione dei parametri di giudizio
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
elevata
Scala delle Priorità
Obbligate
media
Indagine campionaria
scarsa
Valutazione tassonomica
modeste
significative
Dimensioni economiche del progetto
elevate
Il ciclo progettazione – valutazione
1 - Descrizione generale
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Definizione
obiettivi gen.
Gestione
Progettazione
Insorgenza
del problema
Decisione
Definizione
obiettivi int.
Ob. specifici
Azioni
Progettazione
Valutazione
Progettazione
Azioni
Rendicontazione
Erogazione
Implementazione
Progettazione
implementazione
Il ciclo progettazione – valutazione
2 - Dove agisce la valutazione
Istituto Italiano di Valutazione, via M. Macchi 27, 20124 Milano, Diretto da Claudio Bezzi
Insorgenza
del problema
Definizione
obiettivi gen.
Val. ex post
Impatti
Rendicont.
Progettazione
Gestione
Val. ex ante
impatti
Azioni
valutative
Progettazione
Valutazione
Definizione
obiettivi int.
Val. ex post
Effetti
Val. ex post
Esiti
Processo
decisionale
Studi
preliminari
Val. ex ante
efficacia
Progettazione Azioni
Ob. specifici
Azioni
Erogazione
Val. in itinere
Progettaz. Implem.
Implementazione
Monitoraggio
Val. ex ante
del processo