L’esperienza del nucleo di valutazione
del Conservatorio di Musica
‘Arrigo Boito’ di Parma
Fabrizio Fanticini
Fabrizio Fanticini
Prima dell’istituzione del Nucleo di
Valutazione
Già dal 2005 è stata data informazione al Collegio
dei docenti del Conservatorio di Parma
dell’esigenza di verificare la qualità del servizio
all’interno dell’istituto.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
2
Fabrizio Fanticini
Reazioni
• Iniziale forte timore da parte di molti docenti di veder profanato
il proprio microcosmo con conseguente perdita degli equilibri
consolidati.
• Successivamente, nonostante ripetute spiegazioni anche
individuali, al timore si sostituisce, accanto ad una non
trascurabile curiosità, la sfiducia sulla reale incidenza di tale
ricerca sia da parte di docenti, che di studenti e personale a.t.a.
• Solo dopo mesi dalla prima informazione e con il primo operare
del nucleo di valutazione, cresce la fiducia e la collaborazione
(che comunque non è mai stata assente); questo processo si
incrementa con il procedere dei lavori del nucleo e credo potrà
divenire ottimale solo con un esito concretamente positivo della
prima rilevazione.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
3
Fabrizio Fanticini
Istituzione del Nucleo di Valutazione
Il Nucleo di Valutazione viene istituito nel marzo 2007 ed
è composto da:
Presidente, dott. Franco Torelli, professore di statistica presso le
Università di Modena e Reggio Emilia e presso l’Università
Cattolica di Milano;
dott.ssa Federica Balluchi, professore associato e docente di
controllo di gestione presso l’Università di Parma;
maestro Fabrizio Fanticini, docente di Armonia, Contrappunto,
Fuga e Composizione presso il Conservatorio di Musica di
Parma.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
4
Fabrizio Fanticini
Specificità dei componenti del Nucleo
• Prof. Torelli, esperto di statistica;
• Prof.ssa Balluchi, esperta di controllo di
gestione;
• M. Fanticini, conoscitore della realtà del
conservatorio.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
5
Fabrizio Fanticini
Prima fase operativa
Ai due componenti esterni vengono fornite informazioni relative
alla realtà e alle specificità dello studio nel conservatorio.
Si ritiene utile verbalizzare ogni momento dei lavori per lasciare una
traccia trasparente del modo di operare del Nucleo; a tal fine la
direzione fornisce una segretaria verbalizzante.
Si evidenzia immediatamente l’utilità, tra una riunione e l’altra, di
operare tenendosi in costante contatto a stretto giro di e-mail.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
6
Fabrizio Fanticini
Problemi rilevati:
–
–
–
L’articolazione degli studi nel conservatorio tra vecchio e nuovo
ordinamento, risulta di ardua appropriazione per un osservatore
esterno;
Lo stesso termine assume a volte significati contrastanti se riferito
all’università o al conservatorio creando incomprensioni.
(ad esempio il termine relativo al conservatorio vecchio ordinamento “corso
complementare obbligatorio”, nel linguaggio universitario risulta una contraddizione
in termini)
Difficoltà di comprendere lo scollegamento tra il conservatorio vecchio
ordinamento e gli altri ordini scolastici, anche relativamente all’età
dell’utenza.
( ad esempio, come sia possibile che studenti abbiano conseguito un diploma di
conservatorio, pur con tutte le limitazioni di legge, frequentando ancora una media
superiore o addirittura senza averla mai iniziata)
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
7
Fabrizio Fanticini
Definizione dei soggetti dell’indagine
Oltre ai docenti e al personale a.t.a. è da definire la tipologia di
studenti a cui rivolgersi.
Pur sapendo che l’esperienza del vecchio ordinamento è in
esaurimento, dato che il diploma di conservatorio è
equipollente al diploma accademico di primo livello, si è deciso
di interpellare anche gli studenti dei corsi superiori di
conservatorio;
perciò le categorie di studenti interessati all’indagine saranno:
1.
2.
3.
Studenti dei corsi superiori del conservatorio;
Studenti del triennio di I livello;
Studenti del biennio di II livello.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
8
Fabrizio Fanticini
Cosa rilevare
Oggetto dell’analisi saranno sia la ricerca dei
problemi da risolvere per migliorare il servizio,
che gli elementi di soddisfazione affinché questi
possano essere incrementati.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
9
Fabrizio Fanticini
Seconda Fase
Pur nell’operare collegiale viene definita la
divisione di responsabilità e compiti operativi
tra i tre componendi il Nucleo secondo le
specificità individuali.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
10
Fabrizio Fanticini
Temi da sviluppare
• Formulazione delle domande dei tre questionari
• Garanzia dell’anonimato
• Modalità della rilevazione e della raccolta dei dati
• Creazione del rapporto finale
• Determinazione di un calendario delle scadenze delle
operazioni
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
11
Fabrizio Fanticini
Formulazione delle domande dei tre
questionari
a. Come conoscitore della realtà del conservatorio, illustro agli altri componenti i
punti che ritengo di maggiore interesse per una indagine, seguendo le
indicazioni raccolte durante il convegno svoltosi a L’Aquila nel 2005.
(ad esempio la correttezza del carico di lavoro richiesto per ottenere i risultati prefissi
relativamente ai crediti assegnati; obiettivi prefissi e risultati realmente raggiungibili; ecc.)
b. Successivamente si realizzano tre focus groups, rispettivamente con un
campione di docenti, di studenti e di personale A.T.A.
( in questo modo si sono voluti portare in luce i problemi specifici al singolo conservatorio)
c. Il professor Torelli redige un rapporto riassuntivo di quanto emerso per
ciascuno dei tre focus groups.
d. Dalla modulazione tra ciò che è emerso da questi rapporti riassuntivi e la
riflessione interna al Nucleo rispetto agli aspetti “oggettivi” su cui rivolgere
l’indagine, si individuano le domande da inserire nei questionari.
e. Della formulazione delle domande si incarica il prof. Torelli in qualità di esperto
statistico.
(la forma e a volte anche solo la sintassi possono condizionare una risposta falsando il
risultato, perciò abbiamo affidato tale compito all’esperto di statistica)
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
12
Fabrizio Fanticini
Garanzia dell’anonimato
Relativamente agli studenti questo è il problema più
rilevante.
1.
Per far si che l’indagine porti a risultati utili non è
possibile limitarla alla globalità delle Scuole, ma è
necessario particolareggiarla maggiormente.
2.
Dato che in una Scuola può esserci anche solo uno
studente interessato all’indagine, non è possibile
giungere a questo livello di analisi senza
compromettere totalmente l’anonimato.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
13
Fabrizio Fanticini
Soluzione adottata:
Si è deciso di limitare l’analisi dei dati al livello di
Dipartimento.
Sebbene non sia la soluzione ottimale, il numero di
studenti interpellati garantisce l’anonimato del singolo
e, nello stesso tempo ciò che emerge dai questionari
potrà essere collocato nella realtà conosciuta all’interno
degli ambiti non eccessivamente ampi del Dipartimento,
che quindi sarà in grado di particolareggiare l’eventuale
problema e segnalarlo al Consiglio Accademico.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
14
Fabrizio Fanticini
Nell’eventualità che un aspetto sollevato non risulti
di chiara lettura è prevista la possibilità di
effettuare successive rilevazioni maggiormente
particolareggiate su un campione di soggetti,
ridotto di numero quanto selettivamente
individuato
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
15
Fabrizio Fanticini
Modalità della rilevazione e della raccolta
dei dati
Affinché i dati della rilevazione portino ad un
risultato utile, è necessario una grande
partecipazione all’indagine.
Per garantire ciò instaurando una consuetudine, in
questa prima istanza, si è deciso l’obbligatorietà
della compilazione del questionario sia da parte
dei docenti che degli studenti e del personale
a.t.a.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
16
Fabrizio Fanticini
Problemi da affrontare
1. Evitare che una stessa persona compili più
volte un questionario
2. Impedire risposte incomprensibili o incoerenti
3. Indurre alla compilazione completa dei
questionari
4. Favorire al massimo la facilità di compilazione
attraverso la concisione e l’agilità del mezzo
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
17
Fabrizio Fanticini
Soluzioni adottate
• Informatizzazione totale di questionari e analisi dei dati.
• Compilazione a mezzo internet, consentendo così di rispondere
al questionario in qualsiasi luogo attraverso un qualsiasi
computer collegato alla rete.
• L’accesso ai questionari avviene attraverso una password
individuale fornita dalla segreteria didattica.
• Come avviene per l’annuale rendicontazione finale dell’LLP, è
possibile modificare più volte il questionario fino a che non si
seleziona l’invio; a quel punto la password scade e non è più
possibile alcuna modifica.
• Le risposte alle domande contenute nel questionario si possono
selezionare scegliendole tra quelle proposte in un menu a discesa
• Tra le risposte proposte compare sempre anche “N. R.” (non
risponde)
• Non è possibile inviare il questionario senza aver selezionato una
delle risposte suggerite in tutte le domande
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
18
Fabrizio Fanticini
Solo al termine dei questionari viene prevista la
possibilità di inserire proprie considerazioni,
rilievi o osservazioni, in un campo apposito.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
19
Fabrizio Fanticini
Terza Fase
• Realizzazione di questionari cartacei e “collaudo” degli
stessi con un campione delle tre categorie interessate
alla rilevazione.
• Valutazione delle difficoltà e delle incomprensioni
rilevate durante il “collaudo” e correzioni relative
• Realizzazione della versione definitiva dei questionari
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
20
Fabrizio Fanticini
• Progettazione di un sito web apposito e
realizzazione informatica dei questionari.
(A questo proposito la direzione del conservatorio ha
affiancato al nucleo di valutazione il dott. Giacomo
Scaramuzza, informatico ma anche diplomato in
composizione presso il nostro conservatorio, che si è
dimostrato figura indispensabile alla corretta
realizzazione del progetto.
• “Collaudo” ad opera dei componenti il Nucleo.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
21
Fabrizio Fanticini
Fase Quarta
• La compilazione dei questionari è iniziata oggi e
si concluderà il 15 febbraio 2008.
• Per i meno avvezzi all’uso del computer il
conservatorio ha previsto presso i punti internet
messi a disposizione all’interno dell’istituto,
personale in grado di affiancare il compilatore.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
22
Fabrizio Fanticini
A tutti i soggetti della
rilevazione la
segreteria fornisce,
con username e
password un foglio di
istruzioni per la
compilazione del
questionario
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
23
Fabrizio Fanticini
Fase quinta
Dalla data del 15 febbraio 2008 inizierà l’analisi dei
dati pervenuti.
Questo porterà alla realizzazione del Rapporto
2006/07 che verrà consegnato al Consiglio
Accademico entro il primo giugno 2008
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
24
Fabrizio Fanticini
Il Rapporto 2006/07
• Contemporaneamente ai lavori delle fasi
precedenti si è iniziata la realizzazione degli
indici degli argomenti e delle parti già disponibili
del Rapporto 2006/07.
• La professoressa Balluchi con le sue competenze
si è assunta la responsabilità di coordinarne la
realizzazione.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
25
Fabrizio Fanticini
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
26
Fabrizio Fanticini
L’indice provvisorio
del Rapporto 2007
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
27
Fabrizio Fanticini
Naturalmente si tratta di un indice che potrà subire
modifiche soprattutto nei punti dall’1 al 6 dove
al momento i dati sono disponibili solo
parzialmente o non ancora disponibili.
Nondimeno si voluto realizzare un indice di
argomenti che sia di giuda per le future
rilevazioni e che vada perfezionandosi con esse.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
28
Fabrizio Fanticini
I questionari
Mi limito a mostrare alcune immagini della
realizzazione grafica dei nostri questionari, dato
che le domande contenute sono il risultato delle
fasi di lavoro appena illustrate e quindi
specifiche alle caratteristiche del Conservatorio
di Parma; in questo senso di scarsissima utilità,
se non fuorvianti per gli altri istituti.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
29
Fabrizio Fanticini
Il login
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
30
Fabrizio Fanticini
Pagina di benvenuto
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
31
Le pagine dei questionari
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
Fabrizio Fanticini
32
Fabrizio Fanticini
• Al termine di ogni pagina è possibile salvare le risposte, ma se
non si è risposto a qualche domanda si viene avvertiti
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
33
Fabrizio Fanticini
Le tipologie di risposte suggerite
nei menu a discesa
Nel caso si debba specificare la quantità che determina
l’insoddisfazione relativa alla domanda precedente:
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
34
Fabrizio Fanticini
Ad esempio:
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
35
Fabrizio Fanticini
È possibile sfogliare le varie
pagine, eventualmente
correggendo le risposte
salvate, “cliccando” sul
menu alla sinistra del
questionario.
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
36
Fabrizio Fanticini
Al termine della compilazione delle varie pagine
è possibile controllare quanto inserito nell’intero
questionario cliccando su “Controlla”
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
37
Fabrizio Fanticini
Al termine della pagina di riassunto, prima dell’invio, è
possibile inserire un proprio commento o rilievo in un
campo apposito
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
38
Fabrizio Fanticini
Fabrizio Fanticini
Nucleo di Valutazione
Conservatorio di Musica ‘Arrigo Boito’
Parma
e-mail:
[email protected]
Convegno "L'Assicurazione di Qualità e l'Alta Formazione Artistica e Musicale" - Trieste 15 dicembre 2007
39