Dimensione della Valutazione RISULTATI, ANALISI E MIGLIORAMENTO Progetto VAI Il Corso di Studio Parti Interessate Sistema Organizzativo (Responsabilità) Risorse STUDENTE Inteso come bagaglio di conoscenze, abilità ed esperienze possedute dallo Studente all’inizio del processo formativo Corso per Autovalutatori 2002-2003 Progetto VAI Risultati, Risultati, SODDISFAZIONE Analisi ee Analisi Miglioramento Miglioramento Processo Formativo Parti Interessate Esigenze e Obiettivi ESIGENZE LAUREATO Inteso come bagaglio di conoscenze, abilità ed esperienze possedute dal Laureato 2 Articolazione della Dimensione RISULTATI, ANALISI E MIGLIORAMENTO RISULTATI ANALISI E MIGLIORAMENTO Corso per Autovalutatori 2002-2003 Progetto VAI 3 Risultati Attraverso questo elemento si intende accertare: - la capacità di attrazione del CdS nei confronti degli studenti e delle altre PI; - se e come il CdS provvede al monitoraggio del percorso formativo degli studenti, al fine di valutare l'efficacia interna della formazione; - come il CdS provvede a raccogliere, analizzare e sintetizzare, con l'ausilio di opportuni indicatori, le opinioni degli studenti sui singoli insegnamenti, sulle altre attività didattico-formative e sul CdS nel suo complesso, al fine di valutarne il livello di soddisfazione; - se e come il CdS provvede al monitoraggio dell’inserimento dei laureati nel mondo del lavoro, al fine di valutare l’efficacia esterna della formazione; - se e come il CdS provvede a monitorare l’opinione sia dei laureati sia di chi utilizza le loro capacità, al fine di valutarne il relativo livello di soddisfazione Corso per Autovalutatori 2002-2003 Progetto VAI 4 CONOSCERSI E VALUTARSI ?! Corso per Autovalutatori 2002-2003 Progetto VAI 5 Risultati e Controllo L’accertamento e misura dei Risultati come elemento di Controllo del Sistema di Conduzione del CdS ACT PLAN CHECK DO Corso per Autovalutatori 2002-2003 Progetto VAI 6 Confronto con gli obiettivi Obiettivi del processo Risultati Se coincidono va tutto bene, altrimenti occorre indagare sulle cause dello scostamento e decidere circa le modalità di intervento miglioramento Corso per Autovalutatori 2002-2003 Progetto VAI riprogettazione 7 CONFRONTARSI CON GLI ALTRI !!! Corso per Autovalutatori 2002-2003 Progetto VAI 8 Un risultato Traguardo che il CdS ha raggiunto attraverso le proprie attività e i propri processi Un Risultato dovrebbe essere rappresentato da un valore derivato da una valutazione o misura quantitativa o qualitativa (Una determinata quantità di laureati, di risorse per utente, etc.) Corso per Autovalutatori 2002-2003 Progetto VAI 9 L’accertamento dei risultati • Chi: Le funzioni di responsabilità e coordinamento del CdS • Cosa: Capacità di attrazione Efficacia interna ed esterna del CdS • Perché: Verificare l’efficacia del CdS nel suo complesso • Quando: Continuativamente, con periodicità di analisi coerente con la dinamica di variazione dei fattori di controllo • Come: Corso per Autovalutatori 2002-2003 Progetto VAI Tecniche di controllo qualitative e quantitative (mediante gli “indicatori”) 10 Un indicatore o indice PARAMETRO DESCRITTIVO DI UN SISTEMA SOLITAMENTE COSTITUITO DA UN DATO NUMERICO VARIABILE IN MODO CONTINUO O DISCRETO CHE CONSENTE DI TRARRE DELLE NON È SIGNIFICATIVO TANTO IL VALORE INDICAZIONI DI TENDENZA DI UN FENOMENO ASSOLUTO DI UN INDICATORE, QUANTO La misura di un dato esprimibile in termini assoluti o relativi, sia LAè SUA VARIAZIONE RELATIVA rilevandola direttamente da misure su FUNZIONE processi, sia ottenendola (NEL TEMPO O IN DI ALTREcome elaborazione di queste attraverso algoritmi e procedimenti prestabiliti GRANDEZZE O VARIABILI INDIPENDENTI) indice di soddisfazione delle PI numero di studenti iscritti percentuale di studenti provenienti da altro CdS % di studenti che ha acquisito da 1 a 60 crediti percentuale di studenti che hanno conseguito il titolo con tempi più lunghi della media Corso per Autovalutatori 2002-2003 Progetto VAI 11 Rappresentazioni di indicatori e indici 16 14 Domanda 6 Motivi di insoddisfazione servizio di sportello 12 10 8 6 4 2 0 Andamento soddisfazione studenti Utilità dei Compitini 79 Disponibilità docente Aule 68 Utilità delle Esercitazioni 61 54 43 Mat. Didattico 25 Aderenza lezioni al 64 programma Laboratori 54 orario di apertura ristretto chiusura del sabato Diagrammi a torta Istogrammi Diagrammi polari Diagrammi cartesiani ... altri 100 Soddisfazione file lunghe/poco personale 75 50 25 0 0 25 50 75 Im portanza Utilità dei Ricevimenti 64 Orario Corso per Autovalutatori 2002-2003 Progetto VAI 100 12 Visualizza qualche esempio Risultati Domande Quali sono i risultati inerenti il grado di attrazione del CdS? Fattori Numero di immatricolazioni annuo Trend di immatricolazione Tipologia degli iscritti Quali sono i risultati inerenti l’efficacia interna del CdS? Avanzamento della carriera degli studenti Livelli di apprendimento raggiunti Opinione degli studenti rispetto alla didattica Tassi di successo e tempi di percorrenza degli studenti Congruenza tra la collocazione nel mondo del lavoro e la formazione ricevuta Tempi di collocazione nel mondo del lavoro Opinione dei laureati sulla formazione ricevuta Opinione dei datori di lavoro sulla preparazione dei laureati Quali sono i risultati inerenti l’efficacia esterna del CdS? Corso per Autovalutatori 2002-2003 Progetto VAI 13 Esempi di “Lettere” • L’80% degli studenti ha superato gli esami e conseguito il numero di crediti programmato per l’attuale fase del percorso formativo nelle sessioni di febbraio e giugnoluglio. Di questi studenti il 20% ha conseguito i crediti con una valutazione compresa fra il 30 e lode e i 28 trentesimi; il 45% ha conseguito i crediti con una valutazione compresa fra i 27 e i 26 trentesimi, il 25% ha conseguito i crediti con una valutazione compresa fra i 25 e i 23 trentesimi e il 10% ha conseguito i crediti con una valutazione compresa fra i 22 e i 18 trentesimi. Il livello di apprendimento raggiunto dagli studenti è dunque mediamente discreto. Corso per Autovalutatori 2002-2003 Progetto VAI 14 Esempi di “Lettere” • I risultati effettivi inerenti il grado di attrazione del CdS su un target analogo o simile a quello delineato sarà valutabile esclusivamente con la chiusura delle iscrizioni del prossimo A.A., cioè all’inizio del secondo anno di vita del CdS stesso. I dati relativi all’andamento delle iscrizioni presso i licei e gli istituti di istruzione secondaria superiore, che rappresentano il bacino di utenza privilegiato del CdS in Lettere, nonché i risultati dell’attività di orientamento presso le scuole, delle azioni di sensibilizzazione dell’opinione pubblica attraverso i mezzi di comunicazione di massa, legittimano un’aspettativa di implementazione pari al 10-15%. Corso per Autovalutatori 2002-2003 Progetto VAI 15 Esempi di “Lettere” • Il tasso di successo e i tempi di percorrenza degli studenti saranno valutabili esclusivamente durante il successivo anno di corso, così come la congruenza tra la collocazione nel mondo del lavoro e la formazione ricevuta, i tempi di collocazione nel mondo del lavoro, l’opinione dei laureati sulla formazione ricevuta e l’opinione dei datori di lavoro sulla preparazione dei laureati saranno valutabili esclusivamente ad un anno o due dalla conclusione del primo ciclo triennale. • La situazione attuale lascia prevedere un tasso di successo vicino al 70-80% del totale degli iscritti e il sostanziale rispetto dei tempi di percorrenza previsti. Corso per Autovalutatori 2002-2003 Progetto VAI 16 Articolazione della Dimensione RISULTATI, ANALISI E MIGLIORAMENTO RISULTATI ANALISI E MIGLIORAMENTO Corso per Autovalutatori 2002-2003 Progetto VAI 17 Analisi e miglioramento Attraverso questo elemento si intende accertare e valutare la capacità del CdS di promuovere un processo di miglioramento continuo dell'efficacia e dell'efficienza dell'organizzazione e dell'offerta didattica, attraverso la ricerca sistematica, l’individuazione e l’analisi di tutte le opportunità di miglioramento. Si intende inoltre accertare e valutare anche la capacità del CdS di affrontare e risolvere i problemi che si presentano nell'erogazione della didattica e dei servizi, di ricercarne le cause e di prevenirne l'insorgere Corso per Autovalutatori 2002-2003 Progetto VAI 18 Miglioramento Le azioni intraprese dal CdS per accrescere efficienza ed efficacia delle attività e dei processi a vantaggio delle PI e, in particolare, del CdS stesso CONFORMITÀ Corso per Autovalutatori 2002-2003 Progetto VAI 19 Miglioramento Applicazione della sequenza “P.D.C.A.” P D A C Corso per Autovalutatori 2002-2003 Progetto VAI Plan pianificare Do attuare quanto pianificato Check valutare i risultati rispetto agli obiettivi Act standardizzare o ricominciare il ciclo 20 Processi base per il miglioramento 1) Individuazione indicatori 2) Rilevazione valori 3) Analisi dati raccolti 4) Individuazione interventi di miglioramento Corso per Autovalutatori 2002-2003 Progetto VAI 21 Miglioramento Individuare tutti i problemi Approvare i risultati Scegliere un problema Ricercare le cause potenziali Verificare i risultati Attuazione Individuare le cause reali Approvare il progetto Proporre una soluzione Corso per Autovalutatori 2002-2003 Progetto VAI Cercare le soluzioni 22 Problem-solving “Insieme di metodi, di tecniche e di strumenti che, utilizzati in maniera sistematica, nelle varie fasi del processo di miglioramento, permettono l’efficace raggiungimento degli obiettivi, con un efficiente impiego delle risorse.” Corso per Autovalutatori 2002-2003 Progetto VAI 23 Analisi delle difficoltà contingenti Situazione problematica o non desiderata Il CdS deve gestire le difficoltà contingenti che si possano manifestare durante l’erogazione del processo formativo e dei servizi di supporto Progetto VAI Esempi di difficoltà contingenti Disservizi (mancata apertura della segreteria, etc.) Un programma didattico non rispettato PROGRAMMA Leggi di Ohm Circuiti elettrici Equazioni di Maxwell Motori elettrici ……… Corso per Autovalutatori 2002-2003 Progetto VAI Equazioni di Maxwell 25 Gestione delle difficoltà contingenti Identificazione Documentazione Riesame (valutazione) Risoluzione (Disposizioni o Trattamento) Ricerca delle Cause (Azioni Correttive) Corso per Autovalutatori 2002-2003 Progetto VAI 26 Azioni correttive e preventive garantire che condizioni avverse alla qualità quali disservizi, malfunzionamenti, carenze, incongruenze siano PREVENUTE e quelle che si sono verificate siano prontamente IDENTIFICATE e CORRETTE (le cause che hanno generato i problemi non si devono ripresentare) Corso per Autovalutatori 2002-2003 Progetto VAI 27 Azioni correttive e preventive Non ti soffermare solo al rimedio degli effetti (non conformità, difetti, etc.) Risolto! Perché la chiave del successo sta nella... Individuazione e rimozione delle cause dei problemi (AZIONI CORRETTIVE) Corso per Autovalutatori 2002-2003 Progetto VAI Prevenzione delle cause di problemi potenziali (AZIONI PREVENTIVE) 28 L’importanza della prevenzione nei servizi Nell’industria manifatturiera… Clienti Controllo Qualità …e invece nei servizi!! Inizio lezione ore 15.30 Corso per Autovalutatori 2002-2003 Progetto VAI Clienti insoddisfatti 29 Analisi e miglioramento Domanda Le attività di analisi e miglioramento sono credibili ed efficaci? Fattori Decisioni conseguenti ai risultati della valutazione e loro efficacia Modalità di gestione delle difficoltà contingenti Valutazione della qualità del CdS (Requisito obbligatorio CampusONE) Corso per Autovalutatori 2002-2003 Progetto VAI 30