Sezione OO AA - Ufficio per la Qualità e la Valutazione Nucleo di Valutazione Senato Accademico 19 settembre 2006 LA VALUTAZIONE DELLA DIDATTICA a.a. 2005/06 LA VALUTAZIONE DEI SERVIZI DI ATENEO anno 2005 Gruppo di lavoro Dott. Raffaella Di Biase Dott. Laura Paolino La valutazione della didattica a.a. 2005/06 Prima parte LA VALUTAZIONE DELLA DIDATTICA a.a. 2005/06 La valutazione della didattica a.a. 2005/06 Riferimenti normativi: L.370/1999 art.1 Comma 1 l’UNIVERSITA’ • si dota di un sistema di valutazione interna delle attività didattiche Comma 2 il NUCLEO DI VALUTAZIONE • acquisisce periodicamente le opinioni degli studenti frequentanti sulle attività didattiche • invia un'apposita relazione al MUR e al CNVSU, entro il 30 aprile di ciascun anno La valutazione della didattica a.a. 2005/06 Metodologia adottata per l’a.a. 2005/06 indagine sulla popolazione degli insegnamenti attivi questionario in forma anonima distribuzione del questionario durante le lezioni effettuata in parte da studenti coadiutori con contratto “150 ore”, in parte direttamente dai docenti o con risorse messe a disposizione dalle facoltà elaborazione di indicatori sintetici realizzazione di reportistica differenziata per i diversi portatori di interesse (Senato Accademico, Presidi, singoli Docenti, Studenti) La valutazione della didattica a.a. 2005/06 Questionario adottato per l’a.a. 2005/06 Il questionario adottato è il medesimo utilizzato per l’a.a. 2004/05 che, rispetto a quello precedentemente utilizzato, è costituito da 14 item articolati in 4 sezioni: 1. 2. 3. 4. Profilo dello studente (item 1-3) Organizzazione dell’insegnamento (item 4-6) Attività didattiche e di studio (item 7-12) Interesse e soddisfazione (item 13-14) Sono stati eliminati gli item relativi alle sezioni: • Organizzazione del corso di studi • Infrastrutture Tali item sono stati inseriti in un questionario web per la Rilevazione della soddisfazione degli studenti per i servizi di Ateneo somministrato nel periodo 25/10-16/12/2005. (vedi Seconda parte) La valutazione della didattica a.a. 2005/06 Elaborazione dei risultati e realizzazione della reportistica L’Ufficio per la Qualità e la Valutazione ha curato: • la lettura ottica dei questionari (luglio – agosto 2006) • l’elaborazione dei dati e la realizzazione di una reportistica differenziata a livello di singolo corso di insegnamento, di Facoltà e di Ateneo • la realizzazione del CD contenente: il report metodologico i risultati aggregati a livello di Facoltà e di Ateneo la valutazione dei servizi di Ateneo anno 2005 per ogni singola Facoltà i relativi risultati a livello di singolo corso di insegnamento La valutazione della didattica a.a. 2005/06 I numeri della rilevazione • 1.936 insegnamenti rilevati su una stima di 3.520 attivati • tasso di copertura 55% • 31.574 questionari • 2,56 questionari per ogni studente regolare • 93,18% corsi valutati positivamente La valutazione della didattica a.a. 2005/06 Copertura della rilevazione VALUTAZIONE DELLA DIDATTICA 2005/06 800 700 600 500 400 300 200 376 244 100 202 154 149 89 66 196 183 117 87 73 Sc ien SS LM IT ze Sc ien ze M M po lit i ch e FF NN e Sc ien ze de lla Fo rm az ion e M ed ic i na Ps ic o log ia ch ir u rg ia so f ia filo e Le tte re In ge gn er ia isp ru de nz a Gi ur Fa rm ac ia ia Ec on om Ar ch ite ttu ra 0 corsi valutati corsi non valutati La valutazione della didattica a.a. 2005/06 Trend copertura 100,00% Farmacia Architettura 90,00% Psicologia 80,00% SSLMIT Giurisprudenza Scienze MMFFNN 70,00% Economia Scienze politiche 60,00% TOTALE ATENEO Ingegneria 50,00% Scienze della Formazione Lettere e filosofia 40,00% 30,00% Medicina e chirurgia 20,00% 10,00% 0,00% 2001/02 2002/03 2003/04 2004/05 2005/06 La valutazione della didattica a.a. 2005/06 Corsi valutati positivamente % Corsi valutati soddisfacenti dagli studenti 100% 98,63% 96,55% 96,72% 96,10% 94,38% 94,02% 93,29% 95% 94,39% 93,18% 92,55% 92,21% 88,61% 90% 85% 80,30% 80% TO TA L E AT EN EO IT e ng ue M ola d i li po liti ch Sc u Sc ien ze MM Sc ien ze rm az ion FF NN e gia Fo de lla Ps ico lo hir ec na ed ici M Sc ien ze ur gia ia ilo so f ef re ge gn er ia Le tte In ru de nz a ia Gi ur isp rm ac Fa no mi a Ec o Ar c hit et tur a 75% La valutazione della didattica a.a. 2005/06 Indicatori sintetici 4,00 3,50 Per ogni corso di insegnamento e per ciascun item è stato calcolato come indicatore sintetico un Punteggio (da 1 a 4), ottenuto assegnando punteggio 1 alle risposte Decisamente NO, 2 alle risposte Più NO che sì, 3 alle risposte Più SÌ che no, 4 alle risposte Decisamente SÌ. 3,00 2,50 2,00 1,50 1,00 A livello di Facoltà è stato calcolato per ogni item il punteggio medio, il punteggio minimo e il punteggio massimo, tenendo conto di tutti i corsi rilevati. Tali indicatori non hanno un significato quantitativo perché sono stati calcolati su una scala ordinale, ma sono stati realizzati allo scopo di semplificare la lettura delle percentuali di risposta, consentendo di avere l’immediata percezione del posizionamento del singolo corso. NB! 13 Tutti i risultati ottenuti (percentuali di risposta, indicatori, punteggi,…) non possono essere presi in10 considerazione 14 4 5 6 8 9 11 12 prescindendo dal numero di questionari compilati per ogni MinDiVoto MaxDiVoto MediaDiVoto corso. La valutazione dei servizi di Ateneo anno 2005 Seconda parte LA VALUTAZIONE DEI SERVIZI DI ATENEO anno 2005 La valutazione dei servizi di Ateneo anno 2005 L’obiettivo dell’indagine L’Ufficio per la Qualità e la Valutazione, in collaborazione con il Prorettore per l’area “Studenti e Formazione” e con lo CSIA, ha realizzato un questionario web per rilevare il livello di soddisfazione per il complesso dei servizi offerti dall’Ateneo. L’obiettivo dell’ indagine era l’individuazione dei punti di forza e dei punti di debolezza dell’Ateneo nell’erogazione dei servizi agli studenti, in modo da isolare le aree prioritarie di intervento e ricavare delle indicazioni per il miglioramento dei servizi. La valutazione dei servizi di Ateneo anno 2005 Questionario adottato Il questionario ha analizzato i seguenti aspetti: 1.Aule 2.Locali e attrezzature per le attività didattiche integrative 3.Aule informatiche 4.Biblioteche 5.Sale di lettura 6.Servizi di sportello delle segreterie studenti 7.Servizi di facoltà 8.Altri Servizi di Ateneo (Servizio Internazionale, Sito web, Numero verde). Orientamento d’ateneo, Mobilità Agli studenti si chiedeva un giudizio sull’adeguatezza di ciascun servizio, utilizzando una scala ordinale a 5 punti (1 per niente adeguato, 2 poco adeguato, 3 abbastanza adeguato, 4 molto adeguato, 5 del tutto adeguato). La valutazione dei servizi di Ateneo anno 2005 La metodologia ed i numeri della rilevazione destinatari: tutti gli studenti iscritti per l’a.a.2004/05 procedura web: link disponibile sull’homepage dell’ateneo periodo: 25 ottobre - 16 dicembre 2005 questionari compilati: 735 studenti compilatori pari al 3,26% degli studenti iscritti regolarmente per l’a.a. 2004/05 e rappresentativi di tutte le 12 facoltà dell’Ateneo campione autoselezionato con percentuali molto diverse tra le facoltà (es: Ingegneria quasi 9% degli studenti iscritti, 229 questionari - Psicologia solo 0,72% degli studenti ha espresso la propria opinione, 12 questionari). Se ne può ricavare ● diverso utilizzo nelle facoltà della password assegnata dall’ateneo per l’accesso ai servizi informatici ● diversa propensione e abitudine all’uso del PC e del web nelle diverse facoltà La valutazione dei servizi di Ateneo anno 2005 Alcuni risultati In generale, la valutazione dei Servizi di Ateneo appare sufficiente. Tutte le infrastrutture sono valutate come adeguate alle necessità. L’unico aspetto problematico è la capienza delle aule informatiche Capienza Mai utilizzato 25,03% 1,36% 1,22% 27,35% 6,94% Per niente adeguato Poco adeguato Abbastanza adeguato 38,10% Molto adeguato Del tutto adeguato La valutazione dei servizi di Ateneo anno 2005 Punto di forza dei Servizi Il punto di forza dei servizi di contesto dell’Ateneo è il Servizio Bibliotecario che è valutato positivamente in tutti gli aspetti considerati (65,17% di soddisfatti per la disponibilità di libri e riviste; il 73,61% per le modalità di accesso al prestito; il 72,79% per gli orari di apertura). Orari di apertura 10,88% 7,21% Mai utilizzato Per niente adeguato 4,63% 23,95% 11,70% Poco adeguato Abbastanza adeguato 41,63% Molto adeguato Del tutto adeguato La valutazione dei servizi di Ateneo anno 2005 Punto di debolezza dei Servizi Particolarmente problematici risultano invece l’aspetto dei tempi di attesa agli sportelli della Segreteria Studenti (83,40% di insoddisfatti). Tempi di attesa allo sportello Mai utilizzato 0,27% 13,47% 1,90% 1,22% Per niente adeguato Poco adeguato Abbastanza adeguato Molto adeguato 30,61% 52,52% Del tutto adeguato Sezione OO AA - Ufficio per la Qualità e la Valutazione Nucleo di Valutazione PROPOSTE METODOLOGICHE PER L’ANNO ACCADEMICO 2006/2007 Proposta di metodologia per l’a.a. 2006/07 Indicazioni del Nucleo di Valutazione Il Nucleo di Valutazione… … ha analizzato i risultati della valutazione della didattica e della valutazione dei servizi di ateneo nella seduta del 18 settembre. … comunica che, come per lo scorso anno accademico, provvederà a pubblicare i risultati di tutti i componenti su web all’indirizzo http://wwwamm.units.it/nucleo.nsf/fValDidatticaHTML?OpenForm … conferma il suo orientamento volto a consentire la divulgazione dei risultati analitici della valutazione della didattica, anche al fine di accrescere il senso di coinvolgimento degli studenti … ritiene che le valutazioni dei corsi di insegnamento debbano essere utilizzate dalle Facoltà come elemento di valutazione per tutte le procedure che coinvolgono l’aspetto della didattica (conferme in ruolo, conferimento incarichi, supplenze e affidamenti, concorsi e valutazioni comparative, …) Proposta di metodologia per l’a.a. 2006/07 Conclusioni e proposte per l’a.a.2006/07 Considerata l’importanza di garantire una buona copertura della rilevazione, continuando nel contempo a stimolare l’utilizzo da parte degli studenti della valutazione elettronica, si propone: - per la valutazione della didattica dei singoli corsi di insegnamento, di somministrare il questionario cartaceo direttamente nelle aule in cui si svolgono le lezioni, indicativamente verso i tre quarti del corso, utilizzando anche la collaborazione di studenti 150 ore, secondo la metodologia già collaudata negli ultimi anni accademici; - per la valutazione dei servizi di Ateneo e di Facoltà (aule, locali e attrezzature per le attività didattiche integrative, aule informatiche, biblioteche, sale lettura, segreterie studenti, servizi di facoltà, sito web, numero verde, …), di riproporre anche per il 2006 il questionario elettronico già predisposto, che potrà essere compilato via web da tutti gli studenti regolarmente iscritti all’a.a. 2005/06, e che quindi hanno avuto modo di usufruire dei servizi di Ateneo.