Metrologia delle prove scritte nell’esame di stato Raimondo Bolletta 28 aprile 2001 Esame di maturità Esame di stato Tre prove scritte Nuove forme per la prima Terza pluridisciplinare crediti scolastici Tipi terza prova scritta •Testo di riferimento con quesiti •Trattazione sintetica di argomenti •Quesiti a risposta singola •Quesiti a risposta multipla •Problemi a soluzione rapida •Casi pratici e professionali •Sviluppo di progetti CEDE Punteggio finale sufficienza massimo Prima prova 10 15 Seconda prova 10 15 Terza prova 10 15 Orale 22 35 8 20 Credito scolastico Bonus PUNTEGGIO FINALE 5 60 100 Punteggi grezzi 9 6 10 10 15 Punteggi voto Griglie di valutazione indicatori descrittori pesi misura accertamento Punteggi grezzi valutazione Punteggi voto 80 75 70 65 60 55 50 45 40 35 30 25 20 15 10 5 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 9,9 9,7 9,5 9,3 9,1 8,9 8,7 8,5 8,3 8,1 7,9 7,7 7,5 7,3 7,1 6,9 6,7 6,5 6,3 6,1 5,9 5,7 5,5 5,3 5,1 4,9 4,7 4,5 4,3 4,1 <4 Distribuzione delle medie dei voti. 7563 casi 400 350 300 250 200 150 100 50 0 Distribuzione dei punteggi negli scritti 1999 0 1 2 3 4 prima prova 99 5 6 7 8 9 seconda prova99 10 11 12 13 14 terza prova99 15 Distribuzione dei punteggi negli scritti 2000 0 1 2 3 4 5 6 prima prova 2000 7 8 9 seconda prova 2000 10 11 12 terza prova 13 14 15 Medie standardizzate per ordini di studio 1999 0,4 0,3 0,2 0,1 0 Licei Professionali Tecnici -0,1 -0,2 -0,3 -0,4 credito scolastico prima prova seconda prova terza prova colloquio votofinale Medie standardizzate per ordini di studio 2000 0,4 0,3 0,2 0,1 0 Licei Professionali Tecnici -0,1 -0,2 -0,3 -0,4 credito scolastico prima prova seconda prova terza prova colloquio voto Distribuzioni dei punteggi alla fine degli scritti 6 5 4 3 2 1 0 0 6 8 10 12 14 16 18 20 22 24 26 28 30 32 34 36 38 40 42 44 46 48 50 52 54 56 58 60 62 64 2000 1999 Distribuzione del voto finale 14 12 10 8 6 4 2 0 10 14 18 22 26 30 34 38 42 46 50 54 58 62 66 70 74 78 82 86 90 94 98 voto2000 voto1999 Medie standardizzate per strati territoriali 1999 nordovest nordest credito scolastico prima prova centro sud sudisole 0,3 0,2 0,1 0 -0,1 -0,2 -0,3 seconda prova terza prova colloquio voto Medie standardizzate per strati territoriali 2000 nordovest nordest centro sud sudisole 0,3 0,2 0,1 0 -0,1 -0,2 -0,3 credito scolastico prima prova seconda prova terza prova colloquio voto Correzione della prima prova 20 18 16 14 12 10 8 6 4 2 0 0 1 2 3 4 5 6 7 interni 8 9 esterni 10 11 12 13 14 15 Correzione della seconda prova 18 16 14 12 10 8 6 4 2 0 0 1 2 3 4 5 6 7 interni 8 9 esterni 10 11 12 13 14 15 H. Piéron Examens et docimologie PUF Parigi 1969 Il disegno sperimentale Il campione delle prove Il campione dei correttori I risultati dell’esperimento Le analisi dei dati Un primo sguardo Il calcolo del voto vero Il calcolo della gamma ERRORE 600 500 400 300 200 Dev. Stand = 1,76 100 Media = ,0 N = 2138,00 0 -9,0 -7,0 -8,0 -6,0 ERRORE -5,0 -4,0 -3,0 -2,0 -1,0 1,0 0,0 3,0 2,0 5,0 4,0 7,0 6,0 Frequenza differenza rispetto al votovero intero 600 500 400 300 200 100 0 -9 -7 -6 -5 -4 -3 -2 -1 differenza rispetto al votovero intero 0 1 2 3 4 5 7 elettronica classico scientifico professionali ragioneria tecnici ERRORE Media 0,10 -0,25 0,10 0,34 -0,12 0,21 ERRASSOL Media 1,42 1,35 1,18 1,34 1,41 1,48 CASI 1 316 589 315 370 316 310 TIPOCOR SINGOLO COMMISSIONE COPPIA GRIGLIA ERRORE Media 0,13 -0,07 0,14 -0,35 ERRASSOL Media 1,29 1,32 1,36 1,85 CASI 1 996 658 318 198 strato del correttore nord centro sud ERRORE Media -0,03 0,06 0,06 ERR_ASSOL Media 1,42 1,28 1,37 CASI 781 651 784 ERRORE Media Terza prova 0,00 Analisi del testo 0,07 Ambito artistico - letterario -0,05 Ambito socio - economico -0,01 Ambito storico - politico 0,26 Ambito tecnico - scientifico 0,04 Tema di argomento storico -0,10 Tema di ordine generale 0,03 Latino -0,03 Matematica 0,07 Ragioneria 0,06 Elettronica 0,05 ERRASSOL Media 0,98 1,51 1,44 1,38 1,53 1,34 1,52 1,34 1,31 1,22 1,45 1,62 CASI 300 138 144 155 130 160 154 155 220 220 220 220 Distribuzione differenze prove ripetute 90 80 70 60 50 40 30 20 10 0 0 1 2 3 4 6 0 1 2 3 4 6 Griglia per l’italiano Valutazioni analitiche nelle griglie impressione globale Competenza ideativa competenza organizzativa Competenza morfosintattica Competenza semantica Competenza tecnica TOT N Minimo Massimo 197 1 5 197 1 5 195 1 5 196 1 5 196 1 5 196 1 4 199 1 99 Media 2,92 2,99 2,90 2,70 2,69 1,95 17,22 Dev. std. 1,20 1,20 1,23 1,23 1,32 0,80 12,00 ERRCOMM 8 6 4 2 Dev. Stand = 3,32 Media = -,1 N = 51,00 0 -9,0 -7,0 -8,0 -5,0 -6,0 ERRCOMM -4,0 -3,0 -1,0 -2,0 1,0 0,0 3,0 2,0 5,0 4,0 7,0 6,0 8,0 ERRELAT 14 12 10 8 6 4 Dev. Stand = ,07 2 Media = ,088 N = 51,00 0 0,000 ,050 ,025 ERRELAT ,100 ,075 ,150 ,125 ,200 ,175 ,250 ,225 ,300 ,275 ,325 errore relativo 600 500 400 300 200 Dev. Stand = ,14 100 Media = ,16 N = 2138,00 0 0,00 ,20 ,10 ,40 ,30 errore relativo ,60 ,50 ,80 ,70 1,00 ,90 1,10 Buon lavoro