Prove oggettive per la misurazione degli apprendimenti: metodi e tecniche di valutazione Roberto Ricci INVALSI Mantova, 28 febbraio 2011 La costruzione delle prove: le tappe • Scrittura delle prove • Analisi ex ante delle prove e costruzione dei fascicoli Roberto Ricci – 28 febbraio 2011 • Pre-test: • selezione di un campione rappresentativo • campione nazionale • Analisi statistica dei risultati • Analisi ex post delle prove • Costruzione dei fascicoli La costruzione dei fascicoli per il pre-test • Una prima analisi ex ante delle domande Roberto Ricci – 28 febbraio 2011 • La corrispondenza con il quadro di riferimento • Dalle domande al fascicolo per il pre-test Il disegno del pre-test • Campione nazionale per calibrare le prove Roberto Ricci – 28 febbraio 2011 • Somministrazione controllata Analisi statistica del pre-test • Teoria classica dei test Roberto Ricci – 28 febbraio 2011 • Item Response Theory Roberto Ricci – 28 febbraio 2011 Analisi statistica del pre-test Analisi statistica del pre-test Item Characteristic Curv e: 16 Multiple Response Model 1.0 0.8 Roberto Ricci – 28 febbraio 2011 Probabi li ty 2 3 0.6 4 0.4 0.2 0 -3 -2 -1 0 Ability 1 2 3 Analisi statistica del pre-test Item Characteristic Curv e: 13 Multiple Response Model 1.0 Roberto Ricci – 28 febbraio 2011 Probabi li ty 0.8 0.6 2 4 0.4 0.2 3 0 -3 -2 -1 0 Ability 1 2 3 Roberto Ricci – 28 febbraio 2011 Confronto domande/studenti I risultati delle prove (SNV) CLASSE ITALIANO MATEMATICA 61,0 56,7 (0,25) (0,35) 66,6 61,3 (0,25) (0,29) 60,8 50,9 (0,11) (0,19) 60,4 51,1 (0,24) (0,18) II primaria Roberto Ricci – 28 febbraio 2011 V primaria I sec. di secondo grado III sec. di secondo grado I dati di scuola (1) Istituto scolastico: XXIC803XXX Denominazione: GIUSEPPE MAZZINI Download dei grafici relativi a XXIC803XXX Download guida alla lettura dei grafici Restituzione dati livello II primaria: Roberto Ricci – 28 febbraio 2011 Restituzione dati livello V primaria: Restituzione dati livello I secondaria: Livello V primaria - scegli codice classe: 412044720501 Livello V primaria - scegli codice classe: 412044720502 Livello V primaria - scegli codice classe: 412044720503 I dati di scuola (2) Globale per Nazionalità per Regolarità (del percorso) Roberto Ricci – 28 febbraio 2011 per Sesso per Dettaglio Risposte I dati di scuola (3) Tabella dei dati - Visualizzazione GLOBALE Ambiti e argomenti Dom. Media% Classe Media% Scuola Media% Nazionale L1 A1 72,7 79,6 83,1 - L2 L3 L4 L5 L6 - - - - Roberto Ricci – 28 febbraio 2011 ITALIANO Testo narrativo L2 I dati di scuola (4) Roberto Ricci – 28 febbraio 2011 L3 L4 L2 L5 L1 25% L6 25% 15% 15% 10% 1° decile 1° quartile 10° pc 25° pc 10% Mediana 50° pc 3° quartile 75° pc 9° decile 90° pc I dati di scuola (5) Tabella dei dati - Visualizzazione per DETTAGLIO RISPOSTE - tabella 1 Ambiti e argomenti Dom. A B C D MANCATA RISPOSTA A1 9,09 72,7 13,6 4,54 0 ITALIANO Roberto Ricci – 28 febbraio 2011 Testo narrativo Roberto Ricci – 28 febbraio 2011 I dati di scuola (6) Roberto Ricci – 28 febbraio 2011 I dati di scuola (7) Roberto Ricci – 28 febbraio 2011 I dati di scuola (8) Roberto Ricci – 28 febbraio 2011 I dati di scuola (9) Roberto Ricci – 28 febbraio 2011 La varianza tra classi e tra alunni (1) Roberto Ricci – 28 febbraio 2011 La varianza tra classi e tra alunni (2)