STRUMENTI DELLA RICERCA
Domanda 31: LE NUOVE REGOLE
1.2. I risultati in rapporto al tipo di compito e al livello di difficoltà
Considerando il rapporto tra tipo di compito, livello di difficoltà e risposte corrette, i risultati che emergono sono i seguenti:
‐ Individuare informazioni:
o livello di difficoltà 1, domande 6 e 7: alla 6 e alla 7, entrambe aperte e riferite
ad un testo continuo, tutti i quattordici rispondenti hanno dato la risposta corretta;
olivello di difficoltà 2, domande 13, 33: alla 13, a scelta multipla e riferita ad
un testo continuo, tredici risposte sono esatte, una errata; alla 33, aperta e riferita ad un testo continuo, cinque persone non hanno risposto e le restanti nove hanno fornito la risposta giusta;
o livello di difficoltà 3, domande 1, 10A: alla domanda 1, a scelta multipla e
riferita ad un testo continuo, dieci sono le risposte esatte, quattro quelle errate; analoga situazione per la 10A, anche se aperta e riferita ad un testo non continuo;
o livello di difficoltà 4, domande 21, 34: alla 21, aperta e riferita ad un testo
continuo, dieci risposte sono corrette, tre errate, una mancante; alla 34, aperta e riferita ad un testo continuo, quattro risposte sono corrette, quattro errate e sei mancanti.
‐ Interpretare il testo:
o livello di difficoltà 1, domande 3, 4 e 8: alla 3, a scelta multipla e riferita ad
un testo continuo, tutti i quattordici rispondenti hanno dato la risposta corretta; alla 4, sempre a scelta multipla e riferita ad un testo continuo, dieci rispondenti hanno selezionato la risposta corretta, quattro quella errata; alla 8, di nuovo a scelta multipla e riferita ad un testo continuo, tutti i quattordici rispondenti hanno dato la risposta corretta;
o livello di difficoltà 3, domande 2, 15, 24, 27 (punteggio parziale), 39: alla 2, a
scelta multipla e riferita ad un testo continuo, solo otto risposte su quattordici sono esatte; alla 15, a scelta multipla e riferita ad un testo continuo, sono corrette undici risposte su quattordici; alla 24, aperta e riferita ad un testo continuo, tredici risposte sono corrette, una mancante; alla 27, aperta e riferita ad un testo non continuo, cinque persone hanno ottenuto un punteggio parziale, tre il punteggio pieno, due hanno sbagliato, quattro non hanno risposto; alla 39, aperta e riferita ad un testo continuo, le risposte sono solo tre e tutte corrette;
195
olivello di difficoltà 5, domanda 27 (punteggio pieno): alla 27, aperta e riferita ad un testo non continuo, tre persone hanno ottenuto il punteggio totale, cinque un punteggio parziale, due hanno sbagliato, quattro non hanno risposto. ‐ Comprendere il significato complessivo del testo: o livello di difficoltà 1, domande 5 e 11: sia alla 5, a scelta multipla e riferita ad un testo continuo, che alla 11, sempre a scelta multipla ma riferita ad un testo non continuo, tutti i quattordici rispondenti hanno dato la risposta corretta; olivello di difficoltà 2, domande 18, 23 e 26: alla 18, a scelta multipla e riferita ad un testo continuo, tutti i quattordici rispondenti hanno dato la risposta corretta; alla 23, a scelta multipla e riferita ad un testo continuo, tredici risposte sono corrette, una mancante; alla 26, a scelta multipla e riferita ad un testo non continuo, otto risposte sono corrette, tre errate e tre mancanti. ‐ Sviluppare unʹinterpretazione: olivello di difficoltà 2, domande 9, 22 e 32: alla 9, a scelta multipla e riferita ad un testo non continuo, dieci rispondenti hanno dato la risposta corretta, quattro la risposta errata; alla 22, sempre a scelta multipla e riferita ad un testo continuo, tutti i quattordici rispondenti hanno selezionato la risposta corretta; alla 32, aperta e riferita ad un testo continuo, nove rispondenti hanno dato la risposta corretta (otto a punteggio pieno e uno a punteggio parziale), uno ha dato la risposta errata e quattro non hanno risposto;
olivello di difficoltà 3, domanda 12: alla 12, a scelta multipla e riferita ad un
testo non continuo, solo dieci risposte su quattordici sono esatte;
o livello di difficoltà 4, domande 20A, 20B, 20C, 31: le 20A, 20B e 20C sono
aperte e riferite ad un testo continuo. Nel caso della 20A, hanno risposto dodici persone, tutte correttamente; nel caso della 20B e 20C tredici risposte sono esatte, una mancante; alla 31, aperta e riferite ad un testo continuo, undici persone hanno risposto in modo esatto, tre non hanno risposto.
‐ Riflettere sulla forma del testo:
olivello di difficoltà 3, domanda 14 (punteggio parziale): a questa domanda,
aperta e riferita ad un testo continuo, due persone hanno ottenuto il punteggio parziale, undici il punteggio pieno e una non ha risposto;
196
olivello di difficoltà 4, domande 10B, 14 (punteggio pieno), 19 e 25B: alla 10B, aperta e riferita ad un testo non continuo, undici rispondenti hanno dato la risposta corretta, tre la risposta sbagliata; alla 14, aperta e riferita ad un testo continuo, undici persone hanno ottenuto il punteggio pieno, due il punteggio parziale e una non ha risposto; alla 19, aperta e riferita ad un testo continuo, dieci risposte sono esatte, tre errate e una mancante; alla 25B, aperta e riferita ad un testo continuo, dieci risposte sono esatte, una errata e tre mancanti.
‐ Riflettere sul contenuto del testo:
o livello di difficoltà 2, domande 25A, 29A, 29B, 29C: alla 25A, aperta e riferita
ad un testo continuo, dieci persone hanno risposto correttamente, quattro non hanno risposto; la 29, tipologia vero/falso riferita ad un testo non continuo, è suddivisa in 29A e 29B alle quali undici rispondenti hanno selezionato la risposta corretta, tre non hanno risposto, e 29C alla quale nove rispondenti hanno selezionato la risposta corretta, due quella errata e tre non hanno risposto;
o livello di difficoltà 4, domande 17, 28A, 28B, 28C, 28D, 28E: alla 17, a scelta
multipla e riferita ad un testo continuo, otto risposte sono corrette, sei sbagliate; la 28 è a scelta multipla e riferita ad un testo non continuo. Alla 28A, dieci risposte sono esatte, una errata e tre mancanti; alla 28B, sette sono corrette, quattro errate e tre mancanti; alla 28C, undici risposte sono esatte e tre mancanti; alla 28D nove sono esatte, due errate e tre mancanti; alla 28E, otto corrette, due sbagliate e tre mancanti; olivello di difficoltà 5, domande 16 e 35B: alla 16, aperta e riferita ad un testo
continuo, undici persone hanno ottenuto il punteggio pieno, una il punteggio parziale (non c’è differenza nel livello di difficoltà tra punteggio pieno e punteggio parziale), due hanno sbagliato; alla 35B, aperta e riferita ad un testo non continuo, tre persone hanno ottenuto il punteggio pieno, dieci il punteggio parziale (non c’è differenza nel livello di difficoltà tra punteggio pieno e punteggio parziale), una ha sbagliato.
‐ Riflettere sul testo e valutarlo:
olivello di difficoltà 3, domanda 30: alla 30, a scelta multipla e riferita ad un
testo non continuo, undici persone hanno risposto correttamente, tre non hanno risposto.
L’andamento dei risultati in rapporto al tipo di compito e al livello di difficoltà è rappresentato nelle figure che seguono.
197
Al livello di difficoltà 1 corrispondono due item relativi al compito “Individuare informazioni”, tre relativi a “Interpretare il testo”, due relativi a “Comprendere il significato complessivo del testo”. Nella fig. 31 sono illustrati i risultati riguardanti tutti gli item posizionati su questo livello di difficoltà.
Al livello di difficoltà 2 corrispondono due item relativi al compito “Individuare informazioni”, tre relativi a “Comprendere il significato complessivo del testo”, tre su “Sviluppare un’interpretazione”, quattro su “Riflettere sul contenuto del testo”. Nella fig. 32 sono illustrati i risultati che riguardano questo livello di difficoltà.
Al livello di difficoltà 3 troviamo due item per “Individuare informazioni”, quattro item per “Interpretare il testo”, un item per “Sviluppare un’interpretazione”, un item per “Riflettere sulla forma del testo”, due item per “Riflettere sul contenuto del testo”, un item per
Fig. 32 – Rapporto tra livello di difficoltà 2, tipo di compito e risposte fornite Fig. 31 – Rapporto tra livello di difficoltà 1, tipo di compito e risposte fornite
198
“Riflettere sul testo e valutarlo”. L’andamento a questo livello di difficoltà è rappresentato nella figura 33.
Al livello di difficoltà 4 abbiamo due item relativi a “Individuare informazioni”, quattro per “Sviluppare un’interpretazione”, quattro per “Riflettere sulla forma del testo” e cinque per “Riflettere sul contenuto del testo”. L’andamento a questo livello di difficoltà è mostrato nella figura 34.
Infine, al livello di difficoltà 5 troviamo un item per “Interpretare il testo” e due item per “Riflettere sul contenuto del testo”. La figura 35 rappresenta l’andamento a questo livello di difficoltà.
Fig. 33 – Rapporto tra livello di difficoltà 3, tipo di compito e risposte fornite
199
Un dato significativo riguarda il confronto con i tipi di testo e le tipologie di risposte. In generale, sembra che i rispondenti ottengano risultati migliori con i testi continui e le domande a risposta aperta. Se prendiamo la domanda 1 e la domanda 2, entrambe a scelta multipla, di difficoltà 3 e riferite ad un testo continuo, notiamo che le risposte esatte sono dieci alla prima, otto alla seconda; alla domanda 9, sempre a scelta multipla, ma riferita ad un testo non continuo, nonostante il livello di difficoltà sia solo 2, le risposte esatte sono solo dieci su quattordici; alla domanda 14 invece, che combina testo continuo e risposta aperta, sale il livello di difficoltà, ma aumenta anche il numero delle risposte esatte poiché undici dei quattordici rispondenti hanno ottenuto il punteggio massimo (che equivale al livello 4 di difficoltà), due il punteggio parziale (livello 3 di difficoltà) e solo uno non risponde.
Le figg. 36, 37 e 38 mostrano i risultati ottenuti alle risposte a scelta multipla riferite a testi continui.
Fig. 35 – Rapporto tra livello di difficoltà 5, tipo di compito e risposte fornite
Fig. 36 – N. risposte corrette per tipologia di testo e
200
Nella fig. 39 si nota invece come, nonostante l’aumento del livello di difficoltà, in presenza di domande a risposta aperta i risultati siano prevalentemente positivi. Ciò può forse essere spiegato se si considera l’età dei rispondenti: trattandosi di adulti maggiori di 30 anni, i partecipanti provengono da un tipo di istruzione formale in cui si privilegiavano prove di valutazione quali, ad esempio, i temi, nei quali si era liberi di esprimersi su un argomento dato. La possibilità di fornire delle risposte aperte ricorda questo tipo di esercizio. Le risposte a scelta multipla, invece, sono state inserite solo di recente e probabilmente richiedono un tipo di ragionamento e di attenzione alla domanda al quale i rispondenti sono meno abituati.
Questo andamento trova conferma anche nei risultati delle due domande corrispondenti al livello di difficoltà 5 e al tipo di compito “Riflettere sul contenuto del testo”: la domanda 16, a risposta aperta, riferita ad un testo continuo (fig. 40), e la domanda 35B, sempre a risposta aperta, riferita ad un testo non continuo (fig. 41). Come mostrano le figure, nel caso della domanda 16, a fronte di due sole risposte errate, si riscontrano undici
Fig. 39 – N. risposte corrette per tipologia di testo e di risposta e per livello di difficoltà Fig. 38 – N. risposte corrette per tipologia di testo e di risposta e per livello di difficoltà