Un algoritmo ha determinato i voti degli studenti del Regno Unito. Ne seguì il caos

un-algoritmo-ha-determinato-i-voti-degli-studenti-del-regno-unito.-ne-segui-il-caos

La giornata dei risultati ha un ritmo consunto dal tempo, pieno di tropi annuali: foto di giornali locali di ragazze che stringono le buste che saltano in aria in tre e quattro, giornalisti che si lamentano del fatto che gli esami sono diventati troppo facili e le stesse cinque o sei celebrità che pubblicano meritevoli discussioni su Twitter sul perché i risultati degli esami non contano perché tutto ha funzionato bene per loro.

WIRED UK

Questa storia è apparsa originariamente su WIRED UK .

Ma quest'anno è molto diverso. La pandemia di coronavirus significa che gli esami sono stati annullati e sostituiti con valutazioni degli insegnanti e algoritmi . Ha creato il caos.

In Scozia, il governo è stato costretto a cambiare completamente rotta dopo che decine di migliaia di studenti sono stati declassati da un algoritmo che cambiava i voti in base alle prestazioni precedenti di una scuola e ad altri fattori . Anticipando scene simili per i risultati di livello A di oggi, il governo in Inghilterra ha introdotto quello che chiama un “ triplo blocco '', in base al quale, attraverso fasi di appello, gli studenti potranno effettivamente scegliere il loro voto da una valutazione dell'insegnante, i loro risultati d'esame finti, o un resit da prendere in autunno.

Sebbene ciò dovrebbe aiutare a ridurre alcune ingiustizie, il disordine del giorno dei risultati potrebbe ancora avere un effetto sproporzionato sugli studenti provenienti da ambienti svantaggiati, con effetti a catena sulle loro candidature e carriere universitarie. Il caos mette in luce enormi difetti a lungo termine nei sistemi di valutazione, esami e ammissione all'università che svantaggiano sistematicamente gli alunni di determinati gruppi.

Dimentica il triplo blocco, gli studenti delle minoranze etniche di sfondi più poveri potrebbero essere colpiti da un triplo colpo. In primo luogo, le valutazioni dei loro insegnanti potrebbero essere inferiori a quelle degli studenti bianchi a causa di pregiudizi inconsci, sostiene Pran Patel, ex assistente del dirigente scolastico e attivista di equità presso Decolonise the Curriculum. Indica uno 62 studio sulle previsioni e sui risultati in inglese Key Stage 2 che ha scoperto che gli alunni pakistani erano 62. 9% di probabilità in più rispetto agli alunni bianchi prevedere un punteggio inferiore a quello effettivamente raggiunto, ad esempio. C'è anche un picco verso l'alto nei risultati per i ragazzi di origine nera e caraibica all'età 16, che secondo Patel corrisponde alla prima volta nella loro carriera scolastica che vengono valutati in modo anonimo.

Non tutti sono d'accordo su questo punto. Ricerca condotta da Kaili Rimfeld al King's College di Londra, basata su dati provenienti da più di 10, 000 studenti, ha scoperto che le valutazioni degli insegnanti sono generalmente buoni predittori del rendimento futuro degli esami, sebbene il miglior predittore di successo negli esami sia il precedente successo negli esami.

Ma a causa dei timori sull'inflazione dei voti causati da insegnanti che valutano i propri studenti, quei voti non vengono usati isolatamente. Quest'anno, a causa del coronavirus, quelle valutazioni degli insegnanti potenzialmente distorte sono state modificate, tenendo conto delle prestazioni storiche della scuola e di altri fattori che potrebbero aver avuto poco a che fare con il singolo studente. Infatti, secondo TES, 60 percento di A di quest'anno -I voti di livello sono stati determinati tramite modelli statistici, non la valutazione dell'insegnante.

Ciò significa che un allievo brillante in una scuola con scarso rendimento potrebbe aver visto il proprio voto abbassato perché la coorte di alunni dell'anno scorso no ' t fare bene agli esami. “I bambini provenienti da un determinato contesto potrebbero scoprire che la loro valutazione è stata ridotta”, afferma Stephen Curran, insegnante ed esperto di istruzione. Questo è quello che è successo in Scozia, dove i bambini provenienti da ambienti più poveri avevano il doppio delle probabilità di vedere i loro risultati declassati rispetto a quelli provenienti da aree più ricche.

C'è ingiustizia anche nel processo di appello, in particolare in Inghilterra, dove la decisione sull'opportunità o meno di presentare ricorso spetta alla scuola, non all'alunno. “Penso che sia davvero scandaloso che gli alunni non possano appellarsi a se stessi”, dice Rimfeld, il cui figlio stava aspettando con ansia i risultati. “È semplicemente sorprendente il casino che abbiamo creato, ed è davvero triste da vedere.”

Ci saranno enormi differenze in cui le scuole decidono o possono fare appello – inevitabilmente, scuole private con risorse migliori lo faranno essere in grado di presentare ricorso più facilmente rispetto alle scuole statali con fondi insufficienti nelle aree svantaggiate. “I genitori li metteranno sotto pressione e diventeranno apoplettici se il loro bambino non raggiunge i voti che si aspettavano”, dice Curran. Nel sistema statale, nel frattempo, “alcune scuole combatteranno per i loro figli e altre no” e gli insegnanti sono comunque in vacanza fino all'inizio del mandato.

In agosto 11, Gavin Williamson ha annunciato il triplo blocco che consentirebbe agli studenti di scegliere tra il voto valutato dall'insegnante, il risultato del loro finto esame o di fare un resit in autunno se non sono d'accordo con il voto che il sistema dà loro inizialmente. Ma anche lì ci sono enormi problemi. “Nessuno si consulta con nessuno su questo”, dice Rimfeld. “Ci sono scuole in cui non ci sono prese in giro, alcune scuole fanno diversi esami fittizi: sarà la media? Come funzionerà? “

Il governo sta ancora cercando di capire esattamente come verranno utilizzati i risultati fittizi, ma ci sono enormi discrepanze in condizioni che prendono in giro e nessuna registrazione centralizzata dei risultati falsi. Alcune scuole non raccolgono nemmeno questi dati a livello centrale per i propri alunni. A volte gli insegnanti ridimensionano i risultati in un esame finto per spaventare alcuni studenti a lavorare di più per il resto dell'anno, dice Patel. Non pensa che includere le prese in giro servirà a riparare i pregiudizi. “Per niente”, dice. “Perché l'insegnante che valuta il tuo voto è lo stesso insegnante che ha segnato il tuo finto esame.”

Ciò significa che sarà difficile per gli insegnanti, che Patel sottolinea potrebbe non avere molta esperienza nel valutare l'esame carte, per districare le loro percezioni consce o inconsce dalle parole sulla pagina davanti a loro. “Agli insegnanti viene ora chiesto di prendere decisioni che possono potenzialmente cambiare la vita completando un compito per cui non sono qualificati o adeguatamente formati”, dice.

Anche se due bambini finire con lo stesso voto finale dopo questo processo, i ritardi e le valutazioni imprecise potrebbero rivelarsi vitali, in particolare ora, ma anche in anni più normali. Se hai previsto tre As, è più probabile che tu faccia domanda ed essere accettato da prestigiose università, e più probabilità che ti venga insegnato il materiale pertinente e più propensi a raggiungere effettivamente il voto.

Se si prevedono tre C e si ottengono tre As, quando verranno pubblicati i risultati, potrebbe essere già troppo tardi per presentare domanda alle migliori università senza perdere un anno: il dado è stato tratto, non da la tua performance, ma in base alla valutazione del tuo insegnante.

Gli insegnanti sono sbalorditi dal casino che è stato permesso di svolgersi. Curran sostiene che gli esami avrebbero dovuto semplicemente essere sostenuti nel corso dell'anno, con l'implementazione del distanziamento sociale. Ora, dice, siamo in una situazione in cui i risultati sono diventati una questione politica – e gli studenti GCSE e A-Level di oggi sono gli elettori di domani.

Anche le università stanno guardando la situazione nervosamente. Le persone con cui abbiamo parlato hanno esaminato la situazione in Scozia e sospettano che molti alunni, almeno quelli delle scuole che possono permettersi gli appelli, finiranno essenzialmente per ottenere il voto che desiderano. “Alla fine arriviamo a una situazione in cui è 'scegliere un numero' perché non hai affatto fonti di informazioni affidabili”, afferma Curran.

Ciò avrà un impatto sui tirocini universitari, che sono generalmente sovrallocati per tenere conto delle persone che non raggiungono gli obiettivi. Alcune università avranno troppe persone che hanno fatto i loro voti, mentre quelle più in basso nella classifica potrebbero trovarsi a rimescolare per gli studenti.

Un uso più intelligente dei dati potrebbe aiutare ad affrontare il problema, Patel sostiene. L'Office of Qualifications and Examinations Regulation ha utilizzato i dati sul rendimento scolastico per scongiurare l'inflazione scolastica, quando invece dovrebbe utilizzare i dati sui pregiudizi nascosti per contrastare l'ingiustizia sociale.

Improvvisamente le università con un numero eccessivo di iscrizioni potrebbero guarda all'interno della scatola nera e vedi quali alunni sono stati declassati e perché, e usa queste informazioni per fare valutazioni su chi dare i posti. Probabilmente dovrebbero farlo più spesso comunque, con offerte contestuali che tengano conto di quanto sia più facile ottenere buoni voti per persone provenienti da determinati contesti sociali o economici.

“La valutazione dell'insegnante è inclini a pregiudizi, ma ci sono molti altri modi per valutare gli alunni e se si adottano molte tecniche diverse, è possibile migliorare tale impatto “, dice Patel. “Non esiste una situazione ideale, ma il problema qui è che gli esami non sono mai stati un ottimo parametro per l'apprendimento o il successo comunque.”

Questo la storia è apparsa originariamente su WIRED UK .


Altre fantastiche storie WIRED