Ora che il primo mese di scuola è finito, i genitori possono prepararsi per la prossima pietra miliare dell'anno scolastico: presto riceveranno resoconti dei test di stato che i loro figli hanno fatto l'anno scorso.

Le mie stime mostrano che circa 26 milioni di studenti nelle scuole pubbliche hanno fatto test a livello statale in lettura e matematica l'anno scorso. Molti di loro hanno anche effettuato test scientifici a livello statale. Questi test forniscono informazioni importanti ai genitori su come stanno andando i loro figli a scuola.

Tuttavia, la mia ricerca mostra anche che quando i genitori ricevono il rapporto sul punteggio dei test dei loro figli, possono avere difficoltà a separare le informazioni importanti da quelle statistiche senza senso.

Inoltre, i risultati potrebbero anche non fornire loro informazioni accurate sulla crescita accademica del figlio.

Tuo figlio è "competente"?

La legge No Child Left Behind, emanata in 2002, imponeva a tutti gli stati di stabilire "standard di livello di successo" in lettura e matematica per i gradi da tre a otto e per un voto al liceo, in genere 10th o 11th. Gli Stati dovevano inoltre sviluppare test per misurare il livello degli studenti “Professionalità” su ogni test.

La nuova legge federale è passata a dicembre 2015, il Ogni studente ha successo (ESSA), continuerà questa pratica.

Di conseguenza, il test riporta che i genitori ricevono la classificazione dei bambini in livelli di rendimento come "base" o "competente". Ogni stato decide come chiamare queste classificazioni, ma almeno una categoria deve indicare "competenza".

Queste categorie a livello di risultati sono descritte nei rapporti sui punteggi dei test e quindi queste informazioni sono facilmente comprensibili dai genitori. Ad esempio, trovo utile ogni anno vedere se i miei figli raggiungono la competenza in ogni area tematica.

Ma i punteggi dei test dei bambini in un determinato anno e il loro livello di risultati non sono le uniche informazioni riportate in alcuni stati. Un nuovo indice statistico, chiamato "percentile di crescita degli studenti", si sta facendo strada nei rapporti rimandato a casa dai genitori negli stati 11. Ventisette stati usano questo indice anche per valutare gli insegnanti.

Sebbene una misura della "crescita" o del progresso degli studenti sembri una buona idea, i percentili di crescita degli studenti devono ancora essere supportati dalla ricerca. Infatti diversi studi suggeriscono di non fornire descrizioni accurate del progresso degli studenti e l'efficacia dell'insegnante.

Cosa significa?

Cosa sono esattamente i "percentili di crescita degli studenti"?

Sono indici proposti in 2008 da Damian W.Betebenner, uno statistico che ha suggerito di essere usato come misura descrittiva di "crescita accademica" degli studenti da un anno scolastico al successivo. L'idea era di descrivere i progressi degli studenti rispetto ai loro coetanei.

Come i grafici di crescita che i pediatri usano per descrivere l'altezza e il peso dei bambini, i percentili di crescita degli studenti vanno da un minimo di uno a un massimo di 99. Tuttavia, il loro calcolo comporta un errore molto maggiore rispetto alla misurazione fisica come altezza e peso. La nostra ricerca presso l'Università del Massachusetts Amherst indica errore sostanziale nel loro calcolo.

I percentili di crescita degli studenti sono derivati ​​dai punteggi dei test, che non sono descrizioni perfettamente accurate della competenza accademica degli studenti: i punteggi dei test sono influenzati da molti fattori, come le domande poste in un determinato giorno, il temperamento degli studenti, il loro livello di coinvolgimento quando prendono il test o solo i metodi utilizzati per segnare le loro risposte.

Il percentile di crescita di ogni studente viene calcolato utilizzando almeno due diversi punteggi dei test, in genere a un anno o più di distanza. I punteggi dei test più recenti di uno studente vengono quindi confrontati con i punteggi dei test più recenti degli studenti che avevano punteggi simili negli anni precedenti. Questo per vedere quale di quegli studenti ha avuto punteggi più alti o più bassi quest'anno.

Il problema, tuttavia, è che ciascuno dei calcoli comporta un errore di misurazione. Ulteriori calcoli aggravano solo quell'errore. Tanto che i risultati finiscono con il doppio dell'errore. Nessuna raffinatezza statistica può cancellare questo errore.

La domanda è: perché così tanti stati usano una misura così inaffidabile?

Usandolo per la responsabilità

L'uso dei percentili di crescita degli studenti è in parte dovuto al desiderio di vedere quanto gli studenti apprendono in un determinato anno e di collegare questi progressi ai sistemi di responsabilità come la valutazione degli insegnanti.

In 2010, l' Gara di sovvenzioni Race-to-the-Top gli stati invitati hanno escogitato modi innovativi per utilizzare i punteggi dei test per valutare gli insegnanti, che hanno spianato la strada a questa nuova misura di "crescita" da applicare rapidamente in molti stati.

Tuttavia, l'uso dei percentili di crescita degli studenti è iniziato prima che la ricerca fosse condotta sulla loro accuratezza. Solo ora esiste un corpus di ricerca sufficiente per valutarli e tutti gli studi indicano la stessa conclusione: contengono molti errori.

Oltre alla nostra ricerca presso l'Università del Massachusetts Amherst, la ricerca sull'accuratezza dei percentili di crescita degli studenti è stata condotta da organizzazioni no profit come Ovest Ed, Servizio di test educativi ed Altro istituti di ricerca. ricercatori JR Lockwood ed Katherine E. Castellano recentemente concluso che "Una sostanziale base di ricerca rileva già che le stime percentuali di crescita degli studenti per i singoli studenti hanno grandi errori".

Tuttavia, molti stati sembrano non essere a conoscenza di questi risultati della ricerca. Il Massachusetts arriva persino al punto di classificare i bambini con percentili di crescita meno di 40 come "crescita inferiore" e i bambini con percentuali di crescita maggiori di 60 come "crescita maggiore".

Misurare le prestazioni dell'insegnante

Come accennato in precedenza, gli stati 27 utilizzano i percentili di crescita degli studenti per classificare gli insegnanti come “efficaci” o “inefficaci”. La ricerca sull'uso dei percentili di crescita a questo scopo indica che potrebbero sottovalutare le prestazioni degli insegnanti più efficaci e sopravvalutare le prestazioni degli insegnanti meno efficaci - l'esatto contrario di ciò che questi stati stanno cercando di fare con i loro sistemi di valutazione degli insegnanti.

Un recente rapporto di WestEd ha valutato l'uso dei percentili di crescita degli studenti per la valutazione degli insegnanti e concluso "non hanno raggiunto un livello di stabilità" che sarebbe necessario per decisioni così elevate.

Torniamo alle misure tradizionali

Credo che i percentili di crescita degli studenti ci abbiano fatto un passo indietro nell'uso dei test educativi per migliorare l'apprendimento degli studenti.

Le misure tradizionali delle prestazioni dei bambini nei test educativi, come ad esempio se sono "competenti" in un determinato anno e i loro punteggi dei test effettivi, danno una buona idea di quanto bene si sono comportati in matematica o lettura in un determinato anno.

Questi gradi percentili tradizionali sono ancora riportati su molti test educativi, proprio come quando noi genitori eravamo a scuola. I gradi percentili tradizionali ci hanno confrontato con un gruppo nazionale o statale in un dato anno, piuttosto che confrontarci con il modo in cui gli altri bambini nella nazione o nello stato “stavano crescendo” attraverso diversi test che hanno fatto in diversi anni, come tentano di fare i percentili di crescita degli studenti.

Dato ciò che ora sappiamo sui percentili di crescita degli studenti, il mio consiglio ai genitori non è solo quello di ignorarli nei rapporti sui punteggi dei test dei loro figli, ma anche di contattare il loro dipartimento di istruzione statale e chiedere perché stanno segnalando una statistica così inaffidabile.

Sviluppare misure di quanto gli studenti hanno imparato nel corso di un anno è un buon obiettivo. Sfortunatamente, i percentili di crescita degli studenti non fanno un buon lavoro nel misurarlo.

Circa l'autore

Stephen Sireci, professore di politica educativa, University of Massachusetts Amherst

Questo articolo è stato pubblicato in origine The Conversation. Leggi il articolo originale.

Libri correlati:

at InnerSelf Market e Amazon