Maintenant que le premier mois d'école est terminé, les parents peuvent se préparer pour la prochaine étape de l'année scolaire - ils recevront bientôt des rapports sur les tests d'état que leurs enfants ont pris l'année dernière.

Mes estimations montrent qu'environ 26 millions d'étudiants dans les écoles publiques ont pris des tests à l'échelle de l'État en lecture et en mathématiques l'année dernière. Beaucoup d'entre eux ont également pris des tests à l'échelle de l'état en science. Ces tests fournissent des informations importantes aux parents sur la réussite de leurs enfants à l'école.

Cependant, mes recherches montrent également que lorsque les parents reçoivent le rapport de test de leur enfant, ils peuvent avoir du mal à séparer l'information importante du charabia statistique.

Qui plus est, les résultats pourraient même ne pas leur donner des informations précises sur la croissance académique de leur enfant.

Votre enfant est-il «compétent»?

La loi No Child Left Behind, promulguée dans 2002, exigeait que tous les États établissent des «niveaux de rendement» en lecture et en mathématiques pour les élèves de la troisième à la huitième année et pour une année au secondaire, généralement 10th ou 11th. Les États sont également tenus d'élaborer des tests pour mesurer le niveau de "compétence" à chaque test.

La nouvelle loi fédérale adoptée en décembre 2015, la Chaque étudiant réussit la loi (ESSA), continuera cette pratique.

En conséquence, les rapports de test que les parents reçoivent classent les enfants en niveaux de réussite tels que «basique» ou «compétent». Chaque état décide de ce que ces classifications sont appelées, mais au moins une catégorie doit signifier «compétent».

Ces catégories de niveau de réussite sont décrites dans les rapports sur les résultats des tests, et cette information est donc facilement comprise par les parents. Par exemple, je trouve utile chaque année de voir si mes fils atteignent la compétence dans chaque domaine.

Mais les résultats des tests des enfants dans une année donnée, et leur niveau de réussite, ne sont pas les seules informations rapportées dans certains états. Un nouvel indice statistique, appelé "percentile de croissance des étudiants" trouve son chemin dans les rapports envoyé à la maison aux parents dans les états 11. Vingt-sept États utilisent également cet indice pour évaluer les enseignants.

Bien que la mesure de la «croissance» ou de la progression des élèves semble être une bonne idée, les percentiles de croissance des étudiants n'ont pas encore été soutenus par la recherche. En réalité plusieurs études suggèrent l'ont ne fournit pas de descriptions précises des progrès des élèves et de l'efficacité des enseignants.

Qu’est-ce que ça veut dire?

Que sont exactement les «percentiles de croissance des étudiants»?

Ce sont des index proposés dans 2008 par Damian W. Betebenner, un statisticien qui a suggéré qu'ils soient utilisés comme une mesure descriptive de la «croissance académique» des étudiants d'une année scolaire à l'autre. L'idée était de décrire les progrès des étudiants par rapport à leurs pairs.

Comme les diagrammes de croissance utilisés par les pédiatres pour décrire la taille et le poids des enfants, les centiles de croissance des élèves varient de un à un maximum de 99. Cependant, leur calcul implique beaucoup plus d'erreurs que des mesures physiques telles que la taille et le poids. Nos recherches à l'Université du Massachusetts à Amherst indiquent erreur substantielle dans leur calcul.

Les percentiles de croissance des étudiants sont dérivés des résultats des tests, qui ne sont pas des descriptions parfaitement exactes des compétences scolaires des étudiants: Les résultats des tests sont influencés par de nombreux facteurs tels que les questions posées un jour donné, le tempérament des étudiants, leur niveau d'engagement. test ou seulement les méthodes utilisées pour marquer leurs réponses.

Le percentile de croissance de chaque élève est calculé en utilisant au moins deux scores de test différents, généralement séparés d'un an ou plus. Les résultats des tests les plus récents d'un étudiant sont ensuite comparés aux résultats des tests les plus récents des étudiants ayant obtenu des scores similaires au cours des années précédentes. C'est pour voir lequel de ces étudiants a eu des scores plus élevés ou plus bas cette année.

Le problème, cependant, est que chacun des calculs comporte une erreur de mesure. D'autres calculs ne font qu'aggraver cette erreur. Tellement que les résultats finissent avec deux fois plus d'erreur. Pas de sophistication statistique peut effacer cette erreur.

La question est: pourquoi tant d'États utilisent-ils une mesure aussi peu fiable?

L'utiliser pour la responsabilisation

L'utilisation des percentiles de croissance des étudiants est due en partie au désir de voir combien les élèves apprennent dans une année donnée, et de relier ces progrès aux systèmes de responsabilisation tels que l'évaluation des enseignants.

En 2010, la division de Concours de subventions Race-to-the-Top invité les États à trouver des moyens novateurs d'utiliser les résultats des tests pour évaluer les enseignants, ce qui a ouvert la voie à l'application rapide de cette nouvelle mesure de «croissance» dans de nombreux États.

Cependant, l'utilisation des percentiles de croissance des étudiants a commencé avant que la recherche soit menée sur leur exactitude. Ce n'est que maintenant qu'il y a suffisamment de recherches pour les évaluer, et toutes les études aboutissent à la même conclusion - elles contiennent beaucoup d'erreurs.

En plus de notre recherche à l'Université du Massachusetts Amherst, la recherche sur l'exactitude des percentiles de croissance des étudiants a été menée par des organismes sans but lucratif de l'éducation tels que WestEd, Service de test éducatif et autre institutions de recherche. Des chercheurs JR Lockwood et Katherine E. Castellano récemment conclu que «Une base de recherche substantielle note déjà que les estimations de percentile de croissance des élèves pour les élèves individuels ont de grandes erreurs."

Cependant, de nombreux États semblent ignorer ces résultats de recherche. Le Massachusetts va même jusqu'à classer les enfants avec des percentiles de croissance moins de 40 comme «croissance plus faible» et les enfants ayant des percentiles de croissance supérieurs à 60 comme «croissance plus élevée».

Mesurer la performance des enseignants

Comme je l'ai mentionné précédemment, les États 27 utilisent les percentiles de croissance des élèves pour classer les enseignants comme «efficaces» ou «inefficaces». La recherche sur l'utilisation des percentiles de croissance à cette fin indique qu'ils pourraient sous-estimer la performance des enseignants les plus efficaces, et surestimer la performance des enseignants les moins efficaces - exactement le contraire de ce que ces États essaient de faire avec leurs systèmes d'évaluation des enseignants.

Un rapport récent de WestEd a évalué l'utilisation des percentiles de croissance des étudiants pour évaluer les enseignants et conclu ils "n'ont pas atteint un niveau de stabilité" qui serait nécessaire pour des décisions aussi importantes.

Revenons aux mesures traditionnelles

Je crois que les centiles de croissance des étudiants nous ont fait reculer dans l'utilisation des tests éducatifs pour améliorer l'apprentissage des élèves.

Les mesures traditionnelles de la performance des enfants sur les tests éducatifs, comme s'ils sont «compétents» dans une année donnée et leurs scores aux tests réels, donnent une bonne idée de leur performance en mathématiques ou en lecture au cours d'une année donnée.

Ces rangs traditionnels de percentile sont toujours rapportés sur de nombreux tests éducatifs, tout comme ils l'étaient quand nous étions parents à l'école. Les rangs traditionnels des percentiles nous comparaient à un groupe national ou national au cours d'une année donnée, plutôt que de nous comparer à la croissance des autres enfants dans la nation ou l'état.

Compte tenu de ce que nous savons maintenant sur les percentiles de croissance des étudiants, mon conseil aux parents est non seulement de les ignorer sur les rapports de leurs enfants, mais aussi de contacter leur département d'éducation pour savoir pourquoi ils rapportent une statistique si peu fiable.

Développer des mesures de combien les étudiants ont appris au cours d'une année est un bon objectif. Malheureusement, les centiles de croissance des étudiants ne font pas un bon travail pour mesurer cela.

A propos de l'auteur

Stephen Sireci, professeur de politique éducative, University of Massachusetts Amherst

Cet article a été publié initialement le The Conversation. Lis le article original.

Livres connexes:

at Marché InnerSelf et Amazon