Histoires de guerre sur le champ de bataille de la responsabilité: partie 2 de 2

Après avoir travaillé en étroite collaboration avec 240 clients, Steve Rees s’appuie sur les données des écoles de CA.

Steve Rees

Source: Steve Rees, utilisé avec permission

Dans la première partie de cette interview, Steve Rees a présenté les conclusions erronées que certains éducateurs ont tirées des données du tableau de bord de la California School. En tant que président et fondateur de School Wise Press, Rees est un expert en données éducatives possédant une vaste expérience qui aide les éducateurs de tous les rôles à mieux utiliser les données. Après avoir travaillé en étroite collaboration avec 240 clients du district scolaire au cours des 14 dernières années pour comprendre les signes vitaux des écoles, Rees a mis au point des ateliers et des cours, ainsi que des outils de mesure pour aider les dirigeants d’école et de district à tirer des enseignements précieux et fiables des données. En fait, sa société a un nouveau partenaire, le Teachers College de l’Université Columbia, pour l’aider à faire avancer la cause.

• La masculinité n’est pas notre ennemi
• Les psychologues publient un rapport controversé sur la masculinité
• 7 points forts des âmes profondes
• L’acte radical de prendre soin de soi
• Learning Race At Home: Pourquoi le daltonisme ne suffit-il pas?

Les composantes de la responsabilité scolaire varient d’un état à l’autre (les évaluations des élèves présentent des variations même lorsqu’elles sont données dans des états appartenant au même consortium, les résultats sont rapportés de différentes manières, etc.). Ici, Rees continue de nous donner un aperçu de certains récits de guerre de responsabilité en Californie qui l’incitent à améliorer l’utilisation des données sur le terrain.

Jenny Rankin (JR): Certains de ces problèmes sont-ils dus aux outils de mesure des données eux-mêmes?

Steve Rees (SR): Ces tests – en Californie, les étudiants passent un test très similaire aux tests passés dans une douzaine d’autres États membres du Smarter Balanced Consortium – ont eux-mêmes des limites. Je partage l’affirmation de Jim Popham selon laquelle ce ne sont pas les tests eux-mêmes qui posent problème . C’est ce que Popham appelle «l’alphabétisme d’évaluation abyssal» des éducateurs eux-mêmes, qui conduit à des utilisations abusives, des malentendus et des erreurs de jugement humain. On comprend mal ce que les résultats du test signifient qu’il s’agit du problème central .

• La montée et la montée de l’utilisation problématique des médias sociaux
• Faut-il interdire Tintin et Milou?
• Les préjugés raciaux ont peut-être diminué au cours de la dernière décennie
• Le rôle parental des adolescents dans le monde de l’informatique d’aujourd’hui
• Quand vous dites «coïncidence», que voulez-vous dire?

Prenez une dimension des résultats de l’évaluation: la marge d’erreur . En Californie, la marge d’erreur n’est pas mentionnée dans les rapports envoyés aux parents par la poste ou remis aux enseignants. Seuls les districts ayant la chance de compter des directeurs d’évaluation sur leur personnel (environ un sur huit) voient même l’ampleur de la marge d’erreur des étudiants, des salles de classe, des écoles et du district. Ceci est une grosse affaire. Voici pourquoi. Chacun de ces tests comporte entre 35 et 45 questions. Les réponses d’un étudiant fournissent une estimation raisonnable de sa maîtrise des normes figurant dans le test. Mais l’estimation ne vous permet de dire que cela sur le score d’un élève: «Le score de Gabriela lors de ses tests de mathématiques en 6e année était de 2490. Nous sommes presque certains que si elle passait le test un mardi au lieu d’un lundi, elle marquerait dans les 27 points de ce score de 2490. »Cacher cette incertitude et cette imprécision amène les gens à investir trop de sens dans ces scores.

Mais cela empire. Les résultats de ces tests sont utilisés pour mesurer l’ampleur des écarts de réussite entre garçons et filles, pour les étudiants obtenant ou non des subventions pour les repas, et pour les étudiants de divers groupes ethniques. Trois problèmes entravent une compréhension plus claire de la taille et de la signification de ces lacunes. Premièrement, le masquage de l’imprécision et de l’incertitude rend impossible la compréhension du dimensionnement estimé de l’écart. Deuxièmement, le test lui-même n’a pas été conçu pour collecter toutes les informations sur les étudiants les plus performants et les moins performants. Ce que les psychométriciens appellent la «propagation» est nécessairement limité. Cela signifie que les gens sous-estiment la taille des lacunes. Troisièmement, le ministère de l’Éducation de la Californie a introduit une erreur de logique dans son système de responsabilisation. Leur tableau de bord officiel compare chaque groupe ethnique au statut de tous les élèves de chaque école ou district, en incluant une entité dans le repère auquel elle est comparée. Bien sûr, ils devraient avoir des entités associées à des fins de comparaison: garçons et filles, enfants déjeuners gratuits et enfants ne recevant pas de repas gratuit.

JR: Comment des preuves erronées font-elles du tort aux dirigeants de district qui prennent de grandes décisions?

SR: Lorsque les chefs de district s’assoient pour élaborer leurs plans pour la prochaine année scolaire, ils prennent les preuves qui leur sont transmises par le Département de l’éducation de Californie et décident des endroits où ils rencontrent des problèmes de pratique, des zones où leurs signes vitaux semblent être à la traîne. Ensuite, ils décident de dépenser de l’argent et de consacrer le temps précieux des enseignants à l’amélioration des choses. S’ils ciblent ces ressources sur des «problèmes» qui ne le sont pas vraiment, et manquent des défis plus impérieux dus à des preuves erronées, alors l’argent et le temps sont perdus et les opportunités d’apprentissage pour les étudiants qui en ont besoin sont manquées.

J’aimerais que les districts construisent leurs propres ensembles de preuves, à partir desquels ils se situent, par rapport à d’autres dont les enfants et les communautés ressemblent le plus aux leurs. S’ils examinaient les preuves qui leur étaient transmises par l’État avec une dose de scepticisme, ce serait un bon début. En fait, la législation et la politique de l’État en Californie ont explicitement encouragé les districts à adopter un contrôle local. S’ils exerçaient ce contrôle local en mesurant les signes vitaux de leur école et de leur district, ils auraient beaucoup plus de chances de prendre des décisions plus sages.

JR: Merci pour votre temps et pour tout ce que vous faites pour les éducateurs et les étudiants.