Lorsque j’ai commencé l’école secondaire, mon conseiller a continué à dire des choses drôles. Elle parlerait de la manière dont un nouvel ensemble de données correspond à «l’histoire» d’un article précédemment publié. Ou sur le cadrage de nos découvertes, comme si nous étions des artistes. J’ai continué à penser à attendre, n’est-ce pas nous des scientifiques? Qu’est-ce que les histoires et le cadrage ont à voir avec quoi que ce soit?
Je pensais qu’un article scientifique était un résumé objectif des résultats de la recherche. J’ai pensé que les données devraient parler d’elles-mêmes. Les données ne se soucient pas de savoir qui les a collectées, alors qui les a collectées ne devrait pas affecter ce qui a été dit dans un article de journal publié. Cela me semble amusement naïf maintenant.
Les données ne parlent pas d’elles-mêmes. Je suis allé à quelques réunions de laboratoire douloureuses où un nouvel étudiant a essayé de laisser parler les données. C’est moche. Même des données intéressantes, sans interprétation, sont ennuyeuses au point d’être inutiles.
Donc, les scientifiques racontent des histoires. Demandez à n’importe quel scientifique. Si vous ne racontez pas une histoire, vous ne la publiez pas. Il n’y a rien de mal avec les histoires, bien sûr, tant qu’elles ne sont pas de la fiction.
Parfois, la narration devient trop créative. Cela est particulièrement vrai dans les études de corrélation, qui comportent généralement un trou béant: elles ne déterminent pas la causalité. Pour raconter une bonne histoire, il faut souvent spéculer (c.-à-d. Inventer quelque chose) sur la causalité. La perspective du chercheur influence inévitablement l’histoire qu’ils racontent.
Récemment, cela m’a frappé: ces histoires semblent toujours avoir une fin heureuse, du moins en éducation. Vous connaissez ces films hollywoodiens sur le professeur blanc qui entre dans une mauvaise école et, au début, elle se heurte à ses étudiants de la minorité, mais au final, ils se soulèvent mutuellement sur le plan éducatif et moral? La recherche corrélationnelle en éducation est la même: les nouvelles sont bonnes, le problème peut être résolu, la morale est édifiante et l’optimisme coule comme de l’eau. Il fait toujours beau en corrélationville.
L’optimisme est génial. Mais la science est une recherche de la vérité. La vérité n’est pas toujours jolie. Quand ce n’est pas le cas, quand les pessimistes ont raison, trop d’optimisme peut être néfaste.
J’ai pensé à cela à cause d’une nouvelle étude dans la revue Psychological Science.
Chen, L., Bae, SR, Battista, C., Qin, S., Chen, T., Evans, TM et Menon, V. (2018). L’attitude positive à l’égard des mathématiques appuie la réussite scolaire précoce: données probantes comportementales et mécanismes neurocognitifs. Science psychologique doi.org/10.1177/0956797617735528
Voici le synopsis que vous trouverez dans le communiqué de presse: Si un enfant ne va pas bien en mathématiques, cela peut être dû à son attitude. Faites-lui sentir plus positif sur les mathématiques et il va commencer à mieux faire.
Regardons de plus près. L’étude 1 a examiné la corrélation entre l’attitude mathématique et les performances en mathématiques. 240 enfants âgés de 7 à 10 ans ont reçu une batterie de tests comprenant deux mesures clés. L’une était l’attitude positive envers les mathématiques (PAM), dans laquelle Chen et al. écrivez: «Six questions mesuraient deux aspects du PAM, à savoir les intérêts forts (par exemple,« Combien aimez-vous les mathématiques? ») et les capacités perçues par vous-même (p. ex.
La seconde était la résolution de problèmes mathématiques. Encore une fois, selon les mots des auteurs, «Les enfants ont répondu à 18 problèmes d’addition simples et l’expérimentateur a enregistré le temps de réaction, la réponse verbale et le rapport de stratégie des enfants (Siegler, 1987; voir Fig. 1a). Le taux de récupération a été calculé comme la proportion d’essais dans lesquels l’enfant a correctement répondu au problème en utilisant une stratégie de récupération directe. Cette mesure, dont il a été démontré qu’elle était en corrélation avec les acquis mathématiques ultérieurs, a servi d’indice de la maîtrise des faits mathématiques de base (Geary, 2011).
Il y avait des mesures supplémentaires, y compris le QI, la mémoire de travail, l’anxiété / la dépression et l’anxiété en mathématiques.
Ceci est une étude corrélationnelle. Comme l’indiquent les auteurs dans leur avant-dernier paragraphe: «Nous n’avons pas pu déterminer la direction des influences causales entre l’attitude positive et les résultats en mathématiques en raison de la nature transversale de notre étude (voir cependant le tableau S10 dans le matériel complémentaire).
Pourtant, ils disent aussi, au paragraphe suivant: “En conclusion, notre étude démontre, pour la première fois, que la PAM chez les enfants a un effet unique et significatif sur les résultats en mathématiques indépendamment des capacités cognitives générales et que cette relation est médiatisée par le Système de mémoire MTL. “En fait, le titre de l’article est” L’attitude positive envers les mathématiques soutient la réussite scolaire précoce: preuves comportementales et mécanismes neurocognitifs. ”
Les mots “effet” et “supports” sont le langage causal. Ils disent qu’une attitude positive entraîne la réussite en mathématiques. Voici pourquoi c’est une bonne nouvelle: changez l’attitude d’un enfant et vous les améliorerez en maths. Ainsi se lève un autre lever de soleil glorieux en corrélationville.
Cette étude ne démontre pas la causalité. Il ne s’agit pas d’une intervention. Ces conclusions optimistes ne doivent pas être prises au pied de la lettre car il existe d’autres moyens, tout aussi valables, d’examiner les données. Voici une analyse pessimiste de ces résultats.
Premièrement, c’est un truisme que les gens aiment souvent les choses pour lesquelles ils sont bons. Par conséquent, nous devrions nous attendre à être bon en mathématiques pour que les enfants aiment les mathématiques. Cela suffit à expliquer la corrélation attitude-performance. (Si cela ne suffisait pas, avez-vous remarqué qu’une partie de la mesure de l’attitude PAM demandait aux enfants s’ils étaient bons en mathématiques? Comment les scores PAM ne pourraient-ils pas être corrélés aux performances en mathématiques?)
En d’autres termes, l’attitude pourrait ne pas avoir d’effet sur la performance. Si cela est vrai, changer l’attitude d’un enfant envers les mathématiques ne les rendra pas meilleurs. C’est plus pessimiste, mais ça empire.
Les enfants sont très perspicaces quant à leur rendement scolaire et, dès l’âge de 10 ans, ils réussissent également à repérer BS. Si vous dites que les mathématiques sont amusantes et qu’elles peuvent le faire, mais qu’elles obtiennent un faible score à leur test de mathématiques, elles vous rejetteront simplement comme étant peu sincère. En d’autres termes, il est possible que vous ne puissiez pas changer l’attitude d’un enfant envers les mathématiques, pas vraiment, sauf en les améliorant en mathématiques. Donc, n’essayez pas d’améliorer les résultats en mathématiques en changeant les attitudes, car vous devez d’abord changer les résultats en mathématiques.
Maintenant, devenons encore plus sombres. Si un enfant a des aptitudes en mathématiques inférieures à la moyenne, il aura tendance à avoir des difficultés avec les mathématiques. Cette lutte affectera leur attitude. C’est-à-dire que les enfants qui ne sont pas bons en maths vont le détester. En fait, c’est la force même de la corrélation dans cette étude, entre la performance et l’attitude, qui fait tomber les enfants qui ne réussissent pas bien en mathématiques. C’est une forte corrélation, ce qui signifie que peu de gens iront à l’encontre de la tendance. En d’autres termes, cette étude montre que très peu d’enfants ayant de faibles aptitudes en mathématiques aimeront les mathématiques (ce qui semble anecdotique, c’est vrai). Ils sont condamnés à le détester. (J’espère que cela va trop loin. Rappelez-vous, c’est une histoire. Mais elle est cohérente avec les données.)
Différentes histoires sur les données produisent différents titres:
Optimist: “La performance en mathématiques peut être améliorée en changeant les attitudes des enfants envers les mathématiques!”
Pessimist: “Les performances en mathématiques des enfants déterminent leurs attitudes et les enfants peu aptes sont condamnés à détester les mathématiques.”
Voici pourquoi c’est important. L’optimiste va investir des fonds dans l’amélioration des attitudes pour créer un cycle positif. Le pessimiste va donner une aide supplémentaire aux enfants qui ont du mal à éviter un cycle négatif.
Lorsque nous lisons la science, nous voulons entendre la vérité. Mais nous aimons aussi voir les problèmes (comme les faibles scores en mathématiques) être résolus. Ce n’est pas que nous voulions que les scientifiques racontent des histoires heureuses sur un mauvais monde. Nous voulons qu’ils racontent des histoires heureuses et nous voulons que le monde se conforme aux histoires qu’ils racontent. Nous voulons vivre en corrélationville. Mais nous vivons sur terre.
La chanson dit rester sur le côté ensoleillé, toujours sur le côté ensoleillé. Bon conseil pour la vie, mais pas pour la science.
Voici ma page twitter.
Les références
Chen, L., Bae, SR, Battista, C., Qin, S., Chen, T., Evans, TM et Menon, V. (2018). L’attitude positive à l’égard des mathématiques appuie la réussite scolaire précoce: données probantes comportementales et mécanismes neurocognitifs. Science psychologique doi.org/10.1177/0956797617735528