Par le Dr Russell T. Warne (@Russwarne)
Au printemps dernier, plus de 4 millions d'élèves du secondaire ont passé plus de 2 millions de tests Advanced Placement (AP). Parrainés par le College Board, les cours AP sont dispensés par des enseignants du secondaire et permettent aux étudiants d'obtenir un crédit d'études en passant un test à la fin de l'année scolaire. Selon le College Board, les étudiants des cours AP apprennent plus de matériel, sont plus préparés pour le collège et terminent un baccalauréat plus tôt que les étudiants non-AP.
Et pourtant, il y a deux raisons pour lesquelles il est trop simpliste de simplement déclarer que le programme AP aboutit à des bénéfices académiques. La première est que le programme AP, comme de nombreux programmes éducatifs, comporte de nombreuses composantes, et il est souvent difficile de dire lequel (ou lesquels) mène (nt) aux avantages académiques. Deuxièmement, les étudiants choisissent souvent de suivre des cours d'AP, et les étudiants AP diffèrent souvent des étudiants non AP d'une manière importante. Cela confond l'impact du programme avec les différences préexistantes entre les deux groupes d'étudiants. Une étude récente menée par mon équipe de recherche (Warne, Larsen, Anderson et Odasso, sous presse) illustre bien ces deux points.
Beaucoup de "pièces mobiles"
Les programmes éducatifs sont rarement simples. Ils comprennent souvent de nombreuses «parties mobiles», dont chacune contribue au programme dans son ensemble. Il peut être difficile pour les chercheurs de déterminer quels éléments d'un programme éducatif sont efficaces pour accroître l'apprentissage et lesquels ne sont pas importants. Dans le programme AP, par exemple, il y a 34 tests qui couvrent des sujets de niveau collégial allant de l'anglais, aux statistiques, à la théorie musicale, à l'histoire du monde. Chacun de ces sujets a un curriculum et un test d'AP standard, et chaque classe a un enseignant qui crée des devoirs, conçoit des tests et prépare les étudiants pour le test. Les caractéristiques de l'école, du district et de l'État peuvent également contribuer au fonctionnement d'un programme.
Dans notre étude du programme AP, mes co-auteurs et moi-même avons décidé d'isoler une composante du programme AP: le test. Nous voulions savoir si le simple fait de s'inscrire dans une classe AP entraînait des gains académiques pour les étudiants ou s'il était nécessaire que les étudiants passent le test AP. Pour ce faire, nous avons utilisé un ensemble de données comprenant plus de 90 000 élèves du secondaire, et nous avons divisé les élèves en quatre groupes: (a) étudiants non-AP, (b) étudiants AP n'ayant pas passé le test AP, (c) (D) Les étudiants AP qui ont passé le test AP et qui ont réussi le test AP.
Nous avons comparé les scores ACT des quatre groupes d'étudiants. Si la classe elle-même était un composant actif, alors il devrait y avoir une différence dans les scores ACT entre les groupes (a) et (b). Si le test était un composant actif, alors le groupe (c) devrait avoir un score ACT plus élevé que le groupe (b). Nous avons trouvé que les scores ACT moyens étaient de 21,0 pour le groupe (a), 21,3 pour le groupe (b), 22,5 pour le groupe (c) et 26,5 pour le groupe (d). Les résultats indiquent que s'inscrire dans la classe AP donne aux étudiants un petit avantage (0,3 point sur le sac de 36 points ACT), mais que le fait de passer le test offre de plus grands avantages (1,2 point).
Différences étudiantes préexistantes
En surface, les résultats du paragraphe précédent semblent indiquer que la classe et le test sont efficaces – bien que le test ait clairement l'impact le plus fort. Mais le problème avec ce genre de comparaison est que ces quatre groupes d'étudiants ne sont pas équivalents, parce que les étudiants choisissent de s'inscrire aux cours AP. Par conséquent, les étudiants AP sont différents des étudiants non AP (Sadler & Sonnert, 2010). Les psychologues appellent cette auto-sélection, et il est très commun dans de nombreuses branches de la recherche psychologique. En fait, il y a deux niveaux d'auto-sélection que les chercheurs doivent prendre en considération lorsqu'ils étudient le programme AP, car les étudiants AP ont aussi la possibilité de passer le test. Les raisons de l'auto-sélection dans le programme AP ou de passer le test AP sont souvent floues, mais les politiques administratives (comme la décision d'un État de payer le PA pour les étudiants ou la décision de l'école d'offrir une classe AP particulière) comme la façon dont un étudiant est préparé pour le test) semblent avoir de l'importance.
Pour gérer l'auto-sélection, il est nécessaire de contrôler les différences préexistantes des étudiants. Des chercheurs antérieurs (par exemple, Long, Conger et Iatarola, 2012, Sadler et Sonnert, 2010) ont contrôlé des variables dans lesquelles les groupes d'élèves diffèrent. Par exemple, les étudiants AP ont tendance à avoir des moyennes plus élevées (GPA), sont souvent plus motivés et sont moins susceptibles de provenir de foyers à faible revenu. Sans tenir compte de variables comme celles-ci, l'impact du programme AP serait confondu avec les différences entre les groupes d'étudiants.
Dans notre étude, nous avons contrôlé environ 70 variables étudiantes, y compris le sexe, le groupe racial / ethnique, la moyenne pondérée cumulative, les résultats aux tests de rendement scolaire, et si l'enfant était dans une éducation spéciale. Nous avons ensuite comparé les scores ACT des quatre groupes après avoir effectué ces ajustements statistiques. Les étudiants non-AP avaient un score ACT moyen de 21,4. Les étudiants AP qui n'ont pas passé le test AP avaient un score ACT moyen de 21,2. Les étudiants PA qui n'ont pas réussi le test AP avaient un score ACT moyen de 21,7. Enfin, les étudiants AP qui ont réussi le test AP avaient un score ACT moyen de 24,6.
La comparaison de ces résultats aux résultats non ajustés montre l'importance de faire ces ajustements. L'avantage de prendre la classe AP s'évapore (comme indiqué dans la différence de score entre les deux premiers groupes), et l'impact de la prise du test passe de 1,2 point à 0,5 point – plus de 50%. Sans tenir compte des différences préexistantes, le programme AP semble beaucoup plus efficace qu'il ne l'est réellement. En fin de compte, mes co-auteurs et moi-même avons conclu que le test AP est une composante importante du programme AP. En outre, les étudiants qui réussissent le test reçoivent plus d'avantages que leurs camarades de classe qui ne passent pas le test AP, ou qui passent le test et ne le réussissent pas.
Conclusion
Cette étude est un exemple des défis de l'évaluation et de la compréhension des programmes éducatifs. Les nombreuses composantes de certains programmes éducatifs et les différences préexistantes entre les groupes d'élèves présentent des défis pour les psychologues scolaires. Mais, les défis ne sont pas insurmontables. J'invite les lecteurs à enquêter sur l'article original, ou à regarder une vidéo que j'ai faite à propos de l'étude. Les deux sont disponibles (gratuitement) aux URL ci-dessous:
Article complet: http://www.tandfonline.com/doi/pdf/10.1080/00220671.2014.917253
Résumé vidéo: https://www.youtube.com/watch?v=aViwSlcu2F0
Les références
Sadler, PM, & Sonnert, G. (2010). Adanced Placement scolaire et le succès dans les cours collégiaux en sciences. Dans PM Sadler, G. Sonnert, RH Tai et K. Klopfenstein (Eds.), AP: Un examen critique du Programme de placement avancé (pages 119-137). Cambridge, MA: Harvard Education Press.
Long, MC, Conger, D., et Iatarola, P. (2012). Les effets des études secondaires sur le succès secondaire et postsecondaire. American Educational Research Journal, 49, 285-322. doi: 10.3102 / 0002831211431952
Warne, RT, Larsen, R., Anderson, B., & Johnson, AO (sous presse). L'impact de la participation au programme Advanced Placement sur les résultats des tests d'admission au collège. Le Journal of Educational Research. doi: 10.1080 / 00220671.2014.917253
