Évaluations des élèves: Fudging the "Happy Sheets"

Les professeurs, conférenciers et enseignants sont confrontés à l'évaluation des cours, qui est prise très au sérieux. "Évaluer mon professeur" est largement connu et la plupart des évaluations de cours sont en ligne.

Certaines institutions d'enseignement mettent ces évaluations résumées sur le web. Il est bientôt possible de connaître les meilleurs et les pires conférenciers dans tous les domaines ainsi que dans l'ensemble de l'organisation. Les meilleurs sont souvent recherchés; le pire humilié.

Les formateurs dans les organisations ont longtemps été exposés aux exigences de la «feuille heureuse». Le responsable de la formation et les clients ont peu à faire pour mesurer l'efficacité de la formation. Il est tout simplement très difficile de mesurer les «performances réelles» ou même les «apprentissages obtenus» par un examen avant-après, de sorte qu'ils parcourent les «feuilles heureuses», attentifs à chaque note griffonnée à la main et à chaque changement de chiffres.

Les consultants et les formateurs peuvent être embauchés et licenciés sur la base de leurs résultats heureux et ils le savent. Beaucoup ont appris au cours des années différentes «astuces» qui, selon eux, augmentent leurs chances d'obtenir un score plus positif.

Les politiciens et les prévôts, les vice-chanceliers et les vice-présidents veulent maintenant tous la preuve de l'efficacité de l'enseignement, de la frappe de cible, de la valeur toujours croissante pour l'argent. Ils veulent la preuve que les étudiants obtiennent un bon rapport qualité-prix.

Ces évaluations ont au moins l'apparence fausse de la validité scientifique. Ils sont après toutes les évaluations des clients. Ainsi, ils peuvent montrer que le professeur Brown est sur le 69e centile pour «bien préparé et organisé», mais seulement le 14e pour «vraiment m'a fait réfléchir». Tout aussi pauvre vieux professeur Green, un génie clair mais qui reste obstinément sur le 8ème centile pour "diapositives claires power-point" ou "notes utiles".

La plupart des évaluations donnent des moyennes (ou des modes) mais pas toujours des écarts-types qui, en l'occurrence, constituent une bonne mesure du désaccord entre les évaluateurs. Alors que se passe-t-il si la classification est liée à la personnalité ou à l'intelligence: l'idée que le même présentateur est évalué de manière assez différente par les extravertis ou les introvertis?

Il y a donc une nouvelle industrie dans l'amélioration de l'évaluation des cours. En effet, il est plus judicieux et certainement efficace de faire des efforts pour améliorer les évaluations de l'enseignement sans réellement améliorer l'enseignement. Divers enseignants ont écrit sur leurs expériences personnelles, parfois avec humour et parfois amertume. Ils ont généralement fait les observations et les suggestions suivantes sur la façon d'obtenir de meilleurs scores.

1. Soyez un homme: Les élèves s'attendent à ce que les femmes soient plus solidaires et utiles, et si elles ne le sont pas, elles seront punies. Tous les élèves semblent être plus critiques à l'égard des femmes, particulièrement en ce qui concerne les questions de disponibilité et de stimulation des cours. Cela semble plus facile si vous êtes un homme. Mais les choses changent-elles: en effet est-ce maintenant exactement le contraire?

2. Soyez bien organisé: Commencez et finissez à temps, ayez assez de documents, vérifiez que le power-point fonctionne. Les étudiants sont très agacés par les «professeurs distraits et distraits». Ils remarquent si vous êtes bien organisé. Beaucoup veulent que les diapositives et une vidéo de type TED talk leur soient envoyées avant ou après la conférence. Ne pas le faire et vous êtes vraiment mal évalué par les jeunes tech-savvy.

3. Soyez un examinateur souple: la notation Lenient est un corrélat puissant des notes pour l'efficacité de l'enseignant / formateur. Naturellement, les gens vraiment talentueux se sentent dur, mais ils sont relativement peu nombreux. En outre, vous pouvez toujours défendre vos notes généreuses en tant que reflet de votre compétence pédagogique: après tout, les évaluations soutiennent votre position. Alors dégustez le As Assez libéralement et allez très léger sur les grades C et D.

4. Avoir des évaluations précoces. N'attendez pas la fin du cours, surtout si vous savez que les étudiants seront testés. Les plus faibles, dit-on, vous blâmeront pour leurs insuffisances. Attrapez-les tôt, avant qu'ils ne pensent à un test de ce qu'ils ont appris. Ils vous marquent plus haut s'ils oublient que vous les marquez plus tard.

5. Donnez personnellement vos feuilles heureuses si vous le pouvez ou au moins choisissez le moment où elles sont envoyées par voie électronique. Choisissez votre meilleure conférence avec la plus amusante de toutes vos approfondissements et anecdotes. Ça aide si cette conférence a un peu d'impact émotionnel et fait appel à leur cœur. Les gens heureux donnent des notes plus élevées

6. "Expliquer" le but des évaluations. Soyez confiant, soyez drôle, détendu et positif. Soulignez, si vous l'osez, que des résultats élevés continuent votre recherche; vos 5 petits enfants en vie; l'ensemble du département dans les emplois. En bref, obtenez-les "de l'autre côté".

7. Enseigner des groupes plus petits et sélectifs. Plus le groupe est petit, plus vous pouvez interagir avec les individus et les charmer. Ils ont aussi tendance à être plus sélectifs et sélectionnés. Méfiez-vous du désorienté, désaffecté et dérangé se cachant dans de grands groupes. Bien sûr, ce n'est pas toujours une question de choix et certains enseignants et professeurs sont forcés d'enseigner des groupes énormes de plusieurs centaines.

8. Mélangez et associez votre style et vos techniques. Allez chercher des gadgets. Utilisez les médias utiliser une nouvelle technologie. Avoir des vidéos, des CD Roms, des interviews de célébrités. Entrez dans les conférenciers invités, encouragez l'utilisation de Twitter. L'étudiant moderne n'est pas dans "craie-et-parler". Ils ont été exposés à la joie du Web et aux images rapides. La saillance d'une vidéo de déclenchement émotionnel particulier pour terminer le cours n'est ni ici ni là. Montrer le meilleur sur ou juste avant une évaluation annuelle.

9. Divertissez. Les étudiants vous aiment à être enthousiaste, expressif et divertissant. Dans une étude célèbre un acteur a donné à la conférence une place de professeur distingué. Il avait peu de contenu mais cela n'avait pas d'importance. Le divertissement est la clé. Difficile, mais pas impossible d'enseigner des sujets secs comme des statistiques multivariées, mais cela peut être fait. Voir tous ces universitaires qui ont des séries télévisées très réussies sur ce qui était autrefois considéré comme sujet terriblement sec.

10. Établir et satisfaire les attentes. Ne laissez pas les étudiants faire une évaluation préalable ou une évaluation des attentes. Faites-le de façon informelle: découvrez la réputation du cours et de l'enseignant et livrez ce à quoi il s'attend. S'il est encouragé à formuler des espoirs, cela peut être beaucoup trop élevé ou irréaliste, mais découvrir ce que les étudiants veulent le plus.

11. Croyances et ordres du jour des modèles et des échos. Déterminer, faire écho, promouvoir et adopter leurs points de vue même si vous êtes en profond désaccord avec eux. Ne prenez pas des positions qui offensent même si vous croyez avec une bonne preuve alors d'être vrai. Ils aiment que vous soyez l'un d'eux et vous identifiez donc avec vous.

12. N'admettez des élèves talentueux que si vous le pouvez: Fixez un critère d'admission élevé. Souvent les moins capables ont appris à blâmer l'enseignant pour l'échec, les plus brillants ne le font pas.

13. Évaluer tout le monde. Dans le secteur de l'enseignement et de la formation, il y a toujours ceux qui s'excluent eux-mêmes de l'évaluation sur des terrains assez vagues. Insister tout le monde est inclus. Cela augmente la distribution des scores, en particulier à l'extrémité inférieure de sorte que votre score s'améliorera relativement. De plus, en insistant sur une politique sans exception pour l'évaluation, vous pouvez adopter une position morale et politiquement correcte.

Est-ce que tout cela est profondément cynique: les enseignants pauvres essayant de trouver des moyens de dissimuler leurs fautes? Ou est-ce les expériences amères des bons enseignants qui considèrent cette évaluation comme profondément erronée?

Le moral de certaines "vieilles mains" disent est simple. Vous n'avez pas besoin d'être une personne intelligente, attentionnée, empathique ou dévouée pour obtenir de bonnes évaluations des enseignants. Curieusement, être déqualifié, établir des normes élevées et refuser de satisfaire les étudiants peut être sanctionné par de mauvaises évaluations. Si les évaluations pilotent le système, consacrez plus d'efforts à les influencer.

La question plus difficile, bien sûr, est de savoir si ces «évaluations» sont imparfaites, quelle est la meilleure façon d'évaluer les enseignants et les formateurs?

Il y a environ 40 ans, Donald Kirkpatrick, un professeur d'affaires américain, a suggéré que nous devions répondre à quatre questions

1 Les participants ont-ils aimé le programme? C'est leur réaction à l'enseignement et à la formation. C'est la méthode "feuille heureuse". Il a fait valoir que ces mesures sont utiles pour l'analyse des commentaires positifs et négatifs sur, ou directement après, le programme. Mais ils ne peuvent pas dire combien un participant a appris ou les compétences qu'ils ont acquises. Ils sont également très sensibles à de nombreuses erreurs de notation

2. Les participants ont-ils acquis les compétences? C'est essayer de mesurer ce qu'ils ont vraiment appris. Pour ces compétences ou connaissances doivent être mesurés avant et après la formation. Il est également important de mesurer le comportement observable, pas les inférences sur le comportement. Ceci est parfois fait par les formateurs

3. Les participants ont-ils utilisé les compétences au travail? Autrement dit, ont-ils vraiment changé leur comportement lorsqu'ils sont revenus au travail dans le «monde réel»? Cette validation tente de prouver l'utilisation réelle des compétences. Pour s'assurer que les améliorations sur le lieu de travail découlent de la formation plutôt que de facteurs externes, il est important de mettre en place un groupe de contrôle au sein de l'organisation qui n'a pas eu l'enseignement et la formation.

4. Le programme a-t-il affecté la ligne de fond? Cela répond aux questions sur les résultats de la formation. Cette validation exige des faits observables, quantifiables, tangibles et vérifiables qui montrent des résultats spécifiques de profit ou de performance. Bien que les données dures soient préférables, des données indirectes peuvent être utilisées si elles peuvent être vérifiées. S'il n'est pas possible de créer un groupe de contrôle, on peut comparer les résultats à une période antérieure. Par exemple, vous pourriez comparer les taux de production pour les mois d'octobre avant et après la formation. Mais vous devez examiner attentivement tous les facteurs externes susceptibles d'affecter les performances.

La méthode la plus simple est la méthode des «feuilles heureuses», qui explique pourquoi elle est si souvent utilisée, et pourquoi elle est devenue l'objet d'un si grand nombre de personnes, y compris les «donneurs» et les «récepteurs»; les «acheteurs» et les «fournisseurs» ainsi que les administrateurs de l'enseignement et de la formation.