Mettre en place une évaluation par les pairs

Valeur d'une évaluation par les pairs

L'évaluation par les pairs à l'université est une méthode d'évaluation des personnes étudiantes qui comporte de nombreux avantages :

  1. Encouragement de la pensée critique : L'évaluation par les pairs oblige les personnes étudiantes à analyser le travail de leurs pairs de manière critique. Cela favorise le développement de compétences de pensée critique, car les personnes étudiantes évaluatrices doivent justifier leurs évaluations et arguments.

  2. Apprentissage collaboratif : En évaluant le travail de leurs pairs, les personnes étudiantes sont amenées à discuter, échanger des idées et collaborer. Cela favorise un environnement d'apprentissage interactif où les personnes étudiantes peuvent apprendre les uns des autres.

  3. Diversité des perspectives : Les personnes étudiantes ont des expériences et des perspectives différentes, ce qui signifie qu'ils peuvent apporter des commentaires et des points de vue variés. Cela enrichit l'apprentissage en exposant les personnes étudiantes à une variété d'opinions et d'approches.

  4. Développement de compétences d'analyse : L'évaluation par les pairs exige que les personnes étudiantes examinent attentivement le travail de leurs pairs, identifient les forces et les faiblesses, et fournissent des commentaires constructifs. Cela renforce leurs compétences d'analyse et d'évaluation.

  5. Pensée d'ordre supérieur: Les personnes étudiantes sont responsables de l'évaluation du travail de leurs pairs, ce qui favorise l'autonomie de l'apprentissage. Ils doivent gérer leur temps, suivre des critères d'évaluation et prendre des décisions éclairées.

Taxonomie de Bloom

L'acte d'évaluer se situe à un haut niveau de complexité cognitive selon la taxonomie de Bloom révisée. Avec un entraînement approprié et des consignes précises, il ne faut pas hésiter à proposer ce type d'activité aux personnes étudiantes.

Taxonomie de Bloom révisée
Taxonomie de Bloom réviséeInformations[1]

Dimension cognitive de l'évaluation par les pairs

L'évaluation par les pairs permet d'obtenir une ou plusieurs évaluations, souvent avec des perspectives différentes, pour chacune des personnes étudiantes de votre cours. L'activité Atelier est tout indiquée pour mener à bien cet exercice.

Dimensions de l'évaluation par les pairs

Objectif

Exemple de formulaire d'autoévaluation

Activité

Cognitive

La personne étudiante analyse le travail de ses pairs, applique avec rigueur les consignes d'évaluation et fournit une rétroaction qui enrichi la perspective de ses pairs.

Établir les critères d'évaluation d'un travail exemplaire par une discussion entre la personne responsable du cours et les personnes étudiantes.

Évaluation par les pairs avec Atelier ou Base de données.

Dimensions métacognitive et relationnelle de l'évaluation par les pairs

Si vous souhaitez mesurer les retombées de l'exercice d'évaluation par les pairs, nous vous proposons des exemples de formulaires d'autoévaluation dont les véhicules peuvent être l'activité Atelier en mode autoévaluation ou bien l'activité Questionnaire en mode anonyme.

Dimensions de l'évaluation par les pairs

Objectif

Exemple de formulaire d'autoévaluation

Activité

Métacognitive

La personne étudiante réfléchie sur l'acte d'évaluer et de recevoir une évaluation.

Comme personne évaluatrice :

  1. Comment avez-vous abordé cette tâche d'évaluation par les pairs ?

  2. Vous croyez-vous avoir les qualifications pour cette tâche ?

  3. Est-ce que la précision des consignes d'évaluation était suffisante ?

  4. Quels aspects du travail vous ont paru les plus difficiles à évaluer ?

  5. Avez-vous eu des réflexions sur la manière dont cette expérience d'évaluation par les pairs a contribué à votre propre apprentissage ?

  6. Comment pourriez-vous améliorer votre propre processus d'évaluation par les pairs à l'avenir ?

  7. Quels enseignements avez-vous tirés de cette expérience en tant qu'évaluateur ?

Comme personne évaluée :

  1. Avez-vous identifié des tendances ou des modèles dans votre propre travail que vous n'aviez pas remarqués auparavant ?

  2. Comment ces commentaires de pairs ont-ils influencé votre propre évaluation de votre travail ?

  3. Comment cette expérience d'évaluation par les pairs a-t-elle influencé votre approche de la rédaction ou de la création académique ?

  4. Avez-vous ressenti de l'anxiété ou des préoccupations particulières concernant le processus d'évaluation par les pairs ? Comment les avez-vous gérées ?

  5. Y a-t-il des points de vue ou des critiques spécifiques qui vous ont surpris ou que vous n'attendiez pas ?

  6. Comment avez-vous utilisé les commentaires de vos pairs pour améliorer votre travail ou votre compréhension du sujet ?

Autoévaluation avec Atelier ou Questionnaire

Relationnelle

La personne étudiante réfléchie sur les retombées de l'évaluation par les pairs sur ses relations avec les autres.

Comme personne évaluatrice :

  1. Comment avez-vous géré vos propres préjugés ou biais potentiels lors de l'évaluation ?

  2. Comment avez-vous géré les commentaires négatifs ou critiques que vous deviez donner ?

  3. Comment avez-vous géré les moments où vous n'étiez pas sûr de votre évaluation ?

Comme personne évaluée :

  1. Êtes-vous majoritairement d'accord avec l'évaluation et la rétroaction reçues ?

  2. Avez-vous identifié des tendances ou des modèles dans les commentaires de vos pairs ? Comment cela vous a-t-il affecté ?

  3. Comment avez-vous géré les commentaires négatifs ou critiques de manière constructive ?

  4. Croyez-vous que vos pairs sont qualifiés pour cette tâche d'évaluation ?

Dimensions de l'évaluation par les pairs

...

ProcédureÉtude de cas - Créer une évaluation par les pairs avec l'activité Atelier

Intention pédagogique primaire : proposer aux personnes étudiantes une mise en situation d'évaluation des travaux des pairs

En tant que personne enseignante responsable du cours, je souhaite placer les personnes étudiantes en situation de personne évaluatrice des travaux des pairs. Chaque personne étudiante du cours doit remettre un (1) travail et en évaluer trois (3) autres à partir de critères établis. L'autoévaluation n'est pas autorisée.

À l'issue de cette évaluation par les pairs, les personnes étudiantes évaluées obtiennent une valeur numérique entre 0 et 100 qui correspond à la note moyenne reçue de toutes les personnes évaluatrices. Ici, la valeur maximale de 100 représente le meilleur score possible en matière de qualité des travaux rendus.

Dans cette étude de cas, la note pour le travail remis, prise en compte dans le calcul de votre note finale du cours, est pondérée au carnet de Notes à 15 points.

La personne étudiante évaluatrice se voit octroyée une note entre 0 et 20 pour la qualité de son travail d'évaluation. Dans notre étude de cas, cette note n'est pas prise en compte dans le calcul de votre note finale du cours, elle est donc pondérée au carnet de Notes à 0 point.

Intention pédagogique secondaire (facultatif) : proposer aux personnes étudiantes une réflexion à propos des biais métacognitifs et relationnels de toute situation d'évaluation

En tant que personne enseignante responsable du cours, je souhaite placer les personnes étudiantes évaluatrices en situation de réflexion à propos des biais métacognitifs et relationnels de toute situation d'évaluation. Cet exercice peut être réalisé soit avec l'activité Atelier en mode autoévaluation ou bien avec l'activité Feedback. Pour un exemple d'autoévaluation avec l'activité Atelier, consultez l'étude de cas Mettre en place une autoévaluation.

Prérequis

ComplémentGrille d'évaluation

L'évaluation de la qualité d'un travail est certainement liée à la nature disciplinaire de celui-ci. De ce fait, cette étude de cas utilise des critères symboliques avec pondération pour simplifier l'articulation de cette mise en situation.

Critères d'évaluation de la qualité des travaux rendus

Dimension

Pondération

Poids relatif

Pourcentage (approx.)

Critère A

1

1/12

8%

Critère B

1

1/12

8%

Critère C

3

3/12

25%

Critère D

5

5/12

42%

Critère E

2

2/12

16%

ComplémentÉlaborer une grille d'évaluation

Si vous souhaitez parfaire vos connaissance dans l'élaboration de grilles d'évaluation, nous vous recommandons la ressource Élaboration d'une grille d'évaluation [Web, fr] et plus spécifiquement Évaluation d'une grille d'évaluation - Guide de la personne participante [PDF, 1,88 Mo, fr].

ComplémentÉchelle de mesure

La sélection d'une échelle de mesure pour l'évaluation par les pairs demande réflexion puisqu'elle sera administrée par des personnes étudiantes. Par exemple :

  • Échelle numérique 0 à 100 : offre un très grand nombre de nuances, possiblement trop pour assurer une grande fidélité de mesure entre les personnes évaluatrices.
  • Échelle numérique 1 à 10 : offre une plage de valeurs limitée, facilitant possiblement la cohérence de mesure entre les personnes évaluatrices étant donnée une granularité moins nuancée..
  • Échelle Succès / Réussite : plage de valeur extrêmement réduite qui n'autorise pas suffisamment de nuances et difficile à comptabiliser sur plusieurs critères à pondération différente.
  • Échelle descriptive qualitative (à 4 ou 5 positions) : une plage de valeurs permet des nuances et plus de facilité dans l'administration.

Compte tenu des caractéristiques de l'activité Atelier de Moodle, nous allons retenir une évaluation numérique 1 à 10 avec un tableau de description, le tout soutenu à partir de la fonctionnalité Évaluation cumulative dans Atelier.

Échelle d'évaluation numérique descriptive

Valeur numérique

Note

Description

0-1

Non atteint

Le critère n'a pas du tout été atteint.

3-6

Partiellement atteint

Il reste beaucoup à faire pour atteindre le critère de manière satisfaisante.

7-8

En grande partie atteint

Le critère est en voie d'atteinte, bien qu'il puisse rester quelques ajustements mineurs à effectuer

9-10

Entièrement atteint

Le critère a été pleinement atteint conformément aux attentes

Procédure
  1. Activez le mode édition en cliquant sur Mode édition dans la barre de navigation du site - droite[2]
    1. L'activation du mode édition est confirmée par cette forme Bouton mode édition activé.

  2. Naviguez jusqu'à la section[3] ou bloc[4] à modifier
  3. Cliquez sur Ajouter du contenu et choisissez Activité ou ressource
  4. Cliquez sur Icône de l'activité Atelier dans le sélecteur d'activités et de ressources pour afficher ses paramètres
  5. Saisissez le nom de l'atelier Évaluation par les pairs
  6. Saisissez une description de l'activité

    Description de l'activité

    Exercez votre appréciation critique en évaluant et rétroagissant aux travaux de quelques pairs à partir de critères établis.

  7. Sélectionnez la stratégie d'évaluation Évaluation cumulative
  8. Sélectionnez 100 comme Note pour le travail remis

    Cette valeur est la note maximale pour la remise d'un travail (même si le maximum des points possible est différent - Moodle effectue un calcul proportionnel).

  9. Sélectionnez 20 comme Note pour le processus d'évaluation

    Conseil

    C'est le nombre de points accordés pour la qualité de l'évaluation de la personne évaluatrice. Si cette activité est facultative dans votre cours, alors inscrivez 0 (zéro). Cependant, il pourrait être intéressant pour la personne évaluatrice d'obtenir une note qui correspond à la cohérence de ses évaluations avec la personne évaluatrice. Dans cette situation, la personne responsable du cours peur alors configurer le carnet de Notes pour conférer le coefficient de 0 (zéro) à la Note pour le processus d'évaluation.

  10. Saisissez les instructions pour la remise du travail

    Instructions pour la remise du travail

    Consignes pour la nature du travail à remettre :

    • Consigne 1
    • Consigne 2
    • Consigne 3
    • Consigne 4
    • Consigne 5
    • Consigne ...

    Effectuez la remise en téléversant tous les fichiers numériques de votre travail.

  11. Précisez le nombre maximal d'annexes jointes

    Dans cette étude de cas, 1 seule annexe (fichier joint)

  12. Cochez uniquement Fichier joint comme Type de remise
  13. Saisissez les instructions pour l'évaluation

    Instructions pour l'évaluation

    Vous devez évaluer le travail remis selon ces critères :

    • Critère A
    • Critère B
    • Critère C
    • Critère D
    • Critère E

    Pour chacun des critères, vous appliquez la note correspondante à votre appréciation :

    Échelle d'évaluation numérique descriptive

    Note

    Catégorie

    Description

    0-1

    Non atteint

    Le critère n'a pas du tout été atteint.

    3-6

    Partiellement atteint

    Il reste beaucoup à faire pour atteindre le critère de manière satisfaisante.

    7-8

    En grande partie atteint

    Le critère est en voie d'atteinte, bien qu'il puisse rester quelques ajustements mineurs à effectuer.

    9-10

    Entièrement atteint

    Le critère a été pleinement atteint conformément aux attentes.

    À l'étape finale, vous recevrez notre note pour le travail remis (prise en compte dans le calcul de votre note finale du cours) et une note pour la qualité de vos évaluations (non prise en compte dans le calcul de votre note finale du cours).

  14. Assurez-vous de ne pas cocher Les étudiants peuvent évaluer leur propre travail de Utiliser les auto-évaluations
  15. Sélectionnez Activé et requis du Mode feedback général
  16. Saisissez les éléments de la conclusion

    ComplémentInterprétation des résultats

    De façon exploratoire, il est possible de classer la qualité des travaux évalués par pairs de la façon suivante :

    Classement exploratoire de la qualité des travaux remis

    Résultat

    Qualité

    Appréciation

    85 à 100

    Excellente

    Vos pairs constatent la présence de tous les éléments de qualité requis.

    77 à 84

    Très bonne

    Vos pairs constatent la présence d'une majorité d'éléments de qualité ainsi que quelques améliorations mineures pouvant être envisagées.

    68 à 76

    Bonne

    Vos pairs constatent la présence de plusieurs éléments de qualité ainsi que quelques améliorations d'importance variable pouvant être envisagées.

    60 à 67

    En émergence

    Vos pairs constatent que, malgré la présence de quelques éléments de qualité, plusieurs améliorations peuvent être envisagées.

    0 à 59

    Faible

    Vos pairs constatent que plusieurs améliorations sont nécessaires pour atteindre le seuil de qualité d'un travail universitaire.

    De façon exploratoire, il est possible de classer la qualité des évaluations par les personnes évaluatrices de la façon suivante :

    Classement exploratoire de la qualité de l'évaluation

    Résultat

    Cohérence

    Appréciation

    15 à 20

    Excellente

    Vos évaluations des travaux de vos pairs sont en cohérence avec les autres personnes évaluatrices.

    10 à 14

    Moyenne

    Vos évaluations des travaux de vos pairs divergent sensiblement, en plus ou en moins, avec les autres personnes évaluatrices.

    0 à 9

    En émergence

    Vos évaluations des travaux de vos pairs divergent passablement, en plus ou en moins, avec les autres personnes évaluatrices.

  17. Ajoutez les travaux exemplaires [facultatif, mais recommandé]

    Travaux exemplaires

    Il serait tout à fait approprié de proposer aux personnes étudiantes un entraînement à l'évaluation. Il s'agirait de fournir deux travaux à évaluer, dont l'évaluation a aussi été réalisée par le personnel d'évaluation[5] du cours. Dans cette situation, la personne étudiante évalue les travaux d'entraînement et compare ses résultats avec le corrigé de la personne enseignante. La personne étudiante peut ainsi déceler les grandeurs et limites de son travail d'évaluation et s'ajuster pour les travaux d'évaluation subséquents.

    Cette étape peut être rendue facultative ou obligatoire par la personne responsable du cours.

  18. Cliquez sur Enregistrer et revenir au cours pour terminer l'opération
  19. Cliquez sur Notes de la barre de navigation du cours[6]
  20. Sélectionnez Configuration du carnet de notes du menu de navigation du carnet de notes[7]
  21. Cochez la case Coefficient de l'élément d'évaluation Évaluation par les pairs (travail remis)) pour en activer l'utilisation
  22. Saisissez 15 comme coefficient pour l'élément d'évaluation Évaluation par les pairs (travail remis))
    1. La qualité du travail remis comptera pour 15 points dans le calcul de la note finale du cours, même si l'évaluation est sur 100 points.

  23. Cochez la case Coefficient de l'élément d'évaluation Évaluation par les pairs (Évaluation)) pour en activer l'utilisation
  24. Saisissez 0 comme coefficient pour l'élément d'évaluation Évaluation par les pairs (travail remis))

    La qualité de l'évaluation remise comptera pour 0 point dans le calcul de la note finale du cours, même si l'évaluation est sur 20 points

  25. Cliquez sur Enregistrer
  26. Cliquez sur Cours
  27. Cliquez sur Évaluation par les pairs pour poursuivre l'édition de l'activité Atelier en cours
  28. Cliquez sur Préparer le formulaire d'évaluation de la Phase de mise en place
  29. Saisissez la description de l'Aspect 1
  30. Répétez les opérations pour chacune des dimensions de la grille d'évaluation

    ComplémentGrille d'évaluation

    L'évaluation de la qualité d'un travail est certainement liée à la nature disciplinaire de celui-ci. De ce fait, cette étude de cas utilise des critères symboliques avec pondération pour simplifier l'articulation de cette mise en situation.

    Critères d'évaluation de la qualité des travaux rendus

    Dimension

    Pondération

    Poids relatif

    Pourcentage (approx.)

    Critère A

    1

    1/12

    8%

    Critère B

    1

    1/12

    8%

    Critère C

    3

    3/12

    25%

    Critère D

    5

    5/12

    42%

    Critère E

    2

    2/12

    16%

    ComplémentÉlaborer une grille d'évaluation

    Si vous souhaitez parfaire vos connaissance dans l'élaboration de grilles d'évaluation, nous vous recommandons la ressource Élaboration d'une grille d'évaluation [Web, fr] et plus spécifiquement Évaluation d'une grille d'évaluation - Guide de la personne participante [PDF, 1,88 Mo, fr].

    RemarqueNote maximale par critère

    Retenez la valeur numérique 10 comme valeur maximale de l'appréciation d'un critère.

    RemarquePondération

    N'oubliez que certaines dimensions possèdent une pondération !

    Truc & astuceAjout d'aspect

    N'hésitez pas à ajouter des emplacements d'aspects supplémentaires autant que nécessaire !

  31. Cliquez sur Enregistrer et fermer
  32. Cliquer sur Passer à la phase suivante de la Phase de mise en place
  33. Cliquer sur Continuer pour confirmer
    1. Vous êtes maintenant en Phase de remise

  34. Avisez toutes les personnes étudiantes de votre cours qu'il est maintenant temps de procéder à la remise de leurs travaux par téléchargement de fichiers.
    Interface de la personne étudiante
    Activité Atelier, évaluation par les pairs, ajout de fichier, étape 1
    Activité Atelier, évaluation par les pairs, ajout de fichier, étape 1
    Activité Atelier, évaluation par les pairs, ajout de fichier, étape 2
    Activité Atelier, évaluation par les pairs, ajout de fichier, étape 2
  35. Cliquez sur Attribuer les travaux de la Phase de remise

    Absence de remise de travaux

    Si des personnes étudiantes n'ont pas effectué la remise de leurs travaux, il n'est pas possible de les inclure dans l'attribution des pairs.

    Phase de remise de l'activité Atelier

    Dans notre exemple, sur les 14 personnes étudiantes du cours, l'attribution se fera uniquement à partir des 12 travaux rendus. Il faut parfois effectuer des rappels auprès des personnes étudiantes pour éviter de se retrouver en pareille situation.

  36. Sélectionnez Attribution aléatoire du menu de navigation d'attribution des travaux remis
  37. Saisissez 3 Par évaluateur au Nombre d'évaluations

    Attention

    Si une personne étudiante n'a pas remis de travail, alors elle ne peut pas être pairée avec une personne évaluatrice.

  38. Cliquez sur Enregistrer
  39. Cliquez sur Continuer
  40. Cliquez sur Atelier
  41. Contrôlez que l'attribution des travaux s'est correctement réalisée.

    Si toutes les personnes étudiantes ont remis un travail, le nombre de travaux remis est identique au nombre de travaux attendus et il ne reste aucun travail (0, zéro) à attribuer.

  42. Cliquez sur Passer à la phase suivante de la Phase de remise
  43. Cliquer sur Continuer pour confirmer
    1. Vous êtes maintenant en Phase d'évaluation.

  44. Notifiez les personnes étudiantes de votre cours qu'il est maintenant temps de procéder à l'évaluation des pairs.

    Méthode de notification

    Composez et expédiez un message à l'aide de l'activité Nouvelles présente par défaut dans tous les cours Moodle.

    Durée de la phase d'évaluation

    Accorder un temps suffisant pour réaliser cette étape compte tenu de la charge de travail et, possiblement, de l'aspect de nouveauté dans le rôle de personne étudiante évaluatrice.

    Interface de la personne étudiante évaluatrice
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 1
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 1
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 2
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 2
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 3
    Activité Atelier, évaluation par les pairs, évaluation d'un travail, étape 3
  45. Cliquez sur Passer à la phase suivante de la Phase d'évaluation
  46. Cliquer sur Continuer pour confirmer
    1. Vous êtes maintenant en Phase de notation des résultats

  47. Cliquez sur Recalcul des notes

    AttentionCalcul de la note moyenne

    Moodle propose un résultat calculé à partir de la moyenne des notes des personnes évaluatrices. Ce calcul s'effectue sans notification même si toutes les personnes étudiantes évaluatrices n'ont pas rendu leur travail d'évaluation, ce qui peut introduire des biais dans la note finale de l'activité.

  48. Cliquez sur Passer à la phase suivante de la Phase de notation des évaluations
  49. Cliquer sur Continuer pour confirmer
    Interface de la personne étudiante
    Activité Atelier, évaluation par les pairs, résultats, affichage 1
    Activité Atelier, évaluation par les pairs, résultats, affichage 1
    Activité Atelier, évaluation par les pairs, résultats, affichage 2
    Activité Atelier, évaluation par les pairs, résultats, affichage 2
    1. L'activité est maintenant terminée et fermée.