Augmenter le réalisme de l'évaluation

ConseilPourquoi utiliser l'indice de certitude ?

Un outil pour une évaluation plus nuancée des connaissances.

  • Favoriser la métacognition: En évaluant leur propre niveau de compréhension, les personnes étudiantes développent une conscience plus aiguë de leurs forces et de leurs faiblesses.
  • Révéler les lacunes réelles: Une personne étudiante peut donner une réponse correcte par hasard, mais un indice de certitude faible révèle qu'elle ne maîtrise pas vraiment le concept.
  • Planifier l'étude: Les personnes étudiantes peuvent identifier les points sur lesquels elles doivent porter une attention particulière dans leur plan d'études.

L'indice de certitude est une mesure quantitative qui exprime le degré de confiance d'une personne étudiante dans la justesse de sa réponse. Il est exprimé sous forme d'échelle avec les valeurs de 30%, 60%, 80%, 95%, 100% et réponse au hasard.

ExempleÀ quoi ressemble l'interface de la personne étudiante lors de la passation d'un test avec indice de certitude ?

Exemple de questions avec indice de certitude

Exemple de question Mot manquant avec indice de certitude.
Exemple de question Mot manquant avec indice de certitude.

Point de vue de la personne étudiante en cours de passation d'une activité Test de Moodle.

Exemple de question à choix multiple avec indice de certitude
Exemple de question à choix multiple avec indice de certitude

Point de vue de la personne étudiante en cours de passation d'une activité Test de Moodle.

ExempleExemples

Faible performance et faible contrôle sur les connaissances.
Faible performance et faible contrôle sur les connaissances.
Faible performance et très faible contrôle sur les connaissances.
Faible performance et très faible contrôle sur les connaissances.
Haute performance et faible contrôle sur les connaissances.
Haute performance et faible contrôle sur les connaissances.
Haute performance et fort contrôle sur les connaissances.
Haute performance et fort contrôle sur les connaissances.
Très haute performance et aucun contrôle sur les connaissances.
Très haute performance et aucun contrôle sur les connaissances.
Moyenne performance et bon contrôle sur les connaissances.
Moyenne performance et bon contrôle sur les connaissances.
Moyenne performance et faible contrôle sur les connaissances.
Moyenne performance et faible contrôle sur les connaissances.
Moyenne performance et moyen contrôle sur les connaissances.
Moyenne performance et moyen contrôle sur les connaissances.
Très faible performance et très faible contrôle sur les connaissances.
Très faible performance et très faible contrôle sur les connaissances.
Très haute performance et aucun indice sur le contrôle sur les connaissances.
Très haute performance et aucun indice sur le contrôle sur les connaissances.
Très haute performance et fort contrôle sur les connaissances.
Très haute performance et fort contrôle sur les connaissances.
Très haute performance et très fort contrôle sur les connaissances.
Très haute performance et très fort contrôle sur les connaissances.

ExempleExemple interactif d'une activité Test avec indice de certitude

Exemple interactif d'activité Test dans Moodle [web, fr]

Vous devez vous autoinscrire à cet espace de cours Moodle avant de consulter cet exemple.

Truc & astuceComment activer la passation et la rétroaction d'une activité Test avec indice de certitude ?

Activation de l'indice de certitude dans les paramètres d'une activité Test.

ExempleÉtude de cas

Deux personnes étudiantes (A et B) obtiennent toutes deux un score de 8/10 à une activité évaluée. À la lumière de ces valeurs numériques, que pouvez-vous conclure ?

  1. Les deux personnes possèdent une connaissance équivalente de la matière évaluée.

  2. Les deux personnes possèdent une connaissance très différente de la matière évaluée.

  3. Il n'est pas possible de conclure sur le caractère apparenté des connaissances de ces deux personnes étudiantes.

Imaginons maintenant que la passation de cette activité évaluée incorporait la sélection d'un indice de certitude[1] pour chaque question posée. Consultons les rapports de performance :

Résultats de la personne étudiante A
Résultats de la personne étudiante A
Résultats de la personne étudiante B
Résultats de la personne étudiante B

Il apparaît que la personne étudiante B possède des connaissances plus solides que la personne étudiante A.

ExempleDistinction entre une personne étudiante confiante et une autre moins confiante

Personne étudiante confiante
Personne étudiante confiante

Il apparaît qu'une personne étudiante confiante répond plus souvent avec des réponses exactes et est confiante en ses réponses, tout en identifiant le doute dans ses réponses incorrectes.

Personne étudiante moins confiante
Personne étudiante moins confiante

La personne étudiante moins confiante manque d'assurance dans ses réponses exactes et est malheureusement certaine de réponses qui s'avèrent fausses.

ÉcranRapport de performance avec indice de certitude

  1. Résultats quantitatifs
    Résultats quantitatifs

    Points

    Nombre de points obtenus pour les réponses justes de cette évaluation.

    Notes

    Pourcentage de réussite obtenu pour les réponses justes de cette évaluation.

  2. Résultats qualitatifs
    Résultats qualitatifs

    Connaissances solides

    La personne étudiante maîtrise les concepts. Zone idéale de performance.

    Connaissances fragiles

    La personne étudiante maîtrise partiellement les concepts.

    AttentionRéponses au hasard

    La personne étudiante maîtrise peu les concepts, mais elle en est bien consciente qu'elle tente sa chance pour obtenir une bonne réponse.

    Erreurs présumées

    La personne étudiante maîtrise peu les concepts, mais elle en est bien consciente. Zone idéale pour les réponses inexactes.

    AttentionErreurs insoupçonnées

    La personne étudiante maîtrise peu ou pas les concepts, mais elle n'en est pas consciente.

  3. Courbe normale des réponses correctes
    Courbe normale des réponses correctes

    Zone idéale de performance

    Les réponses aux questions du test de connaissances sont majoritairement exactes et répondues avec conviction de la part de la personne étudiante.

  4. Courbe normale des réponses erronées
    Courbe normale des réponses erronées

    Zone idéale des réponses inexactes

    De façon générale, il est attendu que, dans un test de connaissances, certaines questions peuvent avoir des réponses inexactes. Dans cette situation, les mauvaises réponses devraient avoir un indice de certitude faible, c'est-à-dire que la personne étudiante convient de façon explicite que la bonne réponse lui échappe.

  5. Histogramme des réponses aléatoires
    Histogramme des réponses aléatoires

    Zone de réponses aléatoires

    Dans un test de connaissances, il est attendu que la personne étudiante répond aux questions selon ses connaissances. Cependant, en toute franchise, si une réponse est fournie sans fondement - par simple hasard - alors l'honnêteté implique de qualifier la réponse avec ce niveau de certitude.

  6. Rétroaction de la part de la personne étudiante
    Rétroaction de la part de la personne étudiante

    Zone de réflexion

    À la demande de la personne responsable du cours, la personne étudiante peut être invitée à rédiger une courte réaction en lien avec sa propre interprétation de sa performance.

ProcédurePasser un test de connaissances avec indice de certitude

Procédure
  1. Lancez le test des connaissances qui propose ce type de passation
  2. Répondez d'abord à la question
  3. Indiquez ensuite votre conviction quant à l'exactitude de votre réponse

    Exemple

    Échelle d'indice de certitude
    Échelle d'indice de certitude

    ExempleVous avez une forte conviction de l'exactitude de votre réponse

    Utilisez les valeurs supérieures de l'échelle : 100%, 95% ou 80%.

    ExempleVous avez un doute sur l'exactitude de votre réponse

    Utilisez les valeurs inférieures de l'échelle : 30% ou 60%.

    ExempleVous n'avez aucune idée sur la réponse exacte attendue.

    Utilisez la valeur Réponse au hasard de l'échelle.

    ExempleVous ne souhaitez pas indiquer votre indice de certitude pour cette question

    Ne sélectionnez aucune valeur sur l'échelle.

    À quel moment sélectionner l'indice de certitude d'une réponse ?

    Vous pouvez indiquer votre indice de certitude au moment de compléter votre réponse à la question, ou bien réserver cette action pour plus tard, par exemple au moment où vous révisez vos réponses, mais avant d'avoir effectué la soumission finale de l'évaluation.

  4. Résultat
Commentaires

AttentionVous ne souhaitez pas indiquer votre indice de certitude pour une ou plusieurs questions

Si vous n'avez pas indiqué votre indice de certitude à une, plusieurs ou toutes les questions d'un test des connaissances, une première notification de réponse incomplète s'affiche au moment de la soumission.

Test sans complétion d'indice - notification 1
Test sans complétion d'indice - notification 1

Dans cette situation, Retourner à la tentative pour vous assurer que vous avez répondu à toutes les questions de l'évaluation, même si vous n'avez pas sélectionné aucun indice de certitude sur une ou plusieurs réponses.

Une deuxième et dernière notification vous demande de confirmer la soumission finale de l'évaluation, après vous êtes assuré que vous avez fourni une réponse à chacune des questions, même sans sélection d'indices de certitude.

Test sans complétion d'indice - notification 2
Test sans complétion d'indice - notification 2

ComplémentPour aller plus loin...

En tant que personne responsable du cours qui propose l'utilisation de l'indice de certitude dans une ou plusieurs activités Test de Moodle, il serait possible de demander aux personnes étudiantes de commenter leur performance dans la zone réservée à cette effet (sous le graphique des résultats).

Zone de commentaire vide
Zone de commentaire
Zone de commentaire complétée
Zone de commentaire complétée

Pour lire les commentaires de vos personnes étudiantes, naviguez jusqu'à l'activité Test, puis consultez Résultatset Relecture pour la personne étudiante concernée.