Permettre l’auto-évaluation

Télécharger en version  ou en

Présentation

L’auto-évaluation peut se faire en s’aidant de multitude d’outils, parmi lesquels le test. L’auto-évaluation avec des tests en ligne, par exemple dans un cours Moodle, permet aux étudiants de passer le test à distance au moment qu’ils jugent propice et hors d’un contexte social de classe pouvant entrainer des gênes si un étudiant montrait des faiblesses de connaissance. « The clear advantage of online testing as part of formative assessment is that it is in a private space and, in most cases, it can be accessed at a time when the student feels appropriate. Where the test allows students to pursue areas of perceived weakness as well as to affirm areas of strength, the learning becomes more useful. » (Challis, 2005, p. 523)

Dans ce scénario, l’enseignant crée des tests en lien avec les objectifs et les propose aux étudiants après une série d’activités. Dans les feedbacks automatiques, il leur donne des conseils pour améliorer leurs apprentissages, par exemple en relisant certains textes. L’objectif est de permettre aux étudiants d’évaluer leur progression vers les objectifs d’apprentissage du cours et, sur la base de cette évaluation, de disposer d’une liste de choses à faire pour compléter efficacement leurs apprentissages (évaluation formative).

Nous vous proposons de mettre en place cette activité selon les étapes suivantes :

clip_image002[10]

clip_image004[10] L’auto-évaluation pour guider les étudiants

Les travaux en pédagogie montrent tout l’intérêt de mettre en place une évaluation formative dans un cours ou une formation, pour que l’étudiant puisse réguler son apprentissage, c’est-à-dire :

·           savoir où il en est par rapport aux apprentissages visés ;

·           pouvoir choisir le plus efficacement possible l’activité ultérieure qu’il devrait effectuer.

« Today there is broad acknowledgement of the value of meaningful learning, which involves the possibility of attributing meaning to what must be learned on the basis of what is already known (Ausubel 1983), thus favoring more ‘durable’ learning. (…) On the other hand, assessing students’ perception of a subject after it has been covered in class or lectures helps students to become aware of their own perception of the work done and which aspects they are not sufficiently clear about, at the same time as helping the teacher to identify the points not adequately understood by the students. » (Ibabe & Jauregizar, 2010, p. 247)

Un exemple pour un cours de traitement de données est décrit et analysé par Ibabe et Jauregizar : « These exercises assessed statistical knowledge and skills to develop with a data-analysis program. They were linked to conceptual recall, recognition and problem-solving. Students had to solve small problems rather than recall isolated pieces of information. A wide range of interactive self-assessment tasks was employed, using the Hot PotatoesTM program (Version 6) from Half-Baked Software Inc. The various exercises (multiple-choice, matching exercises, short answers, incomplete sentences and crosswords) were posted on the Internet once the teaching unit had been explained in class, and remained there until the final exam. » (Ibabe & Jauregizar, 2010, p. 248). Leurs résultats montrent un effet positif sur les performances des étudiants.

« Self-assessment has a critical role in assisting students to see their work as an ongoing source of learning. Where the emphasis is on effective learning, there is a clear connection with maturation to a learner who has the ability to form a reasonable judgement about the extent to which they have met certain criteria and standards and to be proactive in response, assisting their development towards independent and autonomous learning. » (Challis, 2005, p. 523)

Étape 1 : Création des tests d’auto-évaluation

A priori, en rentrant dans la mise en place de cette activité, l’enseignant doit déjà disposer de la liste des objectifs du cours et des principales activités d’apprentissage associées qui visent l’atteinte des objectifs (cf. le scénario « Utiliser les objectifs d’apprentissage »). Dans l’étape 1 du scénario décrit maintenant, l’enseignant complète cette association en ajoutant des tests afin de permettre à l’étudiant d’auto-évaluer où il en est dans ce cheminement.

clip_image006[10] Tests courts et fréquents, avec feedback

Des tests et des devoirs peuvent être utilisés de façon formative si l’enseignant identifie où en sont les étudiants dans leur apprentissage et donne un retour ciblé sur leur performance, en proposant des pistes pour compléter cet apprentissage (Carol, 2002). Black and William (1998b) recommandent :

·           des tests courts et fréquents ;

·           de tester une nouvelle connaissance une semaine après l’avoir abordée la première fois ;

·           que les questions soient rédigées soigneusement, par exemple en travaillant à plusieurs enseignants ou en s’inspirant de sources externes.

Une possibilité est de dédier chaque test à l’évaluation d’un objectif. De plus, chaque test doit pouvoir être proposé plusieurs fois. A priori, l’étudiant doit pouvoir passer un test :

·           chaque fois qu’il termine une série d’activités associée à l’objectif du test ;

·           après avoir refait les activités proposées pour remédier à de « mauvais » résultats pour un objectif.

Ainsi l’étudiant peut voir sa progression au fur et à mesure de ses tentatives et auto-évaluer son atteinte des différents thèmes-objectifs au fur et à mesure de son cheminement. En général, les étudiants peuvent commencer une série d’activités lorsqu’ils ont fait la série précédente et le test associé, sans forcément les avoir réussis. En effet, on veut procéder avec l’auto-évaluation à un bilan formatif qui n’est pas fait pour bloquer l’étudiant à une étape du cours.

Choix

·         Accès aux tests dépendant de la consultation des contenus et/ou de l’achèvement des activités (pour éviter que les étudiants focalisent leur attention uniquement sur les questions posées dans les tests)
OU
Accès aux tests indépendant de l’accès aux contenus et activités.

·         Accès à un test seulement pendant la période dans laquelle on traite la thématique liée (pour favoriser une séquence d’activités)
OU
Accès aux tests tout au long du cours, et au-delà (pour favoriser la possibilité de refaire une activité ou un test à tout moment).

·         Le test est un prérequis à l’accès de certaines ressources et activités (par exemple si les connaissances testées sont un pré-requis fort pour les activités d’un thème suivant)
OU
Accès aux contenus et accès aux activités indépendants du test.

·         Test cumulatif : plusieurs niveaux de maîtrise sont testés dans le même test
OU
Test adaptatif : chaque test sépare en deux (par exemple réussi – échoué), et éventuellement redirige vers un test plus facile ou difficile (selon le résultat).

clip_image008[20] Avec Moodle

Après avoir établi les objectifs du cours (cf. scénario « Utiliser les objectifs d’apprentissage »), il faut :

·           Créer les objectifs dans le cours Moodle.

·           Produire les tests nécessaires à l’évaluation des objectifs. Pour créer un test, les trois étapes suivantes sont nécessaires :

       Créer les questions dans la banque de questions.

       Créer le test dans l’espace de cours.

       Ajouter les questions au test.

L’ajout des feedbacks sera traité dans l’étape 3 de ce scénario.

Créer les objectifs

Pour ajouter un objectif à votre cours :

1.    Dans le menu Réglages du cours, cliquez sur Objectifs afin de créer un nouvel Objectif. A

2.    Dans le menu déroulant Objectifs utilisés…, choisissez Modifier les objectifs, ou cliquez sur le lien Modifier les objectifs plus bas.

3.    Cliquez sur le bouton Ajouter un objectif.

clip_image010[10] 

A Ajouter un Objectif

4.    Renseignez le Nom complet de l’Objectif. Dans notre exemple « Objectif Lexique ». B

clip_image012[10]

B Ajouter un Nom complet et un Nom abrégé

5.    Renseignez le champ Barème en choisissant un Barème dans la liste déroulante ou créez un nouveau Barème en cliquant sur le lien Ajouter un nouveau barème. C

Remarque : Si vous décidez de créer un nouveau Barème, vous arrivez dans la zone de création des Barèmes. Vous pouvez y créer votre Barème en lui donnant au moins un nom (champ Nom) et les valeurs du barème (dans l’ordre ascendant, séparées par des virgules, par exemple «  Pas acquis, partiellement acquis, Acquis » créera un Barème à trois niveaux.) et en cliquant sur le bouton Enregistrer. Après avoir enregistré le nouveau Barème, vous devez recommencer la création de l’Objectif (cf. point 2)

6.    Cliquez sur le bouton Enregistrer en bas de la page.

clip_image014[10]

C Ajouter un Barème à l’Objectif

Créer une question dans la banque de questions

Pour ajouter une question à votre cours :

1.    Dans le menu Réglages du cours, cliquez sur Banque de questions. A

2.    Cliquez sur le bouton Créer une question.

clip_image016[18]

ABanque de questions

3.    Choisissez le Type de question que vous désirez créer dans la fenêtre qui s’affiche (pour cet exemple, nous allons prendre le Type de question Vrai/Faux) et cliquez sur le bouton Suivant. B

4.    Renseignez les champs Nom de la question, Note par défaut et Facteur de pénalité (si vous choisissez un autre Type de question que vrai/faux).

clip_image018[10]

B Choisir le Type de question

5.    Vous pouvez déjà renseigner maintenant le Feedback général de la Question, ou laisser cela vide pour l’instant et remplir plus tard (étape 3 de ce scénario). Pour certains Types de questions, renseignez également le champ Note. C

6.    N’oubliez pas de sauvegarder avec le bouton Enregistrer.

7.    Procédez de la même manière pour chaque nouvelle Question.

clip_image020[10]

C Création d’une Question, le Feedback général et la Note

Créer un test

Pour ajouter un test à votre cours :

1.    Activez le mode édition.

2.    Dans la section/semaine désirée, dans le menu Ajouter  une activité…, sélectionnez l’option Test. A

3.    Entrez un Nom.

clip_image022[10]

A Ajouter un Test

4.    Pour une meilleure visibilité du Test, nous vous conseillons d’afficher Chaque question dans une Nouvelle page, paramètre que vous pouvez modifier dans la section Mise en page. B

5.    Pour éviter que l’on puisse envoyer plusieurs fois la même Question en cas d’erreur, dans la section Comportement de la question, pour Comment se comportent les questions, il faut sélectionner l’option Feedback a posteriori. B

6.    Pour ne pas afficher les Réponses justes des Questions quand l’étudiant y fait erreur, il faut désélectionner les options Réponse juste des deux premières catégories (Immédiatement après la tentative et Plus tard, alors que le test est encore ouvert) de la section Options de relecture. En effet, nous voulons que les Ressources des Activités  suivantes soient disponibles uniquement si la Limite de note du Test est de 70% ou plus. C

clip_image024[10]

B « Mise en page » et « Comportement de la question »

7.    L’activité Test permet de définir des feedbacks qui conseillent les participants sur les choses à faire et à revoir pour compléter leur apprentissage, selon le résultat obtenu au Test (en %). C Ces Feedbacks seront traités à l’étape 3 de ce scénario.

clip_image026[10]

C Renseigner les champs du Feedback global selon les Limites de notes

Ajouter une question à un test

Pour ajouter une question à votre test :

1.    Cliquez sur le nom du Test dans lequel vous aimeriez ajouter des Questions.

2.    Dans le menu Réglages du cours, cliquez sur Modifier le test.

3.    Si ce n’est pas encore le cas, cliquez sur le lien Afficher qui se trouve en haut à droite de la page afin de faire apparaître les Questions qui se trouvent dans le Contenu de la Banque de questions. A

clip_image028[10]

A Afficher les Questions de la Banque de questions

4.    Cochez les options (cases à cocher) des Questions que vous désirez ajouter au Test et cliquez sur le bouton Ajouter au test. B

5.    Une fois les Questions ajoutées, revenez au Test en cliquant sur le nom du Test « Connaissances de Moodle » qui se trouve dans le menu de navigation.

6.    Vous pouvez maintenant voir le résultat en cliquant sur le bouton Prévisualiser le test maintenant.

clip_image030[10]

B Choisir les Questions à ajouter au Test

Étape 2 : Effectuer les activités d’apprentissage avant le test

Les étudiants effectuent les activités conçues pour atteindre l’objectif (cf. scénario « Structurer les ressources et les activités »). Ce n’est que lorsque celles-ci sont achevées que les tests associés aux mêmes objectifs sont rendus disponibles aux étudiants.

clip_image008[21] Avec Moodle

Restreindre la disponibilité : rendre disponible le test seulement si les activités et ressources qui traitent l’argument/objectif testé ont été achevées. Cela se fait en posant des « Conditions de fin d’activité » (cf. scénario « Structurer les ressources et les activités »).

La création des dépendances se fait en 3 temps :

·           Paramétrer le cours pour activer l’option d’achèvement des activités et des ressources. (À ne faire qu’une fois pour l’ensemble des activités).

·           Ajouter une ou plusieurs conditions d’achèvement de l’activité ou de la ressource, conditions sur lesquelles se basera la restriction de disponibilité pour l’activité ou la ressource que vous souhaitez.

·           Restreindre la disponibilité de l’activité ou de la ressource elle-même.

Paramétrer le cours

Pour activer l’option d’achèvement du cours :

1.    Dans le bloc Réglages de votre cours, dans la partie Administration du cours, cliquez sur Paramètres. A

clip_image032[8]

A Menu Administration du cours

2.    Dans la partie Etat d’achèvement des activités des étudiants (vers le bas de la page), pour Suivi d’achèvement, choisissez l’option Activé. La configuration s’effectue dans les réglages des Activités. B

3.    Cliquez sur le bouton Enregistrer.

clip_image034[8]

BSuivi d’achèvement pour les activités, dans les paramètres du cours

Une fois ce paramétrage global effectué, vous pouvez vous concentrer uniquement sur les conditions d’achèvement et la disponibilité des ressources et des activités.

Spécifier les conditions d’achèvement d’une activité

Pour spécifier les conditions d’achèvement de l’activité :

1.    Activez le mode édition.

2.    Modifiez l’Activité, en cliquant sur l’icône de la main.

3.    Au bas de la page, dans la zone Achèvement d’activité, pour Suivi d’achèvement, choisissez l’option Afficher l’activité comme terminée dès que les conditions sont remplies. A

4.    Cliquez sur le bouton Enregistrer et revenir au cours.

Remarque : chaque Activité et chaque  Ressource offre un choix de différentes conditions d’achèvement.

clip_image036[8]

A Le Suivi d’achèvement dans une Activité

Restreindre la disponibilité du test

Pour restreindre la disponibilité de la ressource Test :

1.    Modifiez la Ressource « Test d’auto-évaluation », en cliquant sur l’icône de la main.

2.    Au bas de la page dans la zone Restreindre la disponibilité, pour Condition de fin d’activité, choisissez dans le menu déroulant le nom d’une Ressource. Ajoutez des Conditions de fin d’activité en cliquant le bouton Ajouter au formulaire 2 conditions d’activité. Répétez ensuite cette étape pour chaque Ressource ou Activité liée à ce Test. A

clip_image038[8]

A Choix de la Condition de fin d’activité

Étape 3 : Auto-évaluation avec Tests et Feedback selon résultat

Les étudiants effectuent un test. Une validation des feedbacks leur est donnée automatiquement. Les feedbacks conseillent sur les activités à faire pour compléter l’apprentissage de façon adaptée aux résultats de l’étudiant (dans Moodle : chaque test est rendu disponible après réalisation des activités associées). « A further efficiency is that, where gaps and weaknesses are exposed, remediation can be provided through embedded feedback and assistance which can be prepared once and then accessed as frequently as needed without drawing on lecturers’ time and involving them in what is typically base level repetitive instruction. » (Challis, 2005, p. 524)

Dans les tests, différents feedback aident l’étudiant à estimer son niveau et à trouver des pistes pour avancer dans son apprentissage :

Les feedbacks globaux du test, reliés aux % du résultat global, indiquent à l’étudiant :

·           le niveau qu’il obtient par rapport à un objectif, lorsqu’il fait le test ;

·           des indications globales sur les améliorations à viser et les activités à refaire.

Les feedbacks liés à chaque question du test sont centrés quant à eux sur une partie précise de l’objectif et, également, sur une activité précise liée à l’objectif testé.

·           Le feedback général d’une question est affiché à tous les étudiants après qu’ils aient répondu au test (ou à cette question, en mode adaptatif). Pour servir à une auto-évaluation, le feedback général ne doit pas donner la bonne réponse mais rediriger les étudiants vers l’activité, ou le document, qui permet de trouver cette réponse ou la construire. Le feedback général permet ainsi de ne pas avoir à répéter ce renvoi dans les feedbacks associés aux propositions de réponse. Les étudiants ayant « échoué » peuvent ainsi refaire l’activité adéquate ; ceux qui ont « réussi » peuvent également conforter leur réponse, au besoin.

·           Un feedback peut aussi être associé à chaque proposition de réponse. Il est affiché si l’étudiant opte pour cette proposition. Pour la(les) bonne(s) réponse(s), le feedback confirme la réponse, éventuellement celle-ci est explicitée brièvement. Pour la(les) mauvaise(s) réponse(s), le feedback n’est pas un jugement négatif sur la prestation de l’étudiant ; il cherche plutôt à montrer pourquoi il n’est pas correct de penser ainsi (contradiction, vérité partielle, etc.).

Notons aussi que l’enseignant peut visualiser l’avancement global de ses étudiants objectif par objectif. Dans le tableau de notes, le « Rapport d’objectifs » montre, pour chaque objectif, le niveau de réussite des activités associées pour les étudiants qui les ont faites. Autrement dit, le tableau montre bien l’état d’avancement des étudiants, dans leur ensemble, par rapport aux objectifs.

Pour l’étudiant, Moodle montre pour chaque activité, dans le « Rapport de l’utilisateur », le niveau atteint pour les différents objectifs associés à l’activité. Mais la plateforme ne propose pas un tel récapitulatif global et automatique de l’atteinte actuelle des différents objectifs à partir de la fonction « objectifs ». Dans notre scénario, les tests sont paramétrés pour visualiser automatiquement ce récapitulatif.

Toutefois, l’enseignant doit remplir à la main le niveau de réussite de chaque étudiant pour chaque objectif et pour chaque activité associée. Pour simplifier, nous suggérons de créer des éléments d’évaluation dans le tableau de notes (un par objectif) et de faire un calcul avec les résultats de toutes les activités associées à cet objectif.

clip_image039[14] Avec Moodle

Les feedbacks sont préparés et configurés, comme expliqué à l’étape 1. Dans les paramètres généraux de ces tests, plus précisément dans les « options de relecture, il faut décocher l’affichage des réponses (les réponses justes aux questions posées). Ce sont les feedbacks reliés aux réponses données par l’étudiant qui vont aider à l’auto-évaluation.

Dans un test Moodle il y a trois types de feedback :

·           Au niveau de chaque question :

       les feedbacks de la réponse ;

       le feedback général de la question.

·           Au niveau du test :

       les feedbacks globaux du test.

Modifier une question et ajouter les feedbacks de la question (général) et de la réponse

Pour éditer une question :

1.    Dans le menu Réglages du cours, cliquez sur Banque de questions afin de retrouver une Question. A

 clip_image016[19]

ABanque de questions

2.    Cliquez sur l’icône Modifier (main avec crayon) à côté d’une Question pour la modifier. B

clip_image041[10]

B Bouton Modifier près d’une Question

3.    Renseignez les Feedbacks de la Question avec des conseils sur les choses à faire pour compléter l’apprentissage de façon adaptée aux résultats de l’étudiant (pour un autre Type de question, renseignez également le champ Note). C

4.    N’oubliez pas de sauver avec le bouton Enregistrer.

Notes :

Le Feedback général est affiché à tous les étudiants lorsqu’ils ont répondu au Test. Il ne doit pas contenir la réponse à la Question mais rediriger les étudiants vers l’Activité ou la Ressource permettant de la trouver. Le Feedback général permet ainsi de ne pas avoir à répéter ce renvoi dans les feedbacks associés aux propositions de réponse.

Un feedback peut aussi être associé à chaque proposition de réponse. Il est affiché si l’étudiant opte pour cette proposition. Pour la bonne réponse, le feedback confirme la réponse avec une explication au besoin. Pour la mauvaise réponse, le feedback cherche plutôt à montrer pourquoi il n’est pas correct de penser ainsi sans jugement négatif. Au besoin, il peut également rediriger vers une ressource qui lui permettra de confirmer cette opinion.