|
|||||||||
Afin que les résultats d'une évaluation soient utiles, il est nécessaire de réfléchir assez tôt à la question suivante : quand, à qui et sous quelle forme faut-il communiquer les résultats de l’évaluation ?
Lors de l'évaluation d'un programme, il s'agit ici d'une part des rapports des responsables de projets envers la direction du programme ; d'autre part du rapport des responsables du programme envers des entités supérieures (p. ex. direction de l'établissement d’enseignement supérieur). En outre, il faut savoir s’il s’agit de communiquer les résultats d'une évaluation formative ou d'une évaluation sommative.
Evaluation formative
L’évaluation formative sert à l’assurance qualité. Son objectif principal est d’identifier des points faibles. Elle est le plus souvent effectuée parallèlement au développement et fournit des données qui seront utilisées pour l’amélioration de la conception de l’offre de formation. (traduit de Tergan, 2000)
Pour être informé sur l'état d’avancement des projets et pouvoir, au besoin, offrir des mesures d'assistance, la direction du programme peut demander aux responsables de projets de faire des rapports d’avancement, à intervalles réguliers.
Un rapport d’évaluation intermédiaire de projet peut aborder les thèmes suivants :
1. Objet de l’évaluation (quelle partie du projet / du système a été évaluée ?)
Objet de l’évaluation
L’objet auquel se rapporte l’évaluation.
2. Objectifs de l’évaluation (à quelles questions
l'évaluation devrait-elle répondre ?)
3. Méthodes
et déroulement de l’évaluation.
4. Résultats
(forces, faiblesses, facteurs contraignants, difficultés, …)
5. Conclusions et recommandations pour la suite du développement.
En donnant une structure uniforme aux rapports intermédiaires de tous les projets, on facilite l'analyse de l'ensemble des projets. On peut p. ex. analyser si plusieurs projets sont confrontés à des difficultés de mise en œuvre similaires.
Un rapport intérimaire du programme qui ne résume pas seulement les rapports intérimaires de projet mais qui propose aussi, le cas échéant, des mesures d'accompagnement pour le programme devrait préciser :
1. quelles mesures ont été implémentées jusqu'à présent dans le cadre du programme ;
2. qomment ces mesures ont été évaluées ;
3. quels sont les résultats
de l'évaluation (forces, faiblesses, facteurs d'influence,
difficultés,…) ;
4. quels sont les thèmes "supra-projets" (p. ex. difficultés typiques lors de la mise en œuvre des projets) ;
5. et quelles sont les conclusions et les recommandations pour le développement ultérieur.
Evaluation sommative
« L’évaluation sommative sert à contrôler la qualité, les effets et l’utilisation d’une offre de formation. On s’intéresse à la question de savoir si une offre de formation ou certaines de ses composantes répondent à certaines attentes lors de l’utilisation pratique. » (traduit de : Tergan, 2000)
En général, la direction du programme demande aux responsables de projet d’aborder l’évaluation finale dans leur rapport de projet. Les rapports d'évaluation des projets individuels sont une source importante pour l'évaluation sommative au niveau du programme. Afin que les rapports individuels des projets puissent être réunis dans un rapport général, il convient de définir une structure uniforme pour le rapport d'évaluation des projets. Celui-ci peut se structurer comme suit :
1. Objectifs du projet.
2. Mesures concernant la réalisation des objectifs du projet.
3. Critères et indicateurs de la réalisation des objectifs.
4. Méthodes d'évaluation, instruments utilisés
Méthodes d'évaluation,
« Font partie des méthodes d’évaluation l’ensemble des méthodes de la recherche sociale empirique ainsi que des procédures statistiques spécifiques pour la collecte ou l’évaluation de données. Les méthodes doivent être adaptées aux objectifs et aux => objets de l’évaluation. Lors (=>) d’évaluations formatives, ce sont souvent des méthodes plutôt qualitatives qui dominent. Lors => d’évaluations sommatives, ce sont plutôt les méthodes quantitatives qui dominent, avec de nombreuses formes mixtes. » (traduit de : Glossar wirkungsorientierte Evaluation, Evaluationsmethode)
5. Résultats de l'évaluation
Le rapport sur l'évaluation sommative de l’ensemble du programme peut lui aussi adopter cette structure. Les rapports des projets individuels ne devraient toutefois pas simplement être alignés les uns après les autres ; le rapport devrait être organisé selon une thèmatique pertinente pour le programme global (p. ex. selon les objectifs et les sous-objectifs, les produits ou les technologies, selon les groupes cibles ou les approches pédagogiques).
Ici, vous trouvez une checklist pour les contenus d'un rapport d'évaluation (doc, 32 KB, en allemand) (source : Läubli-Loud, 1997).
Ici, vous trouvez des critères pour l'appréciation critique des rapports d'évaluation (doc, 32 kB, en allemand) (source : Läubli-Loud, 1997).