Élaboration et expérimentation d’une approche d’évaluation des programmes axée sur l’accompagnement et l’utilisation des résultats

Cette recherche porte sur le thème de l’évaluation de programmes dans le réseau collégial et les défis qu’elle soulève en regard de son utilité. Plus précisément, nous abordons les difficultés posées par l’évaluation des programmes au Cégep de Saint-Jérôme et proposons une nouvelle approche permettant d’augmenter l’utilité de ce processus pour le personnel enseignant. Notre problématique s’articule principalement autour du fait que l’évaluation de programmes a été vécue par plusieurs membres du personnel enseignant comme une opération administrative, voire comme une opération de reddition de comptes. En lien avec l’adoption en 2008 d’une nouvelle politique institutionnelle d’évaluation des programmes (PIEP) au Cégep de Saint-Jérôme, nous montrons les limites du processus et des instruments d’évaluation de programmes associés. Nous nous concentrons ensuite sur les stratégies d’évaluation des apprentissages puisqu’elles constituent un aspect essentiel de l’évaluation des programmes et un levier important de changement en vue d’améliorer la qualité de leur mise en oeuvre. Notre question de recherche est la suivante: comment peut-on augmenter l’utilité de l’évaluation des programmes pour les enseignantes et les enseignants du Cégep de Saint-Jérôme? Notre cadre de référence dresse une présentation générale de l’évaluation de programmes, mais repose sur une approche de l’évaluation axée sur l’utilisation. Celle-ci s’avérait tout à fait pertinente compte tenu de notre question de recherche. La recension des écrits nous a permis d’élaborer un cadre d’intervention, à partir des travaux de Michael Quinn Patton, Jean A. King et Hallie Preskill. Notre cadre d’intervention circonscrit une démarche d’évaluation de programmes qui repose sur quatre critères d’utilité: le facteur personnel, l’utilisation attendue, la participation active et le renforcement des capacités en évaluation. De plus, il confère à la conseillère pédagogique, qui est aussi la chercheure, une posture d’accompagnement, définie à travers quatre rôles: consultante, animatrice, négociatrice et formatrice. Cette recherche poursuivait trois objectifs: utiliser concrètement notre cadre d’intervention dans l’évaluation d’un programme au Cégep de Saint-Jérôme, accompagner le personnel enseignant suivant un scénario découlant de notre cadre d’intervention et valider notre cadre d’intervention. Nos objectifs de recherche nécessitaient une méthodologie appropriée. Celle-ci repose sur une approche méthodologique qualitative, une posture épistémologique critique et un essai de type recherche intervention. Neuf participantes et participants ont pris part à la démarche d’évaluation de programmes que nous leur avons proposée. Les données ont été recueillies grâce à la technique de l’observation participante et la triangulation des méthodes de collecte de données a été utilisée afin d’assurer la rigueur de nos travaux. L’analyse de contenu nous a permis d’étudier les données recueillies au moyen d’une grille d’analyse élaborée à partir de catégories émergentes et d’autres issues de notre cadre de référence. La dimension éthique a également été au coeur de la collecte et de l’analyse de nos données. Nous avons d’ailleurs pris plusieurs précautions à cet effet. Les données obtenues nous ont permis de répondre à notre question de recherche en démontrant en quoi la démarche d’évaluation de programmes réalisée par nos participantes et nos participants a contribué à augmenter l’utilité de celle-ci pour le personnel enseignant, telle que définie dans notre cadre de référence. Cette démarche a permis au personnel enseignant d’augmenter sa participation et son intérêt à l’égard de l’évaluation de programmes ainsi que d’utiliser concrètement à court terme les résultats obtenus pour améliorer ses pratiques d’évaluation des apprentissages. Deux niveaux de participation ont été expérimentés. Dans le niveau le plus élevé, une partie des participantes et des participants a été regroupée au sein d’un groupe de travail, lequel a contribué à l’élaboration d’une grille d’analyse portant sur les stratégies d’évaluation des apprentissages. Cette grille a par la suite été expérimentée par l’ensemble des participantes et participants sur un échantillon de onze cours du programme pour lesquels elles et ils ont procédé à l’autoévaluation de leur propre matériel (copies d’examens, copies de grille d’évaluation, etc.). Un rapport d’évaluation a été produit à partir des grilles d’analyse complétées. Les données obtenues nous ont également permis de valider notre cadre d’intervention et de dégager plusieurs éléments facilitant la transférabilité des résultats obtenus. Nous pensons d’ailleurs que celui-ci constitue une avenue pertinente et utile pour le réseau collégial puisqu’il favorise l’utilisation des résultats à court terme par le personnel enseignant, développe la pensée évaluative du personnel enseignant et parce qu’il augmente la qualité et l’efficacité du processus. De plus, le modèle d’accompagnement du personnel enseignant que nous avons élaboré et expérimenté contribue à dépasser une approche basée sur la reddition de comptes ou la gestion administrative des programmes. À tout le moins, il s’agit d’une piste intéressante pour les conseillères et les conseillers pédagogiques qui ont à intervenir comme nous dans ce dossier.