Evaluation du projet : où en est le Lisec ?
Entretien avec Najoua Mohib et Viviana Urrego, chercheuses au Laboratoire Interuniversitaire de Sciences de l’Éducation et de la Communication (Lisec UR 2310)
Propos recueillis par Quitterie Albientz
En charge de l’évaluation de la cohérence pédagogique du dispositif IngéPLUS, le Lisec travaille main dans la main avec les équipes de Grenoble INP et Toulouse INP depuis le lancement du projet en 2019.
Ce travail, garant de la qualité des programmes mis en œuvre dans IngéPLUS, fait ainsi l’objet de la thèse de Viviana Urrego, co-encadrée par Najoua Mohib, maître de conférences en sciences de l’éducation et de la formation et responsable de l’équipe de recherche “Technologie et Communication” du Lisec.
Pourriez-vous nous rappeler comment se décline la mission du Lisec dans le cadre du projet IngéPLUS ?
Le Lisec a pour mission d’évaluer la cohérence pédagogique du dispositif IngéPLUS. Pour concilier les enjeux à la fois pragmatiques et scientifiques de notre mission, nous l’avons déclinée en trois volets correspondant à un niveau spécifique :
- Le volet 1, qui se situe au niveau « macro », porte sur la cohérence du fonctionnement du dispositif. Son objectif est d’observer l’articulation globale du dispositif IngéPLUS et d’identifier les éventuels décalages entre le projet initial et la réalité de son déploiement au moment de son démarrage. Il s’agit d’une recherche qualitative à visée compréhensive, c’est à dire centrée sur le sens que les acteurs donnent à leurs actions, qui s’appuie sur un modèle théorique élaboré par la Pr. Brigitte Albero, l’approche ternaire et trilogique. Ce modèle nous a paru intéressant car il permet de prédire, dans une certaine mesure, l’évolution d’un dispositif tout en offrant une aide à son pilotage.
- Le volet 2, qui se situe au niveau « méso », est relatif à la cohérence de l’ingénierie pédagogique mise en œuvre, en particulier dans le programme IngéPLUS en BTS qui est le premier programme à avoir été conçu dans le cadre de ce projet. Ce volet 2 relève plutôt d’une posture d’expertise. Le but ici est d’évaluer l’ingénierie et la conception pédagogique du programme IngéPLUS en BTS dans la perspective de formuler des recommandations pour améliorer la qualité du dispositif.
- Le volet 3, qui se situe au niveau « micro », est lié à la cohérence des résultats du programme IngéPLUS en BTS. Il concerne une recherche fondée sur une méthodologie mixte qui comprend des méthodes quantitatives et qualitatives. Son ambition est d’évaluer l’impact du programme IngéPLUS en BTS sur les compétences transversales à savoir l’autonomie, la confiance en soi, la gestion du temps et la réflexivité. Il nous paraissait en effet important de vérifier si les objectifs en termes d’apprentissage et plus précisément en termes de compétences étaient atteints ou non.
Plus spécifiquement, comment s’est déroulé l’expertise de l’ingénierie pédagogique depuis le lancement d’IngéPLUS en 2019 et quels en sont les résultats ?
C’est un travail qui a été réalisé en deux étapes : une évaluation initiale a d’abord été menée au cours de l’année 2019-2020 et a donné lieu à un premier rapport d’expertise. Puis à la demande de Mireille Jacomino, responsable du programme IngéPLUS en BTS, une évaluation continue a été organisée par la suite pour apprécier les évolutions apportées par les équipes pédagogiques dans une perspective d’amélioration du programme. Cette deuxième évaluation a débouché sur un rapport supplémentaire remis en juin 2022.
Les deux évaluations se sont appuyées sur la même grille d’analyse suivant 7 critères que nous avons définis à partir de travaux menés en pédagogie universitaire.
En termes d’impact, nous sommes heureuses d’observer que notre travail a suscité de nouvelles réflexions de la part des équipes qui sont engagées dans une véritable démarche d’amélioration continue. Les recommandations que nous avons faites dans le cadre du volet 2 ont été prises en considération et ont débouché à chaque fois sur des ajustements du programme IngéPLUS en BTS.
Où en êtes-vous aujourd’hui dans l’avancement de ces différents volets et comment rendez-vous compte de vos recherches aux autres membres du projet IngéPLUS ?
Aujourd’hui, les deux premiers volets sont terminés et l’année 2023 sera consacrée à la finalisation du volet 3. Ce volet s’étale sur une période un peu plus longue que celle des deux autres car il s’agit d’une enquête longitudinale qui couvre la durée du programme IngéPLUS en BTS. Nous avons maintenant terminé la collecte des données et analysé les profils des étudiants des promos 2019 et 2020. Nous avons également réalisé les premières mesures permettant de sélectionner les méthodes d’analyse les plus appropriées pour observer l’évolution des compétences transversales. Il nous reste à présent à vérifier si le programme IngéPLUS en BTS favorise bien la progression des bénéficiaires en termes de compétences.
En ce qui concerne le partage des résultats, nous participons régulièrement aux différents COPROG (BTSPLUS et EVALPLUS) ainsi qu’aux COPIL qui sont organisés tout au long de l’année par les responsables du projet IngéPLUS. Cela permet non seulement de rendre compte des avancées de notre travail mais aussi de discuter et de croiser nos regards avec les participants que nous considérons comme des parties prenantes de la recherche. Notre approche relève d’une démarche collaborative qui s’inscrit en rupture avec la logique prescriptive ou applicationniste. Notre rôle est d’accompagner la conduite d’un changement dont les enjeux dépassent le cadre de cette seule recherche et du projet lui-même. La question de l’inclusion sociale et de la diversité est aujourd’hui l’affaire de toutes et de tous !
C’est aussi pour cette raison que nous sommes très attentives à la valorisation et à la diffusion des résultats auprès des différents publics. Depuis le démarrage du projet IngéPLUS, nous avons réalisé 17 productions qui sont toutes référencées sur HAL. Il est vrai que pour le moment, les productions sont principalement assurées par le Lisec mais nous projetons dans l’année qui vient d’associer les partenaires du projet IngéPLUS à l’une ou l’autre production.