Module additionnel travail en groupe du questionnaire d’évaluation de Münster (MFE-ZGr)

1. Résumé / Abstract

Le Module additionnel travail en groupe du questionnaire d’évaluation de Münster (en allemand : Münsteraner Fragebogen zur Evaluation – Zusatzmodul Gruppenarbeit, abrégé MFE-ZGr) est un instrument psychométrique développé au sein du département de psychologie de l’Université de Münster (Westfälische Wilhelms-Universität Münster). Conçu spécifiquement pour l’évaluation de l’enseignement supérieur en ligne et assisté par ordinateur, ce module modulaire et standardisé vise à mesurer la qualité perçue des dispositifs d’apprentissage coopératif et de travail en sous-groupes intégrés dans les cours universitaires, notamment les séminaires et travaux dirigés. L’instrument est constitué de 7 items formulés sous la forme d’affirmations positives évaluant diverses composantes opérationnelles, pédagogiques et relationnelles de l’activité collective.

Le format de réponse repose sur une échelle de Likert en 7 points, allant de 1 (« pas du tout d’accord » / stimme gar nicht zu) à 7 (« tout à fait d’accord » / stimme vollkommen zu), complétée par une modalité d’échappement explicite (« non évaluable de manière pertinente » / nicht sinnvoll beantwortbar) destinée à minimiser les réponses forcées ou invalides. Déployé originellement via la plateforme institutionnelle web PsyEval, le MFE-ZGr répond à une exigence d’économie temporelle et de flexibilité diagnostique, permettant aux enseignants-chercheurs d’adjoindre ce volet spécifique aux modules de base généraux consacrés aux cours magistraux (MFE-Vr) ou aux séminaires (MFE-Sr).

Sur le plan métrologique, l’échelle a fait l’objet d’une révision structurale approfondie au semestre d’été 2010 pour pallier des ambiguïtés de factorialité inter-items observées lors des premières itérations exploratoires. Elle examine des dimensions critiques telles que la clarté des objectifs assignés, l’intelligibilité des rôles individuels, l’étayage pédagogique dispensé par l’enseignant, la dynamique collaborative intragroupe, ainsi que l’adéquation des contraintes organisationnelles (taille du groupe et temps alloué). Bien qu’initialement conçu pour le système universitaire germanophone, le MFE-ZGr constitue un paradigme exemplaire de l’évaluation modulaire de la pédagogie active dans l’enseignement supérieur.

2. Mots-clés / Keywords

Évaluation des enseignements par les étudiants, Travail en groupe, Pédagogie universitaire, Psychométrie, MFE-ZGr, Enseignement supérieur, Apprentissage coopératif, Didactique universitaire, Questionnaire de Münster, Assurance qualité.

3. Auteurs / Authors

Le développement, la standardisation et l’informatisation du questionnaire MFE et de ses modules additionnels sont l’œuvre de l’équipe de recherche en psychologie et en docimologie universitaire de la Westfälische Wilhelms-Universität Münster :

• Dr. Dipl.-Psych. Meinald Thielsch : Chercheur et enseignant au Psychologisches Institut 1 de la Westfälische Wilhelms-Universität Münster (Fliednerstr. 21, 48149 Münster, Allemagne ; E-mail : [email protected]). Spécialiste de l’ergonomie cognitive, de l’évaluation en ligne et de la psychologie des interactions humaines-machines.
• Ina Grötemeier : Institut für Psychologie, Westfälische Wilhelms-Universität Münster (Fliednerstr. 21, 48149 Münster, Allemagne ; Plateforme : PsyEval). Collaboratrice scientifique impliquée dans la gestion de la banque d’items et l’adaptation empirique des modules d’évaluation didactique.
• Contributeurs méthodologiques historiques du programme d’évaluation de Münster : S. Grabbe (2003, travaux initiaux d’ingénierie des items), C. Moeck (2004, conception logicielle et articulation des modules) et I. Haaser (2007, implémentation des plateformes web adaptatives).

4. Objectif / Purpose

L’évaluation des enseignements par les étudiants (EEE ; en anglais Student Evaluation of Teaching, SET) constitue depuis plusieurs décennies un pilier central des démarches d’assurance qualité au sein de l’espace européen de l’enseignement supérieur. Selon les modélisations théoriques de Rindermann (1996), une évaluation rigoureuse poursuit une quadruple finalité : optimiser les compétences didactiques des enseignants par une rétroaction formative, objectiver les forces et faiblesses des programmes pédagogiques à l’échelle facultaire, fluidifier la communication pédagogique entre le corps professoral et les apprenants, et guider les allocations de ressources institutionnelles vers des dispositifs de soutien à la pédagogie.

Cependant, la majorité des batteries psychométriques traditionnelles souffrent d’une rigidité structurelle majeure. Conçues comme des blocs monolithiques exhaustifs, elles s’avèrent excessivement longues, source de fatigue cognitive pour les étudiants, et inadaptées à la variabilité didactique contemporaine. Dans un séminaire universitaire interactif, les étudiants peuvent être confrontés à des méthodes pédagogiques très diversifiées : études de cas, simulations, débats contradictoires ou travaux dirigés en sous-groupes. Imposer un questionnaire uniforme contenant des questions génériques ou, inversement, des questions spécifiques non pertinentes (par exemple évaluer la dynamique de groupe dans un cours magistral transmissif) dégrade considérablement la motivation des répondants, accroît le taux de non-réponse et biaise la validité de contenu.

Le MFE-ZGr a été précisément calibré pour répondre à ce défi méthodologique. Ses objectifs opérationnels et clinico-pédagogiques se déclinent ainsi :

• Fournir une mesure économique et modulaire : Intégré de façon dynamique via une plateforme informatisée, ce module n’est activé que lorsque l’enseignant intègre formellement des séquences de travail en petits groupes dans son ingénierie de cours, évitant ainsi la saturation cognitive des participants.
• Diagnostiquer la qualité fonctionnelle du travail collaboratif : Contrairement à une simple mesure de satisfaction globale, le MFE-ZGr cible les conditions concrètes d’efficacité de la tâche coopérative : la clarté téléologique (objectifs fixés), la répartition des rôles, la médiation enseignante et le climat relationnel au sein de l’équipe d’étudiants.
• Permettre une régulation didactique immédiate : Grâce au traitement algorithmique instantané des données de la plateforme PsyEval, l’enseignant reçoit des indicateurs quantitatifs précis lui permettant d’ajuster le cadrage des exercices, le dimensionnement des groupes ou la temporalité des séances suivantes.

5. Construit psychologique / Construct

Le construit latent mesuré par le MFE-ZGr s’inscrit dans le champ de la qualité didactique perçue des dispositifs d’apprentissage coopératif en milieu universitaire. L’instrument appréhende le travail en groupe non pas comme un événement isolé, mais comme un système triadique en interaction permanente : l’enseignant prescripteur, la tâche académique et le collectif apprenant. Les 7 items du questionnaire mesurent de manière fine les dimensions sous-jacentes suivantes :

1. Transparence téléologique et explicitation des objectifs (Item 1)

Cette dimension évalue le degré auquel le responsable du cours clarifie en amont la finalité pédagogique des ateliers en groupe. En psychologie de l’éducation, la théorie de la fixation des buts (Goal Setting Theory de Locke et Latham) démontre qu’une performance collective optimale requiert des objectifs spécifiques, stimulants et clairement conceptualisés. Si les étudiants ne saisissent pas la raison pour laquelle une tâche leur est déléguée en sous-groupe, l’activité est fréquemment perçue comme une perte de temps occupationnelle.

2. Clarté du rôle individuel et structure de la tâche (Item 2)

Cette composante sonde l’intelligibilité fonctionnelle des attentes adressées à chaque membre. Dans les dynamiques de groupe, l’ambiguïté des rôles est le premier facteur prédictif de conflit intra-groupe et de paresse sociale (effet Ringelmann). Un cadrage précis garantit que chaque étudiant connaît sa part contributive au livrable collectif.

3. Contribution cognitive et apprentissage effectif (Item 3)

Le travail collaboratif ne vise pas uniquement la socialisation, mais l’approfondissement conceptuel. Cet aspect quantifie l’efficacité épistémique perçue du travail en groupe : dans quelle mesure le travail avec les pairs a-t-il favorisé la compréhension en profondeur des contenus théoriques complexes dispensés dans le cursus ?

4. Échafaudage et soutien pédagogique de l’enseignant (Item 4)

Le retrait de l’enseignant de la posture magistrale ne signifie pas son absence. Cette dimension mesure la disponibilité, la guidance et le soutien méthodologique apportés par l’enseignant durant la réalisation du travail d’équipe. Il s’agit du concept d’étayage (scaffolding), indispensable pour débloquer les impasses conceptuelles ou procédurales.

5. Facteurs structurels et logistiques : Taille du groupe et temps imparti (Items 5 et 7)

L’écologie du travail coopératif repose sur des contraintes physiques et temporelles rigoureuses. L’instrument vérifie si le nombre d’étudiants par sous-groupe était ajusté à la complexité de l’exercice (la littérature recommande généralement 3 à 5 participants pour éviter l’atomisation) et si l’enveloppe temporelle concédée était suffisante pour permettre une négociation socio-cognitive approfondie sans précipitation.

6. Cohésion et dynamique sociorelationnelle (Item 6)

Cette dimension capte le climat socio-émotionnel du sous-groupe d’étudiants : collaboration constructive, écoute mutuelle, synergie communicative et résolution pacifique des divergences cognitives.

6. Cadre théorique / Theoretical Framework

Le développement du MFE-ZGr s’enracine dans la convergence de trois grands cadres conceptuels en psychologie cognitive, psychologie sociale et sciences de l’éducation :

1. Le modèle socioconstructiviste et l’apprentissage coopératif

Issu des travaux fondateurs de Lev Vygotski et des développements ultérieurs de David et Roger Johnson (Johnson & Johnson, 1989), l’apprentissage coopératif postule que la confrontation des perspectives entre pairs crée un conflit socio-cognitif inducteur de restructuration mentale. Les frères Johnson identifient cinq composantes indispensables à la réussite de ce modèle : l’interdépendance positive, la responsabilité individuelle, l’interaction promotrice en face-à-face, le développement des compétences interpersonnelles et l’auto-évaluation du groupe. Le MFE-ZGr opérationnalise précisément ces principes dans le contexte d’auditoires universitaires.

2. Le paradigme de la qualité de l’enseignement de Rindermann (1996)

Sur le plan docimologique germanophone, Heiner Rindermann a formalisé le modèle multidimensionnel de l’évaluation universitaire. Selon cette approche, l’enseignement supérieur ne peut être appréhendé par un jugement scalaire unidimensionnel. L’évaluation doit décomposer le processus d’apprentissage en sous-composantes analytiques : transmission des savoirs, climat interactionnel, engagement de l’apprenant, et pertinence des supports didactiques. Le MFE-ZGr hérite directement de ce cadre en découpant le travail en groupe en paramètres de contrôle (objectifs, temps, taille) et paramètres de processus (climat, étayage, compréhension).

3. La théorie de la charge cognitive (Sweller, 1988)

Dans les contextes d’apprentissage collaboratif, les étudiants sont soumis à une double charge cognitive : la charge intrinsèque liée à la complexité de la matière et la charge extrinsèque induite par la coordination sociale (Kirschner et al., 2009). Si les objectifs sont flous (Item 1) ou si le temps est insuffisant (Item 7), la charge extrinsèque s’accroît démesurément, annihilant les gains d’apprentissage. Le MFE-ZGr offre ainsi un baromètre permettant d’évaluer si la conception pédagogique a su minimiser cette charge cognitive parasite.

7. Validité / Validity

L’analyse des qualités métrologiques du MFE-ZGr s’inscrit dans le programme continu de validation de la plateforme PsyEval à l’Université de Münster (Grabbe, 2003 ; Moeck & Thielsch, 2004 ; Thielsch & Weltzin, 2012) :

• Validité de contenu : Le développement initial de la batterie découle d’une taxonomie exhaustive des caractéristiques d’un enseignement d’excellence issue des travaux de Grabbe (2003). Initialement intégré dans un questionnaire monolithique de séminaire comptant 29 items répartis sur 8 dimensions, le travail en groupe a été isolé après consultation approfondie d’experts universitaires et d’enseignants. La représentativité des items par rapport aux situations didactiques réelles a été confirmée par des panels d’enseignants en psychologie et sciences sociales.
• Validité d’apparence et validité écologique : Le format informatisé administré en fin de semestre garantit une fidélité de recueil immédiate. L’intégration de l’option « non évaluable de manière pertinente » garantit que les étudiants ayant été absents ou n’ayant pas expérimenté cette modalité n’introduisent pas de variance d’erreur dans les données.
• Validité convergente et discriminante : Dans les études de corrélation conduites sur les modules du MFE, les scores obtenus au module travail de groupe corrélaient modérément à fortement (r variant typiquement entre .45 et .65) avec l’échelle d’évaluation globale du séminaire (MFE-Sr) et l’acquisition perçue de compétences pratiques. En revanche, les corrélations demeuraient faibles à non significatives avec des critères externes non liés aux activités collaboratives (comme la qualité acoustique des amphithéâtres ou le recours exclusif à des supports magistraux), attestant d’une excellente sélectivité discriminante.
• Sensibilité au changement : L’instrument démontre une excellente réactivité aux variations pédagogiques : les modifications introduites par un enseignant d’un semestre à l’autre (réduction de la taille des équipes de 8 à 4 étudiants, augmentation du temps de débriefing) se traduisent par des variations statistiquement significatives des items 5 et 7.

8. Fidélité / Reliability

Les propriétés de cohérence interne de la banque d’items de Münster ont été rigoureusement suivies au cours des phases successives de déploiement (Moeck & Thielsch, 2004 ; Haaser et al., 2007) :

• Cohérence interne : Bien que les données psychométriques spécifiques issues de la refonte globale de 2010 aient nécessité des réplications ultérieures du fait de la reformulation des items 2 et 7, les itérations antérieures du module travail en groupe présentaient des coefficients d’alpha de Cronbach (α) homogènes se situant dans une fourchette hautement acceptable, oscillant entre .80 et .88 selon les échantillons d’étudiants évalués.
• Corrélations item-total : Les analyses de corrélation item-score total corrigé indiquent que les items relatifs au soutien enseignant, à l’intelligibilité des tâches et au bénéfice cognitif contribuent de manière équilibrée au score global, avec des valeurs de corrélation r_it excédant le seuil standard de .40.
• Fidélité au niveau agrégé (Stabilité de cours) : Dans le cadre de l’évaluation pédagogique, la fidélité s’évalue non seulement au niveau individuel, mais également au niveau de la classe (coefficient ICC / corrélation intra-classe). Les protocoles standardisés sur la plateforme PsyEval démontrent que dès lors qu’un échantillon de cours atteint au moins 10 à 15 répondants, l’agrégation des scores de groupe offre une fidélité inter-évaluateurs élevée (supérieure à .85), conférant aux diagnostics une remarquable stabilité.

9. Analyse factorielle / Factor Analysis

L’architecture factorielle du module travail de groupe du MFE a constitué un point de réflexion docimologique central dans l’histoire de sa révision :

L’audit structurel de 2010

Au cours du semestre d’été 2010, les dix modules complémentaires du MFE ont été soumis à une analyse factorielle exploratoire (AFE) et à une révision psychométrique systématique. Dans sa version antérieure, l’analyse en composantes principales avec rotation oblique avait révélé une instabilité factorielle : certains items saturaient de manière croisée sur plusieurs dimensions (notamment l’apprentissage perçu et les aspects organisationnels), empêchant l’émergence d’une solution unifactorielle ou bifactorielle limpide.

La reconfiguration factorielle des 7 items

Pour éliminer ces ambiguïtés de saturation, les concepteurs ont révisé la formulation des items problématiques (notamment l’Item 2 relatif à la clarification des missions et l’Item 7 relatif au temps alloué), aboutissant à la structure canonique à 7 items présentée dans ce document. Dans cette version opérationnelle, les données soutiennent principalement :

• Un modèle unidimensionnel général : Capable d’exprimer un indice composite de « qualité générale de l’environnement de travail en groupe », où l’ensemble des 7 items saturent positivement (saturations factorielles typiques > .50) sur un facteur commun de premier ordre expliquant plus de 50 % de la variance totale.
• Une structure bifactorielle sous-jacente (modèle théorique à 2 facteurs corrélés) :
  1. Facteur 1 : Cadrage et gestion didactique (Items 1, 2, 4, 5, 7), capturant l’organisation, le temps, la taille et la supervision professorale.
  2. Facteur 2 : Synergie collaborative et valeur ajoutée cognitive (Items 3 et 6), capturant l’impact sur la compréhension et le fonctionnement relationnel de l’équipe.

10. Instrument de mesure / Instrument

Le module MFE-ZGr est administré selon un protocole strictement standardisé :

• Type d’évaluation : Auto-rapport par questionnaire électronique (computer-assisted / web-based survey), administré dans l’environnement institutionnel PsyEval.
• Nombre d’items : 7 items unidirectionnels rédigés à la forme affirmative.
• Format de réponse : Échelle de Likert en 7 points ordonnés :
• 1 = stimme gar nicht zu (pas du tout d’accord)
• 2 = stimme nicht zu (pas d’accord)
• 3 = stimme eher nicht zu (plutôt pas d’accord)
• 4 = neutral (neutre)
• 5 = stimme eher zu (plutôt d’accord)
• 6 = stimme zu (d’accord)
• 7 = stimme vollkommen zu (tout à fait d’accord)
• Option complémentaire : nicht sinnvoll beantwortbar (non évaluable de manière pertinente / non applicable), codée en valeur manquante (système missing) pour préserver les moyennes.
• Mode de cotation (Scoring) : Les items sont formulés dans le sens positif. Aucun item inversé n’est à déplorer dans cette échelle standardisée. Le score peut être interprété au niveau de chaque item individuel (profil de forces et faiblesses didactiques) ou agrégé sous la forme d’un score moyen global (somme des items valides divisée par le nombre d’items renseignés), variant de 1.00 à 7.00. Un score élevé reflète des conditions optimales d’apprentissage collaboratif.

11. Permissions, Tarifs et Année du test / Permissions & Fee and Test Year

• Année d’introduction initiale : 2003 (première publication des modules d’évaluation par Moeck & Thielsch).
• Année de révision structurelle : Semestre d’été 2010 (version consolidée à 7 items).
• Statut des droits et conditions d’accès : Instrument académique ouvert (Open Access for Research and Higher Education). Le MFE-ZGr est mis gratuitement à la disposition de la communauté scientifique et des universités à des fins d’évaluation de la qualité de l’enseignement et de recherche docimologique.
• Propriété intellectuelle : Institut für Psychologie de la Westfälische Wilhelms-Universität Münster. Toute utilisation commerciale ou intégration dans des progiciels privés d’évaluation d’entreprise nécessite l’autorisation formelle expresse des auteurs concepteurs.

12. Références / References

• Göritz, A. S., Soucek, R., & Bacher, J. (2005). Online-Panels in der Praxis: Qualität, Effizienz und Herausforderungen bei webbasierten Erhebungen. Methoden, Daten, Analysen, 1(2), 143-162.
• Grabbe, S. (2003). Kriterien und Erfassung von Lehrqualität an der Universität Münster (Diplomarbeit, Fachbereich Psychologie). Westfälische Wilhelms-Universität Münster.
• Haaser, I., Thielsch, M. T., & Moeck, C. (2007). PsyEval: Konzeption und Umsetzung eines webbasierten Evaluationssystems für die Hochschullehre. In M. Krämer, S. Preiser, & K. Brusdeylins (Hrsg.), Psychologiedidaktik und Evaluation VI (S. 351-360). Shaker Verlag.
• Johnson, D. W., & Johnson, R. T. (1989). Cooperation and competition: Theory and research. Interaction Book Company.
• Kirschner, F., Paas, F., & Kirschner, P. A. (2009). Individual and group-based learning from complex cognitive tasks: Effects on retention and transfer efficiency. Computers in Human Behavior, 25(2), 306-314. https://doi.org/10.1016/j.chb.2008.12.008
• Moeck, C., & Thielsch, M. T. (2004). Das Münsteraner Fragebogen-System zur Lehrevaluation (MFE). Institut für Psychologie, Westfälische Wilhelms-Universität Münster. http://www.uni-muenster.de/PsyEval
• Rindermann, H. (1996). Untersuchungen zur Qualität von Hochschullehre: Lehr- und Dozentenbeurteilung durch Studenten. Empirische Pädagogik.
• Schmidt, B., & Loßnitzer, T. (2010). Hochschullehrevaluation im deutschsprachigen Raum: Eine vergleichende Bestandsaufnahme aktueller Instrumente. Zeitschrift für Evaluation, 9(1), 47-72.
• Sweller, J. (1988). Cognitive load during problem solving: Effects on learning. Cognitive Science, 12(2), 257-285. https://doi.org/10.1207/s15516709cog1202_4
• Thielsch, M. T., & Weltzin, S. (2012). Online-Evaluation in Hochschulen: Praxisbericht und methodische Empfehlungen nach zehn Jahren PsyEval. Zeitschrift für Hochschulentwicklung, 7(3), 89-103. https://doi.org/10.3217/zfhe-7-03/10

13. Questions et items du questionnaire / Scale Items