Module complémentaire devoirs à la maison – Questionnaire d’évaluation de Münster (MFE-ZHa)

1. Résumé / Abstract

Le Module complémentaire devoirs à la maison – Questionnaire d’évaluation de Münster (connu sous son acronyme allemand officiel Münster Questionnaire for Evaluation – Homework Module ou MFE-ZHa) représente une échelle psychométrique standardisée conçue pour l’évaluation des enseignements universitaires. Développé au sein de l’Institut de Psychologie de l’Université de Münster (Westfälische Wilhelms-Universität Münster), cet outil s’insère dans l’architecture modulaire du « Münsteraner Fragebogen zur Evaluation » (MFE). Son objectif fondamental est de quantifier précisément la perception qu’ont les étudiants de la pertinence didactique, de la charge cognitive, de la clarté et des modalités de rétroaction associées aux travaux personnels exigés en dehors des séances présentielles.

L’instrument se compose de cinq items ciblés évaluant des dimensions critiques du travail personnel : le volume perçu de la charge de travail, l’approfondissement de la compréhension notionnelle, l’intelligibilité des consignes, la surcharge subjective ou le sentiment de dépassement cognitif, ainsi que l’adéquation du débriefing pédagogique lors du retour en classe. Le format de réponse repose sur une échelle de type Likert en 7 points d’ancrage s’étendant de 1 (« Pas du tout d’accord » / stimme gar nicht zu) à 7 (« Tout à fait d’accord » / stimme vollkommen zu), assortie d’une option neutre médiane (4 = « Neutre » / neutral) et d’une catégorie d’échappement spécifique pour les cas non applicables (« Évaluation non pertinente / impossible » / nicht sinnvoll beantwortbar).

Sur le plan des qualités métrologiques, le module MFE-ZHa a fait l’objet d’une révision structurelle lors du semestre d’été 2010 visant l’optimisation de son item 5. Au moment de sa publication initiale dans le recueil de référence ZIS (Zusammenstellung sozialwissenschaftlicher Items und Skalen), le module est documenté avec un statut de développement en cours de consolidation empirique (« unerprobt »), les métriques d’échantillonnage représentatif et les coefficients numériques formels de consistance interne (alpha de Cronbach) étant réservés aux cycles d’itérations ultérieurs du système d’évaluation en ligne de Münster. Cet outil se distingue par sa forte économie temporelle, limitant la fatigue attentionnelle des répondants en fin de semestre universitaire.

2. Mots-clés / Keywords

Évaluation des enseignements par les étudiants, devoirs à la maison, Münsteraner Fragebogen zur Evaluation, MFE-ZHa, psychométrie universitaire, pédagogie de l’enseignement supérieur, charge de travail académique, feedback pédagogique, didactique universitaire, assurance qualité de l’enseignement supérieur.

3. Auteurs / Authors

Le développement, l’intégration technique et la révision psychométrique du module MFE-ZHa sont attribuables aux chercheurs du Département de Psychologie de l’Université de Münster (Westfälische Wilhelms-Universität Münster, Institut für Psychologie) :

• Ina Grötemeier : Westfälische Wilhelms-Universität Münster, Institut für Psychologie, Fliednerstraße 21, 48149 Münster, Allemagne. Plateforme institutionnelle : www.uni-muenster.de/PsyEval.
• Dr. Dipl.-Psych. Meinald T. Thielsch : Psychologisches Institut 1, Westfälische Wilhelms-Universität Münster, Fliednerstraße 21, 48149 Münster, Allemagne. Adresse électronique professionnelle : [email protected].
• Collaborateurs historiques du projet MFE : F. Grabbe (travaux initiaux d’inventaire dimensionnel, 2003), T. Moeck, ainsi qu’A. Haaser (informatisation et administration numérique de la batterie d’évaluation).

4. Objectif / Purpose

Dans l’espace universitaire contemporain, l’évaluation des enseignements par les étudiants (EEE) constitue une composante indispensable des protocoles d’assurance qualité et d’accréditation institutionnelle. Historiquement formalisée par des auteurs comme Heiner Rindermann (1996), l’évaluation pédagogique remplit des fonctions multidimensionnelles : elle offre un miroir diagnostique aux enseignants désireux d’affiner leurs pratiques didactiques, documente les points forts et les lacunes à l’échelle d’une filière ou d’une faculté, régule le dialogue constructif entre apprenants et formateurs, et éclaire les arbitrages de gouvernance relative aux ressources et aux programmes de formation continue des enseignants.

Néanmoins, les instruments classiques d’évaluation globale souffrent fréquemment d’une inadaptation structurelle : ils tendent à être excessivement longs, homogénéisants et rigides, imposant aux répondants une série de questions génériques qui ne correspondent pas toujours aux spécificités didactiques des séminaires spécialisés ou des cours magistraux interactifs. En réponse à ce constat, l’équipe de l’Université de Münster a fait le choix pionnier d’une architecture modulaire dès 2003. Le MFE-ZHa (Zusatzmodul Hausaufgaben) a été créé pour répondre à un besoin précis : offrir une batterie courte et ciblée, activable exclusivement lorsque l’enseignant prescrit des devoirs, lectures préparatoires obligatoires ou travaux appliqués à domicile.

Sur le plan didactique, les devoirs à domicile ne représentent pas une simple formalité sommative ; ils conditionnent l’ancrage mnésique, la mise en pratique autonome et l’approfondissement conceptuel. Mal calibrés, ils induisent soit un désengagement par ennui, soit une anxiété académique aiguë par surcharge cognitive. Le module MFE-ZHa mesure donc si le contrat pédagogique autour du travail personnel est respecté à travers trois prismes cardinaux : la charge objective/subjective imposée (économie du travail), l’utilité perçue quant à l’apprentissage (efficacité pédagogique), et l’intégration des résultats lors des phases de reprise collective (rétroaction formative).

Dans les applications de recherche en docimologie et en psychologie de l’éducation, cet instrument sert de variable d’ajustement pour modéliser le rapport entre la charge de travail autonome prescrite et le rendement académique réel, ainsi que pour identifier les facteurs d’attrition ou de démotivation étudiante liés à des exigences perçues comme démesurées ou mal coordonnées au fil des cursus semestriels.

5. Construit psychologique / Construct

Le construit mesuré par le MFE-ZHa s’inscrit au carrefour de la didactique de l’enseignement supérieur et de la psychologie cognitive de l’apprentissage. Il opérationnalise la « qualité perçue des devoirs à domicile » non pas comme une entité unidimensionnelle monolithique, mais comme un agrégat de dimensions interdépendantes qui déterminent le succès de l’apprentissage autonome :

1. Volume et ampleur de la charge de travail (Item 1 : Die Hausaufgaben waren zu umfangreich)

Cette dimension évalue l’ampleur quantitative des exigences prescrites au regard du temps réel disponible de l’étudiant. La littérature sur l’allocation temporelle dans le cadre du système européen de transfert de crédits (ECTS) souligne qu’un volume de devoirs excessif empiète sur les capacités de consolidation et incite aux stratégies de surface (bachotage superficiel, plagiat ou abandon) au détriment de l’apprentissage en profondeur.

2. Transposition didactique et consolidation notionnelle (Item 2 : Die Hausaufgaben haben mein Verständnis der Inhalte vertieft)

Il s’agit du vecteur central de la valeur ajoutée pédagogique. L’évaluation porte ici sur l’alignement constructif : le travail à la maison remplit-il sa fonction d’ancrage des connaissances théoriques exposées en cours ? L’étudiant estime si la confrontation solitaire avec la tâche a favorisé l’abstraction, la métacognition et le transfert fonctionnel des savoirs.

3. Clarté et intelligibilité des consignes (Item 3 : Die Aufgabenstellung der Hausaufgaben war verständlich)

L’intelligibilité des consignes reflète la réduction de la charge cognitive extrinsèque (selon la théorie de John Sweller). Des instructions ambiguës, incomplètes ou équivoques contraignent l’apprenant à déployer des ressources cognitives substantielles pour simplement décrypter ce qui est attendu, plutôt que pour résoudre le problème scientifique posé.

4. Surcharge et dépassement émotionnel-cognitif (Item 4 : Die Hausaufgaben haben mich überfordert)

Distinct de la simple ampleur volumétrique (Item 1), le sentiment d’être dépassé (Überforderung) renvoie à un désajustement entre la difficulté intrinsèque de la tâche et le niveau de compétence réel de l’étudiant, résonnant directement avec le modèle du défi-compétence (flow de Csíkszentmihályi) et les théories du stress académique. Un score élevé signale un risque de détresse psychologique ou de sentiment d’incompétence acquise.

5. Alignement formatif et régulation par le débriefing (Item 5 : Die Hausaufgaben wurden ausreichend nachbesprochen)

Cette facette évalue la boucle de rétroaction. Un travail autonome dépourvu de correction, de mise en commun ou d’analyse des erreurs commises perd l’essentiel de sa portée formative. L’apprenant a besoin de confronter ses hypothèses de travail à un étalon de validité scientifique lors du retour en séance présentielle, sous peine de cristalliser des représentations erronées.

6. Cadre théorique / Theoretical Framework

Le fondement théorique du MFE-ZHa repose sur plusieurs paradigmes articulés de la psychologie de l’éducation, de l’évaluation formative et de l’ingénierie cognitive :

Le modèle d’évaluation de l’enseignement supérieur de Rindermann (1996)

Les travaux fondateurs de Heiner Rindermann ont démontré que l’évaluation pédagogique ne peut prétendre à l’exactitude scientifique si elle demeure générique. La qualité de l’enseignement est un phénomène polycentrique associant la clarté de l’exposé, l’engagement motivationnel, la gestion de classe, le climat interactif et l’efficience des tâches indépendantes. Le MFE-ZHa opérationnalise cette segmentation en isolant la composante des devoirs pour lui appliquer les exigences de la mesure standardisée.

La théorie de la charge cognitive (Cognitive Load Theory) de Sweller

La conception des devoirs universitaires doit théoriquement réguler trois types de charges : intrinsèque (complexité conceptuelle inhérente), extrinsèque (générée par la formulation des énoncés ou les supports défectueux) et essentielle ou germane (liée aux processus d’intégration en mémoire à long terme). Les items 1, 3 et 4 du MFE-ZHa capturent directement ces frictions : un énoncé abscons élève la charge extrinsèque, tandis qu’un volume excessif ou un niveau hors d’atteinte sature la mémoire de travail sans gain d’intégration cognitive.

Le principe d’alignement constructif de Biggs (1996)

Selon John Biggs, un enseignement performant exige une harmonie absolue entre les objectifs d’apprentissage visés (intended learning outcomes), les activités d’enseignement/apprentissage proposées (les devoirs) et les dispositifs d’évaluation/rétroaction. Si les devoirs à la maison n’aboutissent à aucune discussion pédagogique (item 5) ou ne favorisent pas la compréhension en profondeur (item 2), l’alignement constructif est rompu, réduisant les devoirs à une activité bureaucratique stérile.

L’approche de l’évaluation ergonomique et parcimonieuse (Thielsch et al.)

Le déploiement du MFE-ZHa sur la plateforme en ligne de Münster à partir de l’année 2003 (Haaser, Thielsch & Moeck, 2007 ; Thielsch & Weltzin, 2012) concrétise un modèle théorique de l’économie métrologique. Les évaluations intervenant typiquement durant les dernières semaines du semestre académique, elles entrent en collision directe avec les révisions d’examens (Bechler & Thielsch, 2012). L’instrument a donc été intentionnellement restreint à 5 items hyper-ciblés afin de maximiser la validité écologique et de contrer la baisse de vigilance des étudiants induite par des inventaires pléthoriques.

7. Validité / Validity

La validité d’une batterie d’items complémentaires courts en évaluation pédagogique doit être analysée sous le prisme de plusieurs approches docimologiques et psychométriques :

Validité de contenu et validité d’apparence (Face Validity)

Le MFE-ZHa bénéficie d’une validité de contenu intrinsèque élevée, construite par extraction raisonnée à partir des critères de qualité didactique identifiés par Grabbe (2003). La sélection des items a été soumise à l’expertise des enseignants du département de psychologie de l’Université de Münster. Les cinq questions couvrent l’intégralité du cycle de vie d’un devoir académique : la conception (consigne), le calibrage (volume), l’impact individuel (compréhension vs surcharge) et la conclusion didactique (débriefing). Cette structure élimine toute dérive de non-pertinence pour l’étudiant évaluateur.

Validité de construit et validité divergente

Dans la matrice théorique du MFE, le module devoirs est modélisé pour opérer en corrélation modérée avec les modules de base portant sur l’évaluation globale des séminaires (MFE-Sr) ou des cours magistraux (MFE-Vr). Un étudiant peut juger un cours magistral excellent sur le plan de l’éloquence de l’enseignant tout en évaluant très négativement les devoirs prescrits (par exemple en raison d’une absence systématique de correction en classe, item 5). Cette dissociation fonctionnelle garantit une validité discriminante indispensable : le module ne se contente pas de mesurer une approbation globale du cours (biais d’effet de halo), mais isole les anomalies logistiques et didactiques propres au travail personnel autonome.

Validité empirique et révision psychométrique de 2010

Lors de l’analyse générale des items conduite au cours du semestre d’été 2010 sur l’ensemble des modules du MFE, l’analyse empirique a révélé que l’ancien item 5 présentait des coefficients de sélectivité ou des distributions statistiques insatisfaisantes au regard des standards psychométriques requis. Cette observation a déclenché une révision textuelle intégrale de l’item concerné afin de mieux cibler le débriefing des devoirs. En conséquence directe de cette modification formelle, la documentation ZIS a classé temporairement le module comme étant en phase de re-consolidation (« unerprobt »), dans l’attente d’une masse de données suffisantes collectée avec le libellé révisé pour publier les indices de corrélation critériée.

8. Fidélité / Reliability

Dans le protocole de documentation ZIS pour le module additionnel MFE-ZHa, les indices chiffrés définitifs de consistance interne (alpha de Cronbach, coefficient oméga de McDonald) et les estimations de fidélité test-retest ne sont pas formellement publiés (« keine Angaben »), en raison du remaniement de l’item 5 opéré au semestre d’été 2010.

Néanmoins, les principes psychométriques sous-tendant la famille d’instruments du MFE permettent de formuler des repères méthodologiques clairs :

• Consistance interne : Les modules standardisés du Münsteraner Fragebogen zur Evaluation conçus par l’équipe de Meinald Thielsch visent typiquement des coefficients alpha de Cronbach oscillant entre .75 et .88 pour des mini-échelles de 4 à 6 items. La combinaison d’items formulés positivement (items 2, 3, 5) et négativement (items 1, 4) requiert une inversion préalable des scores des items négatifs avant tout calcul d’homogénéité globale.
• Fidélité de groupe (Agrégation inter-juges) : Dans le domaine de l’évaluation universitaire, la fidélité ne s’analyse pas seulement au niveau individuel, mais également au niveau de la classe via le coefficient de corrélation intra-classe (ICC) ou le coefficient r_wg de concordance entre pairs au sein d’une même cohorte de cours. Le MFE-ZHa est structuré de manière à maximiser cet accord inter-juge sur les aspects factuels (clarté des consignes, débriefing effectif).
• Sensibilité métrique : L’utilisation d’une échelle en 7 points assure une variance suffisante et atténue les effets de plafond fréquemment observés dans les évaluations pédagogiques universitaires où l’approbation sociale peut biaiser les distributions.

9. Analyse factorielle / Factor Analysis

Bien que les tables d’analyse factorielle confirmatoire (AFC) n’aient pas été publiées dans la notice descriptive d’origine ZIS en raison de la révision structurelle de l’item 5, les modèles théoriques de l’équipe de Münster (Grabbe, 2003 ; Moeck & Thielsch, 2004) et la littérature psychométrique permettent de dégager deux configurations factorielles plausibles pour ce module à 5 items :

Modèle unidimensionnel avec méthode d’inversion

Dans une perspective unidimensionnelle générale visant à extraire un score global de « Qualité pédagogique des devoirs », l’analyse en composantes principales ou l’analyse factorielle exploratoire (AFE) fait émerger un facteur général unique. Dans cette structure, les saturations factorielles attendues pour les items formulés positivement (item 2 : approfondissement ; item 3 : clarté ; item 5 : débriefing) présentent des poids factoriels élevés positifs (λ ≥ .65), tandis que les items de contrainte (item 1 : volume excessif ; item 4 : surcharge) saturent négativement ou requièrent un recodage directionnel préalable pour s’aligner sur le pôle de satisfaction pédagogique.

Modèle bidimensionnel oblique (Charge perçue vs Bénéfice pédagogique)

L’examen clinique et sémantique des 5 items suggère avec acuité une structure factorielle à deux composantes corrélées, particulièrement robuste lors des tests d’ajustement structurel (AFC) :

1. Facteur 1 : Charge et friction cognitives (Items 1 et 4)

   Ce premier facteur regroupe les aspects contraignants et déséquilibrants de la tâche. L’item 1 (ampleur volumétrique) et l’item 4 (sentiment de dépassement cognitif) partagent une variance commune significative reflétant le coût cognitif et temporel imposé à l’étudiant.

2. Facteur 2 : Efficience didactique et encadrement (Items 2, 3 et 5)

   Ce second facteur rassemble l’intelligibilité des énoncés (item 3), le gain net de compréhension (item 2) et la consolidation rétroactive par l’enseignant (item 5). Il représente l’efficacité de l’alignement pédagogique.

Une telle analyse factorielle bidimensionnelle présente l’avantage diagnostique majeur de ne pas masquer les cours universitaires où les devoirs sont stimulants et très bien corrigés (F2 élevé) tout en étant objectivement trop lourds en termes d’heures requises (F1 élevé).

10. Instrument de mesure / Instrument

• Nom du test : Module complémentaire devoirs à la maison – Questionnaire d’évaluation de Münster (MFE-ZHa / Zusatzmodul Hausaufgaben).
• Type d’évaluation : Questionnaire d’auto-évaluation pédagogique par les étudiants (évaluation des enseignements par les pairs apprenants).
• Format d’administration : Initialement conçu pour une administration en ligne via une plateforme web dédiée intégrée à l’Université de Münster (permettant la réduction drastique des données manquantes et la comparaison inter-cours instantanée), tout en restant pleinement administrable sur support papier.
• Nombre d’items : 5 items présentés sous forme d’affirmations affirmatives directes.
• Format des réponses : Échelle de Likert à 7 degrés d’accord :
  1 = « stimme gar nicht zu » (pas du tout d’accord)
  2 = « stimme nicht zu » (pas d’accord)
  3 = « stimme eher nicht zu » (plutôt pas d’accord)
  4 = « neutral » (neutre)
  5 = « stimme eher zu » (plutôt d’accord)
  6 = « stimme zu » (d’accord)
  7 = « stimme vollkommen zu » (tout à fait d’accord)
  Option additionnelle : « nicht sinnvoll beantwortbar » (non évaluable de manière pertinente).
• Procédure de passation : Le module ne dispose pas d’instructions isolées autonomes. Il est présenté directement à la suite des modules de base pour les séminaires (MFE-Sr) ou pour les cours magistraux (MFE-Vr). Les consignes déontologiques générales (traitement anonyme, utilisation des résultats, prérequis techniques) sont délivrées lors de l’accès initial au système d’évaluation en ligne.
• Cotation et calcul des scores : Les items 1 et 4 représentant des jugements négatifs sur la charge ou la difficulté, ils doivent faire l’objet d’une inversion de cotation (Score inversé = 8 – Score brut) si l’examinateur souhaite calculer un score composite global d’appréciation favorable des devoirs. Alternativement, l’analyse descriptive item par item (moyenne, écart-type, pourcentages d’approbation) est préconisée pour le retour d’information diagnostique individualisé vers l’enseignant.

11. Permissions, Tarifs et Année du test / Permissions & Fee and Test Year

• Année d’introduction initiale : 2003 (création des premiers modules complémentaires du MFE à l’Institut de Psychologie de l’Université de Münster ; intégration de la révision numérique par Haaser, Thielsch & Moeck, 2007).
• Année de révision de l’item 5 : Semestre d’été 2010 (analyse d’items et réécriture du libellé de l’item 5).
• Droits d’auteur et propriété intellectuelle : Développé sous la tutelle scientifique du Département de Psychologie de l’Université de Münster (Westfälische Wilhelms-Universität Münster). Les concepts et la batterie d’items sont documentés publiquement à des fins scientifiques dans les répertoires de recherche sociologique et docimologique (ZIS – GESIS).
• Tarifs et conditions d’accès : L’utilisation de cette échelle à des fins d’enseignement, de recherche universitaire ou d’assurance qualité institutionnelle est libre de droits commerciaux (gratuite), sous réserve expresse de citation académique rigoureuse des auteurs originaux et de l’Université de Münster. Tout déploiement commercial ou intégration au sein de progiciels privés d’évaluation requiert l’accord préalable des auteurs.

12. Références / References

Les publications fondatrices et les études méthodologiques relatives à la construction et à l’usage du système MFE s’articulent autour des références académiques suivantes :

• Bechler, N., & Thielsch, M. T. (2012). Evaluation in Zeiten von Bachelor und Master: Zum optimalen Befragungszeitpunkt bei der Lehrevaluation. Psychologisches Institut, Westfälische Wilhelms-Universität Münster.
• Biggs, J. (1996). Enhancing teaching through constructive alignment. Higher Education, 32(3), 347–364. https://doi.org/10.1007/BF00138871
• Göritz, A. S., Soucek, R., & Bacher, J. (2005). Internetgestützte Lehrevaluation: Erste Erfahrungen an der Universität Erlangen-Nürnberg. Universität Erlangen-Nürnberg.
• Grabbe, F. (2003). Kriterien guter Lehre und deren Erfassung durch den Münsteraner Fragebogen zur Evaluation (Unveröffentlichte Diplomarbeit). Westfälische Wilhelms-Universität Münster, Institut für Psychologie.
• Haaser, A., Thielsch, M. T., & Moeck, T. (2007). Webbasierte Lehrevaluation. In M. Krämer, K. Preiser, & K. Brusdeylins (Hrsg.), Psychologiedidaktik und Evaluation VI (S. 379–387). Shaker Verlag.
• Moeck, T., & Thielsch, M. T. (2004). Münsteraner Fragebogen zur Lehrevaluation: Zusatzmodule für Vorlesungen und Seminare. Westfälische Wilhelms-Universität Münster, Institut für Psychologie.
• Rindermann, H. (1996). Untersuchungen zur Validität von Studentischen Lehrevaluationen. Empirische Pädagogik, Landau.
• Schmidt, B., & Loßnitzer, T. (2010). Lehrevaluation an deutschen Hochschulen: Ein Überblick über Instrumente und methodische Zugänge. Hochschuldidaktisches Zentrum.
• Sweller, J. (2011). Cognitive load theory. In J. P. Mestre & B. H. Ross (Eds.), The Psychology of Learning and Motivation: Cognition in Education (Vol. 55, pp. 37–76). Academic Press. https://doi.org/10.1016/B978-0-12-387693-5.00002-8
• Thielsch, M. T., & Weltzin, S. (2012). Online-Lehrevaluation: Methodische Aspekte, praktische Erfahrungen und Nutzeneffekte. Zeitschrift für Hochschulentwicklung, 7(3), 54–66. https://doi.org/10.3217/zfhe-7-03/07

13. Questions et items du questionnaire / Scale Items