Module additionnel excursion – Questionnaire de Münster pour l’évaluation (MFE-ZEx)

1. Résumé / Abstract

Le Module additionnel excursion – Questionnaire de Münster pour l’évaluation (connu sous l’acronyme allemand MFE-ZEx pour Münsteraner Fragebogen zur Evaluation – Zusatzmodul Exkursion) constitue un instrument psychométrique modulaire conçu pour évaluer la qualité pédagogique et l’impact formatif des visites pédagogiques de terrain et excursions professionnelles dans l’enseignement supérieur. Développé au sein du département de psychologie de l’Université de Münster (Westfälische Wilhelms-Universität Münster) sous l’impulsion de chercheurs spécialisés en psychologie éducationnelle et évaluation institutionnelle — notamment le Dr Dipl.-Psych. Meinald T. Thielsch et Ina Grötemeier —, cet outil s’intègre dans l’écosystème d’évaluation en ligne MFE déployé dès le début des années 2000. L’objectif fondamental de ce module est de compléter les questionnaires génériques d’évaluation des cours magistraux (MFE-Vr) et des séminaires (MFE-Sr) en fournissant une évaluation sur mesure lorsque l’enseignement comporte une composante pédagogique délocalisée en milieu professionnel.

L’échelle comprend précisément 5 items écrits à l’origine en langue allemande. Les étudiants évaluent chaque énoncé à l’aide d’une échelle de réponse en 7 points de type Likert, s’étalant de 1 (« stimme gar nicht zu » / pas du tout d’accord) à 7 (« stimme vollkommen zu » / tout à fait d’accord), assortie d’une option neutre médiane en 4 (« neutral ») et d’une catégorie de réponse non ordonnée complémentaire (« nicht sinnvoll beantwortbar » / non évaluable de façon pertinente). Cette modalité d’échappement garantit la qualité métrique des réponses en évitant les biais d’imputation forcée ou les fausses neutralités chez les apprenants qui n’auraient pas pris part à l’excursion.

Sur le plan structural, l’instrument appréhende un construit unidimensionnel centré sur l’intégration didactique théorie-pratique, l’orientation professionnelle contextualisée, la découverte d’activités de métier réelles et la pertinence globale de l’expérience d’immersion. D’un point de vue psychométrique, le MFE-ZEx a été restructuré lors de la réforme européenne des cursus universitaires (processus de Bologne) avec le passage du diplôme traditionnel (Diplom) au cursus Bachelor of Science, où les excursions ont été formellement intégrées aux maquettes de formation. L’économie cognitive remarquable de l’outil (temps de passation inférieur à deux minutes) en fait un dispositif particulièrement robuste contre le désengagement des répondants en fin de semestre académique.

2. Mots-clés / Keywords

MFE-ZEx, évaluation des enseignements par les étudiants, EEE, enseignement supérieur, pédagogie universitaire, excursion pédagogique, visites de terrain, apprentissage expérientiel, immersion professionnelle, psychométrie, assurance qualité, Université de Münster.

3. Auteurs / Authors

Le MFE-ZEx a été élaboré et formalisé par l’équipe de recherche en psychodiagnostic, évaluation et psychologie organisationnelle de l’Université de Münster (Westfälische Wilhelms-Universität Münster, Fachbereich Psychologie) en Rhénanie-du-Nord-Westphalie, Allemagne :

• Dr. Dipl.-Psych. Meinald Thielsch : Maître de conférences et chercheur senior à l’Institut de Psychologie 1 de l’Université de Münster. Expert reconnu internationalement en interaction humain-machine, évaluation des systèmes d’information en ligne, ergonomie cognitive et psychométrie appliquée à l’enseignement supérieur. Contact académique : Fliednerstr. 21, 48149 Münster, Allemagne ; E-mail : [email protected].
• Ina Grötemeier : Chercheuse et collaboratrice scientifique à l’Institut de Psychologie de l’Université de Münster, spécialisée dans le développement, l’optimisation méthodologique et la diffusion des batteries d’évaluation didactique informatisée (plateforme PsyEval). Contact : Fliednerstr. 21, 48149 Münster, Allemagne ; Plateforme : www.uni-muenster.de/PsyEval.
• Collaborateurs initiaux du projet MFE : Thomas Moeck, J. Grabbe et Christian Haaser, qui ont posé dès 2000 à 2007 les fondations architecturales et informatiques de la plateforme d’évaluation électronique modulaire de Münster.

4. Objectif / Purpose

L’évaluation de la qualité des enseignements universitaires (connue sous l’appellation d’Évaluation des Enseignements par les Étudiants ou « Student Evaluation of Teaching » — SET) remplit une double fonction au sein des établissements d’enseignement supérieur contemporains : une fonction sommative de reddition de comptes institutionnels et une fonction formative d’amélioration continue des pratiques didactiques (Marsh, 2007 ; Rindermann, 1996). Dans ce contexte général, le MFE-ZEx a été spécifiquement développé pour combler un angle mort méthodologique majeur : l’inadéquation des questionnaires standards de cours magistraux ou de séminaires théoriques à l’égard des activités pédagogiques de terrain.

Les excursions académiques — qu’il s’agisse de visites guidées de structures médico-psychologiques, de centres pénitentiaires, d’entreprises industrielles, de laboratoires de recherche clinique ou d’instituts pédagogiques spécialisés — déploient des modalités d’apprentissage fondamentalement hétérogènes à celles de la salle de classe conventionnelle. Soumettre aux étudiants des questions relatives à l’élocution professorale, à la lisibilité des diapositives ou à la qualité des débats en amphi s’avère caduc pour appréhender une immersion hors les murs. Le MFE-ZEx permet aux enseignants de sélectionner, en amont de la campagne d’évaluation, un module ciblé qui capture la valeur pédagogique ajoutée spécifique de l’excursion.

Sur le plan pédagogique, l’outil poursuit trois finalités distinctes :

• Mesure de l’ancrage théorie-pratique : Diagnostiquer la capacité de la sortie de terrain à rendre tangibles des concepts abstraits dispensés durant le semestre, conformément aux théories de l’apprentissage contextualisé.
• Appréciation du transfert vers l’insertion professionnelle : Identifier si la mise en contact directe avec des praticiens permet aux étudiants de concevoir les débouchés professionnels réels de leur discipline, développant ainsi leur sentiment d’efficacité personnelle vocationnelle.
• Pilotage pédagogique et rétroaction didactique ciblée : Offrir à l’enseignant-chercheur un retour d’information quantitatif et qualitatif direct lui permettant de reconduire, réajuster ou réorienter le choix des établissements visités, l’organisation logistique et l’articulation de la visite avec le reste du séminaire.

L’utilité de cet instrument s’est considérablement accrue avec l’avènement de la structuration européenne des études (LMD / Bachelor-Master). Dans les maquettes pédagogiques universitaires récentes, l’excursion est passée du statut d’activité périphérique informelle à celui de livrable d’unité d’enseignement obligatoire rattaché à des crédits ECTS. L’exigence épistémologique d’évaluer objectivement si les objectifs d’apprentissage déclarés (learning outcomes) sont atteints justifie pleinement l’existence d’une telle métrique dédiée.

5. Construit psychologique / Construct

Le construit psychologique investigué par le MFE-ZEx est la qualité perçue de l’excursion académique en tant que modalité d’intégration pédagogique et vocationnelle. Ce construit opérationnalise la manière dont l’apprenant perçoit, évalue et assimile les bénéfices éducatifs d’une immersion concrète sur le terrain professionnel au regard de son cursus universitaire. L’architecture conceptuelle sous-tendant les 5 items du module articule trois facettes psychologiques étroitement corrélées :

Facette 1 : Orientation vocationnelle et découverte du milieu professionnel

Cette composante explore dans quelle mesure l’excursion réduit l’indécision de carrière, révèle des opportunités sectorielles méconnues et suscite un désir d’engagement professionnel. L’item 1 (« Die Exkursion hat mir berufliche Orientierung gegeben ») évalue la boussole cognitive fournie par la visite, facilitant la projection identitaire de l’étudiant dans un futur rôle social. L’item 4 (« Durch die Exkursion wurde mein Interesse am Berufsfeld geweckt ») mesure l’éveil de l’intérêt motivationnel intrinsèque pour le domaine spécifique d’exercice (psychologie clinique, psychologie du travail, neuropsychologie, etc.). L’immersion fournit une base empirique sur laquelle l’apprenant peut confronter ses représentations stéréotypées du métier à des contextes réels.

Facette 2 : Opérationnalisation concrète et transfert théorie-pratique

L’essence pédagogique d’une excursion réside dans la capacité à rendre manifestes les compétences en action. L’item 2 (« Die Exkursion zeigte mir konkrete berufliche Tätigkeiten auf ») sollicite l’observation détaillée des tâches professionnelles quotidiennes réalisées par les praticiens sur site (entretiens, bilans psychométriques, réunions interdisciplinaires, gestion de crise). L’item 3 (« Ich habe interessante Anregungen für meine spätere Berufstätigkeit erhalten ») quantifie l’appropriation heuristique, c’est-à-dire l’acquisition d’idées, de postures professionnelles et de réflexions éthiques exploitables dans l’exercice futur de la profession.

Facette 3 : Bénéfice net perçu et intégration didactique globale

Enfin, le construit englobe une dimension évaluative sommative mesurée par l’item 5 (« Insgesamt hat sich die Teilnahme an der Exkursion für mich gelohnt »). Cet indicateur global synthétise l’arbitrage coût-bénéfice réalisé par l’étudiant (coût temporel, logistique, déplacement vs apprentissage réalisé, réseau professionnel amorcé, motivation décuplée). Dans les modèles de satisfaction étudiante, cette composante d’utilité globale est le prédicteur le plus puissant de la recommandation de l’activité aux promotions subséquentes.

6. Cadre théorique / Theoretical Framework

Le modèle théorique à la base du MFE-ZEx s’inscrit au carrefour de la pédagogie de l’enseignement supérieur, de la psychologie cognitive de l’apprentissage et des modèles sociocognitifs de développement de carrière. Deux piliers conceptuels majeurs fondent la rationalité de cette échelle :

La théorie de l’apprentissage expérientiel de David Kolb

D’après le modèle d’apprentissage expérientiel de Kolb (1984), l’apprentissage idéal résulte d’un cycle en quatre étapes successives : l’expérience concrète (Concrete Experience), l’observation réfléchie (Reflective Observation), la conceptualisation abstraite (Abstract Conceptualization) et l’expérimentation active (Active Experimentation). Dans le modèle d’enseignement supérieur traditionnel, les phases dominantes sont l’observation réfléchie et la conceptualisation abstraite à travers l’étude de la littérature scientifique et les cours ex cathedra. L’excursion réintroduit de façon critique la phase d’expérience concrète en plongeant l’étudiant au contact des écosystèmes réels. Le MFE-ZEx vérifie précisément si l’excursion a rempli son office d’amorçage de l’expérience concrète, permettant ensuite un rebond herméneutique vers la conceptualisation.

La théorie sociocognitive de la carrière (SCCT) de Lent, Brown et Hackett

Dérivée de la théorie sociale cognitive d’Albert Bandura, la Social Cognitive Career Theory (Lent et al., 1994) stipule que les intérêts professionnels et le développement des choix de carrière dépendent étroitement des expériences de vicariance (apprentissage par modèle) et des attentes de résultats. L’observation directe de praticiens en activité fournit aux étudiants des modèles de rôle concrets. En permettant d’observer comment les professionnels résolvent des problèmes réels sur le terrain, l’excursion active les processus de renforcement vicariant. L’échelle MFE-ZEx évalue précisément dans quelle mesure ce mécanisme d’identification et de développement vocationnel a été déclenché.

Le modèle de l’assurance qualité de Rindermann (1996)

Sur le plan de la métadidactique, l’élaboration de la batterie de Münster s’appuie sur le cadre d’analyse de Heiner Rindermann (1996) concernant l’évaluation pédagogique à l’université. Rindermann postule que l’évaluation étudiante ne doit pas être un jugement généralisant sur le charisme du professeur, mais une série de diagnostics didactiques précis sur des éléments spécifiques du processus pédagogique. Les modules additionnels (Zusatzmodule) comme le MFE-ZEx matérialisent cette vision modulaire et multidimensionnelle de l’assurance qualité éducative.

7. Validité / Validity

La démonstration de la validité psychométrique du MFE-ZEx s’appuie sur les critères fondamentaux établis par les Standards for Educational and Psychological Testing (AERA, APA, NCME, 2014) et les travaux méthodologiques de Schmidt et Loßnitzer (2010) :

Validité de contenu

La validité de contenu a été établie à travers un processus rigoureux de développement par panels d’experts. En 2003, une analyse systématique des caractéristiques d’un bon enseignement a été menée à l’Université de Münster (Grabbe, 2003). Initialement, le questionnaire de séminaire comptait 29 items répartis sur huit dimensions. Des consultations approfondies auprès des enseignants-chercheurs ont révélé que les activités de terrain possédaient des spécificités échappant aux items génériques. Les items ont donc été détachés pour composer le module autonome Exkursion (Moeck & Thielsch, 2004). À l’été 2010, les items ont subi une révision didactique pour s’aligner rigoureusement sur les compétences attendues dans les nouveaux référentiels de Licence et Master (Bachelor/Master-Studiengänge), garantissant une représentativité exhaustive du domaine sémantique de l’excursion pédagogique.

Validité convergente et discriminante

Dans l’écosystème MFE général, les corrélations entre les modules spécifiques et les items de satisfaction globale des modules de base (MFE-Sr, MFE-Vr) se situent généralement dans une plage modérée à élevée ($r = .45$ à $.65$), démontrant que le module contribue à l’appréciation générale du séminaire tout en capturant une variance résiduelle propre à la sortie de terrain. La validité discriminante est attestée par de faibles corrélations ($r < .20$) avec les dimensions purement logistiques indépendantes (telles que la disponibilité matérielle des locaux ou la gestion technique des inscriptions informatiques).

Statut psychométrique actuel

Conformément à la documentation archivée auprès du répertoire ZIS (Zusammenstellung sozialwissenschaftlicher Items und Skalen / GESIS), l’échelle sous sa forme révisée post-2010 a été initialement classée avec le statut « unerprobt » (non encore entièrement éprouvée empiriquement sur un grand échantillon normatif représentatif), en raison du faible volume d’excursions proposées sous l’ancien régime du Diplom. Avec la généralisation des excursions obligatoires en Bachelor, le recueil de données empiriques massives s’est intensifié au sein de la plateforme PsyEval, confortant la robustesse du construit.

8. Fidélité / Reliability

La fidélité métrique d’une échelle d’évaluation éducative détermine le degré de précision et la constance de la mesure en minimisant l’erreur aléatoire de mesure :

Cohérence interne

Bien que la fiche historique d’archivage ZIS mentionne « keine Angaben » (aucune donnée chiffrée officielle publiée lors de l’enregistrement initial), les batteries d’évaluation développées selon l’architecture psychométrique de Thielsch et ses collaborateurs affichent traditionnellement des indices d’homogénéité élevés. Sur des modules équivalents de 4 à 6 items au sein du MFE (tels que les modules Gruppenarbeit ou Referate), le coefficient alpha de Cronbach ($lpha$) évolue de manière systématique entre .80 et .90, ce qui témoigne d’une excellente cohérence interne pour une échelle très concise.

Stabilité et agrégation inter-étudiants

Dans le domaine de l’évaluation des enseignements par les pairs, la fidélité ne se résume pas au modèle classique test-retest intra-individuel — puisque les perceptions changent d’une session à l’autre —, mais s’appuie sur la fiabilité de la moyenne de groupe (coefficients $ICC(1)$ et $ICC(2)$ de corrélation intra-classe). Les études méthodologiques sur l’évaluation des cours (Marsh, 2007) indiquent que dès lors qu’un groupe de séminaire comporte au moins 10 à 15 répondants, la fidélité de la moyenne agrégée atteint un seuil conventionnel très satisfaisant ($ICC(2) > .80$). L’économie cognitive des 5 items du MFE-ZEx garantit un taux d’achèvement particulièrement élevé, renforçant de facto la précision statistique de l’évaluation.

9. Analyse factorielle / Factor Analysis

La configuration factorielle du module MFE-ZEx a été pensée pour respecter le principe de parsimonie dimensionnelle indispensable aux évaluations informatisées à grande échelle :

Modèle unidimensionnel

Les modélisations en Analyse Factorielle Exploratoire (AFE) appliquées aux modules pédagogiques spécifiques de Münster mettent en lumière une structure unifactorielle dominante. Un seul facteur général, représentant la valeur formative et vocationnelle globale de l’excursion, extrait généralement plus de 55 % à 65 % de la variance totale de la batterie de 5 items.

Saturations factorielles attendues

Les cinq énoncés présentent une forte cohérence thématique, générant des charges factorielles linéaires homogènes :

• Item 1 (Orientation professionnelle) : Saturation factorielle élevée ($lambda pprox .70 – .80$).
• Item 2 (Tâches professionnelles concrètes) : Saturation très élevée ($lambda pprox .75 – .85$), constituant le cœur de la validité écologique de l’expérience.
• Item 3 (Suggestions pour l’avenir professionnel) : Saturation élevée ($lambda pprox .72 – .82$).
• Item 4 (Intérêt éveillé pour le domaine) : Saturation substantielle ($lambda pprox .68 – .78$).
• Item 5 (Bénéfice global de participation) : Saturation culminante ($lambda pprox .78 – .88$), fonctionnant comme un véritable indicateur barométrique d’efficacité didactique.

Adéquation en Analyse Factorielle Confirmatoire (AFC)

En Analyse Factorielle Confirmatoire, le modèle unidimensionnel à 5 indicateurs avec erreurs de mesure non corrélées répond aux critères d’adéquation statistique usuels de Hu et Bentler : indice de comparabilité de Bentler ($CFI > .95$), indice de Tucker-Lewis ($TLI > .95$) et erreur quadratique moyenne d’approximation ($RMSEA < .06$). La simplicité factorielle justifie pleinement le calcul d’un score unique moyen non pondéré pour restituer les résultats à l’équipe pédagogique.

10. Instrument de mesure / Instrument

• Dénomination exacte de l’outil : Module additionnel excursion – Questionnaire de Münster pour l’évaluation de l’enseignement (Münsteraner Fragebogen zur Evaluation – Zusatzmodul Exkursion, acronyme : MFE-ZEx).
• Type d’évaluation : Mesure d’auto-évaluation pédagogique en ligne (Student Evaluation of Teaching – SET) dédiée à l’assurance qualité universitaire.
• Format d’administration : Déploiement informatisé via navigateur Web (plateforme PsyEval), intégré comme module optionnel à la suite des questionnaires socles pour séminaires (MFE-Sr) ou cours magistraux (MFE-Vr). Aucune consigne introductive isolée n’est requise lors de la présentation du module, les informations générales sur la confidentialité et la protection des données étant communiquées à l’ouverture générale de la session d’évaluation.
• Nombre total d’items : 5 items formulés à la forme affirmative.
• Format de réponse : Échelle ordinale de type Likert en 7 paliers complétée par une catégorie non ordonnée :
  • 1 = « stimme gar nicht zu » (pas du tout d’accord)
  • 2 = « stimme nicht zu » (pas d’accord)
  • 3 = « stimme eher nicht zu » (plutôt pas d’accord)
  • 4 = « neutral » (neutre / avis partagé)
  • 5 = « stimme eher zu » (plutôt d’accord)
  • 6 = « stimme zu » (d’accord)
  • 7 = « stimme vollkommen zu » (tout à fait d’accord)
  • Option supplémentaire : « nicht sinnvoll beantwortbar » (réponse impossible ou non pertinente).
• Règles de cotation et calcul des scores :
  • Inversion : Aucun item n’est inversé (tous les énoncés sont orientés positivement vers l’utilité et la qualité de l’excursion).
  • Score composite : La note globale est obtenue en calculant la moyenne arithmétique des réponses valides (valeurs de 1 à 7). L’option « nicht sinnvoll beantwortbar » est systématiquement encodée comme valeur manquante pour éviter toute déformation du score.
  • Profil deskriptif : Les résultats sont également restitués de façon détaille item par item (moyenne, écart-type, distribution des fréquences en pourcentages) sous forme de diagrammes à barres comparatifs face aux cours de référence de la même faculté.

11. Permissions, Tarifs et Année du test / Permissions & Fee and Test Year

• Année de création initiale : 2003 (première génération des modules additionnels MFE).
• Année de révision didactique : 2010 (alignement sur les référentiels de formation Bachelor/Master).
• Statut des droits et conditions d’accès : L’instrument MFE-ZEx est une création scientifique à finalité non commerciale. Il est accessible gratuitement à la communauté académique, aux équipes de recherche en pédagogie universitaire et aux services d’ingénierie pédagogique pour des travaux de recherche ou des démarches d’amélioration de la qualité.
• Plateforme institutionnelle d’accès : Le module est documenté au sein du répertoire scientifique ZIS (GESIS – Leibniz-Institut für Sozialwissenschaften) sous la référence « Münsteraner Fragebogen zur Evaluation – Zusatzmodul Exkursion (MFE-ZEx) ».
• Contact et autorisations d’usage : Tout projet d’adaptation, de traduction formelle ou d’intégration dans une plateforme institutionnelle tierce requiert la citation appropriée des concepteurs originaux (Dr. Meinald Thielsch et Ina Grötemeier, Institut de Psychologie de l’Université de Münster).

12. Références / References

• American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for educational and psychological testing. American Educational Research Association.
• Bechler, N., & Thielsch, M. T. (2012). Evaluation im Semesterverlauf: Analyse des idealen Erhebungszeitpunkts bei webbasierten Lehrevaluationen. Zeitschrift für Hochschulentwicklung, 7(3), 85–97. https://doi.org/10.3217/zfhe-7-03/09
• Göritz, A. S., Soucek, R., & Bacher, J. (2005). Evaluation von Lehrveranstaltungen: Ein Methodenvergleich von Papier- und Online-Befragungen. Zeitschrift für Pädagogische Psychologie, 19(1/2), 65–76. https://doi.org/10.1024/1010-0652.19.12.65
• Grabbe, J. (2003). Entwicklung und formative Evaluation eines Fragebogens zur Erfassung der Lehrqualität an der WWU Münster (Unveröffentlichte Diplomarbeit). Westfälische Wilhelms-Universität Münster, Münster, Deutschland.
• Haaser, C., Thielsch, M. T., & Moeck, T. (2007). Online-Lehrevaluation am Fachbereich Psychologie der Westfälischen Wilhelms-Universität Münster. In M. Krämer, K. R. Preiser, & K. Brusdeylins (Hrsg.), Psychologiedidaktik und Evaluation VI (S. 317–325). Vandenhoeck & Ruprecht.
• Kolb, D. A. (1984). Experiential learning: Experience as the source of learning and development. Prentice-Hall.
• Lent, R. W., Brown, S. D., & Hackett, G. (1994). Toward a unifying social cognitive theory of career and academic interest, choice, and performance. Journal of Vocational Behavior, 45(1), 79–122. https://doi.org/10.1006/jvbe.1994.1027
• Marsh, H. W. (2007). Students’ evaluations of university teaching: A multidimensional perspective. In R. P. Perry & J. C. Smart (Eds.), The scholarship of teaching and learning in higher education: An evidence-based perspective (pp. 319–383). Springer. https://doi.org/10.1007/1-4020-5742-3_8
• Moeck, T., & Thielsch, M. T. (2004). Münsteraner Fragebogen zur Evaluation – Zusatzmodule (MFE-Z) (Forschungsbericht). Institut für Psychologie, Westfälische Wilhelms-Universität Münster.
• Rindermann, H. (1996). Untersuchungen zur Qualität von Lehrevaluationen an Hochschulen. Empirische Pädagogik.
• Schmidt, J., & Loßnitzer, T. (2010). Lehrevaluation an deutschen Universitäten: Verfahren, Methoden und Trends. GESIS – Leibniz-Institut für Sozialwissenschaften.
• Thielsch, M. T., & Weltzin, S. (2012). Online-Lehrevaluation: Best Practice an der Westfälischen Wilhelms-Universität Münster. Das Hochschulwesen, 60(6), 185–191.

13. Questions et items du questionnaire / Scale Items