Le Module compl\u00e9mentaire textes de base – Questionnaire d’\u00e9valuation de M\u00fcnster<\/strong> (en allemand : M\u00fcnsteraner Fragebogen zur Evaluation \u2013 Zusatzmodul Basistexte<\/em>, abr\u00e9g\u00e9 MFE-ZBa<\/strong>) est un instrument psychom\u00e9trique standardis\u00e9 con\u00e7u pour \u00e9valuer la qualit\u00e9 didactique, la pertinence p\u00e9dagogique et l’accessibilit\u00e9 cognitive des lectures obligatoires ou recommand\u00e9es (d\u00e9nomm\u00e9es \u00ab textes de base \u00bb ou Basistexte<\/em>) dans le cadre de l’enseignement sup\u00e9rieur universitaire. D\u00e9velopp\u00e9 au sein de l’Institut de Psychologie de l’Universit\u00e9 de M\u00fcnster (Westf\u00e4lische Wilhelms-Universit\u00e4t M\u00fcnster<\/em>) sous la direction de Meinald Thielsch et ses collaborateurs, ce module constitue une extension modulaire sp\u00e9cifique int\u00e9gr\u00e9e au syst\u00e8me global d’\u00e9valuation des cours universitaires (M\u00fcnsteraner Fragebogen zur Evaluation<\/em>, MFE).<\/p>\n L’instrument est compos\u00e9 de 5 items<\/strong> unidimensionnels mesurant la clart\u00e9 r\u00e9dactionnelle, la pertinence th\u00e9matique, la reprise didactique par l’enseignant, la contribution \u00e0 l’assimilation des connaissances et l’ad\u00e9quation de la charge de lecture. Les r\u00e9ponses sont recueillies sur une \u00e9chelle de type Likert en 7 points allant de 1 (\u00ab pas du tout d’accord \u00bb \/ stimme gar nicht zu<\/em>) \u00e0 7 (\u00ab tout \u00e0 fait d’accord \u00bb \/ stimme vollkommen zu<\/em>), assortie d’une option d’\u00e9chappement \u00ab non \u00e9valuable de mani\u00e8re pertinente \u00bb (nicht sinnvoll beantwortbar<\/em>). Les propri\u00e9t\u00e9s psychom\u00e9triques \u00e9tablies sur un \u00e9chantillon de 242 \u00e9valuations d’\u00e9tudiants d\u00e9montrent une consistance interne satisfaisante (alpha de Cronbach<\/a> = .79), une excellente structure factorielle confirmatoire (χ² = 11.51, df<\/em> = 5, TLI = .93, CFI = .98, RMSEA = .08) et une validit\u00e9 de construit robuste, marqu\u00e9e par des corr\u00e9lations convergentes positives avec l’efficacit\u00e9 de l’enseignant et la r\u00e9ussite per\u00e7ue, ainsi que des corr\u00e9lations divergentes n\u00e9gatives avec le sentiment de surcharge cognitive.<\/p>\n \u00e9valuation des enseignements par les \u00e9tudiants, qualit\u00e9 p\u00e9dagogique, textes de base, supports de cours, enseignement sup\u00e9rieur, docimologie, psychom\u00e9trie, M\u00fcnsteraner Fragebogen zur Evaluation, MFE-ZBa, ing\u00e9nierie p\u00e9dagogique, lecture acad\u00e9mique, charge cognitive.<\/p>\n Le module MFE-ZBa a \u00e9t\u00e9 d\u00e9velopp\u00e9 et valid\u00e9 par l’\u00e9quipe de recherche en psychologie organisationnelle et \u00e9valuation p\u00e9dagogique de l’Universit\u00e9 de M\u00fcnster :<\/p>\n Dans l’espace universitaire contemporain, l’\u00e9valuation des enseignements par les \u00e9tudiants<\/a> (EEE) constitue la pierre angulaire des d\u00e9marches d’assurance qualit\u00e9 institutionnelle et de d\u00e9veloppement professionnel continu des enseignants-chercheurs (Rindermann, 1996<\/a>). Toutefois, les instruments d’\u00e9valuation conventionnels souffrent r\u00e9guli\u00e8rement de deux limites m\u00e9thodologiques majeures : soit ils se cantonnent \u00e0 des questions excessivement globales et g\u00e9n\u00e9riques (inaptes \u00e0 guider des r\u00e9formes didactiques concr\u00e8tes), soit ils imposent des batteries d’items exhaustives mais interminables, g\u00e9n\u00e9rant fatigue d\u00e9cisionnelle, attrition et biais d’inattention chez les \u00e9tudiants (Schmidt & Lo\u00dfnitzer, 2010<\/a> ; Thielsch & Weltzin, 2012).<\/p>\n Le module MFE-ZBa<\/strong> r\u00e9pond sp\u00e9cifiquement \u00e0 cet imp\u00e9ratif d’efficience et d’actionnabilit\u00e9. Son objectif fondamental est de mesurer avec pr\u00e9cision la r\u00e9ception, l’utilit\u00e9 per\u00e7ue et l’int\u00e9gration didactique des lectures de r\u00e9f\u00e9rence<\/strong> impos\u00e9es ou sugg\u00e9r\u00e9es dans un enseignement. Dans les s\u00e9minaires interactifs (Seminare<\/em>) comme dans les cours magistraux approfondis (Vorlesungen<\/em>), la lecture pr\u00e9alable de textes acad\u00e9miques (articles scientifiques, chapitres d’ouvrages, \u00e9tudes de cas) est un pr\u00e9requis central de la p\u00e9dagogie active et de la classe invers\u00e9e. Or, sans retour structur\u00e9, les enseignants ignorent souvent si ces textes sont trop ardus, d\u00e9synchronis\u00e9s par rapport aux s\u00e9ances orales ou d\u00e9laiss\u00e9s lors des d\u00e9bats en classe.<\/p>\n Sur le plan des applications pratiques et de recherche, le MFE-ZBa permet :<\/p>\n Le construit mesur\u00e9 par le MFE-ZBa est la qualit\u00e9 didactique per\u00e7ue des textes de base<\/strong> dans un contexte d’enseignement sup\u00e9rieur. Bien que les analyses factorielles d\u00e9montrent une stricte unidimensionnalit\u00e9 statistique, ce construit op\u00e9rationnalise un ensemble coh\u00e9rent de cinq facettes interd\u00e9pendantes de l’ing\u00e9nierie textuelle p\u00e9dagogique :<\/p>\n Cette facette \u00e9value si le niveau r\u00e9dactionnel, la terminologie sp\u00e9cialis\u00e9e et la densit\u00e9 conceptuelle des lectures propos\u00e9es sont adapt\u00e9s au stade de formation des \u00e9tudiants. Un texte herm\u00e9tique ou d\u00e9nu\u00e9 de pr\u00e9requis explicites bloque l’assimilation autonome et accro\u00eet inutilement la charge cognitive extrins\u00e8que.<\/p>\n Conform\u00e9ment au principe d’alignement constructif d\u00e9velopp\u00e9 par John Biggs, les supports d’apprentissage doivent entretenir un lien direct et intelligible avec les th\u00e9matiques abord\u00e9es lors des s\u00e9ances de cours. L’item 2 \u00e9value cette consonance curriculaire per\u00e7ue par l’\u00e9tudiant.<\/p>\n La simple mise \u00e0 disposition de lectures acad\u00e9miques est insuffisante si l’enseignant n’exerce pas un r\u00f4le actif de m\u00e9diateur. Cette dimension mesure l’intervention didactique de l’enseignant pour expliciter les ambigu\u00eft\u00e9s, corriger les contresens et accompagner les \u00e9tudiants dans la surmont\u00e9e des obstacles \u00e9pist\u00e9mologiques rencontr\u00e9s lors de la lecture individuelle.<\/p>\n Cette composante interroge la valeur ajout\u00e9e des lectures et des consignes d’\u00e9tude associ\u00e9es (questions directrices, t\u00e2ches de r\u00e9flexion) dans la construction active du savoir. Elle \u00e9value dans quelle mesure le travail sur les textes favorise une compr\u00e9hension en profondeur plut\u00f4t qu’une m\u00e9morisation superficielle.<\/p>\n Cette derni\u00e8re facette examine la rentabilit\u00e9 formative de la t\u00e2che de lecture en amont de la s\u00e9ance. L’\u00e9tudiant juge si le temps investi dans l’\u00e9tude pr\u00e9paratoire du document constitue un levier effectif pour participer activement aux \u00e9changes, suivre l’argumentation du cours et rentabiliser le temps pass\u00e9 en classe.<\/p>\n L’architecture conceptuelle du questionnaire MFE-ZBa s’ancre \u00e0 la crois\u00e9e de la th\u00e9orie de la charge cognitive<\/a> (Sweller, 1988 ; Paas et al., 2003), du mod\u00e8le d’\u00e9valuation de la qualit\u00e9 de l’enseignement de Herbert W. Marsh (1984)<\/a> et des paradigmes de l’\u00e9valuation formative universitaire conceptualis\u00e9s par Heiner Rindermann (1996).<\/p>\n Marsh (1984) a d\u00e9montr\u00e9 que la qualit\u00e9 de l’enseignement universitaire ne peut \u00eatre appr\u00e9hend\u00e9e comme un trait unitaire simpliste, mais comme un agr\u00e9gat de dimensions distinctes (clart\u00e9 des explications, dynamisme, organisation, interaction de groupe, ad\u00e9quation des \u00e9valuations). Partant de ces constats, Grabbe (2003) avait initialement \u00e9labor\u00e9 un questionnaire de 29 items couvrant 8 dimensions pour l’Universit\u00e9 de M\u00fcnster. Cependant, les entretiens approfondis avec le corps professoral ont r\u00e9v\u00e9l\u00e9 qu’un format uniforme \u00e9tait inadapt\u00e9 \u00e0 la diversit\u00e9 des pratiques p\u00e9dagogiques (s\u00e9minaires de lecture, travaux pratiques de laboratoire, cours magistraux ex cathedra, cours assist\u00e9s par ordinateur).<\/p>\n En r\u00e9ponse, Moeck et Thielsch (2004) ont d\u00e9velopp\u00e9 une mod\u00e9lisation modulaire : un tronc commun d’items g\u00e9n\u00e9raux (MFE-Sr pour les s\u00e9minaires, MFE-Vr pour les cours magistraux) coupl\u00e9 \u00e0 des modules satellites activables \u00e0 la demande, dont le MFE-ZBa pour les lectures de base. Cette structure \u00e9vite la saturation des questionnaires tout en pr\u00e9servant une validit\u00e9 \u00e9cologique maximale.<\/p>\n Dans la perspective de Sweller (1988), la lecture acad\u00e9mique impose une charge cognitive intrins\u00e8que li\u00e9e \u00e0 la complexit\u00e9 des th\u00e9ories abord\u00e9es. Si les textes sont mal contextualis\u00e9s, d\u00e9pourvus de guidage ou excessifs en volume, la charge cognitive extrins\u00e8que s’accro\u00eet dramatiquement, saturant la m\u00e9moire de travail de l’apprenant. Les travaux de validation du MFE-ZBa confirment cette th\u00e9orie : la qualit\u00e9 per\u00e7ue des textes est fortement et n\u00e9gativement corr\u00e9l\u00e9e au sentiment de d\u00e9passement et de surcharge cognitive (\u00dcberforderung<\/em>) des \u00e9tudiants. Des textes bien choisis et didactis\u00e9s facilitent la m\u00e9tacognition et lib\u00e8rent des ressources pour la charge germane (l’int\u00e9gration effective des sch\u00e9mas de connaissances).<\/p>\n La validit\u00e9 psychom\u00e9trique du MFE-ZBa a \u00e9t\u00e9 \u00e9tablie sur un \u00e9chantillon rigoureux de 242 \u00e9valuations d’\u00e9tudiants recueillies entre le semestre d’hiver 2010\/2011 et le semestre d’\u00e9t\u00e9 2012 \u00e0 l’Universit\u00e9 de M\u00fcnster. Les donn\u00e9es ont \u00e9t\u00e9 trait\u00e9es selon les standards acad\u00e9miques internationaux (American Psychological Association<\/a>) sous le logiciel AMOS.<\/p>\n La validit\u00e9 convergente a \u00e9t\u00e9 explor\u00e9e en corr\u00e9lant le score global moyen au MFE-ZBa avec les \u00e9chelles des modules de base pour les s\u00e9minaires (MFE-Sr) et les cours magistraux (MFE-Vr) :<\/p>\n La validit\u00e9 divergente se manifeste par une corr\u00e9lation substantiellement n\u00e9gative avec l’\u00e9chelle de surcharge \/ d\u00e9passement cognitif<\/strong> (\u00dcberforderung<\/em>) : r<\/em> = -.53 (p<\/em> < .01) pour les s\u00e9minaires et r<\/em> = -.40 (p<\/em> < .01) pour les cours magistraux. Ce r\u00e9sultat indique sans ambigu\u00eft\u00e9 que l’utilisation efficace de textes de base ne noie pas les \u00e9tudiants sous un fardeau acad\u00e9mique ing\u00e9rable, mais clarifie et canalise au contraire leurs efforts intellectuels.<\/p>\n Un enjeu fondamental d’un instrument d’EEE est sa capacit\u00e9 \u00e0 diff\u00e9rencier objectivement les cours entre eux plut\u00f4t que de refl\u00e9ter un biais de complaisance g\u00e9n\u00e9ralis\u00e9. Une analyse de variance (ANOVA<\/a>) \u00e0 un facteur a \u00e9t\u00e9 conduite avec les 16 cours \u00e9valu\u00e9s comme variable ind\u00e9pendante et le score global du module MFE-ZBa comme variable d\u00e9pendante. Les r\u00e9sultats mettent en \u00e9vidence un effet significatif avec une taille d’effet moyenne :<\/p>\n F<\/em>(15, 226) = 2.14, p<\/em> < .01, η² = .12<\/strong><\/p>\n Le module MFE-ZBa d\u00e9montre ainsi une sensibilit\u00e9 docimologique av\u00e9r\u00e9e, capable de discriminer de mani\u00e8re fine la qualit\u00e9 d’impl\u00e9mentation des lectures selon les enseignants et les contextes didactiques.<\/p>\n La consistance interne de l’\u00e9chelle MFE-ZBa a \u00e9t\u00e9 rigoureusement \u00e9valu\u00e9e sur l’\u00e9chantillon complet de r\u00e9f\u00e9rence (N<\/em> = 242) :<\/p>\n Ces valeurs confirment qu’aucun item ne d\u00e9grade la fid\u00e9lit\u00e9 globale et que le retrait de l’item 3 n’alt\u00e8re pas la valeur d’alpha (.79), justifiant la conservation int\u00e9grale des 5 items pour couvrir la totalit\u00e9 du domaine conceptuel.<\/li>\n La structure dimensionnelle du MFE-ZBa a fait l’objet d’un processus de validation en deux \u00e9tapes : une analyse factorielle exploratoire (AFE) initiale lors de la r\u00e9vision de 2010 (bas\u00e9e sur les cohortes des semestres d’hiver 2008\/2009 et 2009\/2010), suivie d’une analyse factorielle confirmatoire<\/a> (AFC) rigoureuse par estimation du maximum de vraisemblance (Maximum Likelihood<\/em>) r\u00e9alis\u00e9e avec le logiciel AMOS sur la cohorte 2010-2012 (N<\/em> = 242).<\/p>\n Le mod\u00e8le testant l’hypoth\u00e8se d’un facteur latent unique sous-tendant les 5 items pr\u00e9sente des indices d’ad\u00e9quation remarquables, pleinement conformes aux standards de Hu et Bentler (1999) :<\/p>\n2. Mots-cl\u00e9s \/ Keywords<\/h2>\n
3. Auteurs \/ Authors<\/h2>\n
\n
4. Objectif \/ Purpose<\/h2>\n
\n
5. Construit psychologique \/ Construct<\/h2>\n
1. L’accessibilit\u00e9 cognitive et la compr\u00e9hensibilit\u00e9 (Item 1)<\/h3>\n
2. La congruence th\u00e9matique et l’alignement p\u00e9dagogique (Item 2)<\/h3>\n
3. L’\u00e9tayage p\u00e9dagogique et la m\u00e9diation par l’enseignant (Item 3)<\/h3>\n
4. L’utilit\u00e9 instrumentale pour l’approfondissement conceptuel (Item 4)<\/h3>\n
5. La fonction pr\u00e9paratoire et la valeur pragmatique pour la s\u00e9ance (Item 5)<\/h3>\n
6. Cadre th\u00e9orique \/ Theoretical Framework<\/h2>\n
L’approche multidimensionnelle et modulaire de Marsh et Grabbe<\/h3>\n
Optimisation cognitive et th\u00e9orie de la charge mentale<\/h3>\n
7. Validit\u00e9 \/ Validity<\/h2>\n
Validit\u00e9 convergente<\/h3>\n
\n
Validit\u00e9 divergente \/ discriminante interne<\/h3>\n
Validit\u00e9 crit\u00e9ri\u00e9e et sensibilit\u00e9 inter-cours (validit\u00e9 discriminative externe)<\/h3>\n
8. Fid\u00e9lit\u00e9 \/ Reliability<\/h2>\n
\n
\n
9. Analyse factorielle \/ Factor Analysis<\/h2>\n
Indices d’ajustement du mod\u00e8le unidimensionnel<\/h3>\n
\n
Saturations factorielles et statistiques descriptives des items<\/h3>\n