Mesurer l’efficacité des enseignements par l’étude des rendements

Le champ des recherches concernant les pratiques enseignantes en etude de la langue demeure peu fertile (on citera entre autres : Bulea Bronckart et al. , 2018 ; Riou, 2017) et supporte peu de generalisations, la portee statistique semblant difficilement atteignable, pour des raisons pragmatiques. Par ailleurs, l’importante recherche Lire – Ecrire menee par l’Ife en 2010-2013 (Goigoux, 2015) a ouvert la voie methodologique a des etudes quantitatives dans le domaine de la didactique. C’est dans ce cadre que la recherche REAlang1 s’est donne comme objectif, entre autres, d’evaluer la performance des classes de CE2, CM1 et CM22 concernant des savoirs grammaticaux et orthographiques fondamentaux, autour du verbe et de l’adjectif. L’objectif general de REAlang est de rendre compte des realites d’enseignement-apprentissage de la langue en milieu scolaire ; pour ce faire, il s’agit de mettre en relation des pratiques observables avec une typologie de classe etablie pour rendre compte du degre d’efficacite observee via des passations d’evaluations. L’enjeu methodologique sur lequel nous allons precisement revenir ici est la conception et l’utilisation de differentes variables de rendement (performances d’eleves dans un domaine defini) dans le but d’etablir une typologie de performances des classes, et donc, potentiellement, des enseignants. Le corpus a ete constitue par le biais d’un test ecrit : il s’agit de trois epreuves, administrees a l’identique deux fois, en septembre puis en janvier, a une population constante d’eleves. Les trois epreuves sont concues dans le but de rendre compte des competences et des connaissances des eleves concernant deux notions fondamentales de la grammaire scolaire3 : le verbe et l’adjectif. Les eleves ont ainsi successivement ecrit un texte dicte, souligne les verbes puis les adjectifs dans un texte norme, defini ce qu’est un verbe puis ce qu’est un adjectif par le biais d’une production ecrite4. Les cohortes d’eleves sont de 502 individus repartis dans 28 classes en CE2, 536 individus repartis dans 32 classes en CM1, 585 individus repartis dans 32 classes en CM2. L’ensemble des tests ecrits a ete soumis a un processus d’encodage numerique permettant de constituer une base de donnees exploitable par les logiciels de statistiques. Notre protocole decrit les performances des eleves par le biais de quatorze variables5, sur la pertinence desquelles nous aurons a discuter lors de cette presentation. Partant de la, nous avons utilise trois methodes d’investigation. Dans un premier temps, nous avons partitionne les populations d’eleves en usant d’un outil base sur le critere d'information bayesien. Ce partitionnement permet d’observer des groupes d’eleves en fonction de leur performance selon tout ou partie des variables. Une autre methode consiste a comparer des classes selectionnees pour leurs performances a certaines variables selon la methode des boites de Tukey (Le Guen, 2002). Cette comparaison permet d’etablir plusieurs types de rendement au sein des classes, en s’appuyant sur une logique de partition des classes en quartiles. Enfin, nous avons compare des classes et etudier leurs rendements selon un test inspire de l’ANOVA de Friedman par rangs. Il s’agit de mesurer la moyenne des rangs des eleves d’une classe pour une ou plusieurs variables. Cette methode permet notamment d’etudier le rendement des classes sur les resultats d’une epreuve donnee tandis que les deux methodes precedentes visent a comparer des resultats sur des variables issues d’epreuves differentes. Cette exploration de nos donnees nous permet d’avancer une premiere serie de resultats. Le plus important concerne la solidite du corpus constitue, puisque l’observation de certaines classes montre la fiabilite de l’evaluation construite : les variables permettent en bonne part d’inferer le travail effectue en classe en termes de contenus d’enseignement. Ce point devra etre conforte par une observation directe et systematique des pratiques des enseignants. Nous montrerons egalement comment le jeu de donnees constitue peut permettre d’esquisser la progression des apprentissages au cours du curriculum, et donc de situer les performances des eleves par rapport a des reperes pragmatiques, realistes. Cette reflexion s’avere importante, en reaction a des positions institutionnelles qui mettent en difficulte enseignants et eleves, construisant des objectifs grammaticaux inatteignables pour soutenir des visees orthographiques illusoires.