PISA est de retour : le jeu de la souris et des données

Nous savions qu’il y aurait un déclin généralisé, mais pas ce désastre. Nous savions que de nombreux pays en développement paieraient cher plus d’un an de fermeture d’écoles, mais nous ne nous attendions pas à un tel désastre chez nos voisins allemands, français ou portugais. En Espagne, on s’attendait à une baisse beaucoup plus faible que dans d’autres pays en raison de la réouverture réussie des écoles, après le confinement de 2020, menée par le ministère de l’Éducation, des communautés autonomes et des écoles ; et même si cela a été le cas, les personnes nées en 2006 auront besoin de plusieurs années de soutien pour se rétablir, notamment en Catalogne, où les résultats du PISA sont alarmants. Beaucoup pensaient que les pays du nord résisteraient mieux en raison de ce qu’ils sont, et nous n’avons pas vu venir que Castilla y León, Asturias et Cantabria termineraient cette édition en dépassant la Finlande.

Le PISA 2022 nous a apporté toutes ces nuances et bien plus encore, et même si les résultats ont été plus surprenants que d’habitude à cette occasion, un coup dur de la pandémie était attendu. D’autant plus si l’on parle de cette génération dont l’adolescence à 13 ans a été enterrée par la pandémie. Mais ce qui est normal, c’est que lors de la prochaine édition de 2025, il y aura un effet rebond et que l’édition suivante, avec ceux nés en 2009, les résultats seront meilleurs. C’est l’objet du jeu de la souris et les données avec lesquelles PISA nous divertit à chaque édition.

Mais nous devons être honnêtes avec PISA. A chaque nouvelle édition, ce que l’examen nous apprend est réduit. À chaque diagnostic que nous posons, nous ajoutons les nuances contemporaines de chaque génération, mais dans le domaine de l’éducation, les changements sont lents, donc il y a peu de nouvelles : la pandémie a été une exception. Par conséquent, ceux qui se consacrent à l’éducation, en particulier les enseignants, se demandent à juste titre : que pouvons-nous apprendre de l’évaluation pédagogique pour améliorer l’éducation si PISA nous a déjà dit une grande partie de ce qu’il avait à nous dire ? Voici trois raisons de laisser de côté le PISA, qui remplit déjà son rôle, et de s’intéresser plus généralement à l’évaluation pédagogique, qui connaît un grand moment, dans le monde et peu à peu, également en Espagne.

1. Même lorsque PISA nous offre des intuitions intéressantes, il ne permet pas d’établir des relations causales. PISA a produit des dizaines de milliers d’articles de recherche et créé un nouveau genre académique en matière d’éducation comparée. De nos jours, de nombreux médias s’interrogent sur les causes des hausses et des baisses des uns et des autres, et pour être honnête, la réponse est presque toujours que nous en savons peu. Entre autres choses, parce que le PISA est un test par sondage, pas un recensement, et qu’il change de génération à chaque édition, nous ne pouvons donc pas suivre les élèves dans le temps. Pour comprendre les relations causales, il est nécessaire de disposer d’autres types de données, généralement administratives, de recensement, et couplées à des évaluations externes répétées au fil du temps. Cela nous permet de suivre les élèves de manière longitudinale, de comprendre l’impact des politiques et des programmes tels que le redoublement ou la ségrégation, ou de vraiment comprendre pourquoi certaines écoles réussissent mieux que d’autres. Cela permet également de réaliser des programmes pilotes expérimentaux ou simplement d’identifier des relations causales à partir d’expériences naturelles : par exemple comparer des étudiants proches d’un seuil économique pour recevoir une bourse, l’un qui est tombé juste au-dessus et l’autre en dessous. La prochaine génération de recherches pédagogiques avec évaluations a besoin de toutes ces nuances pour être utile. PISA remplit déjà une fonction (très utile), mais ce n’est pas cela.

Après la fête PISA, le débat éducatif en Espagne redeviendra invisible

2. PISA est utile pour les médias, pour la quasi-totalité de l’opposition et pour certains gouvernements, mais pas pour les écoles. Avec PISA, nous savons déjà où se situe chaque pays ou chaque communauté autonome en termes d’apprentissage, et nous avons une idée des forces et des faiblesses des élèves à chaque test. L’opposition est très attentive aux résultats car ils peuvent transformer une mauvaise journée au PISA en une grande campagne contre le gouvernement. Les médias vont passer quelques jours très chargés à essayer de comprendre la logique des données et de la souris. Les gouvernements tremblent parce que personne ne veut paraître mauvais sur la photo. Aussi les chercheurs, qui croiseront toutes ces centaines de milliers de données avec les enquêtes auprès des étudiants, des familles, des directeurs et des enseignants, et nous essaierons de trouver des clés et des relations qui nous permettent d’identifier les goulots d’étranglement. Mais cela ne nous apporte pas grand-chose en termes de solutions pour les écoles. Par conséquent, les évaluations que de nombreux systèmes scolaires ont développées ces dernières années sont plus utiles : tout aussi rigoureuses que PISA en termes de mesure fiable des connaissances des élèves, mais sans les protocoles exigeants de collecte de données, les tests qui durent plusieurs heures ou l’attente. les délais (plus d’un an et demi) sont tellement longs pour connaître les résultats. Aujourd’hui, la technologie permet aux enseignants et aux directeurs de savoir en temps réel et avec une énorme précision, grâce à de courts tests numériques adaptatifs basés sur le programme, où se trouve chaque élève par rapport à sa classe ou à son école et, par exemple, dans quel domaine des mathématiques ( par exemple, le raisonnement mathématique ou la géométrie) peuvent s’améliorer : le MOINE espagnol en est une bonne preuve. Même sans aller aussi loin en termes d’immédiateté, certaines communautés autonomes (les Îles Baléares, les Îles Canaries, le Pays Basque) réalisent depuis des années des tests de recensement dont les résultats parviennent aux élèves, aux familles et aux écoles en trois ou quatre mois. via des rapports individualisés, afin qu’ils sachent comment s’améliorer et y parvenir. Ces outils d’évaluation arrivent dans notre système et c’est ce qui aidera les écoles et les enseignants à véritablement s’améliorer.

3. C’est la dernière année importante du PISA en Espagne, car le « PISA espagnol » a déjà commencé. Même si l’on veut continuer à s’intéresser au PISA, continuer à dépendre de l’OCDE présente des avantages, mais aussi certains inconvénients. Heureusement, et même si ceux qui ont passé des années à débattre de la nouvelle loi sur l’éducation (LOMLOE) ne l’ont pas su ou n’ont pas voulu le savoir, la nouvelle loi comprend périodiquement une évaluation externe à la fin du primaire et de l’ESO, il s’agit d’un propre PISA. . Avoir notre propre système d’évaluation de système présente plusieurs avantages. La première est qu’il permet d’avoir un examen adapté au programme et aux normes fixées par la loi, que le ministère en est venu à appeler le profil de sortie (une sorte de revenu éducatif de base). Deuxièmement, ces tests reconnaîtront beaucoup mieux la diversité et la richesse sociales et linguistiques de notre système. Troisièmement, les enquêtes auprès des étudiants, des directeurs, des enseignants et des familles peuvent inclure des questions pertinentes pour notre système, telles que la journée scolaire, la fourniture de repas et d’activités extrascolaires, l’isolement des enseignants ou une meilleure compréhension de la situation de travail des familles, dont l’impact sur l’Espagne est énorme.

PISA est de retour. Le jeu de la souris et des données est de retour. Mais après la fête PISA, le débat éducatif en Espagne redeviendra invisible. L’important est que, jusqu’à la prochaine édition, nous continuions à avancer dans une meilleure évaluation du système, utile pour les écoles et les enseignants, ce qui nous apportera des améliorations pédagogiques. Si nous le faisons bien, nous devrions le voir dans les prochaines éditions de PISA.

.

_