Guide pour évaluer le cache des universités

Il y a quelques années, un étudiant chilien intéressé par un master qu'il coordonnait s'appelait Teodoro Luque, professeur à l'Université de Grenade (UGR). Ils parlèrent de son contenu et, à la fin, le jeune homme s'enquit de la position de l'UGR à Shanghai ; Il s’avère qu’il pouvait demander une bourse à son gouvernement à condition que l’université de destination figure parmi les 400 meilleures sur la liste susmentionnée. Des classements tels que le Shanghai ou le Times Higher Education (THE), le QS World University Rankings ou le NTU Ranking sont diffusés surtout dans le monde politique et économique, ainsi que dans les gros titres de la presse, selon Joan Guàrdia, recteur de l'Université de Barcelone. (UB). Parce qu’ils ont l’attrait de la simplicité, de transformer des écosystèmes aussi complexes qu’un établissement d’enseignement supérieur en un nombre ordinal ; dans une position dans une table.

C'est là le grand atout des soi-disant synthétiques, qui choisissent certaines caractéristiques – production scientifique, prix Nobel et médailles Fields parmi la communauté éducative, publication dans des revues comme ou -, les pondèrent et les transforment en une certaine partition (il existe d'autres qui offrent des données sur les caractéristiques séparément, sans les mélanger, normalement issues de la production académique).

Une autre chose est que les futurs étudiants universitaires savent comment fonctionnent ces listes et, encore moins, qu'ils les utilisent dans leur prise de décision. Luque les compare à un médicament dont il faut lire attentivement la notice : comment, qui et pourquoi ils sont fabriqués ; que prennent-ils en compte ; selon quels critères – et qu’il faut le prendre avec prudence. «Ils sont un élément de plus, mais pas le plus important», insiste Guàrdia, tout en demandant de les dédramatiser comme des outils et de ne pas en faire une obsession.

Examiner la position dans les matières synthétiques serait une autre d'une assez longue série de caractéristiques à examiner : concernant les conditions d'entrée, lire les notes limites pour le diplôme qui intéresse l'étudiant ; au cours de la formation (programme d'études, stages, équipements, relations internationales) et sur les résultats (taux d'insertion professionnelle, nombre de bourses prédoctorales et de formation d'enseignant obtenues par l'établissement) ; indicateurs de production scientifique ; projets nationaux et internationaux réalisés, contrats de recherche.

Attention à « l'effet de halo »

« Le pire usage que l’on puisse faire d’une est de la considérer comme la seule source d’information ; Il doit s'agir d'une première orientation à laquelle peuvent s'ajouter d'autres informations, restrictions ou préférences », insiste Joaquín Aldas, chercheur à l'Ivie (Institut valencien de recherches économiques). Entre autres choses, à cause de son parapluie, comme l'appelle Luque : une bonne position mondiale laisse penser que toutes ses spécialités ont le même niveau, même si ce n'est pas vrai. « Il faut toujours l'analyser à partir de la connaissance de sa méthodologie et des besoins de l'utilisateur : que dois-je savoir ? », explique Aldas. Considérent-ils que les caractéristiques ou les attributs sont déterminants pour notre décision que le chercheur propose comme clé ?

Aldas rappelle également que la majorité des listes internationales se concentrent sur la recherche, et « rien ou très peu » sur la performance de l'enseignement. Ils pénalisent également les petits établissements (et leur budget), sans tenir compte des objectifs ni de la raison d'être, ajoute aux contre-indications Joan Guàrdia, très critique à l'égard de ces classifications, même si l'UB est généralement la seule parmi les universités espagnoles qui se classent habituellement parmi les les 200 premiers. A Shanghai, en 2023, il y avait neuf centres nationaux parmi les 500 meilleurs au monde. Son utilité est donc plutôt limitée pour la grande majorité des étudiants nationaux, qui poursuivront leurs études supérieures sur un campus national. « Bien souvent, il ne s’agit pas de choisir la meilleure université, mais la meilleure parmi celles qui répondent à mes besoins ; par exemple, qu'ils soient proches si je ne veux pas voyager, ou qu'ils proposent les études qui m'intéressent », explique Aldas.

L'expert suggère d'utiliser les normes nationales. Il est l'un des codirecteurs de U-Ranking, d'Ivie et de la Fondation BBVA, qui évalue toute l'activité des universités espagnoles, tant d'enseignement que de recherche et de transfert, sur la base d'une batterie de 20 indicateurs dont les informations sont obtenues de sources publiques. . ou accessible au public (ne demande pas de données aux institutions intéressées). Aldas s'engage envers ceux qui utilisent des sources indépendantes provenant des universités elles-mêmes, et en particulier celles qui ne se basent pas principalement sur des enquêtes, « car cela rendrait subjectives de nombreuses évaluations », note-t-il.

« Choisissez une classification qui rend sa méthodologie explicite, accessible et détaillée », demande Aldas. « Soyez prudent avec votre modèle économique ; « si c'est une institution à but lucratif, si elle admet la publicité, si elle conseille les universités… », prévient Teodoro Luque. Les deux conseillent d’opter pour ceux qui ont une longue expérience et qui sont transparents et stables. « Cela n'a aucun sens qu'une même université change de nombreux postes d'une année sur l'autre, ni qu'il y ait de grands hauts et des bas », observe Luque, qui trouve intéressant d'analyser son évolution dans le temps.

Thermomètres internes pour centres

Ses responsabilités de direction à l'UGR, d'abord comme vice-recteur puis à la tête du projet Campus d'excellence internationale, ont amené Teodoro Luque à se renseigner sur l'indice de Shanghai. Vers 2009, l'université de Grenade a voulu figurer dans le top 300 et pour ce faire, elle a commencé à travailler à l'amélioration des indicateurs du classement. Aussi critiquable que cela puisse être, occuper une bonne position « ne déplaît à personne », reconnaît-il. La récompense de réputation est appétissante. L'Université de Barcelone, pour sa part, s'immerge dans les données qui gèrent les classifications comme une sorte de thermomètre interne pour mesurer les progrès et vérifier qu'elle continue d'avancer, selon son recteur, Joan Guàrdia. Joaquín Aldas, chercheur à Ivie, insiste sur le fait que l'objectif doit être d'augmenter la qualité et, à travers elle, d'améliorer les paramètres. Dans cet ordre. « Depuis le classement Shanghai considère le nombre de lauréats du prix Nobel dans son personnel comme un indicateur, il y a des universités au Moyen-Orient qui ont directement embauché des professeurs », souligne-t-il comme exemple d' »agir sur l'indicateur plutôt que sur ce qu'est l'indicateur ». censé mesurer la qualité de l’enquête dans cette affaire.