Qu’est ce qu’un standard ? Qui le définit ? Qu’est ce qui est évalué ? Qui les exploite ? Comment sont communiqués les résultats ? A qui ? Quels usages scientifiques mais aussi politiques en sont faits ? Jean-Marie de Ketele a beau jeu de montrer l’intérêt de cet atelier. Alors que le débat sur l’évaluation du système éducatif est à son maximum, son thème tombe à pic pour le public français d’autant que le colloque associe aux intervenants français des experts venus d’autres horizons.
On peut ainsi vivre, avec Matthis Behrens, directeur de l’IRDP, l’intrusion de HarmoS, un programme confédéral de pilotage du système éducatif appuyé sur des évaluations de compétences, dans une Suisse divisée jusque là entre 26 systèmes éducatifs différents. L’évaluation sert à un pilotage administratif qui doit faire face aux différences culturelles, au risque de ranking et de technocratie. En Afrique, Jean-Claude Mantes (Paris V) montre que les évaluations internationales (Pasec, Sacmeq) n’arrivent pas à déboucher sur le terrain où souvent on est dans des situations d’urgence.
Autre cas très intéressant : le Brésil, situé en bas du classement PISA (53ème en maths sur 58). Ses experts remettent en question l’évaluation internationale. A quoi sert-elle dans un pays où les écarts sont prodigieux entre régions ? Où les inégalités sociales sont énormes ? Où se développent des écoles alternatives ?
Et en France ? Quel usage est fait des enquêtes internationales comme PISA pour élaborer les politiques éducatives ? Comment l’opinion, les enseignants et les politiques sen emparent-ils ?
Une enquête dirigée par Nathalie Mons et Xavier Pons s’attache à ces questions dans les différents pays de l’OCDE. Pour N. Mons, si l’objectif de Pisa est bien de faire des recommandations aux politiques, force est de reconnaître que si la médiatisation des résultats va croissant, elle n’est pas forcément fidèle aux résultats. Partout le discours est critique envers les systèmes éducatifs même là où les résultats sont excellents comme la Finlande et le Japon. En France alors que le pays est dans une position moyenne, le discours est souvent catastrophique. Des thématiques sans rapport avec Pisa l’utilisent comme la discipline scolaire en Suède.
Les réformes mises en œuvre concrètement préexistent souvent à l’évauation. Ainsi en France, le ministère va utiliser PIRLS pour faire passer une réforme des programmes du primaire préexistante. En Hongrie on se sert de Pisa pour réduire l’autonomie des établissements, en Norvège pour l’augmenter…
Finalement les politiques restent bien plus indépendants des évaluations internationales que la médiatisation pourrait le laisser croire. Ils instrumentalisent les enquêtes plutôt qu’ils n’en mettent en oeuvre les conclusions.
Comment expliquer cet usage décevant des évaluations ? Pour Thierry Rocher (Depp) cela tient de la complexité des méthodes utilisées, d’une certaine méfiance du système éducatif dans son ensemble, d’un faible intérêt pour la culture de l’évaluation en France en général. Même l’analyse des biais nationaux, pourtant très significative, n’a pas l’écho mérité.
Et les profs dans tout cela ? Quel impact ces évaluations ont-elles en classe ? Il semble que les gestionnaires se méfie des retombées potentielles. Pour Matthis Baehrens, il y a une contradiction entre les stratégies de management et les évaluations. Le choix de standards de base est néfaste car il pourrait fixer comme horizon aux enseignants un niveau minimal. D’autre part l’usage politique qui a été fait des évaluations ,par exemple à Genève, a pu traumatiser les enseignants.
Finalement l’évaluation c’est toujours du pouvoir. Entre pays développés et PVD. Entre scientifiques et politiques. Probablement entre scientifiques pour le contrôle des évaluations. Entre gestionnaires des systèmes et enseignants. Raison de plus pour que les acteurs de l’Ecole s’empare de ce thème et assument leur place dans les usages qui peuvent en être fait.
Sur le Café dossier Evaluation
http://www.cafepedagogique.net/lemensuel/lesysteme/Pages/100_Evaluation.aspx
Le dossier Pisa Pirls
http://www.cafepedagogique.net/lesdossiers/Pages/2007/Pisa_Pirls_2006.aspx