L'excellence scientifique est le fondement d'évaluations de haute qualité, mais c'est la confiance du public qui transforme les évaluations en instruments de politique, d'équité et d'apprentissage. De manière cyclique, des évaluations bien conçues n'atteignent leur plein impact que si elles contribuent également à renforcer la confiance dont dépend leur légitimité.

Comme l'a déclaré Mme Abbaszade, présidente du Centre d'examen d'État de la République d'Azerbaïdjan, « grâce à la confiance du public, nous pouvons parfois sacrifier l'excellence de nos évaluations au profit de la transparence ». Par exemple, les candidats ont pu emporter chez eux leurs supports d'examen papier, souvent les meilleurs items de l'année, en gage d'objectivité, ce qui a renforcé la confiance du public dans le fonctionnement de l'organisation dès le début du parcours. De même, lors d'un échange avec Chilana, professeure de psychométrie à l'IBPS de Mumbai, il a été souligné que « la véritable compétence pour pérenniser les évaluations réside dans l'équilibre entre excellence scientifique et confiance du public tout au long du parcours de développement », ce qui peut même commencer par le partage des supports d'examen, comme dans le cas de l'Azerbaïdjan.

Cet article s’appuie sur ces dialogues de conformité, positionnant la conception centrée sur la confiance du public comme principe directeur pour l’ensemble du cycle d’évaluation.

Définition de la confiance du public : forces motrices et fragilités

La confiance du public apparaît parfois comme un phare caché du système d'évaluation, guidant la manière dont les évaluations et leurs résultats sont acceptés comme reflets de leur légitimité et de leur impact.

Situer la confiance dans les traditions de conception

Pour replacer cette question dans une perspective de conception plus large, il est utile de comparer la conception centrée sur la confiance du public avec d'autres approches reconnues :

Cette comparaison montre que si la conception centrée sur l'humain et la pensée conceptuelle ont façonné une grande partie de l'innovation moderne, la conception centrée sur la confiance du public adapte ces principes aux réalités de l'évaluation pédagogique. Comprendre ces traditions de conception permet de comprendre le fonctionnement de la confiance du public dans les évaluations : non pas comme un acquis instantané, mais comme une confiance qui se construit et se renforce au fil du temps grâce à la qualité, à la valeur et à la réputation institutionnelle.

De la qualité à la confiance : comment cultiver la confiance

En pratique, la confiance du public peut être comprise comme le niveau de confiance des individus envers un système, qu'il s'agisse d'institutions ou de produits. Dans le domaine de l'évaluation, les organisations commencent généralement par instaurer la confiance grâce à la qualité de leurs produits d'évaluation. Au fil du temps, la fourniture régulière de ces produits et des services associés transforme cette confiance en confiance institutionnelle, qui fonctionne comme une marque. Les examens ou les évaluations ne gagnent pas la confiance du public immédiatement ; elle se développe directement grâce à la qualité démontrée et créatrice de valeur, ou grâce à la solidité de la réputation de l'institution.

Une façon de démontrer la confiance du public est de faire preuve de transparence dans les procédures et les résultats d'évaluation, de la conception des items à la communication des résultats avec les indicateurs d'acquis d'apprentissage, que ce soit au niveau individuel ou institutionnel. Ensuite, la confiance grandit lorsque la qualité des évaluations apporte une valeur ajoutée concrète aux apprenants, aux enseignants et aux décideurs politiques. De plus, la confiance du public est renforcée par l'implication d'un système d'assurance qualité externe, dont les conclusions et les rapports sont rendus publics. De plus, la confiance du public est entretenue par le respect constant des valeurs de l'administration publique ou des principes directeurs de l'organisme d'évaluation, une excellence dans la prestation de services fragile et difficile à maintenir. Enfin, la confiance du public est façonnée par les intellectuels qui influencent l'opinion publique et évaluent les organismes d'évaluation par le biais de recherches menées par des établissements d'enseignement supérieur, en s'appuyant sur des modèles publics, des documents normatifs ou des outils de recherche avancée référençant les résultats de recherche.

La nature fragile de la confiance

La confiance du public dans les systèmes d'évaluation est extrêmement fragile, notamment en période de pointe, avec des tests à enjeux élevés. Une simple erreur de notation, une allégation publique de partialité ou un retard de communication peuvent rapidement miner une confiance qui a mis des années à se construire. Dans un monde d'information instantanée et de satisfaction rapide, de tels cas se propagent rapidement sur les réseaux sociaux et dans le débat public, dépassant souvent les déclarations officielles et rendant le rétablissement de la confiance encore plus exigeant. Cette fragilité de la confiance du public rappelle la nécessité pour les organismes d'évaluation de la considérer non pas comme un résultat ponctuel, mais comme une préoccupation constante, soigneusement entretenue par l'ouverture, la réactivité et une démonstration constante de qualité et de valeur à chaque étape du cycle de travail. En résumé, la confiance du public est à la fois l'atout le plus puissant et le défi le plus délicat de l'évaluation pédagogique, gagnée par la qualité et la valeur, et intégrée dès la conception du cycle d'évaluation.

Construire et maintenir la confiance : une conception axée sur la confiance du public dans le cycle d'évaluation

Instaurer et maintenir la confiance du public exige une attention particulière tout au long du cycle d'évaluation, en tant que principe à intégrer dès le début. Par conséquent, une approche de conception centrée sur la confiance du public garantit que chaque phase (conception, développement et mise en œuvre) favorise les mesures de renforcement de la confiance dans le système d'évaluation.

La conception est le point de départ de l'instauration de la confiance, notamment lorsque les cadres et les plans d'évaluation sont élaborés conjointement avec les principales parties prenantes dès la phase de développement des items. Le partage du cadre et du plan d'évaluation favorise l'ouverture et l'inclusion, favorisant ainsi la qualité technique des évaluations et leur acceptation par les personnes les plus concernées.

Le développement est le lieu où la confiance est consolidée grâce à des tests inclusifs et des contrôles d'équité. En testant des éléments auprès de groupes d'apprenants diversifiés, en examinant les éventuels biais culturels ou linguistiques et en procédant à des contrôles d'équité, les organisations démontrent leur engagement envers l'équité et l'objectivité. La communication des résultats de ces contrôles, même sous forme de synthèse, renforce la confiance dans la crédibilité du système.

La mise en oeuvre est le test de la confiance mise en pratique, avec des principes de clarté, de cohérence et de visibilité mis en œuvre grâce à une gestion sécurisée des supports d'examen, des protocoles d'administration bien conçus et une communication transparente avec les centres d'examen et les candidats. À ce stade, la confiance s'accompagne d'une accessibilité ouverte à tous, permettant à chacun de démontrer son véritable potentiel et d'éviter tout désaccord public ultérieur.

En résumé, l'intégration d'une conception centrée sur la confiance du public à chaque phase du cycle d'évaluation transforme la confiance, passant d'une aspiration abstraite à une pratique continue qui allie excellence scientifique et confiance sociétale.

Concilier excellence et confiance

En pratique, concilier excellence et confiance nécessite de traduire des concepts psychométriques complexes en un langage compréhensible par les enseignants, les apprenants et les décideurs politiques. Par exemple, la fiabilité et la validité doivent être traduites dans la communication en termes d'équité et de pertinence, et l'établissement de normes non pas comme un exercice technique, mais comme un engagement en faveur de l'équité. Lorsque les organismes d'évaluation communiquent non seulement des décisions de moindre importance, comme les mesures prises, mais aussi des décisions de plus haut niveau expliquant pourquoi et comment ces mesures sont prises dans leurs interactions quotidiennes avec le public, cela suscite l'espoir de combler le fossé grandissant entre expertise technique et perception du public. En fin de compte, c'est grâce à une conception centrée sur la confiance du public que l'excellence et la confiance ne sont pas en concurrence, mais agissent comme des forces complémentaires, garantissant ainsi la solidité technique et la légitimité sociale des systèmes d'évaluation.

Conclusion : La confiance comme principe de conception

Dans cet article, nous nous sommes concentrés sur la confiance du public comme principe de conception, véritable cerise sur le gâteau de l’excellence, révélant les avantages souvent cachés de placer la confiance au cœur du processus de conception, de la développer et de la maintenir à chaque étape du cycle d’évaluation, dans un esprit d’ouverture, de dialogue et de respect des personnes concernées. En considérant la confiance comme un principe de conception, plutôt que comme un effet secondaire, les organismes d’évaluation peuvent garantir l’excellence scientifique de leur travail et sa légitimité publique, consolidant ainsi leur rôle d’instruments justes et fiables de politique, d’équité et d’apprentissage.

Dans la perspective d'une conception axée sur la confiance du public, les évaluations doivent non seulement respecter des normes techniques, mais aussi être guidées par la confiance, non pas comme une mesure de prévention des risques a posteriori, mais comme un principe fondamental. Partager les cadres et les résultats de manière transparente et interactive, impliquer les communautés dans la prise de décision via des plateformes accessibles au public et répondre rapidement et de manière globale aux préoccupations sont autant de principes directeurs qui font déjà partie intégrante des pratiques d'évaluation modernes. Ceci nous a rappelé que cet article devait être publié ultérieurement.

À propos de l'auteur

Vali Huseyn est expert en évaluation pédagogique et auditeur qualité, reconnu pour sa promotion de l'excellence et de la mise à l'échelle axée sur les réformes au sein des organismes d'évaluation. Il accompagne des entreprises du secteur des technologies éducatives et de l'évaluation sur la mise à l'échelle axée sur les réformes en promouvant l'excellence des mesures, en s'appuyant sur son expertise terrain, son expérience gouvernementale et son réseau régional.

Il est titulaire d'un master en politique éducative de l'Université de Boston (États-Unis) et d'un diplôme en évaluation pédagogique de l'Université de Durham (Royaume-Uni). Vali a soutenu des réformes nationales en Azerbaïdjan et, dans le cadre de son activité de consultant chez AQA Global Assessment Services, collabore avec le Kazakhstan et la République kirghize pour aligner les systèmes d'évaluation sur les référentiels internationaux tels que le CECR, le PISA et les critères techniques de l'ISU. Il travaille également comme auditeur qualité en partenariat avec le RCEC, et plus récemment avec le CENEVAL au Mexique. Parlant couramment l'azerbaïdjanais, le russe, le turc et l'anglais, il apporte une compréhension approfondie du contexte aux projets transnationaux.

---