Introduction

La plupart des juridictions et organismes d'évaluation utilisent des documents cadres, tandis que d'autres non. Parmi ceux qui le font, on trouve un large éventail de contenus, souvent présentés sous différents formats.

Un cadre d'évaluation est un document fondamental qui identifie les lignes directrices, les procédures et les outils utilisés pour guider l'élaboration, l'administration, la notation, l'analyse des données et la communication des résultats. Ce document décrit le déroulement de l'évaluation, en mettant l'accent sur les éléments à évaluer et les modalités de leur évaluation. Il fournit un guide structuré pour la conception et la mise en œuvre des évaluations, garantissant leur adéquation aux objectifs d'apprentissage et aux objectifs visés. Cet article vise à décrire le contenu d'un document cadre efficace et à souligner les avantages liés à l'élaboration et à la publication d'un tel guide fondamental.

Contenu du cadre^[1]

Avant de se lancer dans la conception et le développement d'évaluations à grande échelle, il est crucial d'aborder plusieurs questions et de prendre des décisions éclairées. Impliquer les principaux groupes de parties prenantes à ce stade peut s'avérer extrêmement utile, car leurs points de vue et leurs commentaires peuvent aider les concepteurs d'évaluations à élaborer des plans complets. De plus, l'engagement des parties prenantes favorise souvent une plus large acceptation du programme d'évaluation. La publication du document final témoignera de sa transparence, contribuant ainsi à une meilleure compréhension et acceptation de l'initiative. À mesure que les décisions concernant les principes fondamentaux du programme d'évaluation sont prises, il est utile de les consigner dans un document appelé ici « document cadre ». Cette ressource fondamentale est un outil précieux pour les membres de l'équipe impliqués dans la conception, le développement et la mise en œuvre du programme, et constitue également un outil de communication important.

Le document cadre doit inclure des informations sur les objectifs du programme d'évaluation à grande échelle, les principes directeurs clés qui régissent le processus d'évaluation, ainsi que des détails sur la manière dont les informations résultantes seront générées, utilisées et communiquées. (En revanche, les rapports techniques fournissent des comptes rendus détaillés de tous les processus et procédures d’évaluation.) Un cadre complet peut inclure les types d’informations suivants :

Considérations éthiques

Le programme d'évaluation doit respecter des principes clés à toutes les étapes de sa conception et de sa mise en œuvre. Par exemple, pour garantir l'équité et l'inclusion, les concepteurs de tests doivent rendre les évaluations aussi équitables que possible pour les candidats d'horizons divers, notamment ceux de cultures, de genres et de régions géographiques différents, ainsi que ceux ayant des besoins d'apprentissage particuliers. Le document doit inclure des informations sur la manière dont l'équité sera prise en compte. Les énoncés concernant ces principes fondamentaux doivent faire référence à des ressources importantes telles que les Principes pour des pratiques équitables d'évaluation des élèves en éducation au Canada et les Normes américaines pour les tests éducatifs et psychologiques.^[2]

Objectif(s) de l'évaluation

Il est essentiel de définir clairement l'objectif d'un programme d'évaluation à grande échelle avant d'en entreprendre l'élaboration, car celui-ci influencera tous les aspects du programme et influencera sa conception. Par exemple, si l'objectif principal d'un programme est d'assurer la responsabilisation publique des écoles, des conseils scolaires et des administrations provinciales ou étatiques, tandis qu'un autre vise à fournir des informations formatives ou diagnostiques pour améliorer l'apprentissage individuel des élèves, les deux programmes d'évaluation différeront considérablement. Concevoir une évaluation qui réponde efficacement à plusieurs objectifs est difficile, voire impossible.

Cadre de référence pour l'interprétation

Il convient de décider si l'évaluation sera normative ou critériée. Les évaluations normatives comparent les performances des élèves à une norme, qui correspond à la performance moyenne ou typique d'un groupe spécifique d'individus ayant passé le même test. Cette approche sert de référence pour interpréter les résultats des élèves par rapport à ceux de leurs pairs. En revanche, les évaluations critériées comparent les performances des élèves à des critères établis ou à des définitions spécifiques de la réussite. Récemment, on a observé une transition générale des évaluations normatives vers les évaluations critériées, les autorités éducatives ayant souligné l'importance de concevoir des tests conformes aux attentes d'apprentissage spécifiques du programme (normes de contenu ou résultats).

Langue des tests

Un document-cadre doit inclure une déclaration concernant les langues utilisées pour les tests. Dans certaines juridictions, les évaluations sont élaborées dans une seule langue, tandis que d'autres peuvent exiger qu'elles soient administrées dans deux langues ou plus. Par exemple, de nombreux États américains sont tenus d'effectuer des tests en anglais et en espagnol ; au Canada, la plupart des juridictions proposent des évaluations en anglais et en français (les deux langues officielles) ; et en Suisse, les langues disponibles pour les évaluations sont l'anglais, le français, l'allemand, l'italien et l'espagnol. Le processus d'élaboration, d'administration, de notation et de communication des évaluations dans plusieurs langues soulève plusieurs questions importantes. L'une des principales questions est de savoir si un test dans une langue sera une traduction directe d'un test dans une autre langue ou si les tests seront élaborés indépendamment pour chaque langue.

Tests par sondage ou par recensement

L'objectif du programme de test influencera considérablement la décision de procéder à un recensement ou à un échantillon de candidats. Ce choix a des implications importantes pour la conception de l'évaluation. Par exemple, si les candidats sont sélectionnés aléatoirement (échantillonnés), la communication des résultats ne sera probablement possible qu'à des niveaux plus larges, comme au niveau provincial, étatique ou national. Il peut être impossible de produire des rapports individuels par candidat, ou des rapports à l'échelle de l'école ou du district scolaire.

Définition du concept

Lors de l'élaboration d'un programme d'évaluation à grande échelle, une étape préliminaire consiste à identifier le sujet et l'âge ou le niveau scolaire des candidats. Ces décisions sont souvent imposées par les autorités provinciales, étatiques, nationales ou internationales. Une fois ces décisions fondamentales prises, il est crucial de définir les concepts – souvent appelés domaines – qui seront mesurés, ainsi que d'établir des liens avec le programme d'études et les recherches actuelles. Par exemple, il est essentiel de clarifier la signification de termes tels que « littératie », « lecture », « écriture » et « mathématiques ». Le concept de littératie en est un bon exemple, car il peut être défini de diverses manières, notamment en littératie fonctionnelle, en littératie informationnelle, en littératie médiatique, en littératie visuelle, en littératie globale et en littératie technologique. Une définition et une description claires du concept devraient figurer dans un document cadre.

Alignement avec les attentes d'apprentissage

Une fois le concept défini, il faut décider du contenu spécifique à évaluer. En raison des limites inhérentes aux évaluations à grande échelle, toutes les attentes d'apprentissage ne peuvent pas être mesurées efficacement. Par exemple, il est souvent impossible de demander aux élèves d'identifier les points à améliorer en écriture à partir des commentaires des enseignants et de leurs pairs, principalement en raison des contraintes de temps et de la nécessité d'une administration cohérente entre les différentes juridictions. Par conséquent, certaines attentes d'apprentissage difficiles à mesurer dans les évaluations à grande échelle peuvent être plus judicieusement évaluées en classe. Les concepteurs de tests, les enseignants et les candidats doivent avoir accès à des informations précisant les attentes d'apprentissage du programme scolaire qui seront évaluées et celles qui ne le seront pas. De nombreuses juridictions et organismes d'évaluation fournissent des tableaux détaillant ce type d'informations par matière.

Contenu et calendrier

Outre les liens avec le programme scolaire, les enseignants et les candidats doivent comprendre la composition et le calendrier des tests. Le document cadre précisera le nombre d'items ou de tâches de différents types (tels que les questions à réponses choisies et les questions à réponses construites) que chaque candidat devra passer. Cela inclut les items de test pratique, le cas échéant, et précise s'ils contribuent au score du candidat. Le document précisera également le nombre de livrets ou de séances nécessaires. Il est également important d'indiquer si le test est chronométré (c'est-à-dire avec une limite de temps stricte) ou non chronométré (avec possibilité de prolongation dans des limites raisonnables et pratiques). De plus, le document doit préciser le moment quand les tests auront lieu, par exemple au début, à la fin ou pendant l'année scolaire/calendaire.

Élaboration des items

Le document cadre doit clairement décrire l'approche d'élaboration des items et des questions du test. Par exemple, les items seront-ils créés en interne par l'organisme d'évaluation ou par un prestataire de services d'évaluation ? Les enseignants participeront-ils à leur rédaction ? Il est important de souligner que la qualité des items utilisés dans l'évaluation est la base d'un programme d'évaluation réussi.

Tests sur le terrain

Bien que le document cadre n'aborde pas en profondeur les spécificités des tests sur le terrain, il est essentiel d'inclure une déclaration concernant la conduite des tests sur le terrain pour les items d'évaluation. La plupart des programmes d'évaluation à grande échelle intègrent une forme de test sur le terrain, ce qui peut consister à intégrer des items de test sur le terrain aux évaluations ou à administrer des blocs distincts d'items de test sur le terrain, simultanément à l'évaluation principale ou à un moment différent.

Aménagements

Tous les candidats doivent avoir la possibilité de démontrer leurs connaissances et leurs compétences. Par conséquent, les programmes d'évaluation à grande échelle doivent s'adapter de manière appropriée aux personnes se trouvant à différents stades d'acquisition du langage ou ayant des besoins éducatifs particuliers. Le document-cadre doit clairement décrire les aménagements autorisés. (Les aménagements désignent les ajustements apportés à l'environnement ou au format d'évaluation afin de permettre aux candidats ayant des besoins éducatifs particuliers de démontrer leurs apprentissages sans modifier le contenu ou les attentes de l'évaluation. Cela diffère des modifications, qui impliquent de modifier l'évaluation elle-même, par exemple en modifiant le contenu ou en réduisant la difficulté pour répondre aux besoins du candidat.) Certains aménagements, tels que l'utilisation d'écouteurs, un environnement calme, des lieux alternatifs et du temps supplémentaire, peuvent être proposés à tous les candidats. Les personnes nécessitant une attention particulière peuvent accéder à différents formats de présentation, comme le braille, les gros caractères, les services d'interprétation/de langue des signes, les formats audios et les technologies d'assistance. Les formats de réponse peuvent également inclure des options de technologies d'assistance, comme la conversion de la voix en texte, ainsi que la transcription textuelle.

Évaluations alternatives

Certaines juridictions proposent des méthodes d'évaluation alternatives pour évaluer les progrès d'apprentissage des quelques candidats qui ne peuvent pas participer aux tests standard en raison de leurs besoins éducatifs particuliers. Parmi ces formats d'évaluation alternatifs, on peut citer les portfolios, les projets, les évaluations orales et les cours sur mesure. Les informations concernant la disponibilité de ces évaluations alternatives doivent être décrites dans le document-cadre.

Notation/Correction

Un document cadre doit décrire, au moins en termes généraux, la manière dont les différents items du test seront notés. Les items à réponses choisies sont généralement notés à l'aide d'une technologie automatisée, tandis que les réponses construites sont généralement notées manuellement. Cette notation peut être effectuée sur papier ou en ligne grâce à un système de notation (bien que la notation automatisée, utilisant l'intelligence artificielle [IA], pour les réponses construites soit prometteuse). La notation peut être effectuée localement, de manière centralisée ou à distance sur le site de test via des systèmes en ligne. Pour garantir une notation cohérente des réponses construites, il est essentiel d'établir un ensemble de règles de notation. Pour chaque item ou tâche à réponse construite, des grilles de notation (également appelées guides de notation dans certaines juridictions) doivent être élaborées. L'inclusion d'exemples de grilles dans les documents cadres est utile pour favoriser l'appréciation du processus de notation.

Rapports

Le document cadre doit décrire les types de rapports qui résulteront de l'évaluation. Par exemple, y aura-t-il des rapports individuels pour chaque candidat ? Les résultats contribueront-ils à la note globale du candidat et, si oui, quel pourcentage représenteront-ils ? De plus, y aura-t-il des rapports au niveau de l'école ou du district scolaire ? Quelles informations ces rapports contiendront-ils et comment seront-ils diffusés ? Les méthodes de rapportage doivent être conformes aux objectifs de l'évaluation et refléter l'interprétation prévue des scores et des résultats.

Maintenir la cohérence

Il est essentiel de démontrer l'équité et la cohérence des évaluations entre les différentes administrations, tant au niveau du contenu des matières que des compétences cognitives évaluées. Pour inspirer confiance aux candidats, aux enseignants, aux parties prenantes et au public dans les résultats des évaluations, il est important de garantir la cohérence de l'administration des tests d'une année à l'autre (ou d'une administration à l'autre), en particulier si les résultats doivent être comparés dans le temps. Les programmes d'évaluation assurent la cohérence de diverses manières. Selon le programme, les méthodes employées peuvent inclure:

• Utiliser un plan d'évaluation identique ou similaire pour chaque session;

• Maintenir le même format de test pour les différentes sessions;

• Intégrer des items ou des tâches aux évaluations déjà testées sur le terrain afin d'égaliser les performances des candidats au fil du temps;

• Réutiliser des ensembles d’items de test des sessions précédentes;

• Utiliser des méthodes d'égalisation appropriées;

• Assurer la cohérence des procédures d'administration et d'aménagement;

• Mettre en place des procédures de suivi de l'administration des évaluations sur les sites de test;

• Mettre en œuvre une notation cohérente, fiable et valide des réponses des candidats;

• Assurer un traitement des données et une notation statistique cohérents, fiables et valides, avec une documentation appropriée des procédures;

• Réaliser une réplication indépendante des analyses de données.

Formats du cadre

Les documents-cadres efficaces contiennent des informations sur les éléments clés d'une évaluation à grande échelle ; ils peuvent toutefois prendre différentes formes. Par exemple, le ministère de l'Éducation primaire et secondaire propose sur sa page d'accueil un menu de documents relatifs au Système d'évaluation complet du Massachusetts (MCAS).^[3] Le site web fournit des informations sur les sujets suivants :

• Participation des élèves

• Calendrier des tests

• Informations et ressources sur l'administration des tests

• Accessibilité et aménagements

• Conception et élaboration des tests

• Exemples de questions et tests pratiques

• Guides de travail et de notation des élèves

• Résultats des évaluations

• Processus d'appel des résultats

• Évaluation alternative du MCAS

• Rapports techniques

De plus, des ressources spécialement adaptées sont disponibles pour les élèves et leurs parents/tuteurs.

Au Canada, de nombreuses administrations ont élaboré des documents-cadres efficaces et d'autres ressources liées à l'évaluation destinés à des publics spécifiques. Deux organisations notables dans ce contexte sont l'Office de la qualité et de la responsabilité en éducation (OQRE) et le Conseil des ministres de l'Éducation (Canada) (CMEC). L'OQRE fournit des documents-cadres pour chacune de ses quatre évaluations provinciales des élèves. À titre d'exemple, vous trouverez un lien vers l'un des cadres d'évaluation ici.⁴ Outre ces documents-cadres, l'organisme offre des ressources supplémentaires aux enseignants et aux élèves, notamment :

• Exemples de questions publiées

• Glossaires et feuilles de formules

• Vidéos expliquant le déroulement de l'évaluation

• Exemples de tests pratiques

• Webinaires en direct (pour les parents et les tuteurs)

Ressources supplémentaires (comme des infographies sur les recherches de l'OQRE et les points saillants des résultats des évaluations provinciales)

Le cadre global du CMEC pour le Programme pancanadien d'évaluation (PPCE) est accessible ici.^[5]

Conclusion

Un cadre d'évaluation sert de modèle pour la conception et la réalisation des évaluations, en définissant des méthodes structurées, ciblées, valides et fiables pour évaluer les performances des apprenants. Les bonnes pratiques en matière d'évaluation à grande échelle nécessitent un tel document, car il communique des informations essentielles sur le programme d'évaluation aux candidats et à toutes les parties prenantes. De plus, la création d'un cadre efficace favorise la transparence des processus et procédures d'évaluation, ce qui renforce la confiance dans la validité, la fiabilité et l'équité du programme d'évaluation.

À propos de l'auteur

Richard Jones possède une vaste expérience dans les domaines de l'évaluation à grande échelle et de l'évaluation de programmes, fort de plus de 40 ans d'expérience dans ces domaines. Avant de fonder RMJ Assessment, il a occupé des postes de haute direction à l'Office de la qualité et de la responsabilité en éducation (OQRE) de l'Ontario, ainsi qu'aux ministères de l'Éducation de la Saskatchewan et de la Colombie-Britannique. À ce titre, il était responsable des initiatives liées à l'évaluation des élèves, des programmes et du curriculum ; aux indicateurs de qualité de l'éducation ; à la planification de l'amélioration des écoles et des conseils scolaires ; à l'accréditation des écoles ; et aux tests provinciaux, nationaux et internationaux.

Le Dr Jones a débuté sa carrière comme enseignant aux niveaux primaire, secondaire et postsecondaire. Il a ensuite été chercheur et cadre supérieur pour une multinationale offrant des services de consultation au Moyen-Orient.

N'hésitez pas à contacter Richard « Rick » à l'adresse richard.jones@rmjassessment.com (ou sur LinkedIn) pour vous renseigner sur les meilleures pratiques en matière d'évaluation à grande échelle et d'évaluation de programmes.

Références

[1] Les informations de cette section sont tirées ou adaptées de : Jones, R.M. (2014). Large-Scale Assessment Issues and Practices: An Introductory Handbook. La Vergne, TN. Lightning Source (Ingram) Books.

[2] Principes pour des pratiques équitables d'évaluation des élèves en éducation au Canada. (1993). Edmonton (Alberta) : Comité consultatif mixte.

[3] Département de l'Éducation primaire et secondaire du Massachusetts. (29 mai 2025). Système d'évaluation complet du Massachusetts. Consulté le 11 juin 2025 sur : https://doe.mass.edu/mcas/.

[4] Office de la qualité et de la responsabilité en éducation. (2025). Évaluation de la lecture, de l'écriture et des mathématiques, cycle moyen (4e à 6e année), Cadre. Consulté le 10 juin 2025 à l'adresse : https://www.eqao.com/wp-content/uploads/2021/08/junior-division-framework.pdf.

[5] Conseil des ministres de l'Éducation (Canada). (2024). Programme pancanadien d'évaluation : Cadre d'évaluation du PPCE 2023. Consulté le 10 juin 2025 à l'adresse suivante : https://www.cmec.ca/docs/pcap/pcap2023/PCAP-2023_Framework_FINAL_FR.pdf.

---