Approche méthodologique en mesure des

Notre philosophie de la mesure des apprentissages

Plutôt que de promettre une sophistication technique abstraite, nous cherchons à rendre visibles les hypothèses de mesure qui sous tendent vos dispositifs, à documenter leur solidité et à clarifier ce que l’on peut raisonnablement conclure des résultats produits.

Nous considérons la mesure des apprentissages comme un système complet, pas comme une collection de tests indépendants. Notre approche s’appuie sur des travaux reconnus en psychométrie et en sciences de l’évaluation, mais elle reste orientée vers la prise de décision dans des contextes réels, avec leurs contraintes de temps, de ressources et de communication.

Les descriptions méthodologiques présentées ici restent générales. Leur mise en œuvre concrète nécessite une adaptation à votre contexte et une analyse attentive de vos contraintes institutionnelles.

Les grandes étapes de notre démarche méthodologique

Nous décrivons notre démarche comme un cycle complet de mesure, qui va de la définition du construit à la surveillance continue du dispositif, plutôt qu’une intervention ponctuelle centrée sur un seul test.

Définir clairement le construit à mesurer

Nous commençons par clarifier ce que vous cherchez réellement à mesurer connaissances, compétences, attitudes, capacités de transfert. Cette étape implique souvent de revisiter les objectifs d’apprentissage existants et de distinguer ce qui est central de ce qui est périphérique. Le résultat est un construit de mesure formulé dans un langage accessible et partageable avec vos équipes.

Élaborer un plan de mesure cohérent

À partir de ce construit, nous élaborons une structure de dispositif qui décrit comment les tests écrits, les projets et les portfolios se répartissent les objectifs d’apprentissage. Nous veillons à éviter les zones sur évaluées ou laissées dans l’ombre, et à articuler les épreuves entre elles plutôt que de les juxtaposer sans logique.

Concevoir et éprouver les épreuves

Nous accompagnons ensuite la rédaction ou la révision des items, des tâches de projet et des critères de portfolio. Cette phase inclut des pré tests lorsque c’est possible, afin de repérer les difficultés de compréhension, les consignes ambiguës et les critères trop flous pour soutenir des jugements cohérents entre évaluateurs.

Analyser, ajuster et suivre dans le temps

Une fois les données recueillies, nous appliquons des analyses adaptées à la structure du dispositif. Nous examinons la qualité des items, la cohérence interne, la stabilité des scores et la convergence entre évaluateurs, puis proposons des ajustements ciblés et des recommandations de suivi pour les sessions suivantes.

Notre manière de structurer la mesure

La mauvaise façon d’aborder la méthodologie en mesure des apprentissages consiste à empiler des termes techniques sans expliquer ce qu’ils changent pour vous. Notre approche part de quelques principes simples validité, fiabilité, équité et utilité décisionnelle. Nous utilisons des cadres issus de la théorie classique des tests, de modèles de réponse à l’item et d’analyses de cohérence des jugements, mais toujours au service de questions concrètes. Concrètement, nous appliquons ce que nous appelons la chaîne de mesure explicite. Première étape définir précisément le construit à mesurer, en langage accessible, puis le traduire en objectifs d’apprentissage opérationnels. Deuxième étape cartographier vos épreuves existantes tests écrits, projets, portfolios sur ces objectifs, pour identifier les zones sur ou sous évaluées. Troisième étape choisir des modèles d’analyse adaptés à la structure de vos données, sans imposer une sophistication qui n’apporterait pas de bénéfice interprétable. Lors des analyses, nous examinons la cohérence interne des épreuves, le comportement des items, la stabilité des scores entre sessions et, lorsque c’est pertinent, la convergence entre évaluateurs. Nous ne cherchons pas à tout modéliser, mais à produire des indicateurs robustes qui répondent à vos questions clés. Enfin, nous accordons une place importante à la documentation des limites de chaque dispositif de mesure, afin que les utilisateurs des résultats puissent juger de la solidité des conclusions qu’ils tirent.

4 records

2022

Phase de pilotes

Premiers projets pilotes avec des établissements souhaitant mieux comprendre la qualité de leurs examens écrits. Ces collaborations ont permis de tester notre cadre de mesure articulée et de l’ajuster pour qu’il reste utilisable par des équipes pédagogiques aux ressources limitées.

001

2023

Intégration de nouveaux dispositifs

Extension de notre approche aux projets notés et portfolios, avec un accent particulier sur la cohérence des grilles critériées et la convergence entre évaluateurs. Cette période a renforcé notre conviction que les outils de mesure doivent être pensés comme un ensemble plutôt que comme des pièces isolées.

002

2024

Formalisation des modules

Structuration de notre méthodologie en modules clairs diagnostic, conception, analyse, suivi pour faciliter l’appropriation par les institutions partenaires. Cette structuration a rendu les projets plus lisibles et a permis d’impliquer plus facilement les équipes dans les décisions méthodologiques.

003

2025

Focalisation sur la communication

Renforcement de l’accompagnement sur la communication des résultats, avec la création de formats de rapports adaptés aux directions, aux enseignant·e·s et, lorsque pertinent, aux étudiant·e·s. Cette étape a consolidé le lien entre analyses techniques et décisions pédagogiques.

004

Valeurs qui guident nos choix techniques

Nos choix méthodologiques ne sont pas neutres ils reflètent une certaine conception de ce que doivent être des évaluations utiles, justes et compréhensibles pour les personnes qui les utilisent.

$ Transparence

Nous privilégions des approches dont les hypothèses, les limites et les implications sont explicitement décrites. Chaque indicateur utilisé dans nos analyses doit pouvoir être expliqué à vos équipes, avec ses forces et ses fragilités, plutôt que de reposer sur une boîte noire opaque.

$ Équité

Nous examinons systématiquement la manière dont les dispositifs de mesure peuvent affecter différemment les élèves selon leurs parcours, leurs profils ou leurs conditions de passation. Cette vigilance oriente nos recommandations sur les consignes, les critères et les modalités de collecte des données.

$ Ancrage empirique

Nos choix de modèles et d’outils sont guidés par les meilleures connaissances disponibles dans la littérature scientifique, mais aussi par les retours de terrain. Nous ajustons nos pratiques à la lumière de nouvelles études, tout en restant attentifs à ce qui fonctionne réellement dans vos contextes.

$ Coopération

Nous considérons que les équipes pédagogiques sont expertes de leur contexte. Notre rôle est d’apporter une structure méthodologique et des analyses solides, puis de co construire avec vous des décisions qui respectent vos contraintes et vos priorités.

$ Autonomisation progressive

Nous cherchons à installer des dispositifs de mesure qui peuvent évoluer sans dépendre en permanence d’une expertise externe. Cela implique de documenter les choix effectués, de transmettre des repères d’interprétation et de proposer des routines de suivi que vos équipes peuvent progressivement s’approprier.

Notre méthodologie vise à relier en continu ce que vous souhaitez mesurer, les épreuves que vous utilisez, les modèles d’analyse mobilisés et la manière dont les résultats sont compris par vos équipes. Chaque étape est documentée pour que vous puissiez expliquer vos choix.

Appliquer une méthodologie exigeante sans tout reconstruire en même temps

Vous disposez déjà de tests, de projets ou de portfolios en fonctionnement. Notre approche méthodologique ne vous demande pas de repartir de zéro elle s’appuie sur l’existant, en identifiant ce qui mérite d’être conservé, ce qui doit être ajusté et ce qui gagnerait à être repensé dans une logique de mesure plus explicite.

Discuter