Réalisations

 

 

Enquête sur les acquis scolaires – République du Congo

 

  

La République du Congo souhaite disposer d’une équipe de cadres nationaux permanente dans le domaine de l'évaluation des acquis des élèves en s'appuyant sur des tests standardisés.  Des travaux de consultation incluant la participation de Micro Centre Pythagore se sont déroulés au cours des années 2012 et 2013; ces activités ont permis la préparation et l’administration d’une enquête sur les acquis scolaires auprès d’un échantillon représentatif des élèves de 5e année du primaire.

 

Voici le mandat qui a été confié aux consultants retenus :

 

  • Mettre en place un dispositif de suivi permanent des apprentissages scolaires.
  • Recueillir des données auprès d'échantillons représentatifs d'écoles de l'univers scolaire de l'enseignement  dispensé aux élèves de 5e année du primaire
  • Assurer la pérennité de l'évaluation des acquis scolaires par l'accompagnement des agents responsables de l'activité par des experts en évaluation des apprentissages et en analyse des données.

 Les services suivants ont été fournis pour réaliser le mandat confié :

 

  • Formation en évaluation et en traitement de données du personnel concerné
  • Assistance au développement des instruments de collecte des données
  • Mise à l’essai du mécanisme d’évaluation
  • Formation des responsables nationaux à l’entrée des données et au contrôle de qualité
  • Traitement des données et exécution d’activités de contrôle de la qualité
  • Réalisation de différentes compilations statistiques utilisées pour la préparation des rapports d’évaluation.

 Dans un premier temps, il y a eu élaboration des tableaux de spécification pour les disciplines évaluées. Quand on s'engage dans une opération de l'envergure d'une évaluation des acquis des élèves, l'équipe responsable de l’activité se doit de développer ce qu'on appelle souvent un cahier de charges. Dans le cas d'une telle évaluation, un élément fondamental d'un tel cahier est la préparation de tableaux de spécification. Ceux-ci présente une synthèse fidèle du ou des programmes d'études concernés et ce, à des fins d'évaluation sommative. C'est un peu comme un portrait d'un ou de programmes d'études. Les participants à la mission de formation ont donc pu se familiariser avec la technique du tableau de spécification en élaborant ceux relatifs aux programmes de Français et de Mathématiques de CM1 du Congo. C'est un exercice rigoureux qui demande souvent beaucoup de temps.    

 La tâche fondamentale qu'avaient à réaliser les participants au cours des travaux prévus fut de réaliser l'instrumentation devant permettre de collecter l'information en vue de procéder à l'évaluation proprement dite. La référence pour une telle tâche est le ou les tableaux de spécification, comme il a été dit.    

Un test est habituellement composé d'un ensemble d'items qui sont des tâches auxquelles l'élève doit répondre ou réaliser. Les participants ont pu se familiariser avec des consignes à prendre en considération pour que les items soient formulés selon des conventions établies. Auparavant, ils ont été sensibilisés à une réalité de plus en plus présente dans le domaine des tests standardisés, à savoir l'articulation, le regroupement d'items sur la base d'un thème appelé aussi scénario, voire situation, voire centre d'intérêt. L'équipe a choisi de travailler sur cette base. Les épreuves développées ont été organisées par rapport à des scénarios ou des mises en situation.    

Des équipes de travail ont été constituées pour la préparation des outils de collecte de données en mathématiques et en français. Des banques d’items ont été préparées. Le logiciel EduStat a été utilisé pour informatiser ces banques.    

L'instrumentation nécessaire pour procéder à l'évaluation des acquis scolaires doit aussi comprendre un certain nombre de questionnaires. Ceux-ci permettent de collecter des informations complémentaires qui sont mises en lien avec les réponses des élèves aux tests. Les participants ont été invités à travailler sur trois types de questionnaires, à savoir un questionnaire destiné à l'élève, un destiné à son enseignant et un autre au directeur d'école.    

Il y a donc eu administration de l’évaluation par rapport à l’échantillon sélectionné. L'administration de l'instrumentation est souvent confiée à des tiers organismes. Dans le cas de l'évaluation sur échantillon réalisé au Congo, l'administration des tests et des questionnaires a été organisée selon un organigramme composé d’une équipe de coordination, d’une équipe de supervision, des responsables régionaux, des conseillers techniques. Ceux-ci avaient la responsabilité de conduire toutes les opérations de l’enquête.    

Les tests et les questionnaires ont été administrés aux écoles faisant partie de l’échantillon sélectionné. Concernant les élèves, 20 ont été sélectionnés par école, ceci par tirage au sort pour la passation des tests et du questionnaire-élève. L’administrateur, assisté d’un observateur qui avait la mission de suivre le déroulement de l’opération menée en classe et, au besoin, faire des ajustements nécessaires.    

Par la suite, il y a eu traitement des données collectées. Dans un premier temps, ce fut la codification des données et la correction des items à réponse construite. En vue de préparer cette opération, une formation des membres de l’équipe a été faite notamment pour s’exercer à la correction en respectant la codification établie. En effet, concernant les tests, il est souvent possible qu'un test comporte des items autres qu'à choix multiples, comme des items à « crédits partiels ». Dans ce cas, les réponses fournies ont été corrigées en tenant compte des consignes prévues et ce, dans le but de garantir la rigueur de l'opération. Dans le cas de notre enquête, les réponses des élèves contenues dans les cahiers de test ont été transcrites sur des fiches de codification préparées à cet effet pour faciliter le traitement des données par la lecture optique. Le même procédé a été retenu pour traiter les questionnaires. En effet, Il peut arriver que certaines informations doivent être codifiées avant de procéder à une analyse à l'aide d'un programme de traitement. Un tel besoin de codification existe notamment lorsque l'instrumentation comporte des questions à réponses construites ou des questions à réponses élaborées.    

Plusieurs techniques de saisie des données peuvent être utilisées pour entrer les données recueillies à l'aide d'un test ou d'un questionnaire. Il arrive que les responsables d'une évaluation ou d'une enquête confient à une firme spécialisée le soin de saisir les données. Dans ce cas, il faut bien préciser les règles de saisie rattachées aux instruments utilisés. Il est aussi possible d’utiliser des fiches de codification qui peuvent être «lues» par un lecteur optique. Il s'agit d'une façon de procéder qui minimise les erreurs dues à la saisie et qui accélère le processus. C’est cette technique qui a été utilisée par l’équipe nationale d’évaluation pour la présente enquête.    

Après avoir saisi les informations recueillies à l'aide d’un test ou d'un questionnaire, des fichiers de données ont été préparés pour être utilisés par un programme informatique dans le but de faire des compilations statistiques. La compilation des données recueillies constitue une étape très importante dans la réalisation d'une évaluation, d'une enquête. Les résultats obtenus permettent de confirmer ou d'infirmer les hypothèses formulées au début du processus. Il importe cependant de bien choisir les techniques d'analyse statistique adaptées à l'opération, aux besoins et au type de données. Le logiciel EduStat a été retenu pour réaliser l’ensemble des tableaux statistiques faisant partie du rapport d’évaluation et du rapport technique.    

Adresse courriel : info@mcpythagore.com