Développement d’un dispositif d’évaluation diagnostique pour cibler les erreurs d’accord du verbe et des participes passés à la fin du 1er cycle du secondaire

Abstract

La maitrise de l’écrit est importante et nous savons que celle-ci est loin d’être assurée par l’ensemble des scripteurs du français, au Québec comme ailleurs. À titre d’exemple, les performances des élèves du secondaire québécois en écriture (Ministère de l’Éducation et de l'Enseignement supérieur, 2019), et plus particulièrement en orthographe grammaticale, se conforment peu aux attentes sociales. Pour soutenir l’apprentissage des élèves dans ce domaine, dans une perspective de différenciation pédagogique, l’établissement d’un diagnostic initial permettant de cibler les forces et les faiblesses des apprenants s’avère une étape primordiale. Pour ce faire, les enseignants doivent disposer d’outils d’évaluation diagnostique adéquats qui permettent de brosser le portrait des difficultés rencontrées par leurs élèves. La présente recherche doctorale vise à répondre à ce besoin en développant un dispositif d’évaluation diagnostique qui cible, par l’analyse des erreurs commises et selon une approche cognitive, les difficultés rencontrées par les élèves de la fin du 1er cycle du secondaire avec l’accord du verbe et des participes passés. Les objectifs spécifiques de cette recherche consistent en la conception, la réalisation, la mise à l’essai et la finalisation de ce dispositif en suivant le cadre méthodologique général de Harvey et Loiselle (2009). La validation du dispositif et de la démarche employée pour l’élaborer se réalise de diverses façons : par l’emploi d’une approche « fondée sur des preuves » (Mislevy, Steinberg, et Almond, 2003) pour la conception du dispositif, par le recours à des experts de contenu pour valider les bases conceptuelles du dispositif, par un questionnaire aux enseignants (n= 4) et deux entrevues semi-dirigées menées avec eux à la suite des mises à l’essai empiriques (auprès de 360 élèves de 2e secondaire) pour vérifier la convivialité du dispositif et son adéquation aux besoins dégagés et, finalement, par l’analyse psychométrique des items des deux tests composant le dispositif créé. Des critères de scientificité sont aussi établis et respectés pour s’assurer que la recherche-développement réalisée comporte les caractéristiques attendues d’un tel type de recherche. L’objet résultant de cette recherche-développement, le dispositif nommé DIAgramm, est un outil d’évaluation diagnostique informatisé et accessible en ligne, composé de deux tests visant des niveaux de diagnostic différents (niveaux constat et recherche des causes, voir B. Rey, 2016) et générant des rapports de résultats complets et précis pour les enseignants. Le niveau constat de DIAgramm vise à cerner les configurations syntaxiques qui posent problème aux élèves alors que le niveau recherche des causes vise à identifier la cause des erreurs commises. Les résultats de cette recherche-développement nous laissent penser que DIAgramm répond tout à fait aux besoins éprouvés par les enseignants, tant en ce qui concerne la qualité des portraits diagnostiques brossés que la convivialité de l’instrument lui-même (administration facile, clarté des rapports de résultats fournis, etc.).

Proficiency in writing is important and we know that this skill is far from being mastered by all French writers, in Quebec as elsewhere. Indeed, the writing abilities of Quebec high school students, and more specifically in grammatical spelling, does not meet social expectations (Ministère de l'Éducation et de l’Enseignement supérieur, 2019). To support students' learning in this area, it is crucial to conduct an initial diagnosis of learners' strengths and weaknesses. To do this, teachers must have adequate diagnostic assessment tools that allow them to draw a picture of students’ writing difficulties. This doctoral research aims to address this need by developing a diagnostic assessment device that targets, through the analysis of errors made and according to a cognitive approach, the difficulties pertaining to the agreement of verbs and past participles encountered by students at the end of the first cycle of secondary school. The specific objectives of this research and development project are to design, implement, test, and finalize this device following Harvey and Loiselle’s (2009) methodological framework. The device and the method used to create it were validated in various ways: by adopting an evidence-based approach (Mislevy, Steinberg, et al., 2003) for the design of the device, by enlisting content experts to validate the conceptual foundations of the device, by surveying teachers and conducting two semi-structured interviews with them after the empirical trials (involving 360 secondary 2 students) to verify the device's usability and its relevance to the identified needs, and finally by psychometrically analyzing the items of the two tests comprising the created device. Scientific criteria were also established and adhered to in order to ensure that the carried out research and development has the expected characteristics for this type of research. The resulting product from this research and development is DIAgramm, an online, computerized diagnostic assessment tool consisting of two tests aiming at different levels of diagnosis (the observation (constat) level and the cause-finding (recherche des causes) level, see B. Rey, 2016). The diagnostic devide further generates complete and accurate results reports for the teachers. The observation level of DIAgramm aims to identify syntactic configurations that are problematic for students, while the cause-finding level aims to identify the cause of the errors made. The results of this research and development suggest that DIAgramm meets the needs of teachers, both in terms of the quality of the diagnostic portraits provided and the user-friendliness of the instrument itself (easy administration, clarity of the results reports provided, etc.).