C’est un immense plaisir de pouvoir communiquer les informations relatives à la soutenance pour l’obtention de mon Habilitation à Diriger les Recherches.

Titre

Évaluation formative et génération de feedbacks soutenues par la technologie

Date et Lieu

Le 5 avril 2024 à 8H30 à l’Université Toulouse Capitole en salle MI 107 à la Manufacture des Tabacs.

Accès à distance

Il sera possible de suivre la soutenance à distance via le lien suivant : https://youtube.com/live/Pu8qyRZC7x4?feature=share

Résumé

J’effectue mes travaux de recherche au sein de l’Institut de Recherche en Informatique de Toulouse. Ces travaux s’inscrivent dans le champ large des recherches en Ingénierie des Environnements Informatiques pour l’Apprentissage Humain (IEIAH). Je m’intéresse depuis ma thèse débutée en 2012 à la manière dont la technologie peut venir en soutien de l’évaluation formative mise en œuvre en classe ou hors classe.

Les recherches sur les situations en classe ont conduit à des contributions portant sur les processus d’évaluation formative mobilisables en face-à-face (processus en N phases, processus à 2 votes) ainsi que dans la conception de systèmes interactifs facilitant la mise en œuvre de séquences pédagogiques mobilisant de tels processus (Tsaap-Notes, Elaastic). Ces recherches ont été réalisées dans le cadre de deux thèses~: la mienne et celle de Rialy Andriamiseza, soutenue en 2022, que j’ai codirigée avec Julien Broisin.

Les recherches sur les situations hors classe ont débuté dans le cadre de ma thèse. Ces travaux ont conduit à des contributions sur la génération automatique de feedbacks pour les tests autocorrectifs. Ils se poursuivent aujourd’hui dans le cadre de la thèse de Denis Ollivier codirigée avec Julien Broisin et coencadrée avec Jean-Baptiste Raclet. Ces travaux en cours portent sur l’ingénierie des systèmes interactifs soutenant les activités de révisions des apprenants.

L’intersection de mes recherches avec la psychologie, les neurosciences et les sciences de l’éducation m’ont mené à une relecture des travaux réalisés ces 10 dernières années. Cette relecture m’a permis de formuler une nouvelle situation prototypique pour les recherches en IEIAH. Celle-ci est fondée sur l’étude des systèmes technologiques soutenant (respectivement limitant) les états cognitifs et émotionnels favorables (respectivement défavorables) à l’apprentissage humain. C’est dans ce cadre que sont formulés les axes du projet de recherche présenté dans le mémoire. Les problématiques abordées concernent l’adaptation des processus d’évaluation formative et la génération, par des agents humains ou artificiels, de feedback textuel personnalisé.

Mots clés Évaluation formative, feedback, systèmes interactifs, learning analytics, design-based research, méthodes mixtes, système 1 et système 2, évaluations par les pairs, intelligences artificielles génératives.

Abstract

My research work takes place at the Institut de Recherche en Informatique de Toulouse. This work falls within the broad field of research in Technology-Enhanced Learning (TEL). Since starting my thesis in 2012, I’ve been interested in how technology can support formative assessment in and out of the classroom.

Research on classroom situations has led to contributions on formative assessment processes that can be mobilized face-to-face (N-phase process, 2-votes-based process), as well as in the design of interactive systems facilitating the implementation of pedagogical sequences mobilizing such processes (Tsaap-Notes, Elaastic). This research was carried out as part of two PhD thesis~: my own and that of Rialy Andriamiseza, defended in 2022, which I co-directed with Julien Broisin.

Research on out-of-class situations began as part of my PhD thesis. This work led to contributions on the automatic generation of feedback for self-correcting tests. It continues today in the context of Denis Ollivier’s thesis, co-directed with Julien Broisin and co-supervised with Jean-Baptiste Raclet. This ongoing work focuses on the engineering of interactive systems to support learners’ revision activities.

The intersection of my research with psychology, neuroscience and educational science has led me to reconsider the work carried out over the last 10 years. This review has guided the formulation of a new prototypical situation for TEL research. This is based on the study of technological systems supporting (respectively limiting) cognitive and emotional states favorable (respectively unfavorable) to human learning. It is within this framework that the main lines of the research project presented in this document are formulated. The mentioned issues concern the adaptation of formative evaluation processes and the generation, by human or artificial agents, of personalized textual feedback.

Keywords Formative assessment, feedback, interactive systems, learning analytics, design-based research, mixed methods, system 1 and system 2, peer evaluations, generative artificial intelligence.

Membres du jury

Rapporteurs :

  • Philippe Dessus, Professeur, Université Grenoble Alpes
  • Sébastien George, Professeur, Le Mans Université
  • Élise Lavoué, Professeure, Université Jean-Moulin Lyon 3

Examinateurs :

  • Frédéric Amblard, Professeur, Université Toulouse Capitole
  • Grégoire Borst, Professeur, Université Paris Cité
  • Julien Broisin, Maître de conférences HDR, Université Toulouse 3 Paul Sabatier