*

Effort cognitif réel dans les tiers-lieux numériques éducatifs : modélisation multimodale, personnalisée et explicable par apprentissage automatique

Offre de thèse

Effort cognitif réel dans les tiers-lieux numériques éducatifs : modélisation multimodale, personnalisée et explicable par apprentissage automatique

Date limite de candidature

25-09-2026

Date de début de contrat

01-10-2026

Directeur de thèse

MONTICOLO Davy

Encadrement

Le doctorant sera co-encadré par Davy Monticolo (HDR-PU, LORIA, Université de Lorraine) en tant que directeur de thèse, et Geoffray Bonnin (Maître de Conférences, LORIA, Université de Lorraine) en tant que co-directeur de thèse. L'encadrement reposera sur des réunions individuelles hebdomadaires entre le doctorant et ses encadrants, ainsi que des réunions d'équipe bi-mensuelles au sein du laboratoire LORIA. Un comité de suivi de thèse (CST) sera mis en place dès la première année, conformément aux exigences de l'École Doctorale IAEM Lorraine, et se réunira annuellement pour évaluer l'avancement des travaux, la formation du doctorant et les conditions de déroulement de la thèse. Le doctorant bénéficiera d'un accès aux ressources du laboratoire LORIA (infrastructure de calcul, bases de données, plateformes d'apprentissage numérique hybride) nécessaires à la collecte et au traitement des données multimodales. Il sera encouragé à participer activement aux séminaires et journées scientifiques du laboratoire et du cluster ENACT, ainsi qu'aux conférences nationales et internationales dans les domaines de l'IA, des technologies éducatives et des sciences cognitives (EC-TEL, EDM, NeurIPS, AIED, etc.). En matière de formation doctorale, le doctorant suivra les formations proposées par l'ED IAEM Lorraine et par le Collège Doctoral de l'Université de Lorraine, couvrant les compétences disciplinaires (machine learning, IA explicable, traitement de données multimodales) et transversales (rédaction scientifique, valorisation de la recherche, éthique de la recherche). Un plan de formation individualisé sera établi dès la première année en concertation avec les deux encadrants, et mis à jour annuellement. L'avancement des recherches sera formalisé par la rédaction de livrables annuels (rapport d'avancement, articles soumis à des revues ou conférences de rang A), et la participation à au moins une collaboration interdisciplinaire impliquant des chercheurs en sciences cognitives et en sciences de l'éducation, en lien avec les objectifs du projet doctoral et l'expertise complémentaire des deux encadrants.

Type de contrat

Concours pour un contrat doctoral

école doctorale

IAEM - INFORMATIQUE - AUTOMATIQUE - ELECTRONIQUE - ELECTROTECHNIQUE - MATHEMATIQUES

équipe

BIRD

contexte

Le LORIA (Laboratoire Lorrain de Recherche en Informatique et ses Applications), UMR 7503, au travers de l'équipe BIRD, est spécialisé dans l'intelligence artificielle selon différentes perspectives, dont une expertise de plusieurs années en intelligence artificielle pour l'éducation. Le LORIA est reconnu pour son expertise dans l'analyse des traces d'usage de systèmes numériques, en particulier des traces d'apprenants, dans un objectif de recommandation et d'adaptive learning. Les travaux menés par le LORIA combinent des approches d'apprentissage automatique et de fouille de données, incluant la représentation par graphe de connaissances, pour des objectifs d'identification de profils type d'apprenants (habitudes, difficultés, etc.), d'information, d'évaluation, de prédiction, et de proposition d'actions (des recommandations) permettant d'atteindre un objectif donné et enfin de tableaux de bord.

spécialité

Informatique

laboratoire

LORIA - Laboratoire Lorrain de Recherche en Informatique et ses Applications

Mots clés

Apprentissage automatique, Données multimodales, Effort cognitif réel, IA explicable

Détail de l'offre

Ce projet de thèse se situe à l'intersection de l'intelligence artificielle, des sciences cognitives et des sciences de l'éducation. Il vise à développer des modèles d'apprentissage automatique multimodaux, personnalisés, robustes et explicables pour estimer l'effort cognitif réel des apprenants dans des environnements d'apprentissage numériques hybrides, notamment les tiers-lieux numériques éducatifs.
L'effort cognitif joue un rôle central dans l'engagement des apprenants : il conditionne la profondeur du traitement de l'information, la consolidation des connaissances et la capacité à transférer les apprentissages. Pourtant, cet effort est difficile à observer directement et est le plus souvent approximé par des mesures subjectives (questionnaires d'auto-évaluation, échelles de charge mentale), dont la fiabilité est limitée par des biais de perception, de comparaison sociale ou de contexte. La littérature distingue ainsi l'effort réel avec les ressources cognitives effectivement mobilisées de l'effort perçu et la perception subjective qu'en a l'apprenant, concernant ces deux dimensions qui peuvent fortement diverger.
Les environnements d'apprentissage numériques génèrent aujourd'hui de grandes quantités de traces d'interaction : logs de navigation, réponses à des questionnaires, signaux physiologiques (fréquence cardiaque, activité électrodermale), indicateurs de performance. Ces données hétérogènes, encore rarement exploitées de manière intégrée, constituent un matériau riche pour estimer l'effort cognitif réel de façon plus objective et personnalisée.
Trois défis scientifiques principaux structurent ce projet. Le premier consiste à formaliser un cadre conceptuel robuste de l'effort cognitif réel, distinguant clairement effort réel et effort perçu, en intégrant les biais individuels (profil, motivation, état émotionnel) et contextuels (tâche, dispositif technique), et en définissant un ensemble cohérent d'indicateurs observables exploitables par des modèles d'IA. Le deuxième défi porte sur la conception de modèles d'apprentissage automatique multimodaux et personnalisés, capables de fusionner des données subjectives, comportementales, physiologiques et de performance, de capturer les dynamiques temporelles de l'effort, et de maintenir un équilibre entre précision, robustesse et complexité computationnelle. Le troisième défi concerne l'intégration des principes de l'IA responsable dès la conception : explicabilité des prédictions pour les enseignants et chercheurs en éducation, détection et réduction des biais (genre, niveau académique, contexte socio-économique), et évaluation de l'impact pédagogique et éthique des indicateurs produits.
Les travaux seront organisés sur trois ans : une première année dédiée à la revue de littérature interdisciplinaire, à la formalisation du cadre conceptuel et à la conception du protocole de collecte de données ; une deuxième année consacrée au développement et à la comparaison d'architectures de modèles multimodaux (modèles séquentiels, architectures profondes, modèles à facteurs latents) et à l'intégration de la personnalisation ; une troisième année focalisée sur les méthodes d'explicabilité, l'analyse des biais, les stratégies de mitigation et l'évaluation de l'acceptabilité des indicateurs par les parties prenantes éducatives.
Ce projet s'inscrit dans les ambitions du cluster ENACT et vise à produire des outils concrets d'aide à la décision pédagogique, plus adaptatifs, équitables et transparents.

Keywords

Machine learning, Multimodal data, Real cognitive effort, Explainability

Subject details

This PhD project sits at the crossroads of artificial intelligence, cognitive science, and educational science. It aims to develop multimodal, personalized, robust, and explainable machine learning models to estimate learners' real cognitive effort in hybrid digital learning environments, particularly educational digital third places. Cognitive effort plays a central role in learner engagement: it conditions the depth of information processing, the consolidation of knowledge, and the ability to transfer learning to new situations. However, cognitive effort is difficult to observe directly and is most often approximated through subjective measures (self-report questionnaires, mental workload scales), whose reliability is limited by perception biases, social comparison, or contextual factors. The literature distinguishes real effort i.e. the cognitive resources actually mobilised by the learner, from perceived effort, and the subjective perception reported by the individual. Those two dimensions that can significantly diverge. Digital learning environments generate large amounts of interaction data: navigation logs, questionnaire responses, physiological signals (heart rate, electrodermal activity), and performance indicators. These heterogeneous data, still rarely exploited in an integrated manner, constitute rich material for estimating real cognitive effort in a more objective and personalised way. Three main scientific challenges structure this project. The first consists in formalising a robust conceptual framework for real cognitive effort, clearly distinguishing real effort from perceived effort, integrating individual biases (profile, motivation, emotional state) and contextual factors (task, technical device, environment), and defining a coherent set of observable indicators suitable for use in AI models. The second challenge concerns the design of multimodal and personalised machine learning models capable of fusing subjective, behavioural, physiological, and performance data, capturing the temporal dynamics of effort, and maintaining a balance between accuracy, robustness, and computational complexity compatible with real educational deployment constraints. The third challenge involves integrating responsible AI principles from the very beginning of model design: providing explainability mechanisms interpretable by teachers and educational researchers, detecting and reducing potential biases (gender, academic level, socioeconomic context), and assessing the pedagogical and ethical impact of the produced indicators. The work will be organised over three years: the first year dedicated to an interdisciplinary literature review, conceptual framework development, and data collection protocol design; the second year focused on developing and comparing multimodal model architectures (sequence models, deep multimodal architectures, latent-factor models) and integrating personalisation; the third year centred on explainability methods, bias analysis, mitigation strategies, and evaluation of indicator acceptability with educational stakeholders. This project is aligned with the ambitions of the ENACT cluster and aims to produce concrete decision-support tools for educators that are more adaptive, fair, and transparent.

Profil du candidat

Le doctorant devra être titulaire (ou en cours d'obtention) d'un Master ou diplôme d'ingénieur
en informatique, sciences cognitives, sciences des données ou mathématiques.
Les capacités de conception, d'analyse et l'autonomie du candidat sont importantes pour cette
thèse, de même que des compétences en développement et une bonne capacité d'interaction et
d'écoute (au vu du contexte de la thèse, des interactions avec les enseignants et élèves)

Candidate profile

The PhD candidate must hold (or be in the process of obtaining) a Master's degree or an engineering degree
in computer science, cognitive science, data science or mathematics.
The candidate's design and analytical skills, as well as their ability to work independently, are important for this
thesis, as are development skills and a good ability to interact and
listen (given the context of the thesis, which involves interactions with teachers and pupils)

Référence biblio

Scariot, A. P., Andrade, F. G., Silva, J. M. C. da, & Imran, H. (2016). Students Effort vs. Outcome: Analysis Through Moodle Logs. In proc. ICALT.
Steele, J. (2020), ‘What is (perception of) effort? Objective and subjective effort during task performance', PsyArXiv.
Moissa, B., Bonnin, G., & Boyer, A. (2021). Measuring and Predicting Students' Effort: A Study on the Feasibility of Cognitive Load Measures to Real-Life Scenarios. In proc. EC-TEL.
Eeva S.H. Haataja, Asko Tolvanen, Henna Vilppu, Manne Kallio, Jouni Peltonen, Riitta-Leena Metsäpelto, Measuring higher-order cognitive skills with multiple choice questions –potentials and pitfalls of Finnish teacher education entrance, Teaching and Teacher Education, Volume 122, 2023.
Yuling Yang, Mingzhi Zhou, Jiangping Zhou, Re-understanding accessibility through a cognitive process: a conceptual framework and quantification, Applied Geography, Volume 186, 2026, 103835, ISSN 0143-6228.
Kazuhisa Takemura, A computer simulation of cognitive effort and the accuracy of two-stage decision strategies in a multiattribute decision-making process, Editor(s): Kazuhisa Takemura,In Perspectivs in Behavioral Economics and the Economics of Beh, Escaping from Bad Decisions, Academic Press, 2021, Pages 113-139.
Xingle Ji, Lu Sun, Kun Huang, The construction and implementation direction of personalized learning model based on multimodal data fusion in the context of intelligent education, Cognitive Systems Research, Volume 92, 2025.
Shuzhen Yu, Alexey Androsov, Hanbing Yan, Exploring the prospects of multimodal large language models for Automated Emotion Recognition in education: Insights from Gemini, Computers & Education, Volume 232, 2025.
Yan Huang, Wei Xu, Paisan Sukjairungwattana, Zhonggen Yu, Learners' continuance intention in multimodal language learning education: An innovative multiple linear regression model, Heliyon, Volume 10, Issue 6, 2024.
Maira Klyshbekova, Gisela Reyes Cruz, Caitlin Bentley, Stef Garasto, Amy Aisha Brown, Christine Aicardi, Brian Ball, Mohammad Naiseh, Oana Andrei, A UK perspective on responsible education for responsible AI: a multidisciplinary review and evaluation framework, Journal of Responsible Technology, Volume 25, 2026.
Ming Ma, Davy Tsz Kit Ng, Zhichun Liu, Gary K.W. Wong, Fostering responsible AI literacy: A systematic review of K-12 AI ethics education, Computers and Education: Artificial Intelligence, Volume 8, 2025.