Cet article vise à décrire les techniques impliquées dans la collecte et la synchronisation des multiples dimensions (comportementale, affective et cognitive) de l’engagement des apprenants au cours d’une tâche.
Article de méthode
Cet article vise à décrire les techniques impliquées dans la collecte et la synchronisation des multiples dimensions (comportementale, affective et cognitive) de l’engagement des apprenants au cours d’une tâche.
Dans une synthèse théorique récente sur le concept d’engagement, Fredricks, Blumenfeld et Paris1 ont défini l’engagement par ses multiples dimensions : comportementale, émotionnelle et cognitive. Ils ont observé que les types individuels d’engagement n’avaient pas été étudiés en conjonction et que peu d’informations étaient disponibles sur les interactions ou la synergie entre les dimensions ; Par conséquent, davantage d’études contribueraient à créer des interventions pédagogiques finement ciselées. Bénéficiant des récentes avancées technologiques en neurosciences, cet article présente une méthodologie récemment développée pour recueillir et synchroniser des données sur l’engagement multidimensionnel lors des tâches d’apprentissage. La technique implique la collecte (a) d’électroencéphalographie, (b) d’électroderme, (c) de suivi oculaire et (d) de données de reconnaissance des émotions faciales sur quatre ordinateurs différents. Cela entraînait des problèmes de synchronisation pour les données collectées à partir de plusieurs sources. La post-synchronisation dans un logiciel d’intégration spécialisé permet aux chercheurs de mieux comprendre la dynamique entre les multiples dimensions de l’engagement. Pour les concepteurs de programmes d’études, ces données pourraient fournir des lignes directrices éclairées pour améliorer l’efficacité de l’enseignement et de l’apprentissage. Cette technique ouvre également des possibilités dans le domaine des interactions cerveau-ordinateur, où des environnements d’apprentissage adaptatifs ou d’évaluation pourraient être développés.
Engagement joue un rôle crucial dans l'apprentissage. Pour Clark et Mayer 2, "tout apprentissage nécessite l'engagement," indépendamment des médias de livraison. Zhang et al. 3 a également suggéré que l'augmentation de l'engagement des élèves peut améliorer les résultats d'apprentissage, comme la résolution de problèmes et la pensée critique. Définition de l'engagement reste un défi. Dans leur revue de la littérature, Fredricks, Blumenfeld et Paris 1 définis engagement par sa nature multiforme: "l'engagement du comportement se fonde sur l'idée de la participation; il comprend la participation à des activités scolaires et sociales ou parascolaires. (...) L'engagement émotionnel englobe réactions positives et négatives aux enseignants, camarades de classe, des universitaires, et l'école et est présumé pour créer des liens avec un objet et l'influence volonté de faire le travail. Enfin, engagement cognitif se fonde sur l'idée de l'investissement mentale; il intègre la prévenance et la volonté d'exercer l'effort ncasaire de comprendre des idées complexes et des compétences difficiles maîtres ".
Fredricks, Blumenfeld et Paris 1 ont également affirmé que l'accent mis sur le comportement, les émotions et la cognition, de la notion d'engagement, peut fournir une caractérisation plus riche de l'apprentissage. Ces auteurs ont souligné que un corps robuste de recherche aborde chaque composante de l'engagement séparément, mais ces composants avaient pas été étudiés conjointement. Ils ont également observé que peu d'information est disponible sur les interactions entre les dimensions et que d'autres études pourraient contribuer à la planification des interventions d'enseignement finement réglé. Comme une étape dans cette direction, le présent document décrit une méthode de recherche qui a été développé pour recueillir et analyser des données quantitatives et qualitatives, synchrone, sur l'engagement comportemental, affectif et cognitif pendant les tâches d'apprentissage.
Apporter les neurosciences dans l'éducation
BehavIOR, et un engagement conséquent de comportement, a longtemps été le point central des études dans l'enseignement: des modèles de recherche ont porté principalement sur l'évolution des connaissances et des comportements qui se produisent sur de longues périodes de temps, entre-tests pré et post, et sur des intervalles d'heures, semaines , des mois ou des années. Discrimination entre l'engagement comportemental, émotionnel et cognitif reste un défi parce que les deux dernières dimensions ne sont pas systématiquement observable de l'extérieur. Cognition et les émotions doivent soit être déduites des observations ou évalués par des mesures d'auto-évaluation. D'un point de vue extérieur, il reste difficile de déterminer si les élèves essaient de faire leur travail aussi rapidement que possible ou en utilisant des stratégies d'apprentissage à un niveau profond de maîtriser un contenu spécifique. En fait, Fredricks, Blumenfeld et Paris 1 ont été incapables de trouver des études publiées à l'aide, des mesures objectives directs d'engagement cognitif.
Les récents développements technologiques dansle domaine des neurosciences ont créé de nouvelles possibilités pour la recherche en éducation. De nouvelles méthodes de collecte de données et des algorithmes d'analyse développés dans le domaine de l'ergonomie neuro semblent très prometteurs pour les études qualitatives et quantitatives au cours de tâches d'apprentissage. D'autres disciplines, telles que l'économie, la psychologie, le marketing et l'ergonomie, ont eu recours à des mesures neurophysiologiques pour évaluer engagement cognitif pendant un certain temps 4-8. Mesures neurophysiologiques, couplés avec des algorithmes d'analyse efficaces, permettent d'étudier un phénomène sans le déranger. De par leur nature, les questionnaires d'autoévaluation se désengagent des étudiants de l'apprentissage. Mesures neurophysiologiques permettent modèles de recherche à effectuer dans des environnements d'apprentissage plus authentiques. Ces outils comprennent des équipements pour surveiller le rythme cardiaque, le rythme respiratoire, la tension artérielle, la température corporelle, diamètre de la pupille, l'activité électrodermale, l'électroencéphalographie (EEG), etc.
Comme résultats représentatifs après l'utilisation de ce protocole, le présent document présentera les résultats partiels d'une étude dans laquelle les apprenants ont à résoudre, sur un écran d'ordinateur, dix problèmes en physique mécanique. Ces problèmes ont été développées dans les travaux précédents 9. Données neurophysiologiques ont été recueillies alors que les apprenants ont été résoudre les problèmes et relaxant pendant la pause de 45, les yeux fermés, après chaque problème.
Comme mentionné ci-dessus, les données de mise en prise consistent en des interactions de comportement de logiciels (mouvements de la souris et les clics), le regard de l'oeil, les performances et les réponses aux questions produites par un apprenant interagir avec le système tout en accomplissant une tâche. Un système d'eye-tracking a été utilisé pour recueillir des interactions de logiciels et les données du regard de l'oeil. Les données de performance (temps de résoudre un problème, de l'exactitude des réponses) ont été recueillies sur uneSite web de l'enquête qui a été utilisé pour présenter la tâche. Ce site a également été utilisé pour recueillir des données autodéclarées recueillies par un questionnaire adapté de Bradley et Lang 10. L'engagement émotionnel implique la caractérisation des émotions. Selon Lang 11, les émotions sont caractérisés en termes de valence (agréable / désagréable) et l'éveil (calme / suscité). Données d'engagement affectif ont donc été recueillies, en utilisant un logiciel de reconnaissance faciale automatique de l'émotion qui quantifie valence émotionnelle et une activité codeur / capteur électrodermale de l'excitation 12,13. L'activité électrodermale (AED) se réfère à la résistance électrique enregistrée entre deux électrodes lorsqu'un courant électrique très faible est régulièrement passé entre eux. Cacioppo, Tassinary Berntson et 14 ont montré que la résistance enregistrée varie en fonction de l'excitation de l'objet. Ainsi, les données psychophysiologiques, comme valence ou l'excitation, sont considérés comme des corrélats de l'engagement émotionnel.
14, ces bandes reflètent différentes capacités de traitement cognitif dans les zones spécifiques du cerveau. Ainsi, l'analyse de la densité spectrale de puissance (PSD) de fréquences spécifiques, combinée avec de nombreuses études sur la vigilance 7,15 et d'attention, permet aux chercheurs de quantifier engagement cognitif au cours d'une tâche. Comme l'a noté Mikulka et al. 16, la recherche a montré une relation directe entre l'activité bêta et la vigilance cognitive et une relation indirecte entre un alphad activité thêta et la vigilance. Ainsi, le pape, Bogart et Bartoleme 7 développé un indice d'engagement qui calcule le PSD de trois bandes: beta / (alpha + thêta). Ce rapport a été validé dans d'autres études sur l'engagement 16,17,18. Pour caractériser engagement cognitif au fil du temps, une transformée de Fourier rapide (FFT) convertit le signal EEG de chaque site actif (F3, F4, O1, O2) dans un spectre de puissance. L'index EEG de mise en prise à l'instant T est calculé par la moyenne de chaque rapport de mise en prise à l'intérieur d'une fenêtre glissante de 20 secondes précédant l'instant T. Cette procédure est répétée toutes les secondes et une nouvelle fenêtre glissante est utilisée pour mettre à jour l'index.Comme l'objectif de cette méthodologie est de fournir une riche analyse des multiples dimensions de l'engagement, la synchronisation des données est cruciale. Comme Leger et al. 19 rappeler aux lecteurs, les fabricants d'équipements recommandent fortement d'utiliser un seul ordinateur par outil de mesure de garantir leur précision spécifiée level. Ainsi, lorsque plusieurs ordinateurs sont utilisés, la synchronisation entre les ordinateurs d'enregistrement devient une étape critique. Les enregistrements ne peuvent pas tous être commencé à la même heure, et chaque flux de données dispose de son délai précis (par exemple, 0 sec de l'œil sec suivi ≠ 0 de l'EEG ou des données physiologiques). Cela est extrêmement important: la désynchronisation entre les flux de données des erreurs dans le moyen de quantification de chaque dimension de l'engagement. Il ya différentes façons de synchroniser les enregistrements physiologiques et comportementaux concomitants. Ces procédés peuvent être divisés en deux approches principales; directe et indirecte 20. Le protocole présenté dans la section suivante est basée sur une approche indirecte où un dispositif externe, une syncbox, est utilisé pour envoyer transistor-transistor logique (TTL) des signaux à tous les équipements d'enregistrement (comme représenté sur la figure 1). Comme chaque pièce d'équipement a une heure de début différente, les marqueurs de TTL sont enregistrées dans les fichiers journaux avec un parent retard. Les marqueurs sont ensuite utilisés pour réaligner les signaux et ainsi assurer une bonne synchronisation après chaque enregistrement. Un logiciel d'analyse comportementale qui permet l'intégration de fichier externe est utilisé pour re-synchroniser le calendrier de chaque flux de données et d'effectuer une analyse quantitative et qualitative de chaque dimension de l'engagement.

Figure 1. architecture du système de collecte de données. L'environnement de laboratoire dans lequel comportementale (eye-tracking), émotionnel (EDA et l'émotion du visage) et les données cognitives (EEG) de fiançailles sont collectées contient de nombreux ordinateurs. Cela pose un défi de synchronisation pour les données qui sont référencés sur leurs horloges des ordinateurs respectifs. Pour être en mesure d'analyser toutes les données dans le même temps de référence, la configuration de laboratoire implique un syncbox qui envoie des signaux TTL à tous les flux de données.nk "> S'il vous plaît cliquez ici pour voir une version plus grande de cette figure.
Pour évaluer la précision de la méthodologie en termes de synchronisation, 45 pauses sec ont été introduits avant chacun des problèmes de physique mécanique. Pendant ces pauses, les sujets devaient se détendre et à fermer les yeux. Comme on le voit dans d'autres études 4,9,16,17,18, ces pauses devraient induire des variations significatives dans le signal collecté: les deux points de pupille de l'oeil dans (l'engagement comportemental) eye-tracking immédiatement disparaître et une chute immédiate engagement cognitif (EEG le signal) est observée. Ces composants spécifiques du signal sont utilisés pour évaluer la validité générale de la synchronisation. La récente publication de documents qui dépendent totalement ou partiellement sur cette procédure de synchronisation, dans les domaines des systèmes d'information 19, les interactions homme-machine et de l'éducation 21 9, 22, fournit la preuve de son efficacité.
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
Ce protocole a reçu un certificat d'éthique du Comité institutionnel de la recherche Avec des Êtres Humains (CIER) de l'Université du Québec à Montréal (UQAM) qui a été approuvé par HEC-Montréal pour le centre de recherche de Tech3Lab. Le protocole décrit chacune des étapes spécifiques qui sont effectuées dans notre environnement de laboratoire et des équipements. Bien que les chemins de logiciels précises sont fournies pour clarifier la méthodologie, cette technique est transférable et peut être reproduit avec d'autres eye-tracking propriétaire, la reconnaissance automatique de visage émotion, l'activité électrodermale et l'équipement de l'électroencéphalographie et de logiciels.
1. Configuration de l'Environnement Lab
2. Préparation Participant
3. Collecte de données
4. Fin de la collecte des données
5. Après le participant a quitté
6. Les données de pré-traitement et d'exportation à l'intégration logicielle
7. Intégration et synchronisation des données
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
Les figures 2 et 3 montrent les captures d'écran des résultats de l'intégration et la synchronisation des données d'engagement comportementaux, émotionnels et cognitifs dans un logiciel d'analyse comportementale. Dans les deux figures, la section de gauche organise les sujets de recherche et le système de codage. Dans la partie centrale, une vidéo (avec des points rouges) montre le regard de l'oeil du sujet au cours de la tâche. Engagement comportementale du sujet peut être déduite sur la base de ce qu'...
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
En termes d'étapes critiques dans le protocole, il convient d'abord de souligner que la qualité des données est toujours l'objectif principal pour les techniques de collecte neurophysiologiques. Dans cette méthodologie, les assistants de recherche doivent porter une attention particulière à instruire les sujets afin de minimiser les mouvements de tête qui va interférer avec la surveillance de valence (perdre angle de la face correcte pour la caméra) ou générer des artefacts myographiques de l'EEG. D'...
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
Les auteurs n’ont rien à divulguer.
Les auteurs remercient le Conseil de recherches en sciences humaines du Canada (CRSH), le Conseil de recherches en sciences naturelles et en génie du Canada (CRSNG), le Fonds de Recherche Nature et Technologies du Québec (FQRNT) et le Fonds de Recherche sur la Société et Culture du Québec (FQRSC).
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
| Nom | Entreprise | Numéro de catalogue | Commentaires |
|---|---|---|---|
| EGI GSN-32 ; | EGI | Dense array | |
| EEG Netstation v.5.0 | EGI | EEG : L’EEG est collecté à l’aide d’un réseau de capteurs géodésiques d’électroencéphalographie dense (dEEG) à 32 électrodes à l’aide du logiciel d’acquisition Netstation et d’amplificateurs EGI (Electrical Geodesics, Inc). Le vertex (site d’enregistrement Cz) est l’électrode de référence pour l’enregistrement. L’impédance est maintenue en dessous de 50 k&Omega ; avec une fréquence d’échantillonnage de 250 Hz. | |
| Facereader v.4 | Noldus | Logiciel de reconnaissance faciale | |
| Syncbox | Noldus Syncbox : Noldus | Syncbox démarre le co-enregistrement des données EEG et du regard en envoyant un signal TTL (Transistor-Transistor Logic) à l’amplificateur EGI et un signal de frappe au Tobii Studio v 3.2. | |
| Logitech C600° ; Webcam | 960-000396 | Webcam utilisée pour collecter les données vidéo envoyées à mediarecorder et qui seront analysées dans Facereader | |
| The Observer XT | Noldus | Logiciel d’intégration et de synchronisation : Le Noldus Observer XT (Noldus Information Technology) est utilisé pour synchroniser toutes les données d’engagement comportemental, émotionnel et cognitif. ; | |
| Éclairage LED à l’écran | Noldus | Neon positionné sur l’écran de l’ordinateur afin d’éclairer correctement le visage des sujets | |
| MediaRecorder | Noldus | Logiciel de collecte de données vidéo | |
| Tobii 60X | Tobii | Collectez les modèles de mouvements oculaires : ; utilisé pour enregistrer les modèles de mouvements oculaires des sujets à 60Hz pendant l’expérience. ; | |
| Tobii Studio v.3.2 | Tobii | Logiciel de collecte et d’analyse de données de suivi | |
| oculaire Analyzer 2 | Brainvision | Logiciel de traitement du signal EEG | |
| Acqknowledge v.4.0 | Biopac | ACK100M | Logiciel d’acquisition et de traitement du signal physiologique |
| Solution germicide Control III | Maril Products. | 10002REVA-20002-1 | Solution désinfectante utilisée avec les casques EEG : recommandée par EGI |
| Unipark | QuestBack AG | Environnement d’enquête en ligne |
Accès restreint. Veuillez vous connecter ou commencer un essai pour afficher ce contenu.
Demander l’autorisation de réutiliser le texte ou les figures de cet article JoVE
Demander une autorisation