Este artigo tem como objetivo descrever as técnicas envolvidas na coleta e sincronização das múltiplas dimensões (comportamental, afetiva e cognitiva) do engajamento dos alunos durante uma tarefa.
Method Article
Este artigo tem como objetivo descrever as técnicas envolvidas na coleta e sincronização das múltiplas dimensões (comportamental, afetiva e cognitiva) do engajamento dos alunos durante uma tarefa.
Em uma recente síntese teórica sobre o conceito de engajamento, Fredricks, Blumenfeld e Paris1 definiram o engajamento por suas múltiplas dimensões: comportamental, emocional e cognitiva. Eles observaram que os tipos individuais de engajamento não foram estudados em conjunto, e poucas informações estavam disponíveis sobre interações ou sinergia entre as dimensões; Consequentemente, mais estudos contribuiriam para a criação de intervenções de ensino bem ajustadas. Beneficiando-se dos recentes avanços tecnológicos em neurociências, este artigo apresenta uma metodologia recentemente desenvolvida para coletar e sincronizar dados sobre engajamento multidimensional durante tarefas de aprendizagem. A técnica envolve a coleta de (a) eletroencefalografia, (b) eletrodérmica, (c) rastreamento ocular e (d) dados de reconhecimento de emoções faciais em quatro computadores diferentes. Isso levou a problemas de sincronização para dados coletados de várias fontes. A pós-sincronização em software de integração especializado oferece aos pesquisadores uma melhor compreensão da dinâmica entre as múltiplas dimensões do engajamento. Para os desenvolvedores de currículo, esses dados podem fornecer diretrizes informadas para alcançar uma melhor eficiência de instrução/aprendizagem. Essa técnica também abre possibilidades no campo das interações cérebro-computador, onde ambientes de aprendizagem ou avaliação adaptativos podem ser desenvolvidos.
Engagement desempenha um papel crucial na aprendizagem. Para Clark e Mayer 2, "toda a aprendizagem requer engajamento", independentemente dos meios de comunicação de entrega. Zhang et al. 3 também sugeriram que o aumento do envolvimento do aluno pode melhorar os resultados de aprendizagem, tais como resolução de problemas e habilidades de pensamento crítico. Definindo engajamento continua a ser um desafio. Em sua revisão da literatura, Fredricks, Blumenfeld e Paris 1 definido engajamento por sua natureza multifacetada: "engajamento comportamental baseia-se na idéia de participação; que inclui o envolvimento em atividades acadêmicas e sociais ou extracurriculares. (...) O envolvimento emocional engloba reações positivas e negativas para os professores, colegas, acadêmicos e escola e é presumida para criar laços com um objeto e influência vontade de fazer o trabalho. Finalmente, envolvimento cognitivo baseia-se na idéia de investimento mental; ele incorpora consideração e vontade de exercer o esforço neccessário para compreender idéias complexas e dominar as habilidades difíceis ".
Fredricks, Blumenfeld e Paris 1 também alegou que um foco em comportamento, emoção e cognição, dentro do conceito de engajamento, pode fornecer uma caracterização mais rica de aprendizado. Estes autores apontam que um corpo robusto de pesquisa aborda cada componente de envolvimento separadamente, mas esses componentes não foram estudadas em conjunto. Eles também observaram que há pouca informação disponível sobre as interações entre as dimensões e que mais estudos poderão contribuir para o planejamento de intervenções de ensino afinado. Como um passo nesse sentido, este trabalho descreve uma metodologia de pesquisa que foi desenvolvido para coletar e analisar dados quantitativos e qualitativos, de forma síncrona, no engajamento comportamental, emocional e cognitiva durante tarefas de aprendizagem.
Trazendo as Neurociências em Educação
Behavior e, consequentemente, o engajamento comportamental, tem sido o foco central de estudos em educação: projetos de pesquisa focados principalmente em mudanças no conhecimento e comportamento que ocorrem ao longo de grandes períodos de tempo, entre pré e pós-testes, e ao longo de intervalos de horas, semanas , meses ou anos. Discriminando entre engajamento comportamental, emocional, cognitivo e continua a ser um desafio, porque as duas últimas dimensões não são sistematicamente observável externamente. Cognição e as emoções ou deve ser inferida a partir de observações ou avaliados com medidas de auto-relato. De um ponto de vista externo, continua a ser difícil determinar se os alunos estão a tentar fazer o seu trabalho o mais rapidamente possível ou utilizando estratégias de aprendizagem de nível profundo de dominar um conteúdo específico. Na verdade, Fredricks, Blumenfeld e Paris 1 foram incapazes de encontrar qualquer estudos publicados utilizando medidas diretas, objetivas de envolvimento cognitivo.
Os desenvolvimentos tecnológicos recentes emo domínio das neurociências criaram novas possibilidades de pesquisa em educação. Novos métodos de coleta de dados e algoritmos de análise desenvolvidos no campo da ergonomia neuro parece muito promissor para estudos qualitativos e quantitativos durante as tarefas de aprendizagem. Outras disciplinas, tais como economia, psicologia, marketing e ergonomia, têm vindo a utilizar medições neurofisiológicas para avaliar o envolvimento cognitivo por algum tempo 4-8. Medidas neurofisiológicas, juntamente com algoritmos de análise eficientes, permitem estudar um fenômeno sem perturbá-la. Pela sua natureza, os questionários de auto-relato desengatar alunos de aprendizagem. Medidas neurofisiológicas permitir que projetos de pesquisa a ser realizada em ambientes de aprendizagem mais autênticas. Essas ferramentas incluem equipamento para monitorar a frequência cardíaca, frequência respiratória, pressão arterial, temperatura corporal, diâmetro da pupila, a atividade electrodermal, eletroencefalografia (EEG), etc.
Como resultados representativos na sequência da utilização deste protocolo, este documento irá apresentar os resultados parciais de um estudo no qual os alunos tinham de resolver, em uma tela de computador, dez problemas em física mecânica. Estes problemas foram desenvolvidos em trabalhos anteriores 9. Dados neurofisiológicos foram coletadas enquanto os alunos foram resolvendo os problemas e relaxante durante uma pausa de 45 s, com os olhos fechados, depois de cada problema.
Como mencionado acima, os dados de noivado comportamentais consistem de interações de software (movimentos e cliques do mouse), o olhar dos olhos, desempenho e respostas a perguntas produzidos por um aluno interagir com o sistema ao realizar a tarefa 1. Um sistema de rastreamento ocular foi utilizado para coletar interações de software e dados do olhar olho. Os dados de desempenho (tempo para resolver um problema, correção de respostas) foram coletados em umsite pesquisa que foi utilizado para apresentar a tarefa. Este site também foi usado para reunir dados de auto-relato recolhidos com um questionário adaptado de Bradley e Lang 10. Envolvimento emocional envolve a caracterização das emoções. De acordo com Lang 11, as emoções são caracterizados em termos de valência (agradável / desagradável) e excitação (calma / despertado). Dados envolvimento emocional foram devidamente recolhidos, usando software de reconhecimento facial automático emoção que quantifica valência emocional e uma atividade codificador / sensor electrodermal para despertar 12,13. Actividade Eletrodermal (EDA) refere-se à resistência eléctrica entre os dois eléctrodos gravada quando uma corrente eléctrica é muito fraco continuamente passados entre eles. Cacioppo, Tassinary Berntson e 14 mostraram que a resistência gravado varia de acordo com a excitação do sujeito. Assim, os dados psicofisiológicas, como valência ou excitação, são considerados como correlatos de envolvimento emocional.
14, essas bandas refletem diferentes habilidades de processamento cognitivo em áreas específicas do cérebro. Assim, a análise da densidade de potência espectral (PSD) de frequências específicas, combinados com numerosos estudos sobre o estado de alerta e 7,15 atenção, permite aos investigadores quantificar envolvimento cognitivo durante uma tarefa. Como Millar et al. 16 observou, a pesquisa mostrou uma relação direta entre a atividade beta e agilidade cognitiva e uma relação indireta entre um alfad atividade theta e agilidade. Assim, o Papa, Bogart e Bartoleme 7 desenvolveram um índice de noivado que calcula o PSD de três bandas: beta / (alfa + teta). Esse índice foi validado em outros estudos sobre o envolvimento 16,17,18. Para caracterizar o envolvimento cognitivo ao longo do tempo, uma transformada de Fourier rápida (FFT) converte o sinal de EEG de cada local activo (F3, F4, O1, O2) num espectro de potência. O índice de acoplamento de EEG no tempo T é calculado pela média de cada razão de acoplamento dentro de uma janela deslizante de 20 seg precedente tempo T. Este procedimento é repetido a cada segundo e uma nova janela de correr é utilizado para actualizar o índice.Uma vez que o objectivo desta metodologia é fornecer uma rica análise das múltiplas dimensões de engajamento, a sincronização de dados é crucial. Como Leger et al. 19 lembrar aos leitores, fabricantes de equipamentos altamente recomendável utilizar apenas um computador por ferramenta de medição para garantir a sua precisão especificada level. Assim, quando vários computadores estão empregados, a sincronização entre computadores de gravação torna-se um passo crítico. As gravações não podem ser iniciadas ao mesmo tempo exato, e cada fluxo de dados tem o seu período de tempo específico (por exemplo, sec 0 de olho rastreamento ≠ sec 0 de EEG ou dados fisiológicos). Isso é extremamente importante: dessincronização entre fluxos de dados significa erros na quantificação de cada dimensão de engajamento. Existem diferentes formas de sincronizar gravações fisiológicas e comportamentais simultâneas. Estes métodos podem ser divididos em duas abordagens principais; direta e indireta 20. O protocolo apresentado na próxima seção é baseada em uma abordagem indireta, onde um dispositivo externo, um syncbox, é usado para enviar sinais de lógica transistor-transistor (TTL) para todos os equipamentos de gravação (como mostrado na Figura 1). À medida que cada peça de equipamento tem uma hora de início diferente, os marcadores TTL são registrados nos arquivos de log com um parente atraso. Os marcadores são então usadas para realinhar os sinais e, assim, assegurar uma sincronização apropriada depois de cada gravação. Um programa de software de análise comportamental que permite a integração de arquivo externo é usado para re-sincronizar o cronograma de cada fluxo de dados e para realizar a análise quantitativa e qualitativa de cada dimensão de engajamento.

Figura 1. Arquitetura do Sistema de Coleta de Dados. O ambiente de laboratório no qual comportamental (eye-tracking), emocional (EDA e emoção facial) e dados cognitivos (EEG) de noivado são recolhidos contém muitos computadores. Isto levanta um desafio para a sincronização de dados que são referenciados em seus respectivos relógios dos computadores. Para ser capaz de analisar todos os dados no mesmo tempo de referência, a configuração do laboratório envolve um syncbox que envia sinais TTL para todos os fluxos de dados.nk "> Clique aqui para ver uma versão maior desta figura.
Para avaliar a precisão da metodologia em termos de sincronização, 45 seg pausas foram introduzidas antes de cada um dos problemas de física mecânica. Durante essas pausas, os sujeitos tiveram para relaxar e fechar os olhos. Como visto em outros estudos 4,9,16,17,18, essas pausas devem induzir variações significativas no sinal coletado: os dois pontos pupila do olho em olho-tracking imediatamente desaparecer (engajamento comportamental) e uma queda imediata no envolvimento cognitivo (EEG sinal) é observada. Estes componentes específicos do sinal são usadas para avaliar a eficácia geral da sincronização. A recente publicação de documentos que total ou parcialmente dependem desse procedimento de sincronização, nas áreas de sistemas de informação 19, interações homem-máquina 21 e educação 9, 22, fornece provas da sua eficácia.
Access restricted. Please log in or start a trial to view this content.
Este protocolo recebeu um certificado de ética do Comité de la recherche institutionnel avec des êtres humains (CIER) de l'Université du Québec à Montréal (UQAM), que foi aprovado pelo HEC-Montreal para o centro de pesquisa Tech3Lab. O protocolo descreve cada um dos passos específicos que são realizados em nosso meio ambiente e equipamentos de laboratório. Embora caminhos de software precisos são fornecidos para esclarecer a metodologia, esta técnica é transferível e pode ser replicado com outros eye-tracking proprietário, automático reconhecimento de emoções faciais, atividade electrodermal e equipamentos eletroencefalografia e software.
1. Configuração do Laboratório de Meio Ambiente
2. Participante Preparação
3. Coleta de Dados
4. Fim de Coleta de Dados
5. Depois de o Participante Has Left
6. Dados Pré-processamento e exportação para o Software de Integração
7. Data Integration e sincronização
Access restricted. Please log in or start a trial to view this content.
Figuras 2 e 3 mostram screenshots dos resultados da integração e sincronização dos dados de noivado comportamentais, emocionais e cognitivas em uma aplicação de software de análise comportamental. Em ambas as figuras, a seção da mão esquerda organiza os sujeitos da pesquisa e do esquema de codificação. Na seção do meio, um vídeo (com pontos vermelhos) mostra olhar olho do sujeito durante a tarefa. Engajamento comportamental do indivíduo pode ser inferida com base no que ele / ela está olhando durante a ...
Access restricted. Please log in or start a trial to view this content.
Em termos de etapas críticas no âmbito do protocolo, ele deve primeiro ser salientado que a qualidade dos dados é sempre o foco principal para técnicas de coleta de neurofisiológicos. Nesta metodologia, assistentes de investigação devem prestar especial atenção à instrução dos assuntos para minimizar movimentos da cabeça que irão interferir com a monitorização de valência (perdendo ângulo de face correta para a câmera) ou geram artefatos miográfica no EEG. Por outro lado, um equilíbrio deve ser mantida entre a autentici...
Access restricted. Please log in or start a trial to view this content.
Os autores não têm nada a divulgar.
Os autores agradecem o apoio financeiro do Conselho de Pesquisa em Ciências Sociais e Humanas do Canadá (SSHERC), Conselho de Pesquisa em Ciências Naturais e Engenharia do Canadá (NSERC), Fonds de Recherche Nature et Technologies du Québec (FQRNT) e Fonds de Recherche sur la Société et Culture du Québec (FQRSC).
Access restricted. Please log in or start a trial to view this content.
| Name | Company | Catalog Number | Comments |
|---|---|---|---|
| EGI GSN-32 | EGI | Dense array EEG | |
| Netstation v.5.0 | EGI | EEG: O EEG é coletado com uma rede de sensores geodésicos de eletroencefalografia de matriz densa (dEEG) de 32 eletrodos usando o software de aquisição Netstation e amplificadores EGI (Electrical Geodesics, Inc). O vértice (local de gravação Cz) é o eletrodo de referência para gravação. A impedância é mantida abaixo de 50 kΩ com uma taxa de amostragem de 250 Hz. | |
| Facereader v.4 | Noldus | Software de reconhecimento de emoções faciais | |
| Syncbox | O Noldus | Syncbox inicia o co-registro de dados de EEG e olhar enviando um sinal Transistor-Transistor Logic (TTL) para o amplificador EGI e um sinal de pressionamento de tecla para o Tobii Studio v 3.2. | |
| Logitech C600 Webcam | 960-000396 | Webcam usada para coletar dados de vídeo enviados ao mediarecorder e que serão analisados no Facereader | |
| The Observer XT | Noldus | : O Noldus Observer XT (Noldus Information Technology) é usado para sincronizar todos os dados de engajamento comportamental, emocional e cognitivo. | |
| Iluminação LED na tela | Noldus | Neon posicionado na tela do computador para iluminar corretamente o rosto dos sujeitos | |
| MediaRecorder | de coleta de dados de vídeo | Noldus | |
| Tobii 60X | Tobii | Colete padrões de movimento ocular : usado para gravar padrões de movimento ocular dos sujeitos a 60Hz durante o experimento. | |
| Tobii Studio v.3.2 | Tobii | Software de coleta e análise de dados de rastreamento ocular | |
| Analisador 2 | Software de processamento de sinal Brainvision | ||
| Acqknowledge v.4.0 | Biopac | ACK100M | Software de aquisição e processamento de sinais fisiológicos |
| Solução de germicida Control III | Maril Products. | 10002REVA-20002-1 | Solução desinfetante usada com capacetes de EEG: recomendado pela EGI |
| Unipark | QuestBack AG | Ambiente de pesquisa on-line |
Access restricted. Please log in or start a trial to view this content.
Request permission to reuse the text or figures of this JoVE article
Request Permission