È richiesta un abbonamento a JoVE per visualizzare questo contenuto. Accedi o inizia la tua prova gratuita.

Articolo metodologico

Utilizzando i movimenti di occhio registrati nel paradigma mondo visivo per esplorare l'elaborazione Online di lingua parlata

10.5K visualizzazioni

⸱

DOI:

10.3791/58086

⸱

13 ottobre 2018

In questo articolo

Sommario

Il paradigma del mondo visivo monitora i movimenti degli occhi dei partecipanti nell'area di lavoro visual come sono ascoltando o parlando una lingua parlata. Questo paradigma può essere utilizzato per indagare l'elaborazione online di una vasta gamma di domande psicolinguistiche, tra cui istruzioni, semanticamente complesse, ad esempio disgiuntiva.

Abstract

In un tipico occhio Studio utilizzando il paradigma del mondo visivo di rilevamento, dei partecipanti occhio movimenti agli oggetti o immagini nell'area di lavoro visual vengono registrate tramite eye tracker come il partecipante produce o comprende una lingua parlata che descrive il visual simultanee mondo. Questo paradigma ha elevata versatilità, come può essere utilizzato in una vasta gamma di popolazioni, compresi quelli che non sanno leggere e/o apertamente che non può dare loro risposte comportamentali, come i bambini del preliterate, adulti anziani e pazienti. Ancora più importante, il paradigma è estremamente sensibile alle manipolazioni grana del segnale vocale, e può essere utilizzato per studiare l'elaborazione in linea della maggior parte degli argomenti nella comprensione del linguaggio a più livelli, ad esempio la grana acustica fonetica caratteristiche, le proprietà delle parole e strutture linguistiche. Il protocollo descritto in questo articolo viene illustrato come viene condotto un occhio tipico mondo visual studio di monitoraggio, con un esempio che illustra come l'elaborazione online di alcune istruzioni semanticamente complesse può essere esplorata con il paradigma del mondo visivo.

Introduzione

Lingua parlata è un flusso di informazioni veloce, in corso, che scomparirà subito. È una sfida per studiare sperimentalmente questo temporale, modificare rapidamente il segnale vocale. Movimenti di occhio registrati nel paradigma mondo visivo possono essere utilizzati per superare questa sfida. In un tipico occhio tracking studio utilizzando il paradigma del mondo visivo, movimenti degli occhi dei partecipanti a immagini in un display o a oggetti reali in un'area di lavoro visual vengono monitorati come ascoltare, o produrre, lingua parlata, raffigurante il contenuto del mondo visivo1 ,2,

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Protocollo

Tutti i soggetti devono dare consenso informato scritto prima della gestione dei protocolli sperimentali. Tutte le procedure, moduli di consenso e il protocollo sperimentale sono stati approvati dal comitato etico di ricerca di la Beijing Language and Culture University.

Nota: Uno studio di comprensione utilizzando il paradigma del mondo visivo normalmente prevede i passaggi seguenti: introdurre i problemi teorici di essere esplorato; Formare un disegno sperimentale; Preparare gli stimoli visivi e uditivi; Inquadrare il problema teorico per quanto riguarda il disegno sperimentale; Selezionare un eye-tracking per monitorare i movimenti degli....

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Risultati

Le risposte del comportamento dei partecipanti sono riassunti nella Figura 4. Come abbiamo descritto in precedenza, la risposta corretta a una dichiarazione congiunta (S1 e S2) è la grande scatola aperta, ad esempio Box A nella Figura 1. La risposta corretta a una ma-istruzione (S1 ma non S2) è la piccola scatola aperta contenente il primo animale accennato, come casella D nella Fig.......

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Discussione

Per condurre uno studio di mondo visivo, ci sono diversi passaggi critici da seguire. In primo luogo, i ricercatori intendono dedurre l'interpretazione del linguaggio uditivamente presentato tramite movimenti oculari dei partecipanti nel mondo visivo. D'ora in poi, nella progettazione del layout di stimoli visivi, le proprietà dei movimenti oculari in un'attività naturale che potenzialmente influenzano movimenti oculari dei partecipanti dovrebbero essere controllate. L'effetto della lingua parlata sui movimenti di occhio.......

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Dichiarazioni

L'autore dichiara che non ha nessun concorrenti interessi finanziari.

Ringraziamenti

Questa ricerca è stata sostenuta da Science Foundation di Beijing Language and Cultural University nell'ambito dei fondi di ricerca fondamentali per le Università centrale (approvazione numero 15YJ050003).

....

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Materiali

Elenco dei materiali utilizzati in questo articolo
NomeAziendaNumero di catalogoCommenti
PixelmatorPixelmator Teamhttp://www.pixelmator.com/pro/app per l'editing di immagini
PraatOpen Soursehttp://www.fon.hum.uva.nl/praat/software di analisi e modifica del suono
Eyelink 1000plusSR-Research, Inchttps://www.sr-research.com/products/eyelink-1000-plus/tracker oculare a infrarossi remoto 
Costruttore sperimentaleSR-Research, Inchttps://www.sr-research.com/experiment-builder/software per il tracciamento degli occhi 
Visualizzatore di datiSR-Research, Inchttps://www.sr-research.com/data-viewer/software per il monitoraggio degli occhi 
ROpen Soursehttps://www.r-project.orgambiente software gratuito per il calcolo statistico e la grafica

Riferimenti

  1. Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
  2. Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language p....

Accesso limitato. Accedi o avvia una prova gratuita per visualizzare questo contenuto.

Ristampe e permessi

Tag

Eye trackingElaborazione del linguaggio parlatoStimoli visiviStimoli audioAnalisi dei datiSistema EyeLinkTracciamento dello sguardoComprensione online