Eye Tracking durante la comprensione del linguaggio visivo situato: Flessibilità e limitazioni a scoprire gli effetti di contesto visivo

Questo metodo può aiutare a rispondere alle domande chiave di ricerca in psicolinguistica riguardo ai processi mentali implicati nella comprensione del linguaggio. Il vantaggio di questa tecnica è che fornisce un indice di attenzione visiva ad alta risoluzione temporale, orientato ad esame del rapporto tra il mondo visivo e l'elaborazione del linguaggio. Gli individui nuovi a questo metodo possono avere difficoltà perché il protocollo deve essere eseguito con un alto grado di precisione.

La dimostrazione visiva di questo metodo è fondamentale in quanto l'implementazione corretta del metodo richiede spesso la risoluzione dei problemi ad hoc. Per determinare la dominanza oculare, chiedi al partecipante di allungare un braccio e allineare il pollice con un oggetto distante con entrambi gli occhi aperti. Fare in modo che il partecipante si alterni chiudendo ogni occhio.

L'occhio dominante è l'occhio per il quale il pollice rimane allineato con l'oggetto quando quell'occhio è aperto. Quindi, chiedi al partecipante di sedersi al tavolo con il mento sul poggiamento del mento e la fronte contro il poggiatesta. Fare quindi clic su immagine per visualizzare il PC. Dovrebbero apparire una grande e due immagini più piccole degli occhi del partecipante.

Utilizzare i tasti di direzione della tastiera per selezionare una delle immagini oculari dominanti più piccole e premere A per centrare la casella dei limiti di ricerca sulla posizione della pupilla. Un quadrato rosso dovrebbe apparire intorno all'occhio con un cerchio turchese vicino al fondo della pupilla. L'alunno stesso dovrebbe essere blu.

Confermare la presenza di due mirini sullo schermo, uno al centro della pupilla e uno al centro della riflessione corneale. Regolare le dimensioni della riflessione corneale è fondamentale. È la base per una buona calibrazione dell'eye tracker.

Ruotare manualmente l'obiettivo di messa a fuoco per regolare la fotocamera in base alle esigenze, facendo attenzione a non toccare la parte anteriore dell'obiettivo fino a quando il riflesso corneale non è il più piccolo possibile. Quindi premere A per impostare automaticamente le soglie pupille e corneali sul computer ospitante in modo che l'intero alunno e solo l'alunno sia blu. Per calibrare l'eye tracker, chiedi al partecipante di guardare i quattro angoli dello schermo uno alla volta con la finestra di configurazione della fotocamera in vista mentre cerca attentamente eventuali riflessi irregolari che interferiscono con il riflesso corneale quando lo sguardo del partecipante è diretto all'angolo.

Se la casella rossa intorno all'occhio o uno dei mirini non sono visibili in nessun punto, fare in modo che il partecipante guardi prima il centro dello schermo e quindi l'angolo problematico per determinare la fonte del problema. Riregolare la posizione della testa del partecipante per verificare se ciò produce un miglioramento. Successivamente, informa il partecipante che l'eye tracker sarà calibrato e che deve fissarsi sul piccolo punto grigio all'interno di un cerchio nero più grande mentre il cerchio si sposta su diverse parti dello schermo.

Quando il partecipante è pronto, fare clic su calibra per iniziare il processo di calibrazione a nove punti, premendo INVIO dopo che il partecipante ha fissato accuratamente il primo punto al centro dello schermo per una calibrazione automatica. Al termine del processo di calibrazione, sullo schermo dello sperimentatore dovrebbe essere visibile un motivo quasi rettangolare che rappresenta i motivi dello sguardo del partecipante. I risultati di una buona calibrazione saranno evidenziati in verde.

Per convalidare i risultati, fare in modo che il partecipante ripeta la procedura, ricordando al partecipante di guardare il punto e di rimanere fermo. Fare clic su convalida e immettere per accettare ogni fissazione. I risultati verranno visualizzati sul monitor del computer host.

Si notano gli errori medi e massimi. Questi dati rappresentano i gradi in cui l'immagine tracciata si discosta dalla posizione dello sguardo effettivo del partecipante. Se l'errore medio è superiore a 0,5 gradi e/o l'errore massimo è superiore a un grado, fare in modo che il partecipante riregola la posizione della testa e riavvii la procedura di calibrazione.

Mantenere il tasso massimo di errore al di sotto di un grado è fondamentale per la raccolta di dati di alta qualità. Si noti che queste sono le soglie per tracciare lo sguardo a oggetti relativamente grandi durante la comprensione della lingua parlata. Le soglie per il tracciamento oculare durante la lettura sono ancora più basse.

Dopo aver completato correttamente il processo di calibrazione, fare clic sul record di output per iniziare l'esperimento. Come esempio per tenere traccia dei movimenti oculari durante la lettura in posizione, mostra prima due carte da gioco che si avvicinano o si allontanano. Quindi fai leggere al partecipante una frase su due concetti che sono rappresentati come simili o dissimili l'uno dall'altro per valutare se la distanza tra le carte può modulare la comprensione della somiglianza nel linguaggio.

Come esempio per registrare i movimenti oculari durante la comprensione del linguaggio uditivo, mostra prima al partecipante un video di un evento di interesse. Quindi mostra al partecipante una scena di destinazione contenente le immagini dell'agente e degli oggetti del video e un agente del genere opposto più l'immagine di un altro oggetto. Contemporaneamente, riproduci una frase che descrive un evento che corrisponde o non corrisponde al video precedente per valutare in che misura il sesso delle mani di un agente presenti negli eventi precedenti può influenzare quale volto della scena di destinazione il partecipante anticiperà durante la comprensione parlata.

In questo esperimento rappresentativo di tracciamento oculare di lettura, i tempi di lettura media del primo passaggio degli aggettivi di somiglianza erano più brevi per le frasi di somiglianza dopo aver osservato due carte da gioco avvicinarsi rispetto a quando le carte erano spostate più distanti. Qui, un'analisi dei rapporti media dello sguardo di log durante la regione verbale di un test di comprensione uditivo rivela che i partecipanti avevano maggiori probabilità di ispezionare l'immagine dell'agente il cui genere corrispondeva agli eventi in un video precedentemente mostrato quando l'oggetto e il verbo menzionati nella frase successiva erano congruenti con il video e corrispondevano stereotipatamente a questo agente rispetto a quando non corrispondevano a queste due dimensioni. Durante l'esecuzione di questa procedura, è importante ricordare che la precisione nell'esecuzione di ogni passaggio è fondamentale per la raccolta di dati di alta qualità.

In questo modo, possiamo ottenere informazioni dettagliate sulla misura in cui i contesti dell'immagine modulano in modo incrementale la comprensione del linguaggio in tempo reale. Le misure post-frase o post-esperimento, come i tempi di risposta e l'accuratezza, o i dati di altri test offline possono arricchire le informazioni che possono essere ottenute dalle misure di fissazione online. Questa tecnica ha consentire agli psicolinguisti di indagare le rappresentazioni mentali e i processi in tempo reale implicati nella comprensione del linguaggio.