Name: Utilizar movimientos oculares registrados en el paradigma de mundo Visual para explorar el procesamiento en línea del lenguaje hablado (Video) | JoVE Journal
Uploaded: 2018-10-13T12:30:00.000+00:00
Duration: 9 min 27 s
Description: Aprende el paradigma del mundo visual para estudiar el procesamiento del lenguaje hablado en tiempo real mediante el seguimiento ocular. Esta técnica permite investigar estructuras lingüísticas complejas en diversas poblaciones.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Esta investigación fue apoyada por Ciencia Fundación de Beijing Universidad de lengua y cultura en los fondos de Investigación Fundamental para las universidades Central (autorización número 15YJ050003).

<ol><li>Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Integration+of+visual+and+linguistic+information+in+spoken+language+comprehension%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Integration of visual and linguistic information in spoken language comprehension.</a> Science. 268 (5217), 1632-1634 (1995).</li>
<li>Cooper, R. M. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/001002857490005X">The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing.</a> Cognitive Psychology. 6 (1), 84-107 (1974).</li>
<li>Salverda, A. P., Tanenhaus, M. K. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aSalverda%2C+AP+%22Research+methods+in+psycholinguistics+and+the+neurobiology+of+language%3A+A+practical+guide%22">Research methods in psycholinguistics and the neurobiology of language: A practical guide</a>. de Groot, A. M. B., Hagoort, P. , Wiley. (2017).</li>
<li>Huettig, F., Rommers, J., Meyer, A. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Using+the+visual+world+paradigm+to+study+language+processing%3A+A+review+and+critical+evaluation%5BTitle%5D)+AND+%22Acta+Psychologica%22%5BJournal%5D)">Using the visual world paradigm to study language processing: A review and critical evaluation.</a> Acta Psychologica. 137 (2), 151-171 (2011).</li>
<li>Meyer, A. S., Sleiderink, A. M., Levelt, W. J. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Viewing+and+naming+objects%3A+Eye+movements+during+noun+phrase+production%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Viewing and naming objects: Eye movements during noun phrase production.</a> Cognition. 66 (2), B25-B33 (1998).</li>
<li>Griffin, Z. M., Bock, K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+the+eyes+say+about+speaking%5BTitle%5D)+AND+%22Psychological+Science%22%5BJournal%5D)">What the eyes say about speaking.</a> Psychological Science. 11 (4), 274-279 (2000).</li>
<li>Young, L. R., Sheena, D. <a target="_blank" href="https://link.springer.com/article/10.3758/BF03201553">Survey of eye movement recording methods.</a> Behavior Research Methods & Instrumentation. 7 (5), 397-429 (1975).</li>
<li>Conklin, K., Pellicer-Sánchez, A., Carrol, G. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aConklin%2C+K+%22Eye-tracking%3A+A+guide+for+applied+linguistics+research%22">Eye-tracking: A guide for applied linguistics research</a>. , Cambridge University Press. (2018).</li>
<li>Duchowski, A. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aDuchowski%2C+A+%22Eye+tracking+methodology%3A+Theory+and+practice%22">Eye tracking methodology: Theory and practice</a>. , 2, Springer. (2007).</li>
<li>Baayen, R. H., Davidson, D. J., Bates, D. M. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X07001398">Mixed-effects modeling with crossed random effects for subjects and items.</a> Journal of Memory and Language. 59 (4), 390-412 (2008).</li>
<li>Barr, D. J. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X07001015">Analyzing 'visual world' eyetracking data using multilevel logistic regression.</a> Journal of Memory and Language. 59 (4), 457-474 (2008).</li>
<li>Nixon, J. S., van Rij, J., Mok, P., Baayen, R. H., Chen, Y. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X16000280">The temporal dynamics of perceptual uncertainty: eye movement evidence from Cantonese segment and tone perception.</a> Journal of Memory and Language. 90, 103-125 (2016).</li>
<li>Bolker, B. M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Generalized+linear+mixed+models%3A+A+practical+guide+for+ecology+and+evolution%5BTitle%5D)+AND+%22Trends+in+Ecology+and+Evolution%22%5BJournal%5D)">Generalized linear mixed models: A practical guide for ecology and evolution.</a> Trends in Ecology and Evolution. 24 (3), 127-135 (2009).</li>
<li>Mirman, D., Dixon, J. A., Magnuson, J. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Statistical+and+computational+models+of+the+visual+world+paradigm%3A+Growth+curves+and+individual+differences%5BTitle%5D)+AND+%22Journal+of+Memory+and+Language%22%5BJournal%5D)">Statistical and computational models of the visual world paradigm: Growth curves and individual differences.</a> Journal of Memory and Language. 59 (4), 475-494 (2008).</li>
<li>Baayen, H., Vasishth, S., Kliegl, R., Bates, D. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X16302467">The cave of shadows: Addressing the human factor with generalized additive mixed models.</a> Journal of Memory and Language. 94, 206-234 (2017).</li>
<li>Baayen, R. H., van Rij, J., de Cat, C., Wood, S. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aBaayen%2C+RH+%22Mixed-Effects+Regression+Models+in+Linguistics%22">Mixed-Effects Regression Models in Linguistics</a>. Speelman, D., Heylen, K., Geeraerts, D. 4, Ch 4 49-69 (2018).</li>
<li>Zhan, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Scalar+and+ignorance+inferences+are+both+computed+immediately+upon+encountering+the+sentential+connective%3A+The+online+processing+of+sentences+with+disjunction+using+the+visual+world+paradigm%5BTitle%5D)+AND+%22Frontiers+in+Psychology%22%5BJournal%5D)">Scalar and ignorance inferences are both computed immediately upon encountering the sentential connective: The online processing of sentences with disjunction using the visual world paradigm.</a> Frontiers in Psychology. 9, (2018).</li>
<li>Maris, E., Oostenveld, R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Nonparametric+statistical+testing+of+EEG-+and+MEG-data%5BTitle%5D)+AND+%22Journal+of+Neuroscience+Methods%22%5BJournal%5D)">Nonparametric statistical testing of EEG- and MEG-data.</a> Journal of Neuroscience Methods. 164 (1), 177-190 (2007).</li>
<li>Barr, D. J., Jackson, L., Phillips, I. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Using+a+voice+to+put+a+name+to+a+face%3A+The+psycholinguistics+of+proper+name+comprehension%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology-General%22%5BJournal%5D)">Using a voice to put a name to a face: The psycholinguistics of proper name comprehension.</a> Journal of Experimental Psychology-General. 143 (1), 404-413 (2014).</li>
<li>van Gompel, R. P. G., Fischer, M. H., Murray, W. S., Hill, R. L. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aDahan%2C+D+%22Eye+movements%3A+A+window+on+mind+and+brain%22">Eye movements: A window on mind and brain</a>. , Elsevier. Ch. 21 471-486 (2007).</li>
<li>Parkhurst, D., Law, K., Niebur, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Modeling+the+role+of+salience+in+the+allocation+of+overt+visual+attention%5BTitle%5D)+AND+%22Vision+Research%22%5BJournal%5D)">Modeling the role of salience in the allocation of overt visual attention.</a> Vision Research. 42 (1), 107-123 (2002).</li>
<li>Grice, H. P. Vol. 3 Speech Acts. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aGrice%2C+HP+%22Syntax+and+semantics%22">Syntax and semantics</a>. Cole, P., Morgan, J. L. , Academic Press. 41-58 (1975).</li>
<li>Sauerland, U. <a target="_blank" href="http://semantics.uchicago.edu/kennedy/classes/w14/implicature/readings/sauerland04.pdf">Scalar implicatures in complex sentences.</a> Linguistics and Philosophy. 27 (3), 367-391 (2004).</li>
<li>Chierchia, G. <a target="_blank" href="https://www.annualreviews.org/doi/abs/10.1146/annurev-linguistics-011516-033846">Scalar implicatures and their interface with grammar.</a> Annual Review of Linguistics. 3 (1), 245-264 (2017).</li>
<li>Fox, D. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aFox%2C+D+%22Presupposition+and+Implicature+in+Compositional+Semantics%22">Presupposition and Implicature in Compositional Semantics</a>. Sauerland, U., Stateva, P. , Palgrave Macmillan. Ch. 4 71-120 (2007).</li>
<li>Meyer, M. C. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22Ignorance+and+grammar%22">Ignorance and grammar</a>. , Massachusetts Institute Of Technology. Unpublished PhD Thesis (2013).</li>
<li>SR Research Ltd. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22SR+Research+Experiment+Builder+User+Manual+%28Version+2.1.140%29%22">SR Research Experiment Builder User Manual (Version 2.1.140)</a>. , Ottawa, Canada. (2017).</li>
<li>SR Research Ltd. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22EyeLink%C2%AE+1000+Plus+Technical+Specifications%22">EyeLink® 1000 Plus Technical Specifications</a>. , Mississauga, Canada. (2017).</li>
<li>SR Research Ltd. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22EyeLink-1000-Plus-Brochure%22">EyeLink-1000-Plus-Brochure</a>. , Mississauga, Canada. (2017).</li>
<li>SR Research Ltd. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22EyeLink%C2%AE+1000+Plus+User+Manual+%28Version+1.0.12%29%22">EyeLink® 1000 Plus User Manual (Version 1.0.12)</a>. , Ottawa, Canada. (2017).</li>
<li>SR Research Ltd. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22EyeLink%C2%AE+Data+Viewer+User%E2%80%99s+Manual+%28Version+3.1.97%29%22">EyeLink® Data Viewer User’s Manual (Version 3.1.97)</a>. , Ottawa, Canada. (2017).</li>
<li>McQueen, J. M., Viebahn, M. C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Tracking+recognition+of+spoken+words+by+tracking+looks+to+printed+words%5BTitle%5D)+AND+%22The+Quarterly+Journal+of+Experimental+Psychology%22%5BJournal%5D)">Tracking recognition of spoken words by tracking looks to printed words.</a> The Quarterly Journal of Experimental Psychology. 60 (5), 661-671 (2007).</li>
<li>Altmann, G. T. M., Kamide, Y. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Incremental+interpretation+at+verbs%3A+restricting+the+domain+of+subsequent+reference%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Incremental interpretation at verbs: restricting the domain of subsequent reference.</a> Cognition. 73 (3), 247-264 (1999).</li>
<li>Altmann, G. T. M., Kamide, Y. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X07000101">The real-time mediation of visual attention by language and world knowledge: Linking anticipatory (and other) eye movements to linguistic processing.</a> Journal of Memory and Language. 57 (4), 502-518 (2007).</li>
<li>Snedeker, J., Trueswell, J. C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+developing+constraints+on+parsing+decisions%3A+The+role+of+lexical-biases+and+referential+scenes+in+child+and+adult+sentence+processing%5BTitle%5D)+AND+%22Cognitive+Psychology%22%5BJournal%5D)">The developing constraints on parsing decisions: The role of lexical-biases and referential scenes in child and adult sentence processing.</a> Cognitive Psychology. 49 (3), 238-299 (2004).</li>
<li>Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X97925584">Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models.</a> Journal of Memory and Language. 38 (4), 419-439 (1998).</li>
<li>Zhan, L., Crain, S., Zhou, P. <a target="_blank" href="https://www.tandfonline.com/doi/abs/10.1080/20445911.2015.1016527">The online processing of only if and even if conditional statements: Implications for mental models.</a> Journal of Cognitive Psychology. 27 (3), 367-379 (2015).</li>
<li>Zhan, L., Zhou, P., Crain, S. <a target="_blank" href="https://www.tandfonline.com/doi/abs/10.1080/23273798.2018.1448935">Using the visual-world paradigm to explore the meaning of conditionals in natural language.</a> Language, Cognition and Neuroscience. 33 (8), 1049-1062 (2018).</li>
<li>Brown-Schmidt, S., Tanenhaus, M. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Real-time+investigation+of+referential+domains+in+unscripted+conversation%3A+A+targeted+language+game+approach%5BTitle%5D)+AND+%22Cognitive+Science%22%5BJournal%5D)">Real-time investigation of referential domains in unscripted conversation: A targeted language game approach.</a> Cognitive Science. 32 (4), 643-684 (2008).</li>
<li>Fernald, A., Pinto, J. P., Swingley, D., Weinberg, A., McRoberts, G. W. <a target="_blank" href="http://journals.sagepub.com/doi/abs/10.1111/1467-9280.00044">Rapid gains in speed of verbal processing by infants in the 2nd year.</a> Psychological Science. 9 (3), 228-231 (1998).</li>
<li>Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+kindergarten-path+effect%3A+studying+on-line+sentence+processing+in+young+children%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">The kindergarten-path effect: studying on-line sentence processing in young children.</a> Cognition. 73 (2), 89-134 (1999).</li>
<li>Zhou, P., Su, Y., Crain, S., Gao, L. Q., Zhan, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%27s+use+of+phonological+information+in+ambiguity+resolution%3A+a+view+from+Mandarin+Chinese%5BTitle%5D)+AND+%22Journal+of+Child+Language%22%5BJournal%5D)">Children's use of phonological information in ambiguity resolution: a view from Mandarin Chinese.</a> Journal of Child Language. 39 (4), 687-730 (2012).</li>
<li>Zhou, P., Crain, S., Zhan, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Grammatical+aspect+and+event+recognition+in+children%27s+online+sentence+comprehension%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Grammatical aspect and event recognition in children's online sentence comprehension.</a> Cognition. 133 (1), 262-276 (2014).</li>
<li>Zhou, P., Crain, S., Zhan, L. <a target="_blank" href="https://www.sciencedirect.com/science/article/pii/S0749596X12000277">Sometimes children are as good as adults: The pragmatic use of prosody in children's on-line sentence processing.</a> Journal of Memory and Language. 67 (1), 149-164 (2012).</li>
<li>Moscati, V., Zhan, L., Zhou, P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%27s+on-line+processing+of+epistemic+modals%5BTitle%5D)+AND+%22Journal+of+Child+Language%22%5BJournal%5D)">Children's on-line processing of epistemic modals.</a> Journal of Child Language. 44 (5), 1025-1040 (2017).</li>
<li>Helfer, K. S., Staub, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Competing+speech+perception+in+older+and+younger+adults%3A+Behavioral+and+eye-movement+evidence%5BTitle%5D)+AND+%22Ear+and+Hearing%22%5BJournal%5D)">Competing speech perception in older and younger adults: Behavioral and eye-movement evidence.</a> Ear and Hearing. 35 (2), 161-170 (2014).</li>
<li>Dickey, M. W., Choy, J. W. J., Thompson, C. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Real-time+comprehension+of+wh-movement+in+aphasia%3A+Evidence+from+eyetracking+while+listening%5BTitle%5D)+AND+%22Brain+and+Language%22%5BJournal%5D)">Real-time comprehension of wh-movement in aphasia: Evidence from eyetracking while listening.</a> Brain and Language. 100 (1), 1-22 (2007).</li>
<li>Magnuson, J. S., Nusbaum, H. C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Acoustic+differences%2C+listener+expectations%2C+and+the+perceptual+accommodation+of+talker+variability%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology-Human+Perception+and+Performance%22%5BJournal%5D)">Acoustic differences, listener expectations, and the perceptual accommodation of talker variability.</a> Journal of Experimental Psychology-Human Perception and Performance. 33 (2), 391-409 (2007).</li>
<li>Reinisch, E., Jesse, A., McQueen, J. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Early+use+of+phonetic+information+in+spoken+word+recognition%3A+Lexical+stress+drives+eye+movements+immediately%5BTitle%5D)+AND+%22Quarterly+Journal+of+Experimental+Psychology%22%5BJournal%5D)">Early use of phonetic information in spoken word recognition: Lexical stress drives eye movements immediately.</a> Quarterly Journal of Experimental Psychology. 63 (4), 772-783 (2010).</li>
<li>Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Actions+and+affordances+in+syntactic+ambiguity+resolution%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology-Learning+Memory+and+Cognition%22%5BJournal%5D)">Actions and affordances in syntactic ambiguity resolution.</a> Journal of Experimental Psychology-Learning Memory and Cognition. 30 (3), 687-696 (2004).</li>
<li>Tanenhaus, M. K., Trueswell, J. C. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aTanenhaus%2C+MK+%22Approaches+to+Studying+World-Situated+Language+Use%3A+Bridging+the+Language-as-Product+and+Language-as-Action+Traditions%22">Approaches to Studying World-Situated Language Use: Bridging the Language-as-Product and Language-as-Action Traditions</a>. Trueswell, J. C., Tanenhaus, M. K. , The MIT Press. (2005).</li>
</ol>

El autor declara que él no tiene competencia financieras intereses.

Para llevar a cabo un estudio de mundo visual, hay varios pasos importantes a seguir. En primer lugar, los investigadores pretenden deducir la interpretación de la lengua presentada auditorily mediante movimientos oculares de los participantes en el mundo visual. En adelante, en el diseño de la disposición de los estímulos visuales, deben controlarse las propiedades de los movimientos del ojo en una tarea de natural que potencialmente afectan los movimientos de ojo de los participantes. Entonces se puede reconocer el efe...

Lengua hablada es un flujo de información rápido y continuo, que desaparece enseguida. Es un reto estudiar experimentalmente este temporal, cambiar rápidamente la señal de discurso. Movimientos oculares registrados en el paradigma de mundo visual se pueden utilizar para superar este desafío. En un ojo típico seguimiento estudio utilizando el paradigma de mundo visual, movimientos oculares de los participantes a los cuadros en una exhibición o a objetos reales en un espacio de trabajo visual se controlan como escucha, o produce, lengua hablada que representa el contenido del mundo visual1 ,2,3,4. La lógica básica, o la hipótesis de vinculación, detrás de este paradigma es que comprender o planificación de una elocución (abiertamente o secretamente) cambiarán la atención visual de los participantes hacia un cierto objeto del mundo visual. Este cambio de atención tendrá una alta probabilidad de iniciar un movimiento de ojo sacádicos para incorporar el área asistió a la visión foveal. Con este paradigma, los investigadores pretenden determinar en qué momento temporal, con respecto a alguna señal acústica en fonía, se produce un cambio en la atención visual del participante, según lo medido por un movimiento de ojo sacádicos a un objeto o una imagen en visual mundo. Cuándo y dónde se inician movimientos de ojo sacádicos en relación con la señal de voz se utilizan para deducir el procesamiento del lenguaje en línea. El paradigma del mundo visual se puede utilizar para estudiar el lenguaje hablado comprensión1,2 y producción5,6. Este artículo metodológico se centrará en los estudios de comprensión. En un estudio de comprensión utilizando el paradigma de mundo visual, ojo los participantes vigilan movimientos en la pantalla visual mientras escuchan las elocuciones habladas hablando sobre la presentación visual.
Sistemas de seguimiento de ojo diferentes han sido diseñados en la historia. El más simple, menos costoso y más portátil el sistema es sólo es una normal de la cámara de video, que registra una imagen de los ojos del participante. Movimientos de los ojos luego se codifican manualmente a través del examen de fotograma a fotograma de la grabación de vídeo. Sin embargo, la tasa de muestreo de tal un eye-tracker es relativamente baja, y el procedimiento de codificación es desperdiciador de tiempo. Así, un ojo comercial contemporáneo sistema de seguimiento normalmente utiliza sensores ópticos miden la orientación del ojo en su órbita7,8,9. Para entender cómo funciona un sistema de seguimiento de ojo comercial contemporáneo, se deben considerar los siguientes puntos. Primero, para medir correctamente la dirección de la visión foveal, un iluminador infrarrojo (normalmente con la longitud de onda alrededor 780-880 nm) normalmente se coloca a lo largo o apagar el eje óptico de la cámara, haciendo la imagen de la pupila distinguible más brillante o más oscuro que del iris circundante. La imagen de la pupila o de la reflexión corneal de la pupila (normalmente la primera imagen de Purkinje) entonces se utiliza para calcular la orientación del ojo en su órbita. En segundo lugar, la ubicación de la mirada en el mundo visual es en realidad contingente no sólo en la orientación del ojo con respecto a la cabeza sino también en la orientación principal en relación con el mundo visual. Para deducir con exactitud la mirada del sentido de la orientación del ojo, la fuente de luz y la cámara de los eye-trackers son fijos con respecto a la cabeza de los participantes (montado en la cabeza eye-trackers) o son fijos en relación con el mundo visual (montada en mesa o ojo remotos-trackers). En tercer lugar, orientación principal de los participantes debe fijarse bien en relación con el mundo visual o cómputo compensarse si la cabeza de los participantes es libre para moverse. Cuando se utiliza un eye-tracker remoto en forma de cabeza-libre-a-move, posición de la cabeza los participantes normalmente se registra colocando una pegatina pequeña en frente de los participantes. La orientación principal de cómputo entonces se resta de la orientación del ojo para recuperar la ubicación de la mirada en el mundo visual. En cuarto lugar, una calibración y un proceso de validación se requieren entonces para asignar la orientación del ojo a la mirada de respeto en el mundo visual. En el proceso de calibración, muestras de la fijación de los participantes desde los puntos de destino conocido se registran para los datos crudos ojos para contemplar la posición en el mundo visual. En el proceso de validación, los participantes se presentan con los mismos puntos de destino como el proceso de calibración. La diferencia existente entre la posición computada la fijación de los resultados calibrados y la posición real del objetivo determinada en el mundo visual se utilizan para juzgar la exactitud de la calibración. Para confirmar aún más la precisión del proceso de asignación, un control de deriva se aplica normalmente en cada ensayo, donde un objetivo de fijación solo se presenta a los participantes para medir la diferencia entre la posición computada la fijación y la posición real de la objetivo actual.
Los datos primarios de un estudio de mundo visual están una secuencia de localizaciones de la mirada en el mundo visual en la frecuencia de muestreo de la eye-tracker, que se extienden sobre la totalidad o parte de la duración del ensayo. La variable dependiente utilizada en el estudio de un mundo visual es típicamente la proporción de muestras que fijaciones de los participantes se encuentran en cierta región espacial en el mundo visual a través de un cierto intervalo de tiempo. Para analizar los datos, una ventana de tiempo tiene en primer lugar ser seleccionado, refiere a menudo como períodos de interés. La ventana de tiempo es generalmente tiempo-bloqueada a la presentación de algunos eventos lingüísticos en la entrada auditiva. Además, el mundo visual también es necesario dividir en varias regiones de interés (ROIs), cada una de ellas está asociada a uno o más objetos. Una de estas regiones contiene el objeto correspondiente a la correcta comprensión de la lengua hablada y así se denomina la zona de destino. Una manera típica para visualizar los datos es un complot de parte de la fijación, donde en cada compartimiento en una ventana de tiempo, la proporción de muestras con una mirada a cada región de interés son un promedio de los participantes y elementos.
¿Utilizando los datos obtenidos de un estudio de mundo visual, se pueden contestar preguntas de investigación diferentes: a) en el nivel de grano grueso, son movimientos del ojo de los participantes en el mundo visual afectados por la entrada lingüística auditiva diferente? b) si hay un efecto, ¿cuál es la trayectoria del efecto en el transcurso del juicio? ¿Es un efecto lineal o efecto de orden superior? y c) si hay un efecto, entonces en el nivel de grano fino, cuando es el primer punto temporal donde surge ese efecto y este efecto ¿cuánto pasado?
Para analizar estadísticamente los resultados, se deben considerar los siguientes puntos. En primer lugar, la variable de respuesta, es decir, proporciones de las fijaciones, tanto abajo como arriba limita (entre 0 y 1), que seguirá una distribución multinomial, en lugar de una distribución normal. En adelante, métodos estadísticos tradicionales basados en la distribución normal como el t-test, ANOVA y modelos lineales (efecto de mezcla)10, no pueden directamente utilizar hasta las proporciones han sido transformadas a variables ilimitadas con fórmula empírica logit11 o han sido reemplazados con ilimitada dependiente de variables como la distancia euclidiana12. También pueden utilizar técnicas estadísticas que no requieran que la asunción de la distribución normal tal generalizada modelos lineales (efecto de mezcla)13 . En segundo lugar, para explorar la trayectoria cambiante del efecto observado, una variable que denota la serie de tiempo tiene que ser añadido en el modelo. Esta variable de series de tiempo es el eye-tracker de muestreo puntos realineados a la aparición de la lengua de la entrada. Puesto que la trayectoria cambiante suele ser no lineal, una función polinómica de orden superior de la serie de tiempo se agrega normalmente en el () modelo lineal generalizado (efecto de mezcla), es decir, de análisis de curva de crecimiento14. Además, posiciones del ojo de los participantes en el punto de muestreo es altamente dependiente de puntos de muestreo anterior, especialmente cuando la frecuencia de grabación es alta, lo que resulta en el problema de la autocorrelación. Para reducir la autocorrelación entre los puntos de muestreo adyacentes, datos originales son a menudo abajo-muestreado o desechado. En los últimos años, los modelos de efecto mixto aditivo generalizado (GAMM) han utilizado también para hacer frente a los errores de autocorrelated12,15,16. El ancho de contenedores varía entre diversos estudios, que van desde varios milisegundos a varias centenas de milisegundos. El recipiente más estrecho que puede elegir un estudio está limitado por la frecuencia de muestreo del rastreador ocular utilizado en el estudio específico. Por ejemplo, si un perseguidor del ojo tiene una frecuencia de muestreo de 500 Hz, entonces el ancho de la ventana de tiempo no puede ser menor que 2 ms = 1000/500. En tercer lugar, cuando un análisis estadístico se aplica repetidamente a cada compartimiento de tiempo de los períodos de interés, el error del familywise inducida de éstos que deben acometerse las comparaciones múltiples. Como hemos descrito anteriormente, el análisis de trayectoria informa el investigador si el efecto observado en el nivel de grano grueso es lineal con respecto a los cambios del tiempo, pero no se presenta cuando el efecto observado comienza a surgir y cómo durante mucho tiempo observado efecto dura. Para determinar la posición temporal cuando la diferencia observada comienza a divergir y averiguar la duración del periodo temporal que dura el efecto observado, un análisis de la estadística debe ser aplicada repetidamente para cada compartimiento de tiempo. Estas comparaciones múltiples introducirá el supuesto error familywise, sin importar se utiliza qué método estadístico. Tradicionalmente se corrige el error del familywise con ajuste de Bonferroni17. Recientemente, se ha aplicado un método denominado prueba de permutación no paramétrico utilizado originalmente en Neuroimagen presentada18 a la palabra visual paradigma19 para controlar el error del familywise.
Los investigadores utilizando el paradigma de mundo visual pretenden inferir la comprensión de alguna lengua hablada de los movimientos de ojo de los participantes en el mundo visual. Para asegurar la validez de esta deducción, otros factores que posiblemente influyen en los movimientos del ojo deben descartar o controlar. Los siguientes dos factores están entre los más comunes que deben ser considerados. El primer factor involucra algunos patrones sistemáticos en fijaciones explicativo de los participantes independientemente de la lengua de entrada, como la tendencia a fijar en la parte superior izquierda quadrat del mundo visual y los ojos móviles en la dirección horizontal es más fácil que en la dirección vertical, etc.12,20 para asegurarse de que los patrones de fijación observada se relacionan con los objetos, no a las ubicaciones espaciales donde están situados los objetos, las posiciones espaciales de un objeto deben ser contrapesadas a través de diferentes ensayos o a través de los diferentes participantes. El segundo factor que pudiera influir en los movimientos de ojo de los participantes es las características básicas de imágenes de los objetos del mundo visual, como orientación de contraste, color y borde la luminancia, entre otros21. Para diagnosticar esta potencial confusión, la presentación visual normalmente se presenta antes del inicio de la lengua hablada o antes de la aparición del marcador acústico crítico de la lengua hablada, para cerca de 1000 Sra. durante el período temporal del inicio de la imagen de prueba para el inicio del prueba de audio, el idioma de entrada o el punto de desambiguación de la lengua de entrada no se ha escuchado todavía. Cualquier diferencia observada entre diferentes condiciones debe deducirse a otros factores de confusión tales como la exhibición visual propiamente, más que el idioma de entrada. En adelante, observados en este período de escuchar los movimientos de ojo proporcionan una base para determinar el efecto de la entrada lingüística. Este período de escuchar también permite a los participantes a familiarizarse con la representación visual y a reducir el sesgo sistemático de las fijaciones explicativos cuando se presenta la lengua hablada.
Para ilustrar cómo se realiza un ojo típico seguimiento estudio utilizando el paradigma de mundo visual, el siguiente protocolo describe un experimento adaptado de L. Zhan17 para explorar el procesamiento en línea de instrucciones complejas semánticamente, es decir, declaraciones disyuntivas (S1 o S2), declaraciones de conjuntivas (S1 y S2) y-declaraciones (S1 pero no-S2). En la conservación ordinaria, la información expresada por algunas expresiones es realmente más fuerte que su significado literal. Disyuntiva como caja de Xiaoming contiene una vaca o un gallo son tales declaraciones. Lógicamente, la declaración disyuntiva es cierto como los dos disjuncts caja de Xiaoming contiene una vaca y caja de Xiaoming contiene un gallo no son ambos falsos. Por lo tanto, lo disyuntivo es verdadero cuando los dos disjuncts son ambos verdaderos, donde la instrucción conjunta correspondiente caja de Xiaoming contiene una vaca y un gallo también es cierto. En ordinaria conversación, sin embargo, la audiencia que la declaración disyuntiva a menudo sugiere que la instrucción conjunta correspondiente es falsa (Implicatura escalar); y sugiere que los valores de verdad de los dos disjuncts son desconocidos por el altavoz (inferencia de ignorancia). Cuentas en la literatura difieren en si los dos inferencias son procesos gramaticales o pragmáticas22,23,24,25,26. El experimento muestra cómo el paradigma del mundo visual se puede utilizar para adjudicar entre estas cuentas, al explorar el procesamiento en línea de tres instrucciones complejas.

<table><tbody><tr><td>Pixelmator</td><td>Pixelmator Team</td><td>http://www.pixelmator.com/pro/</td> <td>aplicación de edición de imágenes</td></tr><tr><td>Praat</td><td>Open Sourse</td><td>http://www.fon.hum.uva.nl/praat/</td> <td>Software de análisis y edición de sonido</td></tr><tr><td>Eyelink 1000plus</td><td>SR-Research, Inc</td><td>https://www.sr-research.com/products/eyelink-1000-plus/</td> <td>rastreador ocular infrarrojo remoto&nbsp;</td></tr><tr><td>Constructor experimental</td><td>SR-Research, Inc</td><td>https://www.sr-research.com/experiment-builder/</td> <td>software de seguimiento ocular&nbsp;</td></tr><tr><td>Visor de datos</td><td>SR-Research, Inc</td><td>https://www.sr-research.com/data-viewer/</td> <td>software de seguimiento ocular&nbsp;</td></tr><tr><td>R</td><td>Open Sourse https://www.r-project.org</td><td></td><td>entorno de software libre para computación estadística y gráficos</td></tr></tbody></table>

utilizar movimientos oculares registrados en el paradigma de mundo visual para explorar el procesamiento en línea del lenguaje hablado

Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language

En un ojo típico utilizando el paradigma de mundo visual estudio de seguimiento, los participantes ojo movimientos a los objetos o imágenes en el espacio de trabajo visual se registran por medio de un rastreador de ojos como el participante produce o comprende una lengua hablada describiendo el visual simultánea mundo. Este paradigma tiene gran versatilidad, que puede ser utilizado en una amplia gama de poblaciones, los que no pueden leer o que no dan abiertamente sus respuestas conductuales, tales como preliterate niños, adultos mayores y pacientes incluidos. Lo más importante, el paradigma es extremadamente sensible a manipulaciones de la señal de discurso de grano fino, y puede ser utilizado para estudiar el procesamiento en línea de la mayoría de los temas en la comprensión del lenguaje en múltiples niveles, como el grano fino acústica fonética características, las propiedades de las palabras y las estructuras lingüísticas. El protocolo descrito en este artículo ilustra cómo un ojo típico mundo visual estudio de seguimiento se lleva a cabo, con un ejemplo que muestra cómo el procesamiento en línea de algunas declaraciones semánticamente complejos puede ser explorado con el paradigma de mundo visual.

Respuestas conductuales de los participantes se resumen en la figura 4. Como hemos descrito anteriormente, la respuesta correcta de una declaración conjunta (S1 y S2) es la gran caja abierta, como un cuadro en la figura 1. La respuesta correcta a un pero-declaración (S1 pero no S2) es la pequeña caja abierta que contiene el primer animal citado, como la caja de D en la figura 1</str...

El paradigma de mundo visual controla movimientos oculares de los participantes en el espacio de trabajo visual que están escuchando o hablando una lengua hablada. Este paradigma puede utilizarse para investigar el procesamiento en línea de una amplia gama de preguntas psicolingüísticas, incluyendo instrucciones semánticamente complejas, como disyuntiva.

Utilizar movimientos oculares registrados en el paradigma de mundo Visual para explorar el procesamiento en línea del lenguaje hablado

In a typical eye tracking study using the visual world paradigm, participants' eye movements to objects or pictures in the visual workspace are recorded ...

Este método puede ayudar a responder preguntas clave en el procesamiento en línea del lenguaje hablado, incluidas las oraciones semánticamente complejas, como disyunciones y condicionales. La principal ventaja de esta técnica es que se puede realizar en una amplia gama de poblaciones para estudiar la mayoría de los temas en áreas de procesamiento del lenguaje. Demostrando el procedimiento estará Xu Jing, un estudiante de posgrado.Cao Yifan, Wang Meng, Yang Xiaotong, Zhan Min y Zhou Xuehan son los estudiantes de mi grupo de investigación. Para preparar los estímulos visuales, descargue 60 imágenes prediseñadas libres de derechos de autor de animales de Internet y abra las imágenes en un editor de imágenes adecuado. Haga clic en Herramientas y utilice la selección rápida para seleccionar y eliminar el fondo de cada imagen.Haga clic en Tamaño de imagen e imagen para cambiar el tamaño de las imágenes a 120 por 120 píxeles y dibuje un cuadro grande abierto de 320 x 240 píxeles, un pequeño cuadro cerrado de 160 x 160 píxeles y dos cuadros pequeños abiertos de 160 x 240 píxeles. Abra un nuevo archivo para crear una plantilla de 1, 024 por 768 píxeles para la primera imagen de prueba y arr

using-eye-movements-recorded-visual-world-paradigm-to-explore-online

Research

Investigación

JoVE Journal

Behavior

Comportamiento

Control nervioso y los procesos cognitivos pueden ser estudiados a través de los movimientos oculares. El software VisualEyes permite a un operador para programar los estímulos en dos pantallas de ordenador de forma independiente utilizando un lenguaje de scripting personalizado simple. El sistema puede estimular los movimientos oculares sacádicos tándem (y seguimiento lento) o movimientos oculares opuestas (de convergencia) o cualquier combinación.

VisualEyes: Un sistema de software modular para experimentación oculomotor

El presente artículo describe cómo utilizar metodologías de seguimiento ocular para estudiar los procesos cognitivos involucrados en la comprensión de texto. Se incluyen descripciones de los equipos de seguimiento ocular, cómo desarrollar estímulos experimentales y recomendaciones de procedimientos. La información presentada se puede aplicar a la mayoría de cualquier estudio utilizando estímulos verbales.

Uso de movimientos oculares para evaluar los procesos cognitivos involucrados en la comprensión de texto

Para replicar entornos de laboratorio, los métodos de recolección de datos en línea para tareas visuales requieren un control estricto sobre la presentación de estímulos. Describimos métodos para el uso de una aplicación web para recopilar datos de rendimiento en dos pruebas de atención visual.

Métodos para probar Visual Atención Online

El presente artículo revisa una metodología de seguimiento de ojo para estudios sobre la comprensión del lenguaje. Para obtener datos confiables, se deben seguir pasos claves del protocolo. Entre ellos están el montaje correcto del perseguidor del ojo (por ejemplo, garantizar la buena calidad de las imágenes de la cara y cabeza) y calibración de precisión.

Eye Tracking durante la comprensión del lenguaje visual situado: Flexibilidad y las limitaciones de descubrir efectos de contexto Visual

El método fue diseñado para investigar el papel de la inhibición de retorno (IOR) en movimientos oculares regresivos durante la lectura. El foco está en diferenciar las regresiones que se desencadena como resultado de la comprensión dificultad versus los activa de error oculomotor, incluyendo el papel de la IOR en los dos tipos de regresiones.

Eye-tracking para distinguir movimientos oculares regresivos comprensión y Oculomotor durante la lectura

Presentamos un protocolo para examinar el uso de señales morfológicas durante la comprensión de la oración en tiempo real por los niños con autismo.

Utilizando el paradigma de mundo Visual para el estudio de comprensión de la frase en mandarín-los niños con autismo

Los estudios de seguimiento ocular utilizando un paradigma de aspecto preferencial se pueden utilizar para estudiar la comprensión emergente de los bebés y su atención a su mundo visual externo.

Explorar la sensibilidad infantil al lenguaje visual mediante el seguimiento ocular y el paradigma de aspecto preferencial

Aquí, presentamos un protocolo que emplea tareas de interferencia dual-modal para examinar el procesamiento en línea de las frases de cláusula relativa habladas y chinas. Se describen dos experimentos ejemplares que implican el procesamiento auditivo con interferencias intra y extrasententiales. El paradigma proporciona una metodología para abordar la naturaleza de la memoria funcional y sus efectos en el procesamiento de oraciones.

Examen del procesamiento sintáctico en línea de frases complejas habladas en chino mediante tareas de interferencia dual-modal

El estudio propone un modelo de activación-coincidencia para estudiar cómo se mitiga la soledad cuando un público solitario ve videos de emociones racionales y emocionales. El protocolo utiliza el seguimiento ocular para documentar la duración y la fijación, teniendo en cuenta el grado de satisfacción cuando las necesidades emocionales son apaciguadas por el contenido y el aluvión.

Soledad Assuaged: Seguimiento ocular de un público que ve los videos de Barrage

Presentamos un protocolo que emplea el seguimiento ocular para monitorear los movimientos oculares durante una tarea de comparación de intervalos (percepción de duración) basada en eventos visuales. El objetivo es proporcionar una guía preliminar para separar las respuestas oculomotoras a las tareas de percepción de la duración (comparación o discriminación de intervalos de tiempo) de las respuestas al estímulo en sí.

Movimientos oculares en la percepción visual de la duración: desenredando el estímulo del tiempo en los procesos predecisionales

Aprende el paradigma del mundo visual para estudiar el procesamiento del lenguaje hablado en tiempo real mediante el seguimiento ocular. Esta técnica permite investigar estructuras lingüísticas complejas en diversas poblaciones.

Utilizar movimientos oculares registrados en el paradigma de mundo Visual para explorar el procesamiento en línea del lenguaje hablado (Video) | JoVE Journal

Utilizar movimientos oculares registrados en el paradigma de mundo Visual para explorar el procesamiento en línea del lenguaje hablado

Explorar más videos