Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

नेत्रहीन के दौरान आंख ट्रैकिंग भाषा समझ स्थित: लचीलापन और दृश्य संदर्भ प्रभाव को उजागर करने में सीमाएं

Published: November 30, 2018 doi: 10.3791/57694
Automatic Translation
1, 1, 2, 3, 1,4, 4, 4, 4, 5, 4, 1,6,7
1Institute of German Studies and Linguistics, Humboldt-Universität zu Berlin, 2Center for Advanced Research in Education – CIAE, Universidad de Chile, 3Institute of Psychology, Friedrich Schiller University Jena, 4Cognitive Interaction Technology Excellence Cluster (CITEC), Faculty of Linguistics and Literature, Bielefeld University, 5Department of Education, Concordia University, 6Berlin School of Mind and Brain, 7Einstein Center for Neurosciences Berlin

Summary

वर्तमान लेख भाषा समझ पर अध्ययन के लिए एक आंख पर नज़र रखने पद्धति की समीक्षा । विश्वसनीय डेटा प्राप्त करने के लिए, प्रोटोकॉल के प्रमुख चरणों का पालन किया जाना चाहिए । इनमें नेत्र ट्रैकर की सही सेट अप (जैसे, आंख और सिर छवियों की अच्छी गुणवत्ता सुनिश्चित करने के लिए) और सही अंशांकन कर रहे हैं ।

Abstract

वर्तमान काम एक वर्णन और भाषा प्रसंस्करण और दृश्य दुनिया की धारणा के बीच बातचीत के विभिन्न पहलुओं को बढ़ाता है के लिए डिज़ाइन किया गया एक पद्धति का आकलन है । आंख की रिकॉर्डिंग टकटकी पैटर्न दोनों दृश्य संदर्भ और भाषा विज्ञान के योगदान के लिए अच्छा सबूत प्रदान की गई है/ प्रारंभिक अनुसंधान मूल्यांकन वस्तु-संदर्भ प्रभाव भाषा प्रसंस्करण में मॉड्यूलरता के सिद्धांतों का परीक्षण करने के लिए । परिचय में, हम वर्णन कैसे बाद में जांच भाषा संसाधन में व्यापक दृश्य संदर्भ की भूमिका अपने आप में एक शोध विषय के रूप में ले लिया है, ऐसे सवाल पूछ कैसे घटनाओं के हमारे दृश्य धारणा और वक्ताओं के योगदान के रूप में समझ ' के अनुभव द्वारा सूचित किया । दृश्य संदर्भ के पहलुओं की जांच के बीच कार्रवाई कर रहे हैं, घटनाओं, एक वक्ता की निगाहें, और भावनात्मक चेहरे का भाव, साथ ही साथ स्थानिक वस्तु विंयास । आंख ट्रैकिंग विधि और उसके विभिंन अनुप्रयोगों के एक सिंहावलोकन के बाद, हम प्रोटोकॉल में पद्धति के प्रमुख कदम सूची, illustrating कैसे सफलतापूर्वक इसका इस्तेमाल करने के लिए नेत्रहीन भाषा समझ स्थित अध्ययन । एक अंतिम खंड प्रतिनिधि परिणामों के तीन सेट प्रस्तुत करता है और लाभ और दृश्य दुनिया और भाषा समझ की धारणा के बीच एक नाटक की जांच के लिए आंख ट्रैकिंग की सीमाओं को दर्शाता है ।

Introduction

Psycholinguistic अनुसंधान भाषा समझ में फंसा प्रक्रियाओं को समझने में आंख आंदोलन विश्लेषण के महत्व पर प्रकाश डाला गया है । टकटकी रिकॉर्ड से समझ प्रक्रियाओं को प्रदान करने के कोर की एक परिकल्पना है कि आंख आंदोलनों5के लिए लिंक अनुभूति है । saccades, vestibulo-नेत्र आंदोलनों, और चिकनी पीछा आंदोलनों: नेत्र आंदोलनों के तीन प्रमुख प्रकार हैं । Saccades तेज और बैलिस्टिक आंदोलनों कि ज्यादातर अनजाने में होता है और मज़बूती से6ध्यान में बदलाव के साथ जुड़े रहे हैं । saccades के बीच सापेक्ष टकटकी स्थिरता के क्षणों, निर्धारण के रूप में जाना जाता है, वर्तमान दृश्य ध्यान सूचकांक को माना जाता है । मूल्यांकन के लोकस और संज्ञानात्मक प्रक्रियाओं के संबंध में उनकी अवधि को मापने के लिए ' नेत्र ट्रैकिंग विधि ' के रूप में जाना जाता है । इस विधि के प्रारंभिक implementations को कड़ाई से भाषाई संदर्भों में पढ़ने की समझ की जांच सेवा (एक समीक्षा के लिए Rayner7 देखें) । उस दृष्टिकोण में, एक शब्द या वाक्य क्षेत्र के निरीक्षण की अवधि के प्रसंस्करण कठिनाई के साथ जुड़ा हुआ है । नेत्र ट्रैकिंग है, तथापि, भी दुनिया में वस्तुओं के निरीक्षण के दौरान बात की भाषा समझ की जांच करने के लिए लागू किया गया है (या एक कंप्यूटर प्रदर्शन2पर) । इस ' दृश्य ' दुनिया नेत्र ट्रैकिंग संस्करण में, वस्तुओं के निरीक्षण भाषा द्वारा निर्देशित है । जब समझने वालों ज़ेबरासुनने के लिए, उदाहरण के लिए, स्क्रीन पर एक ज़ेबरा के उनके निरीक्षण को प्रतिबिंबित करने के लिए लिया जाता है कि वे जानवर के बारे में सोच रहे हैं. में क्या दृश्य दुनिया प्रतिमान के रूप में जाना जाता है, एक है ' है आंख टकटकी बात भाषा समझ और संबद्ध ज्ञान के सक्रियकरण को प्रतिबिंबित लिया जाता है (जैसे, श्रोताओं को भी ज़ेबरा निरीक्षण जब वे चराईसुन, एक का संकेत कार्रवाई ज़ेबरा द्वारा निष्पादित)2. इस तरह के निरीक्षण भाषा-विश्व संबंधों और नेत्र आंदोलनों2के बीच एक व्यवस्थित लिंक का सुझाव देते हैं । एक आम तरीका है इस लिंक यों तो एक स्क्रीन पर विभिंन पूर्व निर्धारित क्षेत्रों के लिए लग रहा है के अनुपात कंप्यूटिंग द्वारा है । यह शोधकर्ताओं को सीधे तुलना करने की अनुमति देता है (शर्तों के पार, प्रतिभागियों और मदों द्वारा) एक विशेष समय पर विभिंन वस्तुओं को दिया ध्यान की राशि और कैसे इन मूल्यों मिलीसेकंड संकल्प में परिवर्तन ।

psycholinguistics में अनुसंधान दृश्य दुनिया में आंख पर नज़र रखने का शोषण किया है के अलावा चिढ़ाने के लिए मन की वास्तुकला के बारे में सैद्धांतिक परिकल्पनाओं प्रतिस्पर्धा1। चित्रित वस्तुओं पर आंख निर्धारण है, इसके अलावा, पता चला है कि दुभाषियों-एक पर्याप्त प्रतिबंधात्मक भाषाई संदर्भ-ग्रहण कर सकते है वृद्धिशील अर्थ व्याख्या8 प्रदर्शन और भी आगामी पात्रों के बारे में उंमीदों का विकास 9. इस तरह के नेत्र टकटकी डेटा भी आगे समझ प्रक्रियाओं की एक सीमा पर प्रकाश डाला है, जैसे दिक अस्पष्टता संकल्प10,11, सर्वनाम संकल्प12, संरचनात्मक और विषयगत भूमिका की अस्पष्टता दृश्य संदर्भ में जानकारी के माध्यम से असाइनमेंट13,14,16, और कई अन्य लोगों के बीच15, व्यावहारिक प्रक्रियाओं4. जाहिर है, भाषा की समझ के दौरान वस्तुओं को आंख आंदोलनों फंसा प्रक्रियाओं के जानकारीपूर्ण जा सकता है ।

आंख पर नज़र रखने विधि गैर इनवेसिव है और शिशुओं, युवा, और पुराने भाषा उपयोगकर्ताओं के साथ इस्तेमाल किया जा सकता है । एक महत्वपूर्ण लाभ यह है कि, जांच या प्रतिक्रिया बटन प्रेस को सत्यापन कार्यों में कबरा प्रतिक्रियाओं के विपरीत, यह एक मिलीसेकंड संकल्प में समय पर अंतर्दृष्टि प्रदान करता है कैसे भाषा गाइड ध्यान और कैसे दृश्य संदर्भ (वस्तुओं के रूप में, कार्रवाई, घटनाक्रम, एक वक्ता की निगाहें, और भावनात्मक चेहरे का भाव, साथ ही साथ स्थानिक वस्तु विंयास) भाषा प्रसंस्करण के लिए योगदान देता है । वाक्य की समझ के दौरान माप की निरंतरता अन्य पोस्ट के साथ अच्छी तरह से पूरक-वाक्य और पोस्ट-ऐसे प्रकट चित्र से के रूप में प्रयोग के उपाय/वीडियो वाक्य सत्यापन, प्रश्न समझ, और स्मृति याद कार्यों । इन कार्यों में प्रकट प्रतिक्रियाओं समझ प्रक्रिया, स्मृति के परिणाम में अंतर्दृष्टि प्रदान करके आंख टकटकी रिकॉर्ड की व्याख्या को समृद्ध कर सकते हैं, और2सीखने । इन अन्य कार्यों के साथ आँख पर नज़र रखने का मेल दृश्य संदर्भ के विभिन्न पहलुओं को किस हद तक खुला है दृश्य ध्यान और (तत्काल, के रूप में के रूप में अच्छी तरह से देरी) उम्र भर समझ मिलाना.

भाषा की प्रस्तुति (बोली या लिखित) और दृश्यों या तो एक साथ या अनुक्रमिक हो सकता है । उदाहरण के लिए, Knoeferle और सहयोगियों17 बात की सजा से पहले दृश्य १,००० ms प्रस्तुत किया, और यह समझ के दौरान मौजूद रहे । वे सबूत है कि कार्रवाई की घटनाओं के क्लिपआर्ट चित्रण जर्मन विषय में स्थानीय संरचनात्मक अस्पष्टता के समाधान के लिए योगदान की सूचना-क्रिया-वस्तु (SVO) वस्तु के साथ तुलना-क्रिया-विषय (OVS) वाक्य । Knoeferle और क्राकरी18 एक लिखित वाक्य से पहले एक क्लिपआर्ट दृश्य प्रस्तुत किया और वाक्य समझ के दौरान क्लिपआर्ट घटनाओं के वृद्धिशील एकीकरण का परीक्षण । वे वृद्धिशील अनुरूपता प्रभाव मनाया, जिसका अर्थ है कि प्रतिभागियों को सजा घटक के पढ़ने के समय अब जब इन बेमेल (बनाम मिलान) घटना के पूर्ववर्ती दृश्य में चित्रित किया गया । एक और उत्तेजना प्रस्तुति संस्करण में, प्रतिभागियों को पहले एक एक स्थानिक रिश्ते का वर्णन वाक्य पढ़ा और फिर एक विशेष स्थानिक वस्तु लाइन चित्र19शामिल व्यवस्था के एक दृश्य देखा । इस अध्ययन में प्रतिभागियों को पूछने के दृश्य को दी वाक्य के फिट दर, दृश्य पूछताछ के दौरान दर्ज की जा रही आंखों आंदोलनों के साथ गणना के विशेष भाषा मॉडल के पूर्वानुमान का मूल्यांकन किया । प्रतिभागियों की निगाहें पैटर्न वस्तु है कि वे के साथ सामना किया गया के आकार से संग्राहक थे-आंशिक रूप से मॉडल भविष्यवाणियों की पुष्टि करने और मॉडल शोधन के लिए डेटा प्रदान करते हैं ।

जबकि कई अध्ययनों क्लिपआर्ट चित्रण17,18,19,20,21,22,23का उपयोग किया है, यह भी वास्तविक दुनिया गठबंधन संभव है वस्तुओं, इन वस्तुओं के वीडियो, या बोली जाने वाली भाषा के साथ स्थैतिक तस्वीरें1,21,24,25,26,४६। Knoeferle और उनके सहयोगियों ने एक वास्तविक दुनिया की स्थापना24 और Abashidze और सहकर्मियों ने कार्रवाई की घटनाओं और तनाव25प्रभाव की जांच के लिए एक वीडियो टेप प्रस्तुति प्रारूप का इस्तेमाल किया । दृश्यों की सटीक सामग्री बदलती (जैसे, कार्रवाई या नहीं चित्रण)22,27,३८ संभव है और भी दृश्य संदर्भ प्रभाव प्रकट कर सकते हैं । Rodríguez और26 सहयोगियों द्वारा एक संबंधित अध्ययन बाद में बोले गए वाक्य की समझ पर वीडियो टेप किए गए दृश्य लिंग संकेतों के प्रभाव की जांच की । प्रतिभागियों को या तो पुरुष या महिला एक बाहुबली लिंग से संबंधित कार्रवाई प्रदर्शन हाथ प्रदर्शित वीडियो देखा । फिर, वे या तो एक बाहुबली पुरुष या महिला कार्रवाई घटना के बारे में एक वाक्य सुना है, जबकि एक साथ एक पक्ष द्वारा दो तस्वीरें पक्ष दिखा प्रदर्शन का निरीक्षण, एक आदमी और एक औरत के दूसरे में से एक । इस समृद्ध दृश्य और भाषाई माहौल लेखकों के अलावा भाषा के प्रभाव को तंग करने की अनुमति दी नेत्रहीन प्रस्तुत (हाथ) लिंग cues के प्रभाव से समझ पर बाहुबली ज्ञान मध्यस्थता ।

इस प्रतिमान का एक और आवेदन भाषा प्रसंस्करण में विकासात्मक परिवर्तन लक्षित है । बात की भाषा समझ के दौरान वस्तुओं को आंख आंदोलनों 4-5 में चित्रित घटनाओं के प्रभाव से पता चला वर्ष के बच्चों27,28 और पुराने वयस्कों में29 वास्तविक समय में, लेकिन कुछ देरी युवा वयस्कों की तुलना में । Kröger और सहयोगी22 prosodic cues और एक प्रयोग के भीतर अंकन मामले के प्रभाव की जांच की और वयस्कों और बच्चों में इन प्रयोगों में तुलना । प्रतिभागियों को एक अस्पष्ट कार्रवाई घटना दृश्य का निरीक्षण किया, जबकि एक संबंधित स्पष्ट रूप से मामले को सुन-जर्मन वाक्य के रूप में चिह्नित । आंख आंदोलनों से पता चला कि अलग prosodic पैटर्न न तो वयस्कों और न ही 4-या 5 साल के बच्चों की मदद की, जब disambiguating कौन-क्या-क्या-है । वाक्य-आरंभिक मामले अंकन बहरहाल, प्रभावित वयस्कों ' नहीं बल्कि बच्चों की आंख आंदोलनों । यह पता चलता है कि 5 साल के बच्चों के मामले की समझ अंकन पर्याप्त मजबूत करने के लिए विषयगत भूमिका काम सक्षम नहीं है (Özge और30सहयोगियों द्वारा अध्ययन देखें), कम से कम नहीं जब कार्रवाई की घटनाओं disambiguate विषयगत भूमिका संबंध नहीं था । इन परिणामों को देखते हुए दिलचस्प है कि वे prosodic प्रभाव के पिछले परिणामों के साथ विषयगत भूमिका असाइनमेंट31पर इसके विपरीत में हैं । Kröger और सहयोगी22 का प्रस्ताव है कि (कम या ज्यादा सहायक) दृश्य संदर्भ विरोधाभासी निष्कर्षों के लिए जिंमेदार है । इस हद तक कि इन व्याख्याओं पकड़, वे उंर भर भाषा समझ में संदर्भ की भूमिका पर प्रकाश डाला ।

नेत्र ट्रैकिंग विधि चित्र से उपायों के साथ अच्छी तरह से जोड़ती है-(या वीडियो-) वाक्य सत्यापन कार्य18,20,26, चित्र-चित्र सत्यापन कार्य३२, कॉर्पस अध्ययन24, रेटिंग कार्य19, या पोस्ट-प्रायोगिक याद कार्य25,३३। Abashidze और सहयोगियों३४ और Kreysa और सहयोगी३३ वक्ता टकटकी और वास्तविक दुनिया कार्रवाई वीडियो३४ और वक्ता टकटकी और कार्रवाई चित्रण३३, क्रमशः, के लिए cues के रूप में की पुनरावृत्ति की जांच की आगामी वाक्य सामग्री । एक के बाद प्रयोगात्मक स्मृति कार्य के साथ भाषा समझ के दौरान एक दृश्य में नजर टकटकी की ट्रैकिंग के संयोजन से, वे जिस तरह से एक वक्ता की टकटकी और चित्रित कार्यों के श्रोताओं की धारणा है और दोनों को प्रभावित करने के लिए एक बेहतर समझ प्राप्त तत्काल भाषा संसाधन और स्मृति याद । परिणाम कार्रवाई के विशिष्ट योगदान से पता चला अध्यक्ष बनाम वास्तविक समय समझ के बाद-प्रयोग स्मृति याद प्रक्रियाओं बनाम टकटकी ।

जबकि आंख ट्रैकिंग विधि महान लचीलापन के साथ नियोजित किया जा सकता है, कुछ मानकों कुंजी हैं । निंनलिखित प्रोटोकॉल एक सामान्यीकृत प्रक्रिया है कि शोधकर्ताओं की विशिष्ट जरूरतों के अनुसार अनुसंधान के सवालों के विभिंन प्रकार के लिए समायोजित किया जा सकता संक्षेप । इस प्रोटोकॉल एक मानकीकृत प्रक्रिया पीरु-Universität zu बर्लिन में Psycholinguistics प्रयोगशाला में कार्यरत है, के रूप में के रूप में अच्छी तरह से पूर्व भाषा और अनुभूति प्रयोगशाला में संज्ञानात्मक संपर्क प्रौद्योगिकी उत्कृष्टता क्लस्टर (CITEC) में पर बर्लिन में विश्वविद्यालय । प्रोटोकॉल एक डेस्कटॉप और एक दूरस्थ सेटअप का वर्णन करता है । बाद बच्चों या पुराने वयस्कों के साथ अध्ययन में उपयोग के लिए सिफारिश की है । प्रतिनिधि परिणामों में उल्लेख किया सभी प्रयोगों १,००० हर्ट्ज के एक नमूना दर है जो एक आँख ट्रैकर डिवाइस का उपयोग करें और एक सिर स्थिरता के साथ एक साथ प्रयोग किया जाता है, प्रतिभागियों (प्रदर्शन पीसी) और प्रयोग की निगरानी के लिए एक पीसी के परीक्षण के लिए एक पीसी और प्रतिभागियों के नेत्र आंदोलनों (मेजबान पीसी) । अपने पूर्ववर्ती के लिए इस उपकरण का मुख्य अंतर यह है कि यह दूरबीन नेत्र ट्रैकिंग के लिए अनुमति देता है । प्रोटोकॉल एक सिर स्थिरता शामिल है और एक दोहरी पीसी सेटअप (मेजबान + प्रदर्शन) का उपयोग करने वाले अन्य नेत्र ट्रैकिंग उपकरणों के साथ उपयोग के लिए पर्याप्त सामान्य होने का इरादा है. हालांकि, यह ध्यान में रखना महत्वपूर्ण है कि अंय setups संभावना अंशांकन विफलताओं या ट्रैक हानि जैसे समस्याओं से निपटने के लिए विभिंन तरीकों होगा, जिस स्थिति में प्रयोगकर्ता को अपने विशिष्ट उपकरण के उपयोगकर्ता पुस्तिका का उल्लेख करना चाहिए ।

Protocol

यह प्रोटोकॉल उस संस्था के एथिक्स दिशानिर्देशों का पालन करता है जहां डाटा एकत्र किया गया था, यानी, बर्लिन में यूनिवर्सिटी और पीरु-Universität zu बर्लिन के संज्ञानात्मक इंटरेक्शन टेक्नोलॉजी एक्सीलेंस क्लस्टर (CITEC) । बर्लिन में विश्वविद्यालय में किए गए प्रयोगों को बर्लिन में विश्वविद्यालय की आचार समिति द्वारा व्यक्तिगत रूप से अनुमोदित किया गया. पीरु-Universität zu बर्लिन स्थित psycholinguistics प्रयोगशाला के पास एक प्रयोगशाला आचार प्रोटोकॉल है जिसे ड्यूश Gesellschaft फर Sprachwissenschaft, जर्मन भाषाविज्ञान सोसाइटी (DGfS) की एथिक्स कमेटी द्वारा अनुमोदित किया गया था ।

1. डेस्कटॉप सेटअप

नोट: निंनलिखित एक आंख पर नज़र रखने के प्रयोग में महत्वपूर्ण कदम उठाए हैं ।

  1. साधन तयारी
    1. आँख-ट्रैकिंग कैमरा और होस्ट PC चालू करें (इन-लैब डेटा संग्रहण और पूर्व-संसाधन सेटअप के चित्रण के लिए चित्र 1 देखें).
    2. नेत्र ट्रैकर सॉफ्टवेयर शुरू करो ।
    3. प्रदर्शन PC चालू करें. वह फ़ोल्डर खोलें जिसमें वे प्रयोग हैं ।
    4. इसे डबल-क्लिक करके. exe एक्सटेंशन के साथ ' परिनियोजित ' संस्करण प्रारंभ करें ।
    5. सेटअप के आधार पर, प्रयोगात्मक सूची का चयन करने के लिए एक संकेत दिखाई दे सकता है, जो आमतौर पर एक टैब-सीमांकित. csv/. txt फ़ाइल होती है जिसमें शर्तों, ध्वनि फ़ाइल नाम, लिखित वाक्य, और/ सूची का चयन करें, और प्रोग्राम प्रारंभ होगा । आउटपुट फ़ाइल का नाम जहां परिणाम संग्रहीत किया जाएगा ।
      नोट: आउटपुट फ़ाइल प्रदर्शन pc पर सहेजा गया है, और एक बैक-अप होस्ट pc पर सहेजा गया है ।
    6. प्रयोग की पहली स्क्रीन (परिचय या स्वागत स्क्रीन) खुला छोड़ दें ।
    7. नेत्र ट्रैकर कैमरे से सुरक्षात्मक आवरण निकालें ।
    8. स्वच्छ प्रयोजनों के लिए, ठोड़ी धारक पर एक ऊतक रखें ।
    9. वैकल्पिक: एक प्रतिक्रिया पैड और/या एक कुंजीपटल प्रयोग द्वारा आवश्यक के रूप में तैयार करें ।
    10. वैकल्पिक: श्रवण उत्तेजनाएं पेश, वक्ताओं की मात्रा को समायोजित करने और प्रयोग चलाने से पहले उन्हें परीक्षण. वैकल्पिक रूप से, प्रतिभागियों द्वारा इस्तेमाल किया जा करने के लिए headphones की कार्यक्षमता का परीक्षण.
    11. प्रतिभागी द्वारा हस्ताक्षरित किए जाने वाले आवश्यक प्रपत्रों को तैयार करें ।
    12. डेटा संग्रह प्रक्रिया की पूरी अवधि के लिए एक निरंतर चमकदार के साथ एक dimly जलाया कमरे में आदेश में प्रयोगशाला में प्रकाश की तीव्रता को समायोजित करें ।
  2. प्रतिभागियों के लिए तैयारी
    1. इसके बाद प्रतिभागी पहुंचे, अपना परिचय दिया ।
    2. जगह एक प्रयोगशाला के दरवाजे पर हस्ताक्षर परेशान मत करो ।
    3. प्रतिभागी को सीट लेने के लिए कहें ।
    4. प्रतिभागी को सूचना पत्रक और आवश्यक सहमति और जनसांख्यिकीय प्रपत्रों के माध्यम से मार्गदर्शन करें ।
    5. भागीदार को पढ़ें और सहमति फ़ॉर्म पर हस्ताक्षर करने दें ।
    6. प्रयोग के सामान्य पहलुओं और उसकी अवधि को संक्षेप में समझाएं । प्रयोग करने से पहले बहुत अधिक जानकारी प्रदान न करें, क्योंकि इससे प्रतिभागी की निगाहें व्यवहार और परिणामी डेटा को प्रभावित कर सकती हैं ।
    7. लिखित निर्देश दें और प्रतिभागी को प्रश्न पूछने का अवसर दें ।
    8. नेत्र ट्रैकर के फंक्शन को संक्षेप में समझाएं ।
    9. यदि आवश्यक हो, तो कार्य को स्पष्ट करें और प्रयोग के दौरान दबने की आवश्यकता होगी किसी भी बटन/
    10. व्याख्या कैसे ठोड़ी आराम करने के लिए प्रयोग के दौरान सिर आंदोलन को कम करना है । उल्लेख है कि डिवाइस सबसे अच्छा काम करता है अगर भागीदार किसी भी आंदोलनों से बचा जाता है ।
  3. नेत्र ट्रैकर की स्थापना
    1. प्रयोग के लिए भागीदार तैयार: उंहें पूछने के लिए मेज पर बैठो और ठोड़ी आराम पर अपनी ठोड़ी जगह है । उंहें सिर के खिलाफ उनके माथे दुबला करने के लिए पूछो ।
    2. भागीदार से पूछो ऊंचाई और कुर्सी की स्थिति यदि आवश्यक समायोजित करने के लिए: भागीदार ठोड़ी आराम और सिर के खिलाफ उनके माथे पर अपनी ठोड़ी के साथ सहज महसूस करना चाहिए ।
    3. समझा है कि यह गलती से प्रयोग के दौरान सिर ले जाने के लिए आम है और है कि इस से बचना चाहिए । समझा है कि सिर मुद्रा प्रयोग के दौरान सही हो सकता है ।
    4. यदि प्रयोग एक बटन प्रेस की आवश्यकता है (उदाहरण के लिए, प्रतिक्रिया पैड के माध्यम से), भागीदार अपनी उंगलियों बटन पर आराम करने के लिए दबाया जा छोड़ने के लिए और प्रतिक्रिया पैड पर नीचे देख जब एक बटन दबाने से बचने के लिए निर्देश ।
    5. स्वागत/परिचय स्क्रीन पढ़ने के लिए प्रतिभागी से पूछें ।
    6. मेजबान पीसी के सामने बैठो । स्क्रीन कैमरा सेटअपपर पहले से ही नहीं है, तो सही स्क्रीन पर प्राप्त करने के लिए कैमरा सेटअप पर क्लिक करें । यदि सुरक्षा कवर कैमरे के लेंस से हटा दिया गया है और भागीदार ठोड़ी आराम पर सही ढंग से तैनात किया गया है, स्क्रीन प्रतिभागी की आंखों की तीन छवियों: शीर्ष पर एक बड़ी छवि, और छोड़ दिया और सही पर नीचे दो छोटे लोगों को दिखाना चाहिए । इन छोटे छवियों को एक आंख प्रत्येक दिखाने के लिए, इसी के बाईं और दाईं आंख ।
    7. नज़र रखने के लिए चयन करें । यह है भागीदार प्रमुख आंख को ट्रैक करने के लिए अनुकूल है । यदि भागीदार है जो आंख प्रमुख है पता नहीं है, एक आंख प्रभुत्व परीक्षण आचरण (कदम 1.3.8) ।
    8. नेत्र प्रभुत्व निर्धारित करते हैं । एक हाथ से बाहर खिंचाव और दोनों आंखें खुली के साथ एक दूर वस्तु के साथ अंगूठे संरेखित करने के लिए भागीदार से पूछो । बाएं या दाएं आंख बंद करने के लिए प्रतिभागी से पूछें । प्रमुख आंख एक है जिसके लिए अंगूठे वस्तु जब आंख खुला है३५,३६के साथ गठबंधन रहता है ।
    9. छवि पर क्लिक करें । प्रदर्शन पीसी (या enterदबाएँ) और चरण 1.3.6 में वर्णित छवियाँ भी प्रतिभागी के डिस्प्ले स्क्रीन पर दिखाई देंगी, लेकिन एक समय में केवल एक.
    10. आंख की छोटी और बड़ी छवि के बीच स्विच करने के लिए या तो प्रयोगकर्ता या प्रतिभागी के कंप्यूटर कीबोर्ड पर बाएं/ छोटे छवि (आंख) पर ध्यान केंद्रित ।
    11. पुतली की स्थिति पर खोज सीमा बॉक्स केंद्र के क्रम में या तो कुंजीपटल पर एक (संरेखित करें आँख खिड़की) दबाएँ. फिर, आंख के चारों ओर एक लाल वर्ग एक फ़िरोज़ा चक्र के साथ प्रकट होना चाहिए [' corneal प्रतिबिंब ', (cr)] पुतले के नीचे के पास । पुतला ही नीला होना चाहिए.
    12. सुनिश्चित करें कि दो पार (' क्रॉसहेयर ') स्क्रीन पर दिखाई देते हैं-एक पुतली के केंद्र में और एक corneal प्रतिबिंब के केंद्र में । लाल बॉक्स और दो पार मतलब है कि आंख ट्रैकर पुतला और सीआर का पता लगा रहा है ।
      नोट: अगर लाल बॉक्स या क्रॉसिंग नदारद हैं, तो आँख नज़र नहीं आती — अगर ऐसा होता है, तो प्रयोगकर्ता के कंप्यूटर पर कोई भी पुतला दिखाई नहीं देगा.
    13. मैन्युअल रूप से फ़ोकस लेंस बदल कर कैमरे का फ़ोकस समायोजित करें । लेंस के सामने को छूने के लिए नहीं सावधान रहना । सबसे अच्छा फोकस बिंदु तक पहुंच जाता है जब तक लेंस बारी ।
      नोट: सबसे अच्छा ध्यान बिंदु जब फ़िरोज़ा सर्कल (corneal प्रतिबिंब) के रूप में संभव के रूप में छोटा है (यानी, जब इस सर्कल ध्यान में है) तक पहुंच जाता है ।
    14. पुतली दहलीज सेट. सुनिश्चित करें कि केवल पुतली की छवि नीला है (जैसे, बरौनी नीला नहीं होना चाहिए) मेजबान पीसी पर । यह भी सुनिश्चित करें कि पूरे पुतले (सिर्फ अपने केंद्रीय भाग नहीं) नीला है । केवल लाल चौक के अंदर क्या है इसकी चिंता कीजिए ।
    15. प्रेस A. यह स्वतः ही पुतली दहलीज सेट । यदि पुतला सही नीले रंग में प्रदर्शित नहीं है, सीमा को मैंयुअल रूप से बढ़ाने के लिए कुंजी का उपयोग कर समायोजित करें और नीचे कुंजी को छवि सतह के नीले भाग की मात्रा कम है ।
      नोट: काजल (जो आम तौर पर काला है, पुतले की तरह) दहलीज की स्थापना के साथ हस्तक्षेप कर सकते हैं-आँख ट्रैकर पुतले के लिए अंधेरे बरौनी ले सकता है. इस मामले में, प्रतिभागी को मेकअप रिमूवर ऊतकों के साथ प्रदान करके उनके मेकअप को हटाने के लिए कहें ।
    16. सीआर थ्रेशोल्डसेट करें । एक चरण 1.3.15 में दबाया गया था, तो cr थ्रेशोल्ड स्वचालित रूप से सेट किया गया होना चाहिए ।
      नोट: सभी थ्रेशोल्ड सेटिंग्स के लिए सांख्यिक मान दृश्यमान होने चाहिए । यदि कोई प्रश्न चिह्न उनमें से किसी में प्रकट होता है, तो पिछले चरणों में से एक में एक समस्या थी और थ्रेशोल्ड्स मैंयुअली सेट किए जाने चाहिए ।
  4. आंखों पर नजर रखने वाले औजार
    नोट: जांच करें कि क्या नेत्र ट्रैकर लगातार आंख की स्थिति की पहचान कर सकते हैं, जब प्रतिभागी स्क्रीन के अन्य भागों में दिखता है ।
    1. प्रतिभागी को स्क्रीन के चार कोनों को एक समय में देखने के लिए कहें, जबकि कैमरा सेटअप विंडो दृश्य में है । ध्यान से किसी भी अनियमित प्रतिबिंब के लिए देखो (इन फ़िरोज़ा ' blobs ' स्क्रीन पर के रूप में दिखाई देगा) कि corneal प्रतिबिंब के साथ हस्तक्षेप जब आंख टकटकी कोने पर निर्देशित है ।
    2. प्रतिभागी से पूछो स्क्रीन के केंद्र को देखने के लिए और फिर सीधे अपनी निगाहें समस्याग्रस्त कोने के लिए अगर आंख के आसपास लाल बॉक्स और क्रॉसहेयर के या तो एक कदम 1.4.1 के दौरान किसी भी बिंदु पर दिखाई नहीं दे रहे हैं । यह समस्या के स्रोत को निर्धारित करने में मदद करेगा ।
    3. फिर से भागीदार के सिर की स्थिति को समायोजित करने और जांच अगर यह पैदावार किसी भी सुधार । यदि आवश्यक हो तो इस चरण को दोहराएँ. यदि डिवाइस अभी भी सही रूप से कई प्रयासों के बाद प्रतिभागी की निगाहें ट्रैक करने में असमर्थ है, प्रयोग को निरस्त ।
    4. प्रतिभागी को सूचित करें कि नेत्र ट्रैकर पर तुले होंगे और वे स्क्रीन के विभिन्न भागों में जाने वाले एक काले वृत्त (एक छोटे धूसर बिंदु के साथ) को देखने के लिए जा रहे हैं । प्रतिभागी को किसी नए स्थान पर ले जाने तक वृत्ति का निर्धारण करने का निर्देश दें । प्रतिभागी को अपनी आंखों को छलनी करने और इष्टतम परिणामों के लिए ब्लैक सर्कल के अंदर छोटे ग्रे डॉट पर ध्यान केंद्रित करने के लिए निर्देश दें ।
    5. भागीदार है कि यह अभी भी रखने के लिए और अंशांकन के दौरान अगले चक्र की स्थिति की आशा करने की कोशिश नहीं करने के लिए महत्वपूर्ण है बताओ । उंहें निर्देश के लिए अपनी आंखें और नहीं उनके सिर के साथ हलकों का पालन करें । अंशांकन प्रक्रिया शुरू करने के लिए जांचना पर क्लिक करें । सामान्य रूप से, एक 9-बिंदु अंशांकन प्रक्रिया का उपयोग किया जाता है जिसमें काले वृत्त एक सीरियल तरीके से नौ स्थानों के लिए ले जाता है.
    6. एक स्वत: अंशांकन के लिए, भागीदार के बाद स्क्रीन के बीच में पहली बार डॉट सही ढंग से निर्धारण किया है दर्ज करें दबाएं । मैन्युअल अंशांकन के लिए (उदा.जब प्रतिभागी की आँख पर नज़र रखने में समस्याएँ हो रही हों या बच्चों जैसे विशेष सहभागी समूहों से व्यवहार करते समय), तो ENTER दबाकर प्रत्येक निर्धारण स्वीकार करें (या क्लिक करके निर्धारण स्वीकारें/ Spacebar दबाएं) ।
      नोट: अंशांकन प्रक्रिया के अंत में, प्रयोगकर्ता के स्क्रीन पर लगभग आयताकार पैटर्न दिखाई देना चाहिए । यह भागीदार के नेत्र टकटकी पैटर्न का प्रतिनिधित्व करता है । इसके अतिरिक्त, एक अच्छा अंशांकन के परिणाम हरे रंग में डाला जाना चाहिए । यदि वे नहीं हैं, तो अंशांकन प्रक्रिया को दोहराएँ (यानी, अंशांकनपर क्लिक करें).
    7. परिणामों को मांय करें । एक ही प्रक्रिया के माध्यम से जाने के लिए प्रतिभागी को बताएँ (डॉट्स देख) अंशांकन प्रक्रिया के परिणाम को मान्य करने के लिए. उंहें याद दिलाने के लिए डॉट को देखो और अभी भी हो ।
      नोट: सत्यापन की प्रक्रिया अंशांकन के समान है और आंख सही ढंग से नज़र रखी जा रही है कि यह सुनिश्चित करने के लिए दोनों परिणामों नेत्र ट्रैकर सॉफ्टवेयर की तुलना में कर रहे हैं ।
    8. क्लिक करें मांय ।
    9. (या Spacebar/pressing निर्धारण स्वीकारकरें क्लिक करके) ENTER दबाकर प्रत्येक निर्धारण स्वीकारें ।
    10. मांयता के बाद, परिणाम प्रयोगकर्ता की स्क्रीन पर दिखाई देंगे । दो त्रुटि उपायों, औसत त्रुटि (जैसे, ०.२३ °) और अधिक से अधिक त्रुटि (जैसे, ०.७० डिग्री) के लिए विशेष रूप से ध्यान देना । इन डिग्री जो ट्रैक छवि एक भागीदार के वास्तविक टकटकी स्थिति से भटक प्रतिनिधित्व करते हैं ।
    11. जब एक दृश्य दुनिया प्रतिमान का उपयोग कर, औसत त्रुटि (पहले नंबर) के तहत ०.५ ° और अधिकतम त्रुटि (दूसरा नंबर) के तहत 1 डिग्री रखें ।
    12. यदि त्रुटि मान थ्रेशोल्ड से ऊपर हैं, तो प्रतिभागी को उनके सिर की स्थिति को पुनः समायोजित करने और अंशांकन प्रक्रिया को पुनरारंभ करने के लिए कहें । यदि कोई सुधार नहीं मनाया जाता है, प्रयोग को निरस्त ।
      नोट: जब प्रतिभागी कॉन्टेक्ट लेंस पहनता है यह उच्च अंशांकन त्रुटियों का पालन करने के लिए आम है । प्रतिभागी को अग्रिम में कहा जाना चाहिए कि वे अपने कॉन्टेक्ट लेंस के बजाय अपने पर्चे चश्मा लेकर आएं ।
    13. अंशांकन प्रक्रिया को सफलतापूर्वक पूरा करने के बाद, प्रयोग प्रारंभ करने के लिए आउटपुट/ भागीदार है कि प्रयोग अब शुरू होगा सूचित करें ।
  5. प्रयोग के दौरान
    नोट: प्रयोग के दौरान (कैसे एक व्यक्तिगत प्रयोग क्रमादेशित है पर निर्भर करता है, लेकिन आम तौर पर प्रत्येक प्रयोगात्मक परीक्षण से पहले), एक बहाव की जांच करें या सही स्क्रीन बहाव स्क्रीन के केंद्र में एक डॉट प्रदर्शित करेगा । इसका उद्देश्य वर्तमान परीक्षण के लिए गणना निर्धारण त्रुटि रिपोर्ट करने के लिए है, और, नेत्र ट्रैकर मॉडल पर निर्भर करता है, स्वचालित रूप से इसे समायोजित करने के लिए.
    1. निर्देश चरण के दौरान प्रतिभागी को जब भी ऐसा प्रतीत होता है तो उसे सेंट्रल डॉट को निर्धारण करना बताया गया है । सुनिश्चित करें कि हर बहाव की जांच के दौरान/बहाव सही चरण, प्रतिभागियों फिर से डॉट निर्धारण कर रहे हैं । इस भागीदार की टकटकी एक चलती हरी सर्कल के रूप में प्रकट होता है, जहां मेजबान पीसी, पर प्रतिभागी की निगाहें का पालन करके किया जा सकता है ।
    2. बहाव की जांच करें/बहाव सही पूरा हो गया है, प्रेस दर्ज करें (या Spacebar) डॉट गायब बनाने के लिए और अगले परीक्षण प्रदर्शित करने के लिए ।
    3. निर्धारित कैसे नेत्र ट्रैकर के मॉडल के अनुसार बहाव की जांच चरण पास करने के लिए विफलता के साथ सौदा करने के लिए इस्तेमाल किया । मॉडल पर निर्भर करता है, आँख ट्रैकर या तो केंद्रीय डॉट के उन लोगों से मेल करने के लिए निगाहें निर्देशांक का समायोजन करके एक स्वचालित बहाव सुधार प्रदर्शन करेंगे, या इसे जारी रखने से पहले फिर से जांचना करने के लिए experimenter संकेत करने के लिए एक बीप शोर कर देगा प्रयोग (बहाव की जांच) ।
    4. एक स्वत: बहाव सुधार का उपयोग करते हैं, तो ध्यान में रखें कि बहुत अधिक बहाव सुधार लगातार परीक्षणों और/या बहुत बड़े बहाव सुधार के एक डिग्री परिणाम विकृत और डिवाइस के एक पुनः अंशांकन की आवश्यकता होगी ।
  6. प्रयोग के दौरान पुनः अंशांकन
    1. यह प्रयोग के दौरान किसी भी समय फिर से जांचना संभव है । बहाव सुधार/बहाव की जांच स्क्रीन की प्रस्तुति के दौरान, कैमरा सेटअपपर क्लिक करें, तो जांचनापर क्लिक करें । एक संतोषजनक मूल्य तक पहुँच गया है, तब तक अंशांकन और मान्यता प्रक्रियाओं के माध्यम से जाओ, फिर आउटपुट/रिकॉर्डपर क्लिक करें । प्रयोग परीक्षण अनुक्रम में निकास बिंदु से फिर से शुरू होगा ।
  7. प्रयोग के बाद
    1. यदि वे प्रमुख प्रयोगात्मक जोड़तोड़ अनुमान करने में सक्षम थे का आकलन करने के लिए एक प्रश्नावली के साथ भागीदार प्रदान करें । यहां, यह भी महत्वपूर्ण है कि संभावित रणनीतियों है कि प्रयोग भर में विकसित किया गया हो सकता है के बारे में पूछना ।
    2. प्रयोग के उद्देश्य के बारे में प्रतिभागी को संक्षिप्त करना । उंहें अपनी भागीदारी के लिए धंयवाद और आवश्यक मौद्रिक मुआवजा प्रदान करने या पाठ्यक्रम ऋण असाइन अगर लागू ।

2. दूरस्थ सेटअप: बच्चों और पुराने वयस्कों के साथ पढ़ाई के लिए सेटअप समायोजन

नोट: यह खंड केवल एक दूरस्थ सेटअप और चरण 1 में वर्णित के रूप में एक डेस्कटॉप सेटअप के बीच अंतर का वर्णन करता है । अंक स्पष्ट रूप से यहां उल्लेख नहीं चरण 1 में वर्णित प्रक्रिया के समान माना जाना चाहिए ।

  1. एक 16 मिमी लेंस के लिए मानक ३५ mm नेत्र ट्रैकर कैमरा लेंस विनिमय ।
  2. सभी आवश्यक उपकरण कनेक्ट (होस्ट पीसी, वक्ताओं, नेत्र ट्रैकर, और लैपटॉप अगर एक लैपटॉप का इस्तेमाल किया जाता है) ।
  3. लैपटॉप को एक लैपटॉप स्टैंड पर रखें और उसके सामने नजर ट्रैकर (प्रतिभागी को स्क्रीन के शीर्ष ७५% को देखने में सक्षम होना चाहिए) ।
  4. एक "लक्ष्य स्टीकर" (ट्रैकर के निर्माता से उपलब्ध है) प्रतिभागी के माथे पर (सही आँख की भौं या दाएँ गाल पर अगर माथे बहुत छोटा है (यानी, शिशुओं के मामले में), जगह; इस स्टीकर की ठोड़ी आराम से बदल देता है डेस्कटॉप सेटअप और यह नेत्र ट्रैकर सही भागीदार के सिर की स्थिति निर्धारित करने के लिए अनुमति देता है ।
  5. सुनिश्चित करें कि प्रतिभागी को कैमरे से ५५०-६०० mm दूर बैठाया गया है (कैमरे के लिए लक्ष्य स्टीकर की दूरी) ।
  6. सुनिश्चित करें कि शब्द "बड़ा कोण" या "आँख के पास" होस्ट पीसी पर दिखाई नहीं देते । अगर वे करते हैं, इसका मतलब है कि लक्ष्य स्टीकर की स्थिति आदर्श नहीं है । इस मामले में, लक्ष्य स्टीकर पुनः समायोजन । यह भी है कि भागीदार के माथे विशेष रूप से छोटा है मतलब कर सकते हैं । यदि यह स्थिति है, तो भागीदार के गाल पर स्टीकर लगाएं ।
    नोट: यदि स्टीकर भी कान के पास रखा गया है, तो संदेश "बड़ा कोण" दिखाई देने की संभावना है और स्टीकर की स्थिति होनी चाहिए ।
  7. चरण १.४ में वर्णित अंशांकन प्रक्रिया प्रारंभ करने से पहले, सुनिश्चित करें कि प्रतिभागी आराम से बैठा हुआ है । उंहें पूछो पूरे प्रयोग में एक ही स्थिति बनाए रखने के लिए और समझा है कि आंख ट्रैकर बहुत शारीरिक आंदोलनों के प्रति संवेदनशील है । जोर देकर कहते हैं कि वे अपना सिर अभी भी रखें. यदि प्रतिभागी बहुत अधिक चलता है, तो डिवाइस एक गुनगुना शोर उत्सर्जित करेगा ।
    नोट: यदि दूरस्थ नेत्र ट्रैकर सेटअप ऐसे बच्चों या पुराने वयस्कों के रूप में संवेदनशील आबादी, परीक्षण करने के लिए इस्तेमाल किया जा रहा है, यह एक मैनुअल अंशांकन प्रक्रिया का उपयोग करने के लिए सलाह दी जाती है.

3. पढ़ाई पढ़ने के लिए सेटअप का समायोजन

नोट: जब पढ़ने पर दृश्य प्रसंग प्रभाव की जाँच, यह अंशांकन और पुन: अंशांकन प्रक्रियाओं के लिए विशेष रूप से ध्यान देने के लिए आवश्यक है । के रूप में दृश्य दुनिया के अध्ययन का विरोध किया, पढ़ने के दौरान आंख ट्रैकिंग डिवाइस परिशुद्धता के एक बहुत उच्च डिग्री की आवश्यकता है, शब्द को ट्रैक करने के लिए शब्द और पत्र-पत्र पढ़ने के पैटर्न की जरूरत सटीकता दिया ।

  1. सुनिश्चित करें कि मांयता चरण के दौरान प्रदर्शित औसत और अधिकतम त्रुटि दोनों ०.५ ° के अंतर्गत रहते हैं ।
  2. सुनिश्चित करें कि अंशांकन के लिए ंयूनतम 9-पॉइंट स्केल का उपयोग करना है । यह आंख टकटकी स्थिति है, जो आवश्यक है, पढ़ने के दौरान ब्याज के क्षेत्रों के छोटे आकार को देखते हुए एक और अधिक सटीक ट्रैकिंग का आश्वासन दिया ।

Representative Results

Münster और सहयोगियों द्वारा एक अध्ययन३७ वाक्य संरचना, चित्रित कार्यों की पुनरावृत्ति की जांच की, और भाषा समझ के दौरान चेहरे भावनात्मक cues । यह अध्ययन अच्छी तरह से लाभ और विधि की सीमाओं को वर्णन करने के लिए अनुकूल है, के रूप में यह दोनों मजबूत दिखाया कार्रवाई प्रभाव और वाक्य समझ पर चेहरे भावनात्मक cues के सीमांत प्रभाव दर्शाया गया है । लेखक एक औरत के चेहरे की अभिव्यक्ति है कि एक खुश या एक दुखद अभिव्यक्ति में आराम की स्थिति से बदल के 5 एस वीडियो बनाया । उंहोंने यह भी भावनात्मक रूप से सकारात्मक व्याप्त जर्मन वस्तु बनाया-क्रिया-Adverb-विषय (OVAdvS) प्रपत्र के वाक्य ' द [वस्तु/रोगीaccusative case] [Verb] [पॉजिटिव Adverb] [विषय/एजेंटनामांकन मामला]. ' के माध्यम से सकारात्मक adverb, वाक्य ' खुश ' वीडियो मिलान और ' उदास ' वीडियो बेमेल, एजेंट के सिद्धांत प्रत्याशा में अनुमति (जो मुस्कुरा रहा था और सकारात्मक adverb द्वारा खुशी से अभिनय के रूप में वर्णित) । वक्ता वीडियो के बाद, वाक्य एक एजेंट रोगी-ट्रैक्टर क्लिपआर्ट दृश्य के दो संस्करणों में से एक के साथ दिखाई दिया । एक संस्करण में, एजेंट रोगी पर वर्णित कार्रवाई प्रदर्शन के रूप में चित्रित किया गया था, जबकि ट्रैक्टर चरित्र एक अलग कार्रवाई की है । अंय दृश्य संस्करण वर्णों के बीच कोई क्रिया चित्रित । दृश्य में नेत्र आंदोलनों कार्यों के प्रभाव और वाक्य समझ पर वक्ता के चेहरे की अभिव्यक्ति का पता चला ।

कार्रवाई चित्रण तेजी से प्रतिभागियों के दृश्य का ध्यान प्रभावित है, जिसका अर्थ है कि प्रतिभागियों को एजेंट में अधिक से अधिक देखा जब उल्लेख कार्रवाई की गई थी (बनाम नहीं था) । ये लग रहा है एंटीसिपेटरी थे (यानी, एजेंट का उल्लेख किया गया था पहले होने वाली), सुझाव है कि कार्रवाई चित्रण के एजेंट पहले स्पष्ट किया था वाक्य । क्रिया के दौरान उभरे हुए कार्य चित्रण का शीघ्रातिशीघ्र प्रभाव (यानी, क्रिया-संबंधित एजेंट की मध्यस्थता). इसके विपरीत, चाहे पूर्ववर्ती वक्ता मुस्कराए या नाखुश देखा एजेंट प्रत्याशा (चित्रा 2) पर कोई स्पष्ट प्रभाव था । उत्तरार्द्ध परिणाम एक वक्ता की मुस्कान और एक सकारात्मक sentential को चित्रित एजेंट की कार्रवाई से संबंधित adverb के बीच और अधिक कमजोर कड़ी को प्रतिबिंबित कर सकता है (एक प्रत्यक्ष क्रिया कार्रवाई संदर्भ एक कार्रवाई से जुड़े एजेंट मध्यस्थता के साथ तुलना में) । वैकल्पिक रूप से, यह कार्य और उत्तेजना प्रस्तुति के लिए विशिष्ट हो सकता है: शायद भावनाओं प्रभाव गया है और अधिक सामाजिक रूप से इंटरैक्टिव कार्य में या एक है कि (बजाय पहले से) वाक्य समझ के दौरान वक्ता का सामना प्रस्तुत में स्पष्ट होगा । हालांकि, समझ के दौरान एक मुस्कुरा वक्ता चेहरा पेश प्रतिभागियों अंय दृश्य सामग्री की कीमत पर चेहरे पर ध्यान केंद्रित करने के लिए, शायद अंयथा हेरफेर चर (स्रोत: अप्रकाशित डेटा) के अवलोकन प्रभाव मास्किंग के कारण हो सकता है ।

प्रतिमान, गुएरा और Knoeferle३२ के एक और संस्करण में पूछा कि क्या स्थानिक अर्थ विश्व भाषा संबंधों को पढ़ने के दौरान अमूर्त अर्थ सामग्री की समझ मिलाना कर सकते हैं । गुएरा और Knoeferle वैचारिक रूपक सिद्धांत३८ से विचार उधार लिया है कि स्थानिक दूरी (जैसे, निकटता) आधार अमूर्त अर्थ संबंधों का अर्थ (उदाहरणके लिए, समानता) । इस परिकल्पना के साथ कतार में प्रतिभागियों ने समन्वित अमूर्त संज्ञाओं को तेजी से पढ़ा, जब वे अर्थ में समान (बनाम विपरीत) थे और एक निकटता का संदेश देने वाले वीडियो से पहले गए थे (बनाम दूरी; ताश के पत्तों के करीब एक साथ आगे बढ़ बनाम दूर के अलावा) । ३९अध्ययन के एक दूसरे सेट में, वाक्य अंतरंग या बेपरवाह के रूप में दो लोगों के बीच बातचीत का वर्णन किया, खोज के लिए अग्रणी है कि दो कार्ड एक दूसरे के पास आ के वीडियो की सजा क्षेत्रों है कि सामाजिक संदेश पढ़ने के ऊपर उड़ निकटता अंतरंगता/ ध्यान दें कि स्थानिक दूरी प्रभावित वाक्य तेजी से पढ़ने और संवर्द्धित भी जब वाक्य वीडियो में वस्तुओं का उल्लेख नहीं किया । विशिष्ट दूरी और अर्थ के रूप में के रूप में अच्छी तरह से वाक्य अर्थ के सामाजिक पहलुओं के बीच अनुरूपता के एक समारोह के रूप में विशेष रूप से पढ़ने के समय संग्राहक वीडियो । इन प्रभावों को पहली बार पास पढ़ने में दोनों दिखाई (एक पूर्व के पहले निरीक्षण की अवधि के निर्धारित वाक्य क्षेत्र) और कुल समय उस वाक्य क्षेत्र पर खर्च (गुएरा द्वारा अध्ययन से परिणामों का एक उदाहरण के लिए चित्र 3 देखें और Knoeferle)३२. हालांकि, विश्लेषण भी प्रतिभागियों के बीच पर्याप्त भिन्नता का पता चला, इस निष्कर्ष है कि इस तरह के सूक्ष्म कार्ड दूरी प्रभाव क्रिया के प्रभाव के रूप में के रूप में मजबूत नहीं हो सकता है के लिए अग्रणी-कार्रवाई संबंधों, एक उदाहरण का उल्लेख करने के लिए.

अध्ययनों का एक आगे सेट दिखाता है कि वाक्य संरचना में भिंनता दृश्य प्रसंग प्रभावों की सामांयता का मूल्यांकन करने में कैसे मदद कर सकती है । Abashidze और सहयोगियों३४ और Rodríguez और सहयोगियों26 बोले गए वाक्यों के बाद के प्रसंस्करण पर हाल के कार्यों के प्रभाव की जांच की । दोनों अध्ययनों में, प्रतिभागियों ने पहले एक कार्रवाई वीडियो का निरीक्षण किया (जैसे, एक experimenter स्वादिष्ट बनाने वाला खीरे, या महिला हाथ एक केक पकाना). अगले, वे एक जर्मन वाक्य है कि या तो हाल ही में कार्रवाई से संबंधित था या एक और कार्रवाई की है कि अगले (स्वादिष्ट बनाने टमाटर३४प्रदर्शन किया जा सकता है, एक मॉडल26निर्माण की बात सुनी) । समझ के दौरान, प्रतिभागियों को एक दो वस्तुओं (खीरे, टमाटर)३४ या एजेंट चेहरे के दो तस्वीरें (एक महिला और एक पुरुष एजेंट चेहरा, नाम ' Susanna ' और ' थॉमस, क्रमशः)26दिखा दृश्य का निरीक्षण किया । Abashidze और सहयोगियों३४द्वारा अध्ययन में, वक्ता पहले प्रयोगकर्ता और फिर क्रिया (जैसे, स्वादिष्ट बनाने का उल्लेख), एक विषय के बारे में उंमीदों पर लाना (जैसे, खीरे या टमाटर) । Rodríguez और26सहयोगियों द्वारा अध्ययन में, वक्ता पहले एक विषय (केक) का उल्लेख किया है, और फिर क्रिया (पाक), कार्रवाई के एजेंट के बारे में उंमीदों पर लाना (महिला: Susanna, या पुरुष: थॉमस, एक की तस्वीरों के माध्यम से चित्रित महिला और एक पुरुष चेहरा) ।

दोनों के अध्ययन में, मुद्दे पर सवाल था कि क्या लोगों को (नेत्रहीन) की आशा विषय हाल ही में कार्रवाई की घटना या अंय विषय/एजेंट और प्रासंगिक समझ के दौरान प्रदान की cues पर आधारित/ Abashidze और सहयोगियों३४में, experimenter की टकटकी cued भविष्य थीम वस्तु (टमाटर) क्रिया की शुरुआत से (वस्तुतः जर्मन से अनुवाद: ' प्रयोगकर्ता-एजेंट जायके जल्द ही... ') । Rodríguez और सहयोगी26में, बाहुबली कार्यों का लिंग ज्ञान उपलब्ध हो गया जब विषय और क्रिया का उल्लेख किया गया था (जैसे, जर्मन उत्तेजनाओं का शाब्दिक अनुवाद था: ' केक-थीम जल्द ही सेंकना... ') । अध्ययन के दोनों सेट में, प्रतिभागियों को तरजीही हाल ही में कार्रवाई (के खीरे३४ या Susanna26) विकल्प (भविष्य/अन्य-लिंग) लक्ष्य (टमाटर३४ या थॉमस26) पर लक्ष्य का निरीक्षण किया वाक्य के दौरान ।

इस तथाकथित ' हाल ही में घटना ' वरीयता, इस प्रकार, को सजा संरचना और प्रयोगात्मक सामग्री में पर्याप्त भिंनता के पार मजबूत प्रतीत होता है । यह संग्राहक था, तथापि, समवर्ती दृश्य26से दृश्य बाधाओं से, इस तरह की है कि एजेंटों के लिंगीय तस्वीरों के अलावा क्रिया विषयों की प्रशंसनीय तस्वीरें पेश हाल ही में निरीक्षण कार्रवाई की घटनाओं पर निर्भरता कम और भाषा द्वारा प्रेषित लिंग-छवि ज्ञान के आधार पर ध्यान संग्राहक । चित्रा 4 Rodríguez और26सहयोगियों द्वारा प्रयोगों के मुख्य निष्कर्षों को दर्शाता है.

हालांकि दृश्य के इस संस्करण में दुनिया के प्रतिमान मजबूत परिणाम उपज, अंय अध्ययनों की जटिलता को उजागर किया है (और सीमाओं) को जोड़ने की परिकल्पना की । Burigo और Knoeferle20 का पर्दाफाश किया है कि प्रतिभागियों-जब ऐसे मरो बॉक्स के रूप में कथन भेजते को सुन über डेर Wurst (' बॉक्स सॉसेज ' से ऊपर है)-ज्यादातर इन वस्तुओं के क्लिपआर्ट चित्रण के निरीक्षण में बोलना पीछा किया । लेकिन परीक्षणों के अनुपात पर, प्रतिभागियों ' क्या उल्लेख किया गया था से जोड़ा टकटकी । ' सुनवाई सॉसेज ' और होने पर मांस का निरीक्षण किया कम से कम एक बार, प्रतिभागियों के अगले निरीक्षण तेजी से सत्यापन में परीक्षणों के लगभग 21% पर बॉक्स को लौट (प्रयोग 1) और ९०% में परीक्षण के बाद में वाक्य सत्यापन ( प्रयोग 2) । यह टकटकी पैटर्न पता चलता है कि संदर्भ (सुनवाई ' सॉसेज ') केवल कुछ निर्देशित (सॉसेज निरीक्षण) नहीं बल्कि सभी नेत्र आंदोलनों (बॉक्स का निरीक्षण) । इस तरह के डिजाइन के अलावा दिक को चिढ़ाने के लिए इस्तेमाल किया जा सकता है (वाक्य-स्तर interpretative सहित) प्रक्रियाओं अंय से संदर्भित प्रक्रियाओं । हालांकि, शोधकर्ताओं सावधान रहना चाहिए जब भाषाई प्रसंस्करण के विभिंन स्तरों के बारे में दावा कर आंख में सापेक्ष मतभेद-आंदोलन अनुपात के आधार पर बनाने, आंख को जोड़ने संज्ञानात्मक और समझ प्रक्रियाओं को टकटकी में अस्पष्टता दी ।

Figure 1
चित्र 1: डेटा संग्रह वातावरण का ओवरव्यू । ग्राफ़ दिखाता है कि डेटा संग्रह और प्रक्रिया के लिए उपयोग किए जाने वाले विभिंन सॉफ़्टवेयर और हार्डवेयर तत्व एक दूसरे से संबंधित हैं । कृपया यहां क्लिक करें इस आंकड़े का एक बड़ा संस्करण को देखने के लिए ।

Figure 2
चित्रा 2: Münster और सहयोगी३७के प्रतिनिधि परिणाम । इन पैनलों द्वारा-विषय मतलब लॉग इन-क्रिया क्षेत्र (चित्रित कार्रवाई के लिए) और क्रिया-adverb क्षेत्र (भावनात्मक प्रधानमंत्री के प्रभाव के लिए) में हालत प्रति टकटकी संभावना अनुपात दिखा । परिणाम लक्ष्य छवि की ओर लगता है की एक काफी अधिक अनुपात दिखा जब वाक्य में वर्णित कार्रवाई से दर्शाया गया था जब यह नहीं दर्शाया गया था । भावनात्मक चेहरे का प्रधानमंत्री के प्रभाव के लिए परिणाम कम निर्णायक थे: वे लक्ष्य के लिए लगता है की मतलब लॉग अनुपात में केवल एक मामूली वृद्धि का सुझाव जब चेहरे का प्रधानमंत्री एक सकारात्मक भावनात्मक प्रसार (एक मुस्कान) की तुलना में जब यह था एक नकारात्मक व्याप्ति (एक उदास चेहरा) । त्रुटि पट्टियां माध्य की मानक त्रुटि दर्शाती हैं । यह आंकड़ा Münster एट अल से संशोधित किया गया है । ३७. कृपया इस आंकड़े का एक बड़ा संस्करण देखने के लिए यहां क्लिक करें ।

Figure 3
चित्रा 3: गुएरा और Knoeferle३२के प्रतिनिधि परिणाम । यह पैनल (जिले) समानता विशेषण का मतलब पहले से गुजारें पढ़ने बार (मिसे में) दिखाता है । परिणाम एक साथ आगे दूर के साथ तुलना में करीब एक साथ चलते दो ताश के पत्तों को देखने के बाद समानता वाक्य के लिए कम पढ़ने बार दिखाते हैं । त्रुटि पट्टियां माध्य की मानक त्रुटि दर्शाती हैं । यह आंकड़ा गुएरा और Knoeferle३२से संशोधित किया गया है । कृपया यहां क्लिक करें इस आंकड़े का एक बड़ा संस्करण को देखने के लिए ।

Figure 4
चित्रा 4: Rodríguez और सहयोगियों के प्रतिनिधि परिणाम26. इस पैनल से पता चलता है द्वारा विषय अर्थ लॉग मुड संभावना अनुपात क्रिया क्षेत्र में प्रति शर्त । 0 ऊपर लगता है की अनुपात लक्ष्य एजेंट छवि के लिए एक प्राथमिकता दिखाने के लिए और 0 के नीचे अनुपात प्रतिस्पर्धी एजेंट छवि के लिए कोई प्राथमिकता दिखाएँ । परिणाम दर्शाते हैं कि प्रतिभागियों को लक्ष्य एजेंट छवि का निरीक्षण करने की अधिक संभावना थी, जब ऑब्जेक्ट और वाक्य में वर्णित क्रिया का मिलान पिछले वीडियो टेप किए गए ईवेंट्स से नहीं हुआ था । इसके अतिरिक्त, वहां लक्ष्य एजेंट छवि की ओर अधिक लग रहे थे जब कार्रवाई के लिए लिंग छवि के अनुरूप वाक्य द्वारा वर्णित है । त्रुटि पट्टियां माध्य की मानक त्रुटि दर्शाती हैं । यह आंकड़ा Rodríguez एट अल से संशोधित किया गया है । 26. कृपया इस आंकड़े का एक बड़ा संस्करण देखने के लिए यहां क्लिक करें ।

Discussion

सारांश में, दृश्य संदर्भों में आंख पर नज़र रखने की समीक्षा की वेरिएंट में एक दृश्य दृश्य भाषा समझ को प्रभावित कर सकते हैं, जिसमें कई मायनों में खुला है । इस विधि इस तरह की प्रतिक्रिया समय को मापने के रूप में तरीकों की तुलना में महत्वपूर्ण लाभ प्रदान करता है । उदाहरण के लिए, चल रहे नेत्र आंदोलनों हमें भाषा समझ प्रक्रियाओं में एक खिड़की के साथ प्रदान करते है और कैसे इन समय के साथ दृश्य दुनिया के बारे में हमारी धारणा के साथ बातचीत । इसके अलावा, प्रतिभागियों को भाषा समझ के दौरान एक स्पष्ट कार्य करने के लिए जरूरी नहीं है (जैसे एक बटन प्रेस के माध्यम से एक वाक्य की व्याकरण को पहचानने के रूप में) । यह शोधकर्ताओं की आबादी के साथ विधि का उपयोग करने की अनुमति देता है कि आंख टकटकी, जैसे शिशुओं, बच्चों के रूप में और कुछ मामलों में, पुराने वयस्कों के रूप में प्रकट व्यवहार प्रतिक्रियाओं के साथ संघर्ष हो सकता है । आंख ट्रैकिंग पारिस्थितिकी वैध है कि यह ' प्रतिभागियों ध्यान प्रतिक्रियाएं-नहीं के विपरीत ' मनुष्य संचार के दृश्य पूछताछ-उनके आसपास दुनिया में अधिक या कम ध्यान के दौरान कथन भेजते खुलासा सुनने के लिए प्रासंगिक है ।

सीमाओं में से एक दृश्य दुनिया प्रतिमान की (या शायद विशेषताओं) यह है कि नहीं सभी घटनाओं को सीधा और स्पष्ट रूप से चित्रित किया जा सकता है । ठोस वस्तुओं और घटनाओं, ज़ाहिर है, चित्रित किया जा सकता है । लेकिन सार अवधारणाओं कैसे सबसे अच्छा चित्रित कर रहे है कम स्पष्ट है । यह सीमा (या परिभाषित) भाषा प्रसंस्करण और दृश्य दुनिया की धारणा के बीच बातचीत में अंतर्दृष्टि एक आंख का उपयोग दृश्य दुनिया प्रतिमान ट्रैकिंग कर सकते हैं । आगे मनाया व्यवहार और समझ प्रक्रियाओं के बीच परिकल्पनाओं को जोड़ने से संबंधित चुनौतियों । नेत्र निर्धारण एक एकल व्यवहार प्रतिक्रिया है कि संभावना भाषा समझ के दौरान कई उपक्रमों को दर्शाता है (जैसे, दिक का उपयोग, संदर्भित प्रक्रियाओं, भाषा की मध्यस्थता उंमीदों, दृश्य संदर्भ प्रभाव, दूसरों के बीच) हैं । इस अंतर्दृष्टि को देखते हुए, शोधकर्ताओं सावधान होना चाहिए पर नहीं है या देखा टकटकी पैटर्न गलत व्याख्या । इस समस्या को हल करने के लिए, पूर्व अनुसंधान समझ उपकार्य की भूमिका को उजागर करने के लिए टकटकी रिकॉर्ड४०की व्याख्या स्पष्ट है ।

एक तरह से नेत्र आंदोलनों की व्याख्याता बढ़ाने के लिए उंहें ऐसी घटना से संबंधित मस्तिष्क क्षमता (ERPs) के रूप में अंय उपायों के साथ एकीकृत है । दो तरीकों कि उनके लौकिक दानेदार में तुलना कर रहे है और उनके परिकल्पनाओं को जोड़ने में पूरक के साथ एक ही घटना की जांच करके, शोधकर्ताओं ने अपने परिणामों के वैकल्पिक स्पष्टीकरण बाहर शासन और प्रत्येक की व्याख्या को समृद्ध कर सकते है वैयक्तिक उपाय४१. इस दृष्टिकोण४३प्रयोगों के पार पीछा किया गया है, लेकिन, हाल ही में, भी एक ही प्रयोग के भीतर (हालांकि कड़ाई से भाषाई संदर्भों में)४४. भविष्य के अनुसंधान बहुत ऐसे methodological एकीकरण और पोस्ट के साथ जारी संयोजन-परीक्षण और बाद प्रयोगात्मक कार्यों से लाभ सकता है ।

आंख ट्रैकिंग विधि स्थापित परिणामों की नकल कर सकते हैं, के रूप में अच्छी तरह से परीक्षण के रूप में नई परिकल्पना, दृश्यों में दृश्य ध्यान की भाषा समझ के साथ बातचीत के बारे में । प्रक्रिया प्रोटोकॉल में उल्लिखित सावधानी से पीछा किया जाना चाहिए के बाद से भी मामूली प्रयोगकर्ता त्रुटियों डेटा की गुणवत्ता को प्रभावित कर सकते हैं । अध्ययन पढ़ने में, उदाहरण के लिए, प्रासंगिक विश्लेषण क्षेत्रों अक्सर व्यक्तिगत शब्दों या भी पत्र हैं, जिसका अर्थ है कि भी छोटे अंशांकन त्रुटियों के परिणाम विकृत हो सकता है (राणे और सहयोगियों द्वारा लेख देखें४२) । कदम १.४ और प्रोटोकॉल के १.५, आंख ट्रैकर के अंशांकन और बहाव की जांच/बहाव सही, विशेष महत्व के है क्योंकि वे सीधे रिकॉर्डिंग सटीकता प्रभाव । सही ढंग से नेत्र ट्रैकर जांच करने के लिए विफलता ट्रैकर सही नहीं ब्याज की पूर्व स्थापित क्षेत्रों के लिए आंख आंदोलनों पर नज़र रखने में परिणाम कर सकते हैं । इस तरह की ट्रैकिंग विफलता गुम डेटा बिंदुओं और सांख्यिकीय शक्ति में एक नुकसान है जो समस्याग्रस्त किया जा सकता है जब दुनिया के लिए भाषा संबंधों है कि बहुत सूक्ष्म है और उपज छोटे सांख्यिकीय प्रभाव आकार की जांच करने के लिए नेतृत्व करेंगे (का विवरण देखें गुएरा और Knoeferle३२ और Münster और सहयोगियों३७ प्रतिनिधि परिणामोंके बीच द्वारा प्रयोग) ।

शक्ति और उपकरणों की संवेदनशीलता को अधिकतम करने की जरूरत को देखते हुए यह महत्वपूर्ण है कि प्रयोग करने वालों को पता है कि एक प्रयोगात्मक सत्र के दौरान नियमित रूप से हो समस्याओं से निपटने के लिए । उदाहरण के लिए, पुतली स्थिति और चश्मा पहने प्रतिभागियों के आंदोलन अंशांकन एक भागीदार के चश्मे के लेंस पर प्रकाश प्रतिबिंब के कारण कठिनाइयों में परिणाम कर सकते हैं । एक तरह से इस समस्या को हल करने के लिए प्रदर्शन पीसी पर है भागीदार आंख की छवि को दर्पण और उंहें अपने सिर को स्थानांतरित करने के लिए जब तक चश्मे पर प्रकाश की परछाई अपनी स्क्रीन पर दिखाई नहीं है, जिसका अर्थ है कि यह अब कैमरे द्वारा कब्जा कर लिया है प्रोत्साहित है । अंशांकन विफलता का एक और कारण पुतला कसना हो सकता है, जो प्रकाश के लिए एक जोखिम का परिणाम हो सकता है । उस मामले में, प्रयोगशाला में प्रकाश dimming पुतला फैलाव में वृद्धि होगी और, इस प्रकार, सही ढंग से पुतला का पता लगाने में नेत्र ट्रैकर मदद करते हैं ।

एक अंतिम विचार के रूप में, हम क्षमता है कि दृश्य दुनिया प्रतिमान दूसरी भाषा सीखने पर अनुसंधान के लिए है पता करना चाहते हैं । प्रतिमान पहले से ही सफलतापूर्वक psycholinguistic अनुसंधान में इस्तेमाल किया गया है जैसे पार भाषा दिक और phonological बातचीत४६,४७,४८के रूप में घटना की जांच । इसके अतिरिक्त, दृश्य ध्यान और भाषा सीखने के बीच घनिष्ठ लिंक अक्सर दूसरी भाषा अधिग्रहण४९,५०,५१पर लागू-भाषाविज्ञान साहित्य में प्रकाश डाला गया है । दूसरी भाषा सीखने पर भविष्य के अनुसंधान की संभावना एक विधि है कि मिलीसेकंड संकल्प में दृश्य ध्यान की एक अनुक्रमणिका प्रदान करता है के रूप में आंख ट्रैकिंग के लाभप्रद स्थिति से लाभ के लिए जारी रहेगा ।

Disclosures

लेखकों का खुलासा करने के लिए कुछ नहीं है ।

Acknowledgments

इस अनुसंधान ZuKo (उत्कृष्टता पहल, पीरु-Universität zu बर्लिन), उत्कृष्टता क्लस्टर २७७ ' संज्ञानात्मक संपर्क प्रौद्योगिकी ' (जर्मन अनुसंधान परिषद, DFG) द्वारा वित्त पोषित किया गया था, और यूरोपीय संघ के अनुसंधान के लिए सातवें ढांचे के कार्यक्रम द्वारा, तकनीकी विकास और अनुदान समझौते n ° 316748 (LanPercept) के तहत प्रदर्शन । लेखक भी उत्कृष्टता के केंद्रों के लिए बेसल कोष से समर्थन स्वीकार करते हैं, CONICYT के साहचर्य अनुसंधान कार्यक्रम से परियोजना FB0003 (चिली के सरकार), और परियोजना से "FoTeRo" फोकस केंद्र XPrag (DFG) में । पिया Knoeferle एक प्रयोगशाला प्रोटोकॉल है कि हेलेन Kreysa बर्लिन में विश्वविद्यालय में आरंभ और है कि पीरु-Universität zu बर्लिन में इस्तेमाल किया जा रहा है द्वारा सूचित लेख का पहला मसौदा प्रदान की है । सभी लेखकों के तरीकों और परिणामों पर एक फार्म या किसी अंय में इनपुट प्रदान करके सामग्री के लिए योगदान दिया । कैमिलो Rodríguez Ronderos और पिया Knoeferle लेखकों से इनपुट समंवित और दो पुनरावृत्तियों में, काफी हद तक प्रारंभिक मसौदे संशोधित । Ernesto गुएरा उत्पादित आंकड़े 2 - 4 Katja Münster, अल्बा Rodríguez, और Ernesto गुएरा से इनपुट के आधार पर । हेलेन Kreysa प्रदान की चित्रा 1 और पिया Knoeferle इसे अद्यतन । रिपोर्ट किए गए परिणामों के भाग संज्ञानात्मक विज्ञान सोसायटी की वार्षिक बैठक की कार्यवाहीमें प्रकाशित किया गया है ।

Materials

Name Company Catalog Number Comments
Desktop mounted eye-tracker including head/chin rest SR Research Ltd. EyeLink 1000 plus http://www.sr-research.com/eyelink1000plus.html
Software for the design and execution of an eye-tracking experiment SR Research Ltd. Experiment Builder http://www.sr-research.com/eb.html

DOWNLOAD MATERIALS LIST

References

  1. Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
  2. Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing. Cognitive Psychology. 6 (1), 84-107 (1974).
  3. Knoeferle, P., Guerra, E. What is non-linguistic context? A view from language comprehension. In What is a Context? Linguistic Approaches and Challenges. Finkbeiner, R., Meibauer, J., Schumacher, P. B. , John Benjamins Publishing Company. Amsterdam, The Netherlands. 129-150 (2012).
  4. Knoeferle, P., Guerra, E. Visually situated language comprehension. Language and Linguistics Compass. 10 (2), 66-82 (2016).
  5. Just, M. A., Carpenter, P. A. A theory of reading: From eye fixations to comprehension. Psychological Review. 87 (4), 329-354 (1980).
  6. Deubel, H., Schneider, W. X. Saccade target selection and object recognition: Evidence for a common attentional mechanism. Vision Research. 36 (12), 1827-1837 (1996).
  7. Rayner, K. Eye movements in reading and information processing: 20 years of research. Psychological Bulletin. 124 (3), 372-422 (1998).
  8. Sedivy, J. C., Tanenhaus, M. K., Chambers, C. G., Carlson, G. N. Achieving incremental semantic interpretation through contextual representation. Cognition. 71 (2), 109-147 (1999).
  9. Kamide, Y., Scheepers, C., Altmann, G. T. Integration of syntactic and semantic information in predictive processing: Cross-linguistic evidence from German and English. Journal of Psycholinguistic Research. 32 (1), 37-55 (2003).
  10. Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models. Journal of Memory and Language. 38 (4), 419-439 (1998).
  11. Tanenhaus, M. K., Magnuson, J. S., Dahan, D., Chambers, C. Eye movements and lexical access in spoken-language comprehension: Evaluating a linking hypothesis between fixations and linguistic processing. Journal of Psycholinguistic Research. 29 (6), 557-580 (2000).
  12. Arnold, J. E., Eisenband, J. G., Brown-Schmidt, S., Trueswell, J. C. The rapid use of gender information: Evidence of the time course of pronoun resolution from eyetracking. Cognition. 76 (1), B13-B26 (2000).
  13. Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. Actions and affordances in syntactic ambiguity resolution. Journal of Experimental Psychology: Learning, Memory, and Cognition. 30 (3), 687-696 (2004).
  14. Spivey, M. J., Tanenhaus, M. K., Eberhard, K. M., Sedivy, J. C. Eye movements and spoken language comprehension: Effects of visual context on syntactic ambiguity resolution. Cognitive Psychology. 45 (4), 447-481 (2002).
  15. Huang, Y. T., Snedeker, J. Online interpretation of scalar quantifiers: Insight into the semantics-pragmatics interface. Cognitive Psychology. 58 (3), 376-415 (2009).
  16. Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. The kindergarten-path effect: studying online sentence processing in young children. Cognition. 73 (2), 89-134 (1999).
  17. Knoeferle, P., Crocker, M. W., Scheepers, C., Pickering, M. J. The influence of the immediate visual context on incremental thematic role-assignment: evidence from eye movements in depicted events. Cognition. 95 (1), 95-127 (2005).
  18. Knoeferle, P., Crocker, M. W. Incremental Effects of Mismatch during Picture-Sentence Integration: Evidence from Eye-tracking. Proceedings of the 26th Annual Conference of the Cognitive Science Society. , Stresa, Italy. 1166-1171 (2005).
  19. Kluth, T., Burigo, M., Schultheis, H., Knoeferle, P. The role of the center-of-mass in evaluating spatial language. Proceedings of the 13th Biannual Conference of the German Society for Cognitive Science. , Bremen, Germany. 11-14 (2016).
  20. Burigo, M., Knoeferle, P. Visual attention during spatial language comprehension. PLoS One. 10 (1), (2015).
  21. Münster, K., Carminati, M. N., Knoeferle, P. How Do Static and Dynamic Emotional Faces Prime Incremental Semantic Interpretation? Comparing Older and Younger Adults. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 2675-2680 (2014).
  22. Kroeger, J. M., Münster, K., Knoeferle, P. Do Prosody and Case Marking influence Thematic Role Assignment in Ambiguous Action Scenes? Proceedings of the 39th Annual Meeting of the Cognitive Science Society. , London, UK. 2463-2468 (2017).
  23. Knoeferle, P., Crocker, M. W. The influence of recent scene events on spoken comprehension: evidence from eye movements. Journal of Memory and Language. 57 (4), 519-543 (2007).
  24. Knoeferle, P., Carminati, M. N., Abashidze, D., Essig, K. Preferential inspection of recent real-world events over future events: evidence from eye tracking during spoken sentence comprehension. Frontiers in Psychology. 2, 376 (2011).
  25. Abashidze, D., Knoeferle, P., Carminati, M. N. How robust is the recent-event preference? Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 92-97 (2014).
  26. Rodríguez, A., Burigo, M., Knoeferle, P. Visual constraints modulate stereotypical predictability of agents during situated language comprehension. Proceedings of the 38th Annual Meeting of the Cognitive Science Society. , Philadelphia, USA. 580-585 (2016).
  27. Zhang, L., Knoeferle, P. Visual Context Effects on Thematic Role Assignment in Children versus Adults: Evidence from Eye Tracking in German. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 2593-2598 (2012).
  28. Zhang, L., Kornbluth, L., Knoeferle, P. The role of recent versus future events in children's comprehension of referentially ambiguous sentences: Evidence from eye tracking. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 1227-1232 (2012).
  29. Münster, K., Knoeferle, P. Situated language processing across the lifespan: A review. International Journal of English Linguistics. 7 (1), 1-13 (2017).
  30. Özge, D., et al. Predictive Use of German Case Markers in German Children. Proceedings of the 40th Annual Boston University Conference on Language Development. , Somerville, USA. 291-303 (2016).
  31. Weber, A., Grice, M., Crocker, M. W. The role of prosody in the interpretation of structural ambiguities: A study of anticipatory eye movements. Cognition. 99 (2), B63-B72 (2006).
  32. Guerra, E., Knoeferle, P. Effects of object distance on incremental semantic interpretation: similarity is closeness. Cognition. 133 (3), 535-552 (2014).
  33. Kreysa, H., Knoeferle, P., Nunnemann, E. Effects of speaker gaze versus depicted actions on visual attention during sentence comprehension. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 2513-2518 (2014).
  34. Abashidze, D., Knoeferle, P., Carminati, M. N. Eye-tracking situated language comprehension: Immediate actor gaze versus recent action events. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , Pasadena, USA. 31-36 (2015).
  35. Crovitz, H. F., Zener, K. A Group-Test for Assessing Hand- and Eye-Dominance. The American Journal of Psychology. 75 (2), 271-276 (1962).
  36. Ehrenstein, W. H., Arnold-Schulz-Gahmen, B. E., Jaschinski, W. Eye preference within the context of binocular functions. Graefe's Arch Clin Exp Ophthalmol. 243, 926 (2005).
  37. Münster, K., Carminati, M. N., Knoeferle, P. The Effect of Facial Emotion and Action Depiction on Situated Language Processing. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , Pasadena, USA. 1673-1678 (2015).
  38. Lakoff, G., Johnson, M. Metaphors We Live By. , University of Chicago Press. Chicago, USA. (1980).
  39. Guerra, E., Knoeferle, P. Visually perceived spatial distance affects the interpretation of linguistically mediated social meaning during online language comprehension: An eye tracking reading study. Journal of Memory and Language. 92, 43-56 (2017).
  40. Kreysa, H., Knoeferle, P. Effects of speaker gaze on spoken language comprehension: task matters. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 1557-1562 (2012).
  41. Knoeferle, P. Language comprehension in rich non-linguistic contexts: Combining eye tracking and event-related brain potentials. Towards a cognitive neuroscience of natural language use. Roel, W. , Cambridge University Press. Cambridge, UK. 77-100 (2015).
  42. Raney, G. E., Campell, S. J., Bovee, J. C. Using eye movements to evaluate cognitive processes involved in text comprehension. Journal of Visualized Experiments. (83), e50780 (2014).
  43. Knoeferle, P., Habets, B., Crocker, M. W., Muente, T. F. Visual scenes trigger immediate syntactic reanalysis: evidence from ERPs during situated spoken comprehension. Cerebral Cortex. 18 (4), 789-795 (2008).
  44. Dimigen, O., Sommer, W., Hohlfeld, A., Jacobs, A. M., Kliegl, R. Coregistration of eye movements and EEG in natural reading: Analyses and review. Journal of Experimental Psychology: General. 140 (4), 552-572 (2011).
  45. Knoeferle, P., Kreysa, H. Can speaker gaze modulate syntactic structuring and thematic role assignment during spoken sentence comprehension? Frontiers in Psychology. 3, 538 (2012).
  46. Chambers, C. G., Cooke, H. Lexical competition during second-language listening: Sentence context, but not proficiency, constrains interference from the native lexicon. Journal of Experimental Psychology: Learning, Memory, and Cognition. 35 (4), 1029 (2009).
  47. Duyck, W., Van Assche, E., Drieghe, D., Hartsuiker, R. J. Visual word recognition by bilinguals in a sentence context: Evidence for nonselective lexical access. Journal of Experimental Psychology: Learning, Memory, and Cognition. 33 (4), 663 (2007).
  48. Weber, A., Cutler, A. Lexical competition in non-native spoken-word recognition. Journal of Memory and Language. 50 (1), 1-25 (2004).
  49. Verhallen, M. J., Bus, A. Young second language learners' visual attention to illustrations in storybooks. Journal of Early Childhood Literacy. 11 (4), 480-500 (2011).
  50. Robinson, P., Mackey, A., Gass, S. M., Schmidt, R. Attention and awareness in second language acquisition. The Routledge Handbook of Second Language Acquisition. , 247-267 (2012).
  51. Tomlin, R. S., Villa, V. Attention in cognitive science and second language acquisition. Studies in Second Language Acquisition. 16 (2), 183-203 (1994).

Tags

व्यवहार १४१ अंक नेत्रहीन भाषा समझ नेत्र ट्रैकिंग psycholinguistic तरीकों दृश्य संदर्भ प्रभाव उंर लचीलापन और विधि की सीमाओं जोड़ने परिकल्पना स्थित
नेत्रहीन के दौरान आंख ट्रैकिंग भाषा समझ स्थित: लचीलापन और दृश्य संदर्भ प्रभाव को उजागर करने में सीमाएं
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Rodriguez Ronderos, C.,… More

Rodriguez Ronderos, C., Münster, K., Guerra, E., Kreysa, H., Rodríguez, A., Kröger, J., Kluth, T., Burigo, M., Abashidze, D., Nunnemann, E., Knoeferle, P. Eye Tracking During Visually Situated Language Comprehension: Flexibility and Limitations in Uncovering Visual Context Effects. J. Vis. Exp. (141), e57694, doi:10.3791/57694 (2018).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter