Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
Click here for the English version

Behavior

تتبع العين خلال فهم اللغة يقع بصريا: المرونة والتقييدات في الكشف عن السياق البصرية آثار

Published: November 30, 2018 doi: 10.3791/57694

Summary

تستعرض هذه المادة بالعين تتبع منهجية للدراسات في فهم اللغة. للحصول على بيانات موثوق بها، يجب أن تتبع الخطوات الرئيسية للبروتوكول. ومن بين هذه هي الإعداد الصحيحة لتعقب العين (مثلاً، ضمان نوعية جيدة من الصور العين والرأس) ومعايرة دقيقة.

Abstract

هذا العمل هو وصف وتقييم منهجية مصممة لقياس الجوانب المختلفة من التفاعل بين معالجة اللغة وتصور العالم المرئي. تسجيل أنماط نظرات العين قدمت أدلة جيدة لمساهمة كل من سياق مرئي والمعارف اللغوية العالمية لفهم اللغة. البحوث الأولية تقييم تأثيرات سياق الكائن لاختبار نظريات نمطية في معالجة اللغة. وفي المقدمة، يصف لنا كيف اتخذت التحقيقات اللاحقة دور السياق الأوسع visual في لغة معالجة كموضوع بحث في حد ذاته، يسأل أسئلة مثل كيف يسهم في تصورنا البصرية للأحداث والمتكلمين الفهم أبلغ بتجربة كومبريهينديرس. بين جوانب دراسة السياق البصرية هي الإجراءات، والأحداث، والمتكلم لغض البصر، وتعبيرات الوجه العاطفية،، فضلا عن تكوينات الكائن المكاني. بعد لمحة عامة عن طريقة تتبع العين وتطبيقاته المختلفة، نحن قائمة الخطوات الرئيسية للمنهجية في البروتوكول، والتي توضح كيفية استخدامه بنجاح لدراسة اللغة يقع ضعاف الفهم. قسم الأخير يعرض ثلاث مجموعات من النتائج التمثيلية ويوضح فوائد وتقييدات لتتبع العين للتحقيق في التفاعل بين تصور لفهم العالم واللغة البصرية.

Introduction

البحث psycholinguistic قد أبرزت أهمية تحليل حركة العين في فهم العمليات التي تورط في فهم اللغة. هو جوهر الاستدلال عمليات الفهم من السجل نظرات فرضية يرتبط الإدراك ب حركات العين5. وهناك ثلاثة أنواع رئيسية من حركات العين: ساككاديس والحركات فيستيبولو العين وحركات السعي نحو سلس. ساككاديس هي حركات سريعة والقذائف التسيارية التي يحدث معظمها غير مدركة، وارتبطت موثوق بالتحولات في الاهتمام6. وتعتبر لحظات الاستقرار النسبي نظرات بين ساككاديس، المعروف باسم تثبيتات، الفهرس الحالي الانتباه البصري. قياس موضع التثبيتات ومدتها فيما يتعلق بالعمليات الإدراكية يعرف باسم 'العين تتبع الأسلوب'. وعمل التنفيذ المبكر لهذا الأسلوب لدراسة القراءة والفهم في السياقات اللغوية دقة (انظر راينر7 استعراض). في هذا النهج، مدة تفتيش منطقة الكلمة أو الجملة المقترنة مع معالجة صعوبة. العين تتبع، ولكن أيضا تم تطبيقها على دراسة فهم اللغة المنطوقة أثناء التفتيش على الكائنات في العالم (أو على جهاز كمبيوتر عرض2). وتسترشد التفتيش على الكائنات في هذا الإصدار 'العالم المرئي' تتبع العين، لغة. عندما نسمع كومبريهينديرس حمار، على سبيل المثال، عمليات التفتيش لحمار وحشي على الشاشة هو اتخاذها لتعكس أنهم يفكرون في الحيوان. في ما يعرف باسم نموذج العالم المرئي، هو اتخاذ نظرات العين كومبريهيندير لتعكس فهم اللغة المنطوقة وتفعيل المعارف المرتبطة بها (مثلاً المستمعين أيضا تفتيش حمار عندما يسمعون الرعي، مما يدل الإجراء التي يؤديها حمار)2. عمليات التفتيش هذه تشير إلى ارتباط منهجي بين اللغة-عالم العلاقات و حركات العين2. طريقة شائعة لقياس هذا الارتباط بحساب نسبة تتطلع إلى مختلف المناطق المحددة مسبقاً على شاشة. وهذا ما يسمح الباحثون مقارنة مباشرة (عبر الشروط، بالمشاركين والبنود) مقدار الاهتمام الذي يولي لكائنات مختلفة في وقت معين وكيفية تغيير هذه القيم في القرار ميلي ثانية.

بحوث في علم اللغة النفسي قد استغل تعقب العين في العالمين المرئي لندف فرضيات النظرية المتنافسة عن بعضها البعض فيما يتعلق ببنية العقل1. تثبيتات العين على كائنات يصور، علاوة على ذلك، كشفت عن أن كومبريهينديرس يمكن – سياق اللغوي مقيدة بما فيه الكفاية على افتراض – القيام بتفسير الدلالات الإضافية8 وحتى وضع التوقعات حول الأحرف القادمة 9-هذه البيانات نظرات العين لها أيضا تسليط الضوء على طائفة من مواصلة عمليات الفهم، مثل الغموض اللغوي القرار10،11، الضمير القرار12، توضيح دور الهيكلية والموضوعية عن طريق تعيين المعلومات في سياق البصرية13،،من1416، وعمليات عملي15، ضمن أشياء أخرى كثيرة4. ومن الواضح أن حركات العين للكائنات من خلال فهم اللغة يمكن أن تكون مفيدة لعمليات المتورطين.

العين تتبع طريقة غير الغازية ويمكن استخدامها مع الأطفال الرضع، مستخدمين لغة الشباب، وكبار السن. ميزة مفتاح أنه، خلافا لردود الشروريه إلى تحقيقات أو يضغط زر الرد في مهام التحقق، فإنه يقدم أفكاراً على مر الزمن في قرار ميلي ثانية إلى كيف اللغة يوجه الاهتمام وكيف سياق البصرية (في شكل الكائنات، الإجراءات، الأحداث، والمتكلم لغض البصر، وتعبيرات الوجه العاطفية، كذلك تكوينات الكائن المكاني) يسهم في معالجة اللغة. ويكمل استمرارية هذا التدبير خلال الفهم الجملة جيدا مع تدابير أخرى بعد انتهاء الجملة وتجربة ما بعد مثل من العلني صورة/فيديو-الجملة التحقق وأسئلة الفهم والذاكرة أذكر المهام. ردود صريحة في هذه المهام يمكن أن تثري تفسير السجل نظرات العين بتوفير نظرة ثاقبة نتائج عملية الفهم والذاكرة، والتعلم2. الجمع بين تتبع العين مع هذه المهام الأخرى كشفت عن مدى تعدل الجوانب المختلفة سياق البصرية الانتباه البصري والفهم (فوري، فضلا عن تأخر) عبر مراحل العمر.

العرض التقديمي للغة (منطوقه أو مكتوبة) ومشاهد يمكن أن تكون متزامنة أو متتابعة. على سبيل المثال، كنوفيرلي والمتعاونين مع17 قدم المشهد ms 1,000 قبل الجملة المنطوقة، وأنه ما زال حاضرا أثناء الفهم. أفادوا بالأدلة التي تسهم في تصوير قصاصات فنية لإحداث العمل بالقرار من غموض الهيكلية المحلية الألمانية هذا الموضوع-فعل-الكائن (سفو) بالمقارنة مع الجمل الكائن-فعل-الموضوع (أوفس). كنوفيرلي وكروكر18 قدم مشهد clipart قبل جملة مكتوبة واختبارها على إدماج الأحداث clipart تزايدي أثناء فهم الجملة. ولاحظوا آثار التطابق تدريجية، بمعنى أن مرات المشتركين القراءة من مكونات الجملة كانت أطول عند هذه متطابقة (مقابل مطابقة) الحدث يصور في المشهد السابق. في الخيار عرض حافز آخر، المشاركون أولاً اقرأ جملة تصف علاقة مكانية وثم شاهدت مشهد معين ترتيب المكانية التي تنطوي على كائن رسومات سطر19. قيمت هذه الدراسة توقعات النماذج الحسابية اللغة المكانية عن طريق طرح المشاركون معدل تناسب العقوبة نظراً للمشهد، مع حركات العين التي سجلت أثناء الاستجواب مشهد. أنماط نظرات المشاركين كانت عن طريق الشكل للكائن الذي كانت تواجه التضمين – يؤكد تنبؤات النموذج جزئيا وتوفير البيانات اللازمة لصقل نموذج.

في حين أن العديد من الدراسات قد استخدمت clipart تصوير17،18،19،20،21،،من2223، من الممكن أيضا الجمع بين العالم الحقيقي الكائنات، وأشرطة الفيديو من هذه الكائنات، أو صوراً ثابتة مع اللغة المنطوقة1،،من2124،،من2526،46. استخدام كنوفيرلي والزملاء وضع العالم الحقيقي24 واباشيدزه والزملاء يستخدم تنسيق عرض أشرطة فيديو لدراسة عمل الأحداث وآثار التوتر25. اختلاف المحتوى الدقيق من المشاهد (مثلاً، يصور الإجراءات أم لا)22،،من2738 من الممكن ويمكن أيضا أن تكشف عن آثار السياق visual. التحقيق دراسة ذات صلة بها رودريغيز والمتعاونين26 تأثير منبهات الجنس المرئية المسجلة على شريط فيديو في الفهم الجمل المنطوقة وقدم بعد ذلك. وشاهد المشاركون أشرطة الفيديو عرض الأيدي الذكور أو الإناث أداء عمل النمطية المتعلقة بالجنسين. ثم، أنهم علموا جملة أما حدث عمل أقل من الذكور أو الإناث بينما كان يتفقد شاشة عرض صورتين جنبا إلى جنب، واحدة لرجل والآخر امرأة في نفس الوقت. هذه البيئة البصرية واللغوية الغنية يسمح المؤلفون إلى ندف أربا آثار اللغة بوساطة المعرفة النمطية في الفهم من آثار العظة الجنسين قدم بصريا (اليد).

وقد استهدفت تطبيق مزيد من هذا النموذج التغيرات الإنمائية في معالجة اللغة. حركات العين للكائنات من خلال فهم اللغة المنطوقة كشفت آثار الأحداث يصور في 4-5-العمر27،28 وفي البالغين الأكبر سنا29 في الوقت الحقيقي، ولكن تأخر إلى حد ما مقارنة بالشباب. Kröger والمتعاونين مع22 دراسة آثار العظة عروضي وحالة مناسبة داخل تجربة ومقارنة هذه عبر التجارب في البالغين والأطفال. تفتيش المشاركين مشهد حدث عمل غامضة أثناء الاستماع إلى جملة ألمانية ذات صلة لا لبس فيه بعلامات الحالة. وكشف حركات العين أن أنماط عروضي المميزة ساعد الكبار ولا 4 أو 5--العمر عند ديسامبيجواتينج الذين--ما-إلى-منهم. ومع ذلك، أثرت حالة الجملة الأولى الوسم والكبار ولكن حركات العين للأطفال لا. وهذا يوحي بأن فهم 5 سنة الوسم القضية ليست قوية بما فيه الكفاية لتمكين تعيين الدور الموضوعي (انظر الدراسة اوزغي والمتعاونين مع30)، على الأقل ليس عندما عمل الأحداث لا تزيل غموض العلاقات دور المواضيعية. هذه النتائج مثيرة للاهتمام، نظراً إلى أن أنها تتناقض مع النتائج السابقة من آثار عروضي على دور المواضيعية التعيين31. واقترح Kröger والمتعاونين مع22 أن سياق البصرية (داعم أكثر أو أقل) المسؤول عن النتائج المتناقضة. أن عقد هذه التفسيرات، وأنها تبرز دور السياق في فهم اللغة عبر مراحل العمر.

العين تتبع أسلوب يجمع جيدا مع التدابير من الصورة-(أو الفيديو) الجملة التحقق المهام18،،من2026، صورة التحقق المهام32، الإحضار دراسات24، وتصنيف مهام19، أو استدعاء التجريبية بعد انتهاء المهام25،33. التحقيق أباشيدزه والمتعاونين معهم34 و قريصة والمتعاونين مع33 تفاعل المتكلم نظرات ونظرات34 والمتكلم أشرطة الفيديو عمل العالم الحقيقي و تصوير العمل33، على التوالي، كرموز مضمون الجملة القادمة. عن طريق الجمع بين تتبع نظرات العين في مشهد خلال فهم اللغة بمهمة ذاكرة بعد تجريبية، التي اكتسبتها إلى فهم أفضل للطريقة التي تصور المستمعين غض البصر للمتكلم والإجراءات يصور تتفاعل وتؤثر على حد سواء معالجة اللغة فورا، واستدعاء الذاكرة. وكشفت النتائج مساهمة متميزة من الإجراءات مقابل النظرة المتكلم إلى الفهم في الوقت الحقيقي مقابل عمليات استدعاء الذاكرة تجربة ما بعد.

وفي حين يمكن أن تستخدم أسلوب التعقب بالعين مع قدرا كبيرا من المرونة، معايير معينة هي المفتاح. ويلخص البروتوكول التالي إجراء معممة التي يمكن تعديلها لأنواع مختلفة من الأسئلة البحثية وفقا للاحتياجات المحددة الباحثين. هذا البروتوكول إجراء موحد يعمل في "مختبر علم اللغة النفسي" في جامعة هومبولت زو برلين، فضلا عن اللغة والإدراك المختبر في المعرفي التفاعل تكنولوجيا التميز الكتلة (CITEC) في السابق جامعة بيليفيلد. ويصف البروتوكول سطح مكتب وإعداد عن بعد. ويوصي هذا الأخير لاستخدامها في الدراسات مع الأطفال أو البالغين الأكبر سنا. جميع التجارب المذكورة في نتائج الممثل استخدام جهاز تعقب عين معدل أخذ عينات من 1,000 هرتز وتستخدم جنبا إلى جنب مع عامل استقرار رأس، جهاز كمبيوتر لاختبار المشاركين (شاشة الكمبيوتر) وجهاز كمبيوتر لرصد التجربة حركات العين المشاركين (الكمبيوتر المضيف). والفرق الرئيسي من هذا الجهاز إلى سابقتها أنه يتيح لتعقب العين مجهر. يهدف البروتوكول إلى أن عامة بما فيه الكفاية للاستخدام مع الأجهزة تتبع العين الأخرى التي تشمل عامل استقرار رأس والاستفادة من جهاز كمبيوتر ثنائي الإعداد (المضيف + عرض). ومع ذلك، من المهم أن نضع في اعتبارنا أن الأجهزة الأخرى من المحتمل أن يكون أساليب مختلفة للتعامل مع مشاكل مثل الفشل المعايرة أو فقدان المسار، الذي ينبغي أن تشير الحالة المجرب للمستخدم اليدوي لأجهزتهم الخاصة.

Protocol

ويتبع هذا البروتوكول المبادئ التوجيهية الأخلاقية للمؤسسة حيث تم جمع البيانات، أيالمعرفي التفاعل تكنولوجيا التميز الكتلة (CITEC) جامعة بيليفيلد وجامعة هومبولت زو برلين. التجارب التي أجريت في جامعة بيليفيلد وافق على حدة لجنة الأخلاقيات في جامعة بيليفيلد. مختبر علم اللغة النفسي في جامعة هومبولت زو برلين قد بروتوكول أخلاقيات مختبرية التي وافقت عليها لجنة الأخلاقيات الألمانية سبراتشويسينشافت، "جمعية اللغويات الألماني" (دجفس).

1-الإعداد سطح المكتب

ملاحظة: فيما يلي بعض الخطوات الرئيسية في تجربة العين تتبع.

  1. إعداد الصك
    1. قم بتشغيل الكاميرا تتبع العين و "أجهزة الكمبيوتر المضيفة" (انظر الشكل 1 لمثال على عملية جمع البيانات في المعمل والإعداد ما قبل المعالجة).
    2. بدء برامج تعقب العين.
    3. تشغيل عرض الكمبيوتر. افتح المجلد الذي يحتوي على التجارب.
    4. بدء إصدار 'نشر' مع ملحق.exe بالنقر المزدوج فوقه.
    5. اعتماداً على الإعداد، قد تظهر مطالبة بتحديد قائمة تجريبي، الذي هو عادة ملف المفصول.csv/.txt التي تحتوي على شروط وأسماء الملفات الصوتية والجمل المكتوبة، أو الصور التي سوف يتعرض أحد المشاركين إلى. حدد في القائمة، وسوف يبدأ تشغيل البرنامج. اسم ملف الإخراج حيث سيتم تخزين النتائج.
      ملاحظة: يتم حفظ ملف الإخراج على "جهاز عرض الكمبيوتر" ويتم حفظ نسخة احتياطية على "الكمبيوتر المضيف".
    6. اترك الشاشة الأولى من التجربة (مقدمة أو شاشة الترحيب) مفتوحة.
    7. إزالة الغطاء الواقي من كاميرا تعقب العين.
    8. لأغراض صحية، وضع أنسجة على صاحب الذقن.
    9. اختياري: إعداد لوحة استجابة و/أو لوحة مفاتيح كما هو مطلوب بالتجربة.
    10. اختياري: إذا عرض المنبهات السمعية، ضبط مستوى صوت السماعات واختبارها قبل تشغيل التجربة. وبدلاً من ذلك، اختبار الأداء الوظيفي لسماعات الرأس لاستخدامها من قبل المشارك.
    11. إعداد النماذج اللازمة يوقعه المشارك.
    12. ضبط شدة الضوء في المختبر كي يكون غرفة الخافتة مع الإنارة مستمرة لمدة عملية جمع البيانات بأكملها.
  2. إعداد المشاركين
    1. بعد أن وصل إلى المشاركين، أعرض نفسك.
    2. مكان عدم الإزعاج التوقيع على باب المختبر.
    3. أطلب من المشاركين لشغل مقعد.
    4. دليل المشارك من خلال ورقة المعلومات والموافقة الضرورية وأشكال الديمغرافية.
    5. السماح للمشاركين قراءة والتوقيع على استمارة الموافقة.
    6. اشرح بإيجاز الجوانب العامة للتجربة ومدتها. لا تقدم الكثير من المعلومات قبل التجربة، حيث قد يؤثر هذا السلوك نظرات المشارك والبيانات الناتجة.
    7. توفير تعليمات مكتوبة وإعطاء المشاركين الفرصة لطرح الأسئلة.
    8. اشرح بإيجاز وظيفة تعقب العين.
    9. إذا لزم الأمر، توضيح المهمة والإشارة إلى أي أزرار/المفاتيح التي سوف تحتاج إلى الضغط على المفاتيح أثناء التجربة.
    10. شرح كيفية بقية الذقن يهدف إلى تقليل حركة الرأس أثناء التجربة. يذكر أن الجهاز يعمل بأفضل إذا كان المشارك يتجنب أي حركات.
  3. إعداد تعقب العين
    1. إعداد المشارك للتجربة: نطلب منهم الجلوس على الطاولة ومكان على الذقن على بقية الذقن. أطلب منهم إلى الانكفاء على جبهته ضد مسند الرأس.
    2. أطلب من المشاركين لضبط الارتفاع وموقف الرئيس إذا لزم الأمر: المشترك ينبغي أن تشعر بالراحة مع ما تشين شأن بقية الذقن وعلى جبهته ضد مسند الرأس.
    3. شرح أن من الشائع أن تحريك الرأس بطريق الخطأ أثناء التجربة، وأنه ينبغي تجنب هذا. شرح قد يكون الموقف الرئيسي الذي ينبغي تصحيحها من خلال التجربة.
    4. إذا كانت التجربة يتطلب زر صحافة (مثلاً، عن طريق لوحة المفاتيح استجابة)، إرشاد المشاركين لمغادرة أصابعهم يستريح على الأزرار للضغط على وتجنب النظر إلى أسفل لوحة المفاتيح استجابة عند الضغط على زر.
    5. أطلب من المشاركين لقراءة الشاشة مرحبا بك/مقدمة.
    6. الجلوس أمام "جهاز الكمبيوتر المضيف". إذا كانت الشاشة غير الفعل في إعداد الكاميرا، انقر على إعداد الكاميرا الحصول على الشاشة الصحيحة. إذا تم إزالة الغطاء الواقي من عدسة الكاميرا، وهو المشارك في الموضع الصحيح على بقية الذقن، الشاشة يجب أن تظهر ثلاث صور لعيون المشارك: صورة أكبر في الجزء العلوي، وهما أصغر في أسفل اليسار واليمين. وتبين هذه الصور أصغر عين واحدة كل، المقابلة للعين اليمنى واليسرى.
    7. تحديد العين لتعقبه. من المعتاد لتعقب العين المهيمنة للمشترك. إذا كان لا يعرف المشارك الذي عين هو المهيمن، إجراء اختبار هيمنة العين (الخطوة 1.3.8).
    8. تحديد هيمنة العين. أطلب من المشاركين تمتد ذراع واحدة، ومحاذاة الإبهام مع كائن بعيد مع كل من عيون مفتوحة. أطلب من المشاركين لبديل إغلاق العين اليسرى أو اليمنى. العين المهيمنة هي التي الإبهام يبقى متمشيا مع الكائن عند العين هو فتح35،36.
    9. اضغط على الصورة | عرض كمبيوتر (أو اضغط على مفتاح الإدخال Enter) والصور الموضحة في الخطوة 1.3.6 كما تظهر على شاشة العرض للمشترك، ولكن فقط في وقت واحد.
    10. الضغط على السهم يمين/يسار لوحة المفاتيح الكمبيوتر المجرب أو المشارك للتبديل بين الصورة أصغر وأكبر من العين. التركيز على الصورة أصغر (العين).
    11. اضغط A (محاذاة العين نافذة) أما لوحة المفاتيح من أجل مركز المربع حدود البحث في موقف التلميذ. ثم، يجب أن يظهر مربع أحمر حول العين مع دائرة الفيروز ['انعكاس القرنية'، (cr)] بالقرب من أسفل للتلميذ. ينبغي أن يكون التلميذ نفسه الأزرق.
    12. ضمان أن يعبر اثنين (مرمى) تظهر على الشاشة — واحد في وسط التلميذ وواحد في مركز انعكاس القرنية. مربع أحمر وهما يعبر يعني أن تعقب العين هو الكشف عن التلميذ والجمهورية التشيكية.
      ملاحظة: إذا كان مربع أحمر أو الصلبان غائبة، العين لا يتم تعقب – إذا حدث هذا، سوف تظهر لا تلميذ على جهاز الكمبيوتر المجرب.
    13. ضبط تركيز الكاميرا بتحول تركيز العدسة يدوياً. احرص على عدم لمس الجزء الأمامي العدسة. دورة العدسة حتى يتم التوصل إلى أفضل نقطة التركيز.
      ملاحظة: أفضل نقطة التركيز هو التوصل إلى عند دائرة الفيروز (انعكاس القرنية) صغيرة قدر الإمكان (أي، عندما تكون هذه الدائرة في التركيز).
    14. تعيين العتبة التلميذ. التأكد من أن الصورة فقط للتلميذ الأزرق (مثلاً، الرموش لا ينبغي الأزرق) على "جهاز الكمبيوتر المضيف". أيضا، تأكد من أن التلميذ كامل (ليس فقط دورها المركزي) باللون الأزرق. إلا تقلق بشأن ما هو داخل الساحة الحمراء.
    15. اضغط على الزر A. يؤدي هذا إلى تعيين عتبة التلميذ تلقائياً. إذا لم يتم عرض التلميذ بدقة باللون الأزرق، ضبط عتبة يدوياً باستخدام المفتاح التسجيل لزيادة ومفتاح لأسفل تقليل مقدار الجزء الأزرق من سطح الصورة.
      ملاحظة: مسكرة (والذي عادة السود، مثل التلميذ) قد تتداخل مع إعداد العتبة – يمكن أن تعقب العين الرموش الظلام للتلميذ. وفي هذه الحالة، أطلب من المشاركين لإزالة ماكياج بهم بتزويدهم بماكياج مزيل الأنسجة.
    16. تعيين العتبة cr. إذا كان الضغط على A في خطوة 1.3.15، عتبة cr ينبغي تلقائياً وضعت.
      ملاحظة: يجب أن تكون القيم الرقمية لكافة إعدادات العتبة مرئية. إذا ظهرت علامة استفهام في أي منها، كانت هناك مشكلة في أحد الخطوات السابقة والعتبات التي يجب تعيين يدوياً.
  4. معايرة tracker العين
    ملاحظة: التحقق من ما إذا كان تعقب العين استمرار يمكن تحديد موقف العين عندما يبدو المشارك في أجزاء أخرى من الشاشة.
    1. أطلب من المشاركين لننظر في الزوايا الأربعة من الشاشة واحدة في وقت واحد بينما إطار الإعداد الكاميرا في طريقة العرض. ننظر بعناية لأي انعكاسات غير النظامية (هذه سوف تظهر كالفيروز 'النقط' على الشاشة) التي تتداخل مع انعكاس القرنية عندما يوجه نظرات العين في الزاوية.
    2. أطلب من المشاركين لننظر في وسط الشاشة وثم مباشرة النظرة إلى الركن يمثل مشكلة إذا كان مربع أحمر حول العين، وأما من مرمى تكون غير مرئية عند أي نقطة أثناء الخطوة 1.4.1. وهذا سيساعد في تحديد مصدر المشكلة.
    3. إعادة ضبط لمنصب رئيس مشارك وتحقق إذا كان هذا تؤدي أي تحسن. كرر هذه الخطوة إذا لزم الأمر. إذا كان الجهاز لا يزال غير قادر على تتبع بدقة البصر المشارك بعد عدة محاولات، إحباط التجربة.
    4. أبلغ المشاركين أن تعقب العين سوف تكون محسوبة وأنهم ذاهبون لرؤية دائرة سوداء (مع نقطة رمادية صغيرة) الانتقال إلى أجزاء مختلفة من الشاشة. إرشاد المشاركين لثبت الدائرة حتى أنه ينتقل إلى موقع جديد. إرشاد المشارك تجنب إجهاد عيونهم والتركيز على النقطة الرمادية الصغيرة داخل الدائرة السوداء لتحقيق أفضل النتائج.
    5. أقول المشارك أن من المهم للحفاظ على ما زال ولا في محاولة لاستباق موقف الدائرة التالية أثناء المعايرة. إرشادهم لاتباع الدوائر مع عيونهم ولا رؤوسهم. انقر فوق معايرة لبدء عملية المعايرة. عادة، يتم استخدام إجراء معايرة 9-النقطة التي يتحرك الدائرة السوداء إلى تسعة مواقع بطريقة تسلسلية.
    6. لمعايرة تلقائية، اضغط ENTER بعد المشارك بدقة قد تركز اهتمامها النقطة الأولى في منتصف الشاشة. للمعايرة اليدوية (مثلاً، عندما تكون هناك مشاكل تتبع العين للمشترك أو عند التعامل مع المشاركين خاصة المجموعات مثل الأطفال)، تقبل كل التثبيت عن طريق الضغط على ENTER (أو بواسطة النقر فوق قبول التثبيت/ ضغط مفتاح المسافة).
      ملاحظة: في نهاية عملية المعايرة، يجب أن تكون نمطاً مستطيلة الشكل تقريبا على الشاشة المجرب مرئية. وهذا يمثل أنماط نظرات العين للمشارك. بالإضافة إلى ذلك، ينبغي إبراز نتائج معايرة جيدة باللون الأخضر. إذا لم تكن كذلك، كرر الإجراء المعايرة (أي، انقر فوق معايرة).
    7. التحقق من صحة النتائج. أقول المشارك للذهاب من خلال نفس الإجراء (يبحث في النقاط) من أجل التحقق من صحة نتائج عملية المعايرة. تذكيرهم بأن ننظر في النقطة وأن يكون لا يزال.
      ملاحظة: عملية التحقق من الصحة شبيه بالمعايرة وكلا نتائج مقارنة ببرامج تعقب العين لضمان أن يتم تعقب العين بدقة.
    8. انقر فوق التحقق من صحة-
    9. قبول كل التثبيت عن طريق الضغط على ENTER (أو بواسطة النقر فوق قبول التثبيت/الضغط على مفتاح المسافة).
    10. بعد التحقق من الصحة، سوف تظهر النتائج على الشاشة المجرب. إيلاء اهتمام خاص للتدابير اثنين الخطأ خطأ متوسط (مثلاً، درجة 0.23) والخطأ القصوى (مثلاً، 0.70 °). وتمثل هذه الدرجات التي ينحرف الصورة المتعقبة من النظرة الفعلية موقف مشترك.
    11. عند استخدام نموذج عالم مرئي، تبقى خطأ متوسط (الرقم الأول) تحت 0.5 درجة والخطأ كحد أقصى (العدد الثاني) تحت 1°.
    12. إذا كانت القيم الخطأ فوق العتبة، أطلب من المشاركين لتعديل موقف رؤوسهم وإعادة تشغيل إجراء المعايرة. إذا لوحظ أي تحسن، إحباط التجربة.
      ملاحظة: من الشائع لمراقبة أخطاء المعايرة عالية عند المشارك ترتدي العدسات اللاصقة. ينبغي أن يطلب المشارك مقدما جلب نظارات طبية بدلاً من العدسات اللاصقة بهم.
    13. بعد الانتهاء بنجاح من عملية المعايرة، انقر فوق تسجيل الإخراج/ لبدء التجربة. إبلاغ المشاركين أن التجربة سوف تبدأ الآن.
  5. وخلال التجربة
    ملاحظة: أثناء التجربة (اعتماداً على كيفية برمجة تجربة فردية، ولكن عادة قبل كل محاكمة التجريبية)، شاشة الانجراف الاختيار أو الانجراف الصحيحة سيتم عرض نقطة في وسط الشاشة. الغرض منه للتقرير عن الخطأ التثبيت المحسوبة للحالية للمحاكمة، واعتماداً على نموذج تعقب العين، لضبط تلقائياً فإنه.
    1. وقيل أثناء مرحلة التعليم، المشارك ثبت النقطة المركزية كلما يبدو. تأكد من أن أثناء كل مرحلة تصحيح الاختيار/الانجراف الانجراف، والمشاركون مرة أخرى هي فيكساتينج النقطة. يمكن أن يتم ذلك عن طريق اتباع النظرة المشارك على "جهاز الكمبيوتر المضيف"، حيث يظهر نظرات المشارك كدائرة خضراء تتحرك.
    2. بعد الانتهاء من الانجراف الاختيار/الانجراف الصحيح، اضغط على ENTER (أو المسافة) جعل النقطة تختفي وعرض المحاكمة القادمة.
    3. تحديد كيفية التعامل مع عدم اجتياز مرحلة الاختيار الانجراف وفقا لنموذج تعقب العين المستخدمة. اعتماداً على النموذج، تعقب العين أما سينفذ الانجراف التصحيح تلقائي بضبط الإحداثيات النظرة تطابق تلك النقطة المركزية، أو أنها ستجعل التصفير ضوضاء إلى مطالبة المجرب لإعادة معايرة قبل المتابعة تجربة (الانجراف الاختيار).
    4. في حالة استخدام لتصحيح الانحراف تلقائي، نضع في اعتبارنا أن عدد كبير جداً من التصويبات الانجراف في المحاكمات على التوالي و/أو كبير جداً بدرجة من تصحيح الانحراف سوف تشوه النتائج وتتطلب إعادة معايرة الجهاز.
  6. إعادة معايرة خلال التجربة
    1. فمن الممكن لإعادة معايرة في أي وقت أثناء التجربة. أثناء عرض الشاشة الانجراف الانجراف/تصحيح الاختيار ، انقر فوق إعداد الكاميرا، ثم انقر فوق معايرة. الذهاب من خلال عمليات المعايرة والتحقق من الصحة حتى يتم الوصول إلى قيمة مرضية، ثم انقر فوق تسجيل الإخراج/. التجربة سوف تستأنف من نقطة الخروج في تسلسل للمحاكمة.
  7. وبعد التجربة
    1. تزويد المشاركين باستبيان لتقييم ما إذا كانت قادرة على تخمين التلاعب التجريبية الرئيسية. هنا، من المهم أيضا أن تسأل عن الاستراتيجيات المحتملة التي يمكن أن وضعت في جميع أنحاء هذه التجربة.
    2. استخلاص المعلومات المشارك عن الغرض من هذه التجربة. أشكرهم على مشاركتهم وتقديم التعويضات النقدية اللازمة أو تعيين الائتمان بالطبع إذا كان ذلك ممكناً.

2-بعد الإعداد: ضبط الإعداد للدراسات مع الأطفال والبالغين الأكبر سنا

ملاحظة: هذا المقطع يصف الاختلافات بين إعداد عن بعد وإعداد سطح مكتب فقط كما هو موضح في الخطوة 1. نقاط لم يذكر صراحة هنا ينبغي أن يفترض أن تكون مماثلة للإجراء الموضح في الخطوة 1.

  1. تبادل عدسة الكاميرا تعقب العين القياسية 35 ملم لعدسة 16 مم.
  2. قم بتوصيل جميع المعدات اللازمة (الكمبيوتر المضيف ومكبرات الصوت، وتعقب العين والكمبيوتر المحمول في حالة استخدام جهاز كمبيوتر محمول).
  3. وضع الكمبيوتر المحمول على موقف أجهزة الكمبيوتر محمول وتعقب العين أمامه (المشارك يجب أن تكون قادراً على رؤية أعلى من 75 ٪ من الشاشة).
  4. ضع ملصق "مستهدفة" (المتوفرة من الشركة المصنعة لتعقب) على جبهته المشارك (فوق الحاجب للعين اليمنى أو على خده الأيمن إذا كان الجبين جداً الصغيرة (أي، في حالة الأطفال الرضع)؛ وهذا محل ملصقا الذقن بقية إعداد سطح المكتب، وأنه يسمح تعقب العين لمنصب رئيس مشارك تحديد دقة.
  5. تأكد من أن المشارك هو جالس 550-600 مم بعيداً عن الكاميرا (مسافة لاصق المستهدفة للكاميرا).
  6. تأكد من أن عبارة "زاوية كبيرة" أو "بالقرب من العين" لا تظهر على "جهاز الكمبيوتر المضيف". إذا فعلوا ذلك، فهذا يعني أن وضع لاصق المستهدفة ليست مثالية. وفي هذه الحالة، تعديل ملصق المستهدفة. كما يمكن أن يعني أن جبهته المشارك لا سيما الصغيرة. إذا كان هذا هو الحال، وضع اللاصق على خده المشارك.
    ملاحظة: إذا تم وضع اللاصق قريبة جداً من الإذن، ورسالة "زاوية كبيرة" من المرجح أن تظهر ويجب أن تكون إعادة اللاصق.
  7. قبل البدء في عملية المعايرة هو موضح في الخطوة 1، 4، تأكد من أن المشارك هو الجلوس بشكل مريح. نطلب منهم للحفاظ على نفس الموقف في جميع أنحاء هذه التجربة كاملة وشرح أن تعقب العين حساس جداً لحركات جسدية. تصر على أن تبقى رؤوسهم لا يزال. إذا كان المشترك يتحرك كثيرا، الجهاز سوف تنبعث منها ضوضاء طنين.
    ملاحظة: إذا كان الإعداد تعقب العين بعيد يستخدم لاختبار المجموعات السكانية الحساسة، مثل الأطفال أو البالغين الأكبر سنا، فإنه من المستحسن استخدام إجراء معايرة يدوية.

3-ضبط الإعداد لقراءة دراسات

ملاحظة: عند التحقيق في آثار السياق البصري في القراءة، من الضروري إيلاء عناية خاصة لعمليات المعايرة وإعادة معايرة. مقابل دراسات العالم المرئي، والعين تتبع أثناء القراءة يتطلب درجة أعلى بكثير من الدقة الجهاز، نظراً لدقة اللازمة لتعقب أنماط القراءة كلمة بكلمة وحرف بحرف.

  1. تأكد من أن كل خطأ متوسط وأقصى عرضها أثناء مرحلة التحقق لا تزال تحت 0.5°.
  2. تأكد من استخدام مقياس 9-نقطة على الأقل للمعايرة. وهذا يؤكد تتبع أكثر دقة الموقف نظرات العين، الذي أمر ضروري، نظراً لصغر حجم من مجالات الاهتمام أثناء القراءة.

Representative Results

دراسة أجراها منستر والمتعاونين مع37 التحقيق في التفاعل بين بنية الجملة، صورت الإجراءات، والعظة العاطفي الوجه خلال فهم اللغة. وهذه الدراسة مناسبة تماما لتوضيح مزايا وقيود الأسلوب، كما أنها أظهرت على حد سواء قوية يصور العمل آثار وتأثيرات هامشية من الإشارات العاطفية الوجه في فهم الجملة. الكتاب إنشاء أشرطة الفيديو s 5 التعبير الوجه للمرأة التي غيرت من موقف يستريح في سعيدة أو في تعبير حزين. وأنشأوا أيضا عاطفياً إيجابيا فالينسيد الألمانية الكائن-فعل-الظرف-الموضوع (أوفادفس) جمل النموذج '[كائن/المريضحالة النصب] [فعل] [الظرف الإيجابية] [الموضوع/عاملالقضية الأسمى].' عبر الظرف الإيجابية، الأحكام المطابقة للفيديو 'سعيد' ومتطابقة الفيديو 'حزين'، تسمح بمبدأ استباقا للوكيل (الذي كان يبتسم ووصفها بالنيابة سعادة بالظرف الإيجابي). عقب المتكلم الفيديو، ظهرت الجملة مع واحدة من نسختين من مشهد clipart عامل-المريض-distractor. في نسخة واحدة، كان يصور الوكيل كتنفيذ الإجراء المذكور على المريض، بينما الحرف distractor تنفيذ إجراء آخر. إصدار مشهد آخر يصور أي إجراءات بين الأحرف. وكشف حركات العين في المشهد آثار الإجراءات وتعبيرات المتكلم في فهم الجملة.

تصوير العمل تتأثر سرعة المشتركين الانتباه البصري، بمعنى أن المشاركين بدأ أكثر في العامل من الساعة distractor عندما كان العمل المذكور (مقابل لم يكن) يصور. كانت هذه تبدو الاستباقي (أيالتي تحدث قبل ذكر الوكيل)، مما يوحي بأن تصوير العمل توضيح الوكيل قبل الجملة. تأثير أقرب لتصوير العمل ظهرت أثناء الفعل (أيوساطة الفعل عوامل مرتبطة بالعمل). على النقيض من ذلك، ما إذا كان المتكلم السابق ابتسم أو بدت غير سعيدة قد أي تأثير واضح على توقع وكيل (الشكل 2). ويمكن أن تعكس النتيجة الأخيرة الارتباط أكثر ضعفا بين الابتسامة المتكلم وظرف سينتينتيال إيجابية المتصلة بعمل لعامل يصور (بالمقارنة مع إشارة مباشرة لعمل فعل التوسط وكيلاً المرتبطة بالعمل). وبدلاً من ذلك، يمكن أن يكون محدد لعرض المهام والتحفيز: ربما آثار العاطفة سيكون قد تم أكثر وضوحاً في مهمة تفاعلية أكثر اجتماعيا أو في أحد أن يقدم الوجه خلال (وليس قبل) الجملة الفهم المتكلم. ومع ذلك، عرض الوجه المتكلم يبتسم خلال الفهم قد يسبب المشاركين إلى التركيز على الوجه على حساب الأخرى محتوى المشهد، ربما تأثيرات يمكن ملاحظتها خلاف ذلك إخفاء المتغيرات التلاعب (المصدر: بيانات غير منشورة).

طلب غيرا وكنوفيرلي32 في البديل مزيد من النموذج، سواء المكانية الدلالي لغة العالم العلاقات يمكن أن تعدل الفهم للمحتوى الدلالي المجرد أثناء القراءة. استعارة غيرا وكنوفيرلي الفكرة عن نظرية الاستعارة المفاهيمية38 أن المسافة المكانية (مثلاً، قرب) حديقة معنى علاقات دلالية مجردة (مثلاً، تشابه). وفقا لهذه الفرضية، المشاركين قراءة تنسيق الأسماء مجردة أسرع عندما كانوا مماثلة (مقابل المعاكس) في معنى وقد سبقتها قرب نقل فيديو (مقابل المسافة؛ وأوراق اللعب التحرك أقرب مقابل معا. بعيدة عن بعضها). ووصف الجمل في مجموعة ثانية من الدراسات39، التفاعل بين شخصين الحميم أو غير ودية، مما أدى إلى اكتشاف أن أشرطة الفيديو لاثنين من بطاقات تقترب من بعضها البعض تسرع في قراءة الجملة المناطق التي نقلت الاجتماعية قرب/العلاقة الحميمة. لاحظ أن المسافة المكانية تتأثر الجملة قراءة سريعاً وبشكل متزايد حتى عندما الأحكام التي لا تشير إلى الكائنات الموجودة في شريط الفيديو. والتضمين أشرطة الفيديو متميز مرات القراءة كدالة للتطابق بين المسافة المكانية والجوانب الدلالية وكذلك الاجتماعي لمعنى الجملة. ظهرت هذه الآثار على حد سواء في أوقات القراءة الأولى-تمرير (مدة أول عملية تفتيش في منطقة بعقوبة محددة سلفا) والوقت الإجمالي المستغرق في تلك المنطقة الجملة (انظر الشكل 3 لمثال على نتائج الدراسات التي أجريت قبل غيرا وكنوفيرلي)32. بيد أن التحاليل كشفت أيضا اختلاف كبير بين المشاركين، مما يؤدي إلى الاستنتاج بأن هذه الآثار المسافة بطاقة خفية قد لا تكون قوية كآثار العلاقات فعل للعمل، أن أذكر مثال واحد.

مجموعة أخرى من الدراسات توضح كيفية الاختلاف في بنية الجملة يمكن أن تساعد في تقييم من التأثيرات البصرية سياق العمومية. أباشيدزه والمتعاونين34 و رودريغيز والمتعاونين26 دراسة آثار الإجراءات الأخيرة على تجهيز اللاحقة من الجمل المنطوقة. في كلتا الدراستين، تفقد المشاركون أولاً بعمل فيديو (مثلاً، وخيار توابل مجرب، أو الإناث أيدي الخبز كعكة). وبعد ذلك، استمعوا إلى جملة ألمانية التي كانت أما فيما يتصل بالإجراءات الأخيرة أو الإجراءات الأخرى التي يمكن أن يقوم التالي (توابل الطماطم34؛ بناء نموذج26). خلال الفهم، فتش المشاركين مشهد عرض اثنين من الكائنات (الخيار والطماطم)34 أو صورتين لعامل وجوه (أنثى ووجه وكيل ذكور، المسمى 'سوزانا' و 'توماس'، على التوالي)26. في دراسة أجرتها أباشيدزه والمتعاونين مع34، ذكر المتكلم أولاً المجرب والفعل (مثلاً، توابل)، ثم استخلاص التوقعات حول موضوع (مثلاً، الخيار أو الطماطم). في دراسة أجرتها رودريغيز والمتعاونين مع26، أولاً ذكر المتكلم سمة (الكعكة)، ثم الفعل (الخبز)، استخلاص التوقعات عن الوكيل العمل (الإناث: سوزانا، أو أنثى: توماس، يصور عبر صور من الإناث وذكور وجه).

في كلتا الدراستين، كانت المسألة المطروحة ما إذا كان الناس تتوقع (بصريا) الموضوع/عامل الحدث الإجراءات الأخيرة أو غيرها الموضوع/عامل استناداً إلى زيادة السياقية العظة تقدم خلال الفهم. في أباشيدزه والمتعاونين مع34، ملقن غض البصر المجرب الكائن موضوع المستقبل (الطماطم) من بداية الفعل (ترجمة حرفية من الألمانية: 'المجرب-العامل نكهات قريبا...'). رودريغيز والمتعاونين مع26، معرفة الإجراءات النمطية بين الجنسين أصبحت متاحة عند ذكر الموضوع والفعل (مثلاً، كانت الترجمة الحرفية للمحفزات الألمانية: 'الكعكة-الموضوع يخبز قريبا...'). في كلتا المجموعتين من الدراسات، فتش المشاركين تفضيلي المستهدفة/وكيل العمل الأخيرة (الخيار34 أو سوزانا26) فوق الهدف (المستقبل/غيره-الجنس) البديلة (الطماطم34 أو توماس26) خلال الجملة.

وهكذا، يظهر هذا ما يسمى 'تفضيل الأخيرة الحدث'، لتكون قوية عبر اختلاف كبير في بنية الجملة والمواد التجريبية. كان، ومع ذلك، عن طريق التضمين القيود المرئية من المشهد المتزامنة26، أن عرض الصور المعقولة من مواضيع فعل صوراً وباﻹضافة إلى يراعي الفروق بين الجنسين لوكلاء خفض الاعتماد على الأحداث التي وقعت مؤخرا تفتيش العمل و الاهتمام التضمين استناداً إلى المعرفة النمطية بين الجنسين تنقلها اللغة. ويبين الشكل 4 النتائج الرئيسية لهذه التجارب من رودريغيز والمتعاونين مع26.

مع هذا الإصدار من النموذج البصرية في العالم حققت نتائج قوية، قد أبرزت دراسات أخرى تعقد (والقيود) فرضية ربط. بوريجو وكنوفيرلي20 كشفت أن المشاركين – عند الاستماع إلى أقواله مثل المحكمة الخاصة العراقية "مربع يموت" أوبر دير وورست ('المربع أعلاه السجق') – معظمها يتبع الكلام في فحص تصوير قصاصات فنية لهذه الكائنات. ولكن نسبة من المحاكمات، ونظرات المشاركين تنفصل عن ما ذكر. عند سماع 'السجق' وبعد معاينة السجق مرة واحدة على الأقل، عاد التفتيش القادم المشتركين إلى المربع حوالي 21 في المائة من المحاكمات في الإسراع التحقق (التجربة 1) وفي 90% من المحاكمات في (الجملة بعد التحقق تجربة 2). هذا النمط من النظرة تشير إلى أن الإشارة (السمع 'السجق') يسترشد فقط بعض (تفتيش السجق) لكن ليس كل العين حركات (فحص المربع). ويمكن استخدام هذا النوع من التصميم لندف العمليات معجمي المرجعي وبصرف النظر عن الأخرى (بما في ذلك مستوى الجملة التفسيرية) العمليات. غير أن الباحثين يجب أن تكون حذراً عند تقديم المطالبات حول مستويات مختلفة من المعالجة اللغوية استناداً إلى الاختلافات النسبية في أبعاد حركة العين، نظراً للغموض في الربط بين نظرات العين للإدراك والفهم العمليات.

Figure 1
رقم 1: نظرة عامة على بيئة جمع البيانات- ويبين الرسم البياني كيف على عناصر الأجهزة والبرامج المختلفة المستخدمة لجمع البيانات وتجهيزها وتتصل ببعضها البعض. الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 2
الشكل 2: نتائج تمثيلية منستر والمتعاونين مع37- هذه اللوحات تظهر نظرات السجل يعني بهذا الموضوع نسب احتمال كل حالة في منطقة فعل (لعمل يصور) وفي منطقة الظرف فعل جنبا إلى جنب (بالنسبة لتأثير رئيس الوزراء العاطفية). وتظهر النتائج نسبة أعلى بكثير من النظرات نحو الصورة المستهدفة عندما كان يصور الإجراء المذكور في الجملة من عند فإنه كان لا يصور. وكانت نتائج للتأثير العاطفي يعبي الوجه أقل قاطعة: فهي توحي إلا زيادة طفيفة في نسبة تسجيل يعني-تتطلع إلى هذا الهدف عندما كان رئيس الوزراء الوجه تكافؤ عاطفية إيجابية (ابتسامة) من عندما كان تكافؤ سلبية (وجه حزين). أشرطة الخطأ تمثل الخطأ المعياري للوسط. وقد تم تعديل هذا الرقم من منستر et al. 37- الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 3
الشكل 3: نتائج تمثيلية غيرا وكنوفيرلي32- ويبين هذا الفريق مرات يعني أولاً-تمرير القراءة (بالمللي ثانية) من صفة التشابه (dis). وتبين النتائج أقصر أوقات القراءة لتشابه الجمل بعد رؤية اثنين من بطاقات اللعب الاقتراب معا مقارنة مع بعيداً عن بعضها البعض. أشرطة الخطأ تمثل الخطأ المعياري للوسط. وقد تم تعديل هذا الرقم من غيرا وكنوفيرلي32. الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Figure 4
الشكل 4: نتائج الممثل رودريغيز والمتعاونين26- يظهر هذا الفريق البصر بالموضوع يعني سجل نسب احتمال كل حالة في منطقة الفعل. النسب يبدو أعلاه 0 وتظهر تفضيلاً للصورة عامل المستهدفة ونسب أقل من 0 تظهر تفضيلاً للصورة عامل منافس. وتبين النتائج أن المشاركين كانوا أكثر عرضه لتفقد الصورة عامل الهدف عند الكائن والفعل المذكور في الجملة السابقة الأحداث المسجلة على شريط فيديو من عندما لم تكن مطابقة. بالإضافة إلى ذلك، كانت هناك تبدو أكثر تجاه الصورة عامل الهدف عندما تتفق مع الإجراءات الموصوفة بالجملة للقوالب النمطية القائمة على نوع الجنس. أشرطة الخطأ تمثل الخطأ المعياري للوسط. وقد تم تعديل هذا الرقم من رودريغيز et al. 26- الرجاء انقر هنا لمشاهدة نسخة أكبر من هذا الرقم-

Discussion

وباختصار، كشفت المتغيرات استعراضها للعين تتبع في سياقات البصرية العديد من الطرق التي مشهد بصرية يمكن أن تؤثر على فهم اللغة. يوفر هذا الأسلوب مزايا حاسمة مقارنة بأساليب مثل قياس رد فعل مرات. على سبيل المثال، حركات العين الجارية توفر لنا نافذة في عمليات فهم اللغة وكيف تتفاعل هذه مع تصورنا للعالم المرئي على مر الزمن. وعلاوة على ذلك، أن المشاركين لا يتطلب بالضرورة لتنفيذ مهمة صريحة من خلال فهم اللغة (مثل الحكم جراماتيكاليتي من الجملة عن طريق زر صحافة). وهذا يسمح للباحثين استخدام الأسلوب مع السكان الذين قد يعانون من الاستجابات السلوكية العلنية عدا نظرات العين، مثل الرضع، الأطفال، وفي بعض الحالات، البالغين الأكبر سنا. العين تتبع صالحة إيكولوجيا في ذلك أنها تعكس الردود اهتمام المشاركين – لا تختلف عن الاستجواب البشر المرئية من الأمور ذات الصلة بالاتصالات في العالم من حولهم أثناء الاستماع أكثر أو أقل انتباهاً للتصريحات التي تتكشف.

واحد من الحدود (أو ربما الخصائص) لنموذج العالم المرئي أن ليس كل الأحداث يمكن أن يصور مستقيم ولا لبس فيه. ويمكن، بطبيعة الحال، يصور الأشياء الملموسة والأحداث. ولكن كيف المفاهيم المجردة أفضل يصور أقل وضوحاً. وهذا يمكن الحد من (أو تعريف) ثاقبة التفاعل بين معالجة اللغة وتصور العالم المرئي باستخدام نموذج العين تتبع عالم مرئي. تحديات أخرى تتعلق بفرضيات الربط بين عمليات الفهم والسلوك الملاحظ. تثبيتات العين هي استجابة سلوكية واحدة أن المرجح أن يعكس عمليات فرعية العديد من خلال فهم اللغة (مثلاً، الوصول معجمي، عمليات التكامل المرجعي، توقعات بوساطة اللغة، آثار السياق البصرية، بين أمور أخرى). وفي ضوء هذه الرؤية، الباحثين يجب أن تكون حذراً لا لأكثر-أو إساءة تفسير نمط الملاحظة النظرة. لمعالجة هذه المشكلة، والبحوث السابقة قد أبرز دور الفهم المهام الفرعية لتوضيح تفسير نظرات سجل40.

أحد السبل لتعزيز القدرة على تفسيرها لحركات العين دمجها مع تدابير أخرى مثل إمكانات الدماغ المتصلة بالحدث (نظم تخطيط موارد المؤسسات). بالتحقيق في هذه الظاهرة نفسها مع اثنين من الأساليب التي تكون قابلة للمقارنة في بهم الحبوبية الزمانية ومكمل في هذه الفرضيات ربط، يمكن أن يستبعد تفسيرات بديلة لنتائجها الباحثين وإثراء تفسير كل 41من التدابير الفردية. هذا النهج سعى عبر تجارب43، ولكن، أكثر في الآونة الأخيرة، أيضا في تجربة واحدة (أن كان ذلك في السياقات اللغوية دقة)44. البحث في المستقبل يمكن أن تستفيد كثيرا من هذا التكامل المنهجي، وواصل تركيبة مع المهام اللاحقة للمحاكمة ومرحلة ما بعد التجريبية.

العين تتبع الأسلوب يمكن تكرار النتائج المقررة، فضلا عن اختبار فرضيات جديدة، حول التفاعل بين الانتباه البصري في الكواليس مع فهم اللغة. يجب أن يتبع الإجراء الوارد في البروتوكول بعناية نظراً لأخطاء المجرب لو كانت بسيطة يمكن أن تؤثر على نوعية البيانات. قراءة الدراسات، على سبيل المثال، المناطق ذات الصلة تحليل كثيرا في كلمات مفردة أو حتى خطابات، بمعنى أن أخطاء المعايرة حتى الصغيرة قد يشوه النتائج (راجع المقال ب توظيفها والزملاء42). الخطوات 1-4 و 1، 5 من البروتوكول، والمعايرة لتعقب العين والانجراف الاختيار/الانجراف الصحيح، ذات أهمية خاصة نظراً لأنها تؤثر مباشرة على دقة تسجيل. يمكن أن يؤدي الفشل لمعايرة بشكل صحيح تعقب العين في تعقب عدم دقة تتبع حركات العين لمجالات اهتمام محددة سلفا. عدم تتبع هذه سيؤدي إلى نقاط البيانات وخسارة في القدرة الإحصائية الذي يمكن أن يكون مشكلة عند التحقيق في علاقات العالم إلى لغة دقيق جداً وتسفر عن أحجام صغيرة تأثير الإحصائية في عداد المفقودين (انظر الوصف تجارب غيرا وكنوفيرلي32 و منستر والزملاء37 من بين نتائج الممثل).

نظراً للحاجة إلى تحقيق أقصى قدر من السلطة وحساسية للمعدات، من المهم أن المجربون تعرف كيفية التعامل مع المشاكل التي تحدث بصورة روتينية أثناء جلسة تجريبية. على سبيل المثال، يمكن أن ينتج حركة المشاركين ارتداء النظارات وموقف التلميذ صعوبات المعايرة بسبب انعكاسات الضوء على العدسات النظارات أحد المشاركين. طريقة واحدة لحل هذه المشكلة هو مرآة صورة العين للمشترك على "جهاز عرض الكمبيوتر" وتشجيعهم على تحريك رؤوسهم حتى انعكاس الضوء على النظارات لم يعد مرئياً على الشاشة، مما يعني أنه لم يعد القبض على الكاميرا. يمكن أن يكون سببا آخر لعدم معايرة انقباض التلميذ، الذي قد يكون نتيجة التعرض المفرط للضوء. وفي هذه الحالة، تعتيم الضوء في المختبر سوف زيادة تمدد التلميذ وهكذا، تساعد في تعقب العين في الكشف بدقة عن التلميذ.

كفكر نهائي، نود لمواجهة احتمال نموذج البصرية في العالم بالنسبة للبحوث المتعلقة بتعلم اللغة الثانية. النموذج الفعل استخدمت بنجاح في psycholinguistic للبحث للتحقيق في ظواهر مثل التفاعل عبر اللغة المعجمية والصوتية46،،من4748. وبالإضافة إلى ذلك، كثيرا ما تم إبراز الارتباط الوثيق بين الانتباه البصري وتعلم اللغة في الأدب اللغويات التطبيقية في اكتساب اللغة الثانية49،،من5051. المحتمل أن تستمر البحوث في المستقبل على تعلم اللغة الثانية والاستفادة من موقع متميز لتعقب العين كأسلوب يوفر مؤشر للانتباه البصري في القرار ميلي ثانية.

Disclosures

الكتاب ليس لها علاقة بالكشف عن.

Acknowledgments

ومولت هذه البحوث ZuKo (مبادرة التميز، جامعة هومبولت زو برلين)، 277 الكتلة التميز 'المعرفي التفاعل التكنولوجيا' (مجلس الأبحاث الألمانية DFG)، و "البرنامج الإطاري السابع" للاتحاد الأوروبي للبحوث، التطور التكنولوجي، ومظاهره تحت اتفاق منحة جوان 316748 (لانبيرسيبت). الكتاب نعترف أيضا الدعم من "صناديق القاعدية" "مراكز التميز"، FB0003 المشروع من "برنامج البحث الترابطي اللجنة" (حكومة شيلي)، ومشروع "فوتيرو" في مركز التركيز إكسبراج (DFG). كنوفيرلي بيا شريطة أبلغ أول مشروع للمادة بموجب بروتوكول مختبر أن هيلين قريصة إنشاء مثيل في جامعة بيليفلد، والتي لا تزال تستخدم في جامعة هومبولت زو برلين. وساهمت جميع المؤلفين المحتويات بتقديم مدخلات عن الأساليب والنتائج في شكل أو آخر. كاميلو رونديروس رودريغيز وكنوفيرلي بيا بتنسيق المدخلات من المؤلفين، وفي تكرارات اثنين، إلى حد كبير تنقيح المسودة الأولية. إرنستو غيرا أنتجت الأرقام 2 - 4 على أساس مدخلات من منستر كاتيا وألبا رودريغيز إرنستو غيرا. وقدمت هيلين قريصة الشكل 1 وكنوفيرلي بيا بتحديثه. نشرت أجزاء من النتائج المبلغ عنها في أعمال "الاجتماع السنوي" "جمعية العلوم المعرفية".

Materials

Name Company Catalog Number Comments
Desktop mounted eye-tracker including head/chin rest SR Research Ltd. EyeLink 1000 plus http://www.sr-research.com/eyelink1000plus.html
Software for the design and execution of an eye-tracking experiment SR Research Ltd. Experiment Builder http://www.sr-research.com/eb.html

DOWNLOAD MATERIALS LIST

References

  1. Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
  2. Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing. Cognitive Psychology. 6 (1), 84-107 (1974).
  3. Knoeferle, P., Guerra, E. What is non-linguistic context? A view from language comprehension. In What is a Context? Linguistic Approaches and Challenges. Finkbeiner, R., Meibauer, J., Schumacher, P. B. , John Benjamins Publishing Company. Amsterdam, The Netherlands. 129-150 (2012).
  4. Knoeferle, P., Guerra, E. Visually situated language comprehension. Language and Linguistics Compass. 10 (2), 66-82 (2016).
  5. Just, M. A., Carpenter, P. A. A theory of reading: From eye fixations to comprehension. Psychological Review. 87 (4), 329-354 (1980).
  6. Deubel, H., Schneider, W. X. Saccade target selection and object recognition: Evidence for a common attentional mechanism. Vision Research. 36 (12), 1827-1837 (1996).
  7. Rayner, K. Eye movements in reading and information processing: 20 years of research. Psychological Bulletin. 124 (3), 372-422 (1998).
  8. Sedivy, J. C., Tanenhaus, M. K., Chambers, C. G., Carlson, G. N. Achieving incremental semantic interpretation through contextual representation. Cognition. 71 (2), 109-147 (1999).
  9. Kamide, Y., Scheepers, C., Altmann, G. T. Integration of syntactic and semantic information in predictive processing: Cross-linguistic evidence from German and English. Journal of Psycholinguistic Research. 32 (1), 37-55 (2003).
  10. Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models. Journal of Memory and Language. 38 (4), 419-439 (1998).
  11. Tanenhaus, M. K., Magnuson, J. S., Dahan, D., Chambers, C. Eye movements and lexical access in spoken-language comprehension: Evaluating a linking hypothesis between fixations and linguistic processing. Journal of Psycholinguistic Research. 29 (6), 557-580 (2000).
  12. Arnold, J. E., Eisenband, J. G., Brown-Schmidt, S., Trueswell, J. C. The rapid use of gender information: Evidence of the time course of pronoun resolution from eyetracking. Cognition. 76 (1), B13-B26 (2000).
  13. Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. Actions and affordances in syntactic ambiguity resolution. Journal of Experimental Psychology: Learning, Memory, and Cognition. 30 (3), 687-696 (2004).
  14. Spivey, M. J., Tanenhaus, M. K., Eberhard, K. M., Sedivy, J. C. Eye movements and spoken language comprehension: Effects of visual context on syntactic ambiguity resolution. Cognitive Psychology. 45 (4), 447-481 (2002).
  15. Huang, Y. T., Snedeker, J. Online interpretation of scalar quantifiers: Insight into the semantics-pragmatics interface. Cognitive Psychology. 58 (3), 376-415 (2009).
  16. Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. The kindergarten-path effect: studying online sentence processing in young children. Cognition. 73 (2), 89-134 (1999).
  17. Knoeferle, P., Crocker, M. W., Scheepers, C., Pickering, M. J. The influence of the immediate visual context on incremental thematic role-assignment: evidence from eye movements in depicted events. Cognition. 95 (1), 95-127 (2005).
  18. Knoeferle, P., Crocker, M. W. Incremental Effects of Mismatch during Picture-Sentence Integration: Evidence from Eye-tracking. Proceedings of the 26th Annual Conference of the Cognitive Science Society. , Stresa, Italy. 1166-1171 (2005).
  19. Kluth, T., Burigo, M., Schultheis, H., Knoeferle, P. The role of the center-of-mass in evaluating spatial language. Proceedings of the 13th Biannual Conference of the German Society for Cognitive Science. , Bremen, Germany. 11-14 (2016).
  20. Burigo, M., Knoeferle, P. Visual attention during spatial language comprehension. PLoS One. 10 (1), (2015).
  21. Münster, K., Carminati, M. N., Knoeferle, P. How Do Static and Dynamic Emotional Faces Prime Incremental Semantic Interpretation? Comparing Older and Younger Adults. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 2675-2680 (2014).
  22. Kroeger, J. M., Münster, K., Knoeferle, P. Do Prosody and Case Marking influence Thematic Role Assignment in Ambiguous Action Scenes? Proceedings of the 39th Annual Meeting of the Cognitive Science Society. , London, UK. 2463-2468 (2017).
  23. Knoeferle, P., Crocker, M. W. The influence of recent scene events on spoken comprehension: evidence from eye movements. Journal of Memory and Language. 57 (4), 519-543 (2007).
  24. Knoeferle, P., Carminati, M. N., Abashidze, D., Essig, K. Preferential inspection of recent real-world events over future events: evidence from eye tracking during spoken sentence comprehension. Frontiers in Psychology. 2, 376 (2011).
  25. Abashidze, D., Knoeferle, P., Carminati, M. N. How robust is the recent-event preference? Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 92-97 (2014).
  26. Rodríguez, A., Burigo, M., Knoeferle, P. Visual constraints modulate stereotypical predictability of agents during situated language comprehension. Proceedings of the 38th Annual Meeting of the Cognitive Science Society. , Philadelphia, USA. 580-585 (2016).
  27. Zhang, L., Knoeferle, P. Visual Context Effects on Thematic Role Assignment in Children versus Adults: Evidence from Eye Tracking in German. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 2593-2598 (2012).
  28. Zhang, L., Kornbluth, L., Knoeferle, P. The role of recent versus future events in children's comprehension of referentially ambiguous sentences: Evidence from eye tracking. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 1227-1232 (2012).
  29. Münster, K., Knoeferle, P. Situated language processing across the lifespan: A review. International Journal of English Linguistics. 7 (1), 1-13 (2017).
  30. Özge, D., et al. Predictive Use of German Case Markers in German Children. Proceedings of the 40th Annual Boston University Conference on Language Development. , Somerville, USA. 291-303 (2016).
  31. Weber, A., Grice, M., Crocker, M. W. The role of prosody in the interpretation of structural ambiguities: A study of anticipatory eye movements. Cognition. 99 (2), B63-B72 (2006).
  32. Guerra, E., Knoeferle, P. Effects of object distance on incremental semantic interpretation: similarity is closeness. Cognition. 133 (3), 535-552 (2014).
  33. Kreysa, H., Knoeferle, P., Nunnemann, E. Effects of speaker gaze versus depicted actions on visual attention during sentence comprehension. Proceedings of the 36th Annual Meeting of the Cognitive Science Society. , Quebec City, Canada. 2513-2518 (2014).
  34. Abashidze, D., Knoeferle, P., Carminati, M. N. Eye-tracking situated language comprehension: Immediate actor gaze versus recent action events. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , Pasadena, USA. 31-36 (2015).
  35. Crovitz, H. F., Zener, K. A Group-Test for Assessing Hand- and Eye-Dominance. The American Journal of Psychology. 75 (2), 271-276 (1962).
  36. Ehrenstein, W. H., Arnold-Schulz-Gahmen, B. E., Jaschinski, W. Eye preference within the context of binocular functions. Graefe's Arch Clin Exp Ophthalmol. 243, 926 (2005).
  37. Münster, K., Carminati, M. N., Knoeferle, P. The Effect of Facial Emotion and Action Depiction on Situated Language Processing. Proceedings of the 37th Annual Meeting of the Cognitive Science Society. , Pasadena, USA. 1673-1678 (2015).
  38. Lakoff, G., Johnson, M. Metaphors We Live By. , University of Chicago Press. Chicago, USA. (1980).
  39. Guerra, E., Knoeferle, P. Visually perceived spatial distance affects the interpretation of linguistically mediated social meaning during online language comprehension: An eye tracking reading study. Journal of Memory and Language. 92, 43-56 (2017).
  40. Kreysa, H., Knoeferle, P. Effects of speaker gaze on spoken language comprehension: task matters. Proceedings of the Annual Meeting of the Cognitive Science Society. , Boston, USA. 1557-1562 (2012).
  41. Knoeferle, P. Language comprehension in rich non-linguistic contexts: Combining eye tracking and event-related brain potentials. Towards a cognitive neuroscience of natural language use. Roel, W. , Cambridge University Press. Cambridge, UK. 77-100 (2015).
  42. Raney, G. E., Campell, S. J., Bovee, J. C. Using eye movements to evaluate cognitive processes involved in text comprehension. Journal of Visualized Experiments. (83), e50780 (2014).
  43. Knoeferle, P., Habets, B., Crocker, M. W., Muente, T. F. Visual scenes trigger immediate syntactic reanalysis: evidence from ERPs during situated spoken comprehension. Cerebral Cortex. 18 (4), 789-795 (2008).
  44. Dimigen, O., Sommer, W., Hohlfeld, A., Jacobs, A. M., Kliegl, R. Coregistration of eye movements and EEG in natural reading: Analyses and review. Journal of Experimental Psychology: General. 140 (4), 552-572 (2011).
  45. Knoeferle, P., Kreysa, H. Can speaker gaze modulate syntactic structuring and thematic role assignment during spoken sentence comprehension? Frontiers in Psychology. 3, 538 (2012).
  46. Chambers, C. G., Cooke, H. Lexical competition during second-language listening: Sentence context, but not proficiency, constrains interference from the native lexicon. Journal of Experimental Psychology: Learning, Memory, and Cognition. 35 (4), 1029 (2009).
  47. Duyck, W., Van Assche, E., Drieghe, D., Hartsuiker, R. J. Visual word recognition by bilinguals in a sentence context: Evidence for nonselective lexical access. Journal of Experimental Psychology: Learning, Memory, and Cognition. 33 (4), 663 (2007).
  48. Weber, A., Cutler, A. Lexical competition in non-native spoken-word recognition. Journal of Memory and Language. 50 (1), 1-25 (2004).
  49. Verhallen, M. J., Bus, A. Young second language learners' visual attention to illustrations in storybooks. Journal of Early Childhood Literacy. 11 (4), 480-500 (2011).
  50. Robinson, P., Mackey, A., Gass, S. M., Schmidt, R. Attention and awareness in second language acquisition. The Routledge Handbook of Second Language Acquisition. , 247-267 (2012).
  51. Tomlin, R. S., Villa, V. Attention in cognitive science and second language acquisition. Studies in Second Language Acquisition. 16 (2), 183-203 (1994).

Tags

السلوك و 141 قضية، فهم اللغة يقع بصريا، والعين تتبع، أساليب psycholinguistic، التأثيرات البصرية السياق، عمر، المرونة والقيود المفروضة على الأسلوب، تربط بين الفرضية
تتبع العين خلال فهم اللغة يقع بصريا: المرونة والتقييدات في الكشف عن السياق البصرية آثار
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Rodriguez Ronderos, C.,More

Rodriguez Ronderos, C., Münster, K., Guerra, E., Kreysa, H., Rodríguez, A., Kröger, J., Kluth, T., Burigo, M., Abashidze, D., Nunnemann, E., Knoeferle, P. Eye Tracking During Visually Situated Language Comprehension: Flexibility and Limitations in Uncovering Visual Context Effects. J. Vis. Exp. (141), e57694, doi:10.3791/57694 (2018).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter