يتطلب اشتراك JoVE لعرض هذا المحتوى. تسجيل الدخول أو ابدأ نسخة تجريبية مجانية

مقالة منهجية

استخدام حركات العين التي تسجل في نموذج العالم المرئي لاستكشاف الإنترنت معالجة اللغة المنطوقة

10.6K مشاهدة

⸱

DOI:

10.3791/58086

⸱

أكتوبر 13, 2018

في هذه المقالة

ملخص

نموذج العالم المرئي وترصد حركات العين المشاركين في مساحة عمل visual كما يتم الاستماع إلى أو يتحدث لغة منطوقه. يمكن استخدام هذا النموذج للتحقيق في معالجة طائفة واسعة من المسائل بسيتشولينجويستيك، بما في ذلك البيانات المعقدة لغوياً، مثل بيانات الفاصل على الإنترنت.

الملخص

في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، المشاركين العين حركات للكائنات أو الصور في مساحة عمل visual تسجل عبر تعقب عين كما تنتج المشارك أو يفهم لغة منطوقه تصف البصرية المتزامنة العالم. هذا النموذج ببراعة عالية، كما أنها يمكن أن تستخدم في طائفة واسعة من السكان، بما في ذلك أولئك الذين لا يمكن قراءة و/أو الذين لا يمكن أن تعطي علنا ردودهم السلوكية، مثل الأطفال الشفهي، البالغين المسنين، والمرضى. الأهم من ذلك، النموذج حساسة للغاية للتلاعب غرامة الحبيبات إشارة الكلام، ويمكن استخدامه لدراسة معالجة معظم المواضيع في فهم اللغة على مستويات متعددة، مثل الصوتية غرامة الحبيبات الصوتية عبر الإنترنت ميزات وخصائص الكلمات والهياكل اللغوية. ويوضح البروتوكول الموضحة في هذه المقالة كيفية إجراء نموذجي عالم مرئي عين تتبع الدراسة، مع أمثلة تبين كيف يمكن استكشاف الإنترنت معالجة بعض البيانات المعقدة لغوياً مع نموذج العالم المرئي.

المقدمة

اللغة المنطوقة هو تدفق معلومات السريع والمتواصل، الذي يختفي الحق بعيداً. تحد تجريبيا دراسة هذا الزمان، وسرعة تغيير إشارة الكلام. يمكن استخدام حركات العين التي تسجل في نموذج العالم المرئي للتغلب على هذا التحدي. في عين نموذجية تتبع دراسة باستخدام نموذج العالم المرئي، تراقب حركات العين المشاركين للصور في عرض أو الكائنات الحقيقية في مساحة عمل visual كما أنهم الاستماع إلى، أو إنتاج، اللغة المنطوقة التي تصور محتويات العالم المرئي1 ،2،،من34. المنطق الأساسي، أو فرضية الربط، وراء هذا النموذج أن فهم أو التخطيط الكلام (علنا أو سراً) سيتحول المشاركين ا....

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

البروتوكول

جميع المواضيع يجب أن تعطي موافقة خطية مستنيرة قبل إدارة البروتوكولات التجريبية. جميع الإجراءات ونماذج الموافقة على البروتوكول التجريبي بموافقة "لجنة أخلاقيات البحوث بكين اللغة" والثقافة الجامعة.

ملاحظة: دراسة فهم عادة باستخدام نموذج العالم المرئي يتكون من الخطوات التالية: يعرض المشاكل النظرية التي يمكن استكشافها؛ نموذج تصميم تجريبي؛ تحضير المحفزات البصرية والسمعية؛ إطار المشكلة النظرية فيما يتعلق بالتصميم التجريبي؛ حدد عين المقتفي لتتبع حركات العين المشاركين؛ قم بتحديد برامج وبناء نصي مع البرنامج لتقديم المحفزات؛ رمز وتحليل البيانات المسجلة من حركات العين. تجربة محددة يمكن أن تختلف عن بعضها البعض في أي من الخطوات الموصوفة. على سبيل مثال، هو....

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

النتائج

وترد ردود المشاركين السلوكية في الشكل 4. كما وصفت لنا في وقت سابق، هو الاستجابة الصحيحة لبيان المترابط (S1 و S2) المربع فتح كبيرة، مثل "مربع أ" في الشكل 1. الإجابة الصحيحة و لكن-بيان (S1 ولكن ليس S2) يتم فتح مربع صغير يحتوي على الحيوان المذكور أولاً، مثل "مربع د" في الشكل 1. المربع الذي يتم اختياره للبيان الفاصل (S1 أو S2) حاسمة، يتوقف على كيفية معالجة بيان الفاصل:.......

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

المناقشة

لإجراء دراسة عالم مرئي، وهناك العديد من الخطوات الهامة لمتابعة. أولاً، يعتزم الباحثون للاستدلال على تفسير اللغة أوديتوريلي المقدمة عن طريق حركات العين المشتركين في العالم المرئي. من الآن فصاعدا، في تصميم تخطيط المحفزات البصرية، ينبغي التحكم في خصائص حركات العين في مهمة طبيعية التي يحتمل أن تؤثر على حركات العين المشاركين. يمكن ثم التعرف على تأثير اللغة المنطوقة على حركات العين المشاركين. الإشارات الصوتية، والثاني في اللغة المنطوقة عابرة وهناك لا تواقيع الصوتية فقط المقابلة لفئة لغوية معينة. لقفل الوقت بشكل صحيح المشتركين .......

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

الإفصاحات

ويعلن المؤلف أنه ليس لديه أي تضارب المصالح المالية.

شكر وتقدير

هذا البحث تدعمها مؤسسة العلوم للغة بكين وجامعة الثقافي تحت "الصناديق البحوث الأساسية" للجامعات المركزية (الموافقة على رقم 15YJ050003).

....

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

المواد

قائمة المواد المستخدمة في هذه المقالة
الاسمالشركةرقم فهرسيالتعليقات
PixelmatorPixelmator Teamhttp://www.pixelmator.com/pro/تطبيق تحرير الصور
PraatOpen Soursehttp://www.fon.hum.uva.nl/praat/برامج تحليلات الصوت
وتحرير Eyelink 1000plusSR-Research, Inchttps://www.sr-research.com/products/eyelink-1000-plus/تعقب العين بالأشعة تحت الحمراء عن بعد 
Experimental BuilderSR-Research, Inchttps://www.sr-research.com/experiment-builder/برنامج تعقب العين 
عارض البياناتSR-Research, Inchttps://www.sr-research.com/data-viewer/برنامج تعقب العين 
ROpen Soursehttps://www.r-project.orgبيئة برمجية مجانية للحوسبة الإحصائية والرسومات

المراجع

  1. Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
  2. Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language p....

الوصول مقيد. يرجى تسجيل الدخول أو بدء فترة تجريبية لعرض هذا المحتوى.

إعادة الطباعة والأذونات

استكشف المزيد من المقالات

تتبع حركة العينمعالجة اللغة المنطوقةالمثيرات البصريةالمثيرات الصوتيةتحليل البياناتنظام EyeLinkتتبع نظرة العينالفهم الآني