Summary
הפרדיגמה העולם הויזואלי עוקב אחר תנועות עיניים של המשתתפים בסביבת העבודה חזותיים כפי שהם מאזינים או מדבר שפה מדוברת. פרדיגמה זו יכול לשמש כדי לחקור את עיבוד מקוון של מגוון רחב של שאלות psycholinguistic, כולל הצהרות סמנטי מורכבים, כגון מאמר משפטי.
Abstract
ב בלש טיפוסי מעקב במחקר באמצעות הפרדיגמה העולם הויזואלי, המשתתפים עין תנועות על אובייקטים או תמונות בסביבת העבודה החזותי של נרשמים באמצעות גשש העין המשתתף מייצרת או מקיף את שפה מדוברת המתארת את visual בו-זמניות העולם. פרדיגמה זו יש רב-תכליתיות, ניתן להשתמש במגוון רחב של אוכלוסיות, כולל אלה שלא יודעים לקרוא ו/או מי יכול לתת בגלוי שלהם תגובות התנהגותיות, כגון preliterate ילדים, מבוגרים קשישים ו חולים. חשוב מכך, הדפוס הוא רגיש מאוד מניפולציות בסדר אחרים של אות הדיבור, זה יכול לשמש כדי לחקור את עיבוד מקוון של רוב נושאים בהבנת השפה ברמות מרובות, כגון פונטי הגיטרה האקוסטית אחרים בסדר כולל את המאפיינים של מילים, המבנים הלשוניים. הפרוטוקול המתואר במאמר זה ממחיש כיצד מתנהל יש עין העולם הויזואלי טיפוסי מעקב במחקר, עם דוגמה מציג כיצד ניתן לסייר עיבוד מקוון של כמה אמירות מורכבות סמנטי עם הפרדיגמה העולם הויזואלי.
Introduction
השפה המדוברת היא זרימה מידע מהיר, מתמשך, הנעלמת מיד. זה אתגר השפעול ללמוד זה זמני, לשנות במהירות את אות דיבור. תנועות עיניים טלקוה הפרדיגמה העולם הויזואלי יכול לשמש כדי להתגבר על האתגר הזה. בעין טיפוסי מעקב במחקר באמצעות הפרדיגמה העולם הויזואלי, תנועות עיניים של המשתתפים תמונות תצוגה או אובייקטים אמיתיים בסביבת עבודה חזותיים מנוטרים להקשיב, או להפיק, השפה המדוברת המתארים את התוכן של העולם החזותי1 ,2,3,4. הלוגיקה הבסיסית, או ההנחה המקשרים, מאחורי תפיסה זו הוא כי בדיוק או תכנון של האמירה (בגלוי או בחשאי) יעבור תשומת לב המשתתפים לאובייקט מסוים בעולם החזותי. שינוי זה תשומת הלב תהיה הסתברות גבוהה ליזום תנועה העין saccadic להכניס את האזור השתתפו חזון foveal. עם הפרדיגמה הזו, מתכוונים החוקרים לקבוע באיזה שלב זמני, לגבי איזה ציון אקוסטית אות הדיבור, מתרחש מפנה תשומת לב ויזואלית של המשתתף, כפי שנמדד ע י תנועה saccadic העין לאובייקט או תמונה חזותית העולם. מתי ואיפה תנועות עיניים saccadic הם השיקה ביחס אות הדיבור משמשות לאחר מכן להסיק את עיבוד שפה באינטרנט. הפרדיגמה העולם הויזואלי ניתן ללמוד שפה מדוברת הבנה1,2 והן הפקה5,6. המאמר מתודולוגי יתמקדו הלימודים בהבנת הנקרא. מחקר הבנת הנקרא באמצעות הפרדיגמה העולם הויזואלי, העין של המשתתפים תנועות התצוגה החזותית מנוטרים כפי הם מקשיבים מבעים המדוברת מדבר על התצוגה החזותית.
מערכות מעקב עיניים שונות עוצבו בהיסטוריה. הפשוטה ביותר, לפחות יקר, הכי נייד מערכת היא פשוט רגילה מצלמת וידאו, אשר רשומות תמונה של העיניים של המשתתף. תנועות עיניים ואז מוצפנים באופן ידני באמצעות מסגרת בחינת הקלטת וידאו. עם זאת, קצב הדגימה של כזה עין-גשש היא נמוכה יחסית, ההליך קידוד זה זמן רב. לפיכך, יש עין מסחרית עכשווי מערכת מעקב בדרך כלל משתמשת חיישנים אופטיים מדידת הכיוון של העין שלו במסלול7,8,9. כדי להבין איך עובדת מערכת עקיבה מסחרי עכשווי, יש לשקול את הנקודות הבאות. ראשית, למדוד בצורה נכונה את הכיוון של חזון foveal, מאייר אינפרא-אדום (בדרך כלל עם הגל סביב 780-880 ננומטר) מונח בדרך כלל לאורך או לבטל את הציר האופטי של המצלמה, שהופך את התמונה של התלמיד distinguishably בהיר יותר או כהה יותר מאשר הקשתית שמסביב. התמונה של התלמיד ו/או של תלמיד הקרנית ההשתקפות (בדרך כלל התמונה הראשונה של Purkinje) משמש לאחר מכן כדי לחשב את הכיוון של העין במסלולו. שנית, המיקום ההתבוננות בעולם החזותי נמדדת למעשה לא רק על הכיוון עין לגבי הראש, אלא גם כיוון הראש ביחס העולם החזותי. להסיק במדויק מבטו של כבוד מן הכיוון העין, מקור האור של המצלמה של העין-עוקבים או קבועים ביחס לראש של המשתתפים (רכוב ראש העין-הגששים) או קבועים ביחס העולם החזותי (רכוב טבלה או מרחוק עין-הגששים). שלישית, כיוון הראש המשתתפים יש לתקן גם ביחס העולם החזותי או שהמפתחות לתשלום אם הראש של המשתתפים הוא לנוע בחופשיות. כאשר העין-גשש מרחוק משמשת במצב ראש-חינם-כדי-סע, העמדה בראש המשתתפים מתועד בדרך כלל על-ידי הצבת מדבקה קטנה על המצח של המשתתפים. כיוון הראש ואז יופחת שהמפתחות מן הכיוון העין לאחזר את המיקום ההתבוננות בעולם החזותי. רביעית, כיול, תהליך אימות נדרשים ואז כדי למפות את הכיוון של העין מבטו של כבוד בעולם החזותי. תהליך הכיול, קיבוע דגימות של המשתתפים נקודות יעד ידוע נרשמים כדי למפות את הנתונים העין raw להתבונן בעולם החזותי. בתהליך האימות, המשתתפים מוצגים עם אותן נקודות יעד כמו תהליך כיול. ההבדל הקיים בין תנוחת קיבוע מחושב מתוצאות מכוילת של מיקומו המעשי של המטרה מקובעים בעולם החזותי משמשות לאחר מכן לשפוט את הדיוק של הכיול. בהמשך מומלץ מאוד לאשר את הדיוק של תהליך המיפוי, המחאה להיסחף בדרך כלל חלה בכל ניסוי, שבו מטרה קיבוע יחיד הוא הציג למשתתפים כדי למדוד את ההבדל בין תנוחת קיבוע מחושב של מיקומו המעשי של . המטרה הנוכחית.
הנתונים העיקריים של מחקר העולם הויזואלי הוא זרם של המבט מיקומים בעולם החזותי הקליט בקצב דגימה של העין-המעקב, החל על כל או על חלק המשך המשפט. המשתנה התלוי השתמשו במחקר העולם הויזואלי הוא בדרך כלל הפרופורציה של דגימות הקיבועים של המשתתפים ממוקמים על אזור מסויים מרחבי העולם חזותית על פני חלון זמן מסוים. כדי לנתח את הנתונים, חלון זמן יש ראשית להיבחר, המכונה לעתים קרובות תקופות ריבית. חלון הזמן הוא בדרך כלל זמן נעול על המצגת של כמה אירועים הלשוני קלט שמיעתי. יתר על כן, העולם החזותי נחוץ גם כדי לפצל במספר אזורים מעניינים (ROIs), שכל אחד מהם מזוהה עם אובייקט אחד או יותר. אזור אחד כזה מכילה את האובייקט המתאים ההבנה הנכונה של השפה המדוברת, כך לעיתים קרובות נקרא אזור היעד. שיטה נפוצה כדי להמחיש את הנתונים היא מזימה פרופורציה-של-קיבוע, איפה לכל סל בחלון הזמן, חלקם של דגימות עם מראה על כל אזור בעל עניין הם בממוצע על פני המשתתפים ופריטים.
באמצעות הנתונים שהושגו ממחקר העולם הויזואלי, שאלות המחקר שונים יכולה לקבל מענה:) ברובד גס-דגן, הן תנועות עיניים של המשתתפים בעולם החזותי מושפע הקלט שמיעתי לשוני? b) אם יש אפקט, מהו המסלול של האפקט במהלך המשפט? זה אפקט ליניארי או אפקט גבוהים? ו- c) אם יש השפעה, ואז על רמת הקנס-דגן, כאשר היא נקודת טמפורלית המוקדם שבו מתגלה אפקט כזה ועושה כמה זמן את האפקט הזה האחרון?
מבחינה סטטיסטית לניתוח התוצאות, יש לשקול את הנקודות הבאות. ראשית, התגובה המשתנה, כלומר, הפרופורציות של הקיבועים, גם מתחת וגם מעל תחומה (בין 0 ל-1), אשר יעברו על התפלגות המולטינום ולא בהתפלגות רגילה. מעתה ואילך, שיטות סטטיסטיות מסורתי המבוסס על התפלגות נורמלית כגון מבחן t, ANOVA מודלים ליניאריים (מעורב-אפקט)10, לא יכול להיות ישירות מנוצל עד הפכו את הפרופורציות למשתני מאוגדות כגון עם נוסחה אמפירית logit11 או הוחלפו מאוגדות התלוי משתנים כגון מרחק אוקלידי12. ניתן להשתמש גם טכניקות סטטיסטיות שאינם מצריכים שההנחה של התפלגות נורמלית כזה מוכללת מודלים ליניאריים (מעורב-אפקט)13 . שנית, על מנת לחקור את המסלול משתנה של האפקט הנצפה, משתנה המציין את הזמן-הסדרה יש להוסיף לתוך המודל. משתנה זה הזמן-סדרת הוא במקור העין-המעקב של דגימה נקודות יושרו תחילתה של שפת קלט. כיוון המסלול משתנה בדרך כלל אינו ליניארי, פונקציה פולינום מסדר גבוה של סדרת ה הזמן-בדרך כלל נוסף לתוך (כללית) (מעורב-אפקט) המודל הוא ליניארי, כלומר, ניתוחים עקומת גדילה14. יתר על כן, העין בתפקידים של המשתתפים נקודת הדגימה הנוכחית תלויה מאוד נקודות הדגימה הקודמת, במיוחד כאשר תדירות ההקלטה הוא גבוה, והתוצאה היא הבעיה של autocorrelation. כדי להפחית את autocorrelation בין נקודות דגימה סמוכים, הנתונים המקוריים הם לעתים קרובות שנדגמו למטה או נשברתי. בשנים האחרונות, הדגמים מוכללת מוספים אפקט מעורב (GAMM) גם שימשו כדי להתמודד עם ה autocorrelated שגיאות12,15,16. הרוחב של סלים משתנה בין מחקרים שונים, ועד כמה מאות מילי שניות מספר אלפיות השניה. סל הצר שמחקר ניתן לבחור הוא מוגבל על ידי קצב הדגימה של רכיב המעקב העין השתמשו במחקר מסוים. לדוגמה, אם גשש העין יש קצב הדגימה של 500 הרץ, ואז מרוחב חלון הזמן לא יכולה להיות קטנה מ- 2 ms = 1000/500. שלישית, כאשר ניתוח סטטיסטי מוחל שוב ושוב כל הזמן סל של התקופות עניין, השגיאה familywise המושרה אלה שצריכה להיות מטופלת השוואות מרובות. כפי שהסברנו קודם לכן, מסלול הירי מודיע החוקר אם ההשפעה נצפתה רמה גס-תבואה הוא ליניארי לגבי שינוי של הזמן, אך אינם מציגים כאשר האפקט הנצפה מתחיל להסתמן וכיצד זמן שנצפו האפקט נמשך. כדי לקבוע את מיקום זמני כאשר ההבדל שנצפה מתחיל לסטות, וכדי להבין את משך התקופה זמני שנמשך האפקט הנצפה, ניתוחים סטטיסטיים כולל שיוחל שוב ושוב לכל סל זמן. השוואות מרובות אלה תציג את השגיאה familywise כביכול, לא משנה באיזו שיטה סטטיסטית משמש. השגיאה familywise היא תתוקן באופן מסורתי עם התאמה Bonferroni17. לאחרונה, שיטה הנקראת מבחן תמורה nonparametric שימשו במקור דימות מוחי הגיש18 הוחלה על הפרדיגמה המילה חזותי19 כדי לשלוט על השגיאה familywise.
חוקרים באמצעות הפרדיגמה העולם הויזואלי מתכוונים להסיק ההבנה של השפה המדוברת חלק מן המשתתפים תנועות עיניים בעולם החזותי. כדי להבטיח את תוקפו של התהליך הזה, גורמים אחרים המשפיעים על תנועות עיניים ואולי עליך להיות שללה או נשלט. שני הגורמים הבאים הם בין אלה נפוצים צריכים לקחת בחשבון. הגורם הראשון כרוך כמה דפוסים שיטתית הסבר הקיבועים של המשתתפים עצמאית של שפת קלט, כגון נטייה להתקבע על החלק העליון השאיר תתהלכו של העולם הויזואלי, והעיניים נע בכיוון אופקי לכך קל יותר מאשר ב- הכיוון האנכי,12,ועוד20 כדי לוודא כי הדפוסים שנצפו קיבוע קשורים לאובייקטים, שלא למיקומים מרחבית היכן ממוקמים העצמים, העמדות המרחבי של אובייקט צריך להיות אוזנו פני ניסויים שונים או על פני משתתפים שונים. הגורם השני העלולות להשפיע על תנועות עיניים של המשתתפים הוא תכונות התמונה הבסיסית של האובייקטים בעולם חזותיים, כגון כיוון ניגודיות, צבע, קצוות בוהק, בין היתר21. כדי לאבחן את פוטנציאל זה מבלבלים, התצוגה החזותית בדרך כלל מוצג לפני תחילתה של שפה מדוברת או לפני תחילתה של הסמן אקוסטית קריטי של השפה המדוברת, של גברת כ-1000 במהלך תקופת טמפורלית מראשית תמונת בדיקה תחילתה של מבחן השמע, את שפת הקלט או הנקודה פירושונים של שפת קלט היה עדיין לא שמע. כל הבדל שנצפה בין מצבים שונים צריך להסיק לגורמים מבלבלים אחרים כגון התצוגה החזותית כשלעצמה, ולא שפת קלט. מעתה ואילך, תנועות עיניים נצפתה בתקופה זו תצוגה מקדימה מספקים בסיס לקביעת השפעת הקלט הלשוני. תקופה זו התצוגה המקדימה מאפשר גם משתתפים כדי לקבל היכרות עם התצוגה החזותית, וכדי להפחית את האפליה השיטתית של הקיבועים הסבר כאשר השפה המדוברת מוצג.
כדי להמחיש כיצד מתנהל בעין טיפוסי מעקב במחקר באמצעות הפרדיגמה העולם הויזואלי, הפרוטוקול הבא מתאר ניסוי מקורי ל' Zhan17 לחקור את עיבוד מקוון של דוחות מורכבים סמנטי, קרי, מאמר משפטי (S1 או S2) הצהרות conjunctive (S1, S2), אבל-הצהרות (S1 אבל לא-S2). בשימור רגילים, המידע לידי מבעים כמה הוא יותר חזק מהמשמעות המילולית שלה. מאמר משפטי כמו של Xiaoming מהטורים פרה או תרנגול הם מבעים כזה. מבחינה הגיונית, המשפט מאמר זה נכון כל עוד disjuncts שני התיבה של Xiaoming מכילה פרה , התיבה של Xiaoming מכילה תרנגול אינם שניהם כוזבים. לפיכך, המשפט מאמר נכון כאשר disjuncts שני שניהם נכונים, איפה ההצהרה conjunctive המקביל של Xiaoming מהטורים פרה ו תרנגול הוא גם נכון. בשיחה רגילה, עם זאת, שמיעת שהמשפט מאמר לעתים קרובות מרמז כי ההצהרה conjunctive המתאים. שקר (implicature שיטתית); מציע כי ערכי האמת שני disjuncts הם מוכרים על ידי הרמקול (בורות מסקנה). חשבונות בספרות נבדלים מסקנות שני תהליכים דקדוקית או פרגמטי22,23,24,25,26. הניסוי מראה כיצד ניתן להשתמש הפרדיגמה העולם הויזואלי לדון בין חשבונות אלה, על-ידי חקירת עיבוד מקוון של שלוש הצהרות מורכבים.
Subscription Required. Please recommend JoVE to your librarian.
Protocol
כל הנושאים חייב לתת הסכמה בכתב מושכלת לפני המינהל של הפרוטוקולים ניסיוני. כל ההליכים, טופסי הסכמה, את נסיוני אושרו על-ידי ועדת האתיקה במחקר של בייג'ין לשפה, תרבות באוניברסיטה.
הערה: מחקר הבנת הנקרא באמצעות הפרדיגמה העולם החזותי בדרך כלל מורכב מהשלבים הבאים: להציג את הבעיות תיאורטי להיחקר; יוצרים עיצוב ניסיוני; להכין את ויזואלי וקולי; להפליל את הבעיה תיאורטי לגבי הנבחנים; בחר גשש-עין כדי לעקוב אחר תנועות עיניים של המשתתפים; לבחור את התוכנה, לבנות תסריט עם התוכנה כדי להציג את הגירויים; קוד ולנתח את הנתונים תנועות עיניים המוקלט. ניסוי מסוים יכולים להיות שונים אחד מהשני בכל השלבים המתוארים. לדוגמה, פרוטוקול הוא הציג לערוך את הניסוי ולדון כמה נקודות החוקרים צריכים לזכור כאשר הם לבנות ולנהל את הניסוי שלהם באמצעות הפרדיגמה העולם הויזואלי.
1. מכינים מבחן גירויים
- גירויים חזותיים
- הורד 60 אמנויות קליפ של בעלי חיים חופשיים של זכויות יוצרים באינטרנט. פתח כל תמונה אחת עם עורך תמונה (למשל, Pixelmator), לחץ על כלים | הכלי בחירה מהירה לבחור ולמחוק את הרקע. לחץ על התמונה | תמונה בגודל כדי לשנות את גודל אותם ל- 120 x 120 פיקסלים.
- מזמינים תלמיד בהתמחות הציור לצייר ארבע תיבות ירוק בהיר, כמופיע באיור1. השתמש בעורך תמונות לשינוי בתיבת פתיחה גדולה 320 x 240 פיקסלים, התיבה סגור קטן עם הגודל של 160 x 160 פיקסלים של שתי תיבות פתח קטן ל- 160 x 240 פיקסלים, בהתאמה.
- לחץ על Pixelmator | קובץ | חדש לבנות תבנית של תמונת הבדיקה עם הגודל של 1024 768 פיקסלים. גרור את החיות והקופסאות למיקומים תיקון להיות מאויר באיור1.
הערה: הפריסה של תמונת הבדיקה משתנה בין מחקרים, אך הדרך האופטימלית היא להשתמש באובייקטים ארבע, לשים אותם על ארבעת הרבעים של תמונת הבדיקה. בדרך זו קל יותר לאזן את המיקום המרחבי של האובייקטים. - ליצור 60 תמונות מבחן כמו איור 1, עם כל תמונה חיה בשימוש פעמיים. מאוזנים המיקומים המרחבי בארבע התיבות בין הדימויים.
הערה: מספר התמונות יהיו 60 מדויק, כל זמן ההשפעה שלהם היא dissociable מזו של המניפולציות ניסיוני.
- השפה המדוברת גירויים
- עיצוב ארבעה משפטים המבחן המתאים לכל תמונת בדיקה ומשפטים מבחן 240 בסך שיירשמו. להבטיח כי שלושה מתוך ארבעת המשפטים הם בצורה של איור 2; המשפט המילוי בצורת תיבת של Xiaoming אינו מכיל תרנגול אבל פרה.
הערה: המשפטים הבדיקה צריכה להיות מוצגת בשפת המקור שמביעים המשתתפים. המשתתפים בניסוי זה הם הסינית של בייג'ינג, סין היבשתית, כך שפת המבחן היא סינית מנדרינית. - לגייס דובר שפת אם נקבה (דובר שפת אם של סינית מנדרינית בניסוי זה) כדי להקליט ארבעה משפטי דוגמה כמו באיור 2, כמו גם אודיו של כל החיות בשימוש הניסוי. בעת הקלטת את שמות בעלי חיים מבודדים, שואל הדובר לדמיין כי השמות של בעלי החיים הם רכיבים שלם של משפט פשוט, כגון תיבת של Xiaoming מכיל / _, אבל היא רק צריכה לבטא את השם של החיה בגלוי.
- החלף את קטעי השמע של חיות שתי ההצהרות דוגמה השמע של שתי חיות בשימוש בכל ניסוי כדי ליצור רשימה מלאה של קטעי השמע הבדיקה. ראשית, פתח Praat (כל תוכנה לעריכת שמע אחרים הוא חלופה זכאי) ולחץ על פתוח | לקרוא מקובץ | נווטו לקובץ | לפתוח ולערוך, נווט לרכיב להחליפו ולחץ על להציג ולערוך | עריכה | להעתיק את הבחירה ללוח קול. שנית, להשתמש באותם השלבים כדי לפתוח משפט לדוגמה, לחץ על הדבק לאחר הבחירה. שלישית, לחץ על להציל | לשמור כקובץ wav כדי לשמור את משפט הערוך. חזור על התהליך עבור כל רכיבי ישונו וכן כל המשפטים הבדיקה.
- לגייס כ-10 דוברי שפת המבחן (סינית מנדרינית כאן) כדי לקבוע אם השמע המבחן בנוי היא מובנת וטבעית.
הערה: השמע הבדיקה נרשם באופן מסורתי בכללותה, ולא נפרדות. שיטה זו הקלטה מסורתי סביר שאם השמע מבחן עצמם להפריד בין המילים. אם הגירויים השפה המדוברת משפטים ולא במילים נפרדות, עם זאת, בשיטה מסורתית זו יש כמה חסרונות: ראשית, מאפיין נפוץ של נאום מתמשך זה של השניים או יותר קולות הדיבור נוטים חנותם והמרגשים חופפים, מה שהופך את זה קשה לקבוע את התחלתה של המילה קריטי. שנית, השונות בין האורך הנסיונות שונה גם מקשה לשלב את כל הניסויים יחד לצורך ניתוחים סטטיסטיים. שלישית, השיטה המסורתית הקלטה לעתים קרובות זמן רב במיוחד כאשר המספרים השמע מבחן גדולים יחסית, כגון הניסויים שדיווחנו בפרוטוקול. כדי להתגבר על החסרונות של שיטת ההקלטה מסורתיים, שיטה אחרת מוצע לבנות את audios הבדיקה המדוברת. ראשית, רשימה של משפטים לדוגמה המכילים את המילים הנפוצים בקרב כל השמע הבדיקה נרשם. שנית, כל המילים שינוי בין ניסויים נרשמו גם בבידוד. לבסוף, משפטים לדוגמה הוחלפו עם המילים המוקלטות לבנות רשימה מלאה של קטעי השמע הבדיקה. השיטה החדשה לעומת השיטה המסורתית, יש מספר יתרונות. ראשית, כל מבחן השמע הוא בדיוק אותו הדבר חוץ על המילים קריטי, ואפקטים כל פוטנציאל מבלבלים השמע מבחן מעתה ואילך נשלטים. שנית, להיות זהה באורכו גם עושה את פילוח של קטעי השמע הבדיקה קלה יותר כאשר קטעי השמע הבדיקה נרשמים בכללותה. חיסרון אחד פוטנציאלי של שיטה זו הוא נבנה השמע שאולי לא טבעי. מעתה ואילך, הטבעיות של השמע הבדיקה יש להעריך לפני שזכאים לבדיקה בפועל.
- עיצוב ארבעה משפטים המבחן המתאים לכל תמונת בדיקה ומשפטים מבחן 240 בסך שיירשמו. להבטיח כי שלושה מתוך ארבעת המשפטים הם בצורה של איור 2; המשפט המילוי בצורת תיבת של Xiaoming אינו מכיל תרנגול אבל פרה.
- לחלק את המשפטים מבחן 240 ארבע קבוצות, עם כל קבוצה המכיל הצהרות conjunctive 15, הצהרות מאמר 15, הצהרות , אבל 15 ו מלוי 15 משפטים. ודא כי כל משתתף פוגש רק לקבוצה אחת של ניסויים 240: הוא/היא רואה כל בדיקה תמונות אבל שומע רק לקבוצה אחת של קטעי השמע הבדיקה.
הערה: זהו לפנות את החשש כי אם הגירוי אותו חוזר על עצמו, אולי המשתתפים מקבלים רגילים לגירויים אלו ואולי אפילו להפוך אסטרטגי על איך הם הגיבו לגירויים. - שמור כל מידע חשוב לגבי מבחן הגירויים לתוך קובץ txt מופרד באמצעות טאב, עם כל שורה המתאים לכל של הניסויים 240. ודא כי הקובץ כוללת לפחות את העמודות הבאות: experiment_group, sentential_connective, trial_number, test_image, test_audio, test_audio_length, ia_top_left, ia_top_right, ia_bottom_left, ia_bottom_right, animal_1_ התמונה, animal_1_audio, animal_1_audio_length, animal_2_image, animal_2_audio, animal_2_audio_length.
הערה: experiment_group משמש לפצל את הניסויים 240 4 קבוצות. sentential_connective מקביל תנאים ניסויים שונים. animal_1_image מקביל התמונה של החיה יוצגו קודם כל להכיר את המשתתפים עם החיות המשמשים את תמונת הבדיקה. test_image, test_audioו- test_audio_length עיין בתמונה מבחן ושמע את הבדיקה גם אורכו נעשה שימוש במשפט הנוכחי. ia_top_left, ia_top_right, ia_bottom_left, ia_bottom_right להפנות השם של הריבית ארבע אזורי למשפט, נוכחי כלומר., בין אם זה תיבה 'פתח גדול', תיבת "קטן סגור", פתח קטן תיבת המכילה החיה "נזכרת לראשונה" ב מבחן השמע או התיבה פתוח המכיל החיה "הזכיר שנית" ב מבחן השמע. animal_1_audio , animal_1_audio_length להפנות שמע ואורך השמע המתאים animal_1_image. animal_2_image, animal_2_audioו- animal_2_audio_length תואמים את החיה השנייה יוצגו. דבר אחד להדגיש הוא הרצף להציג את החיות שני הוא אוזנו ביחס מוזכר החיה הראשונה או בכל המחצית השנייה של קטעי השמע הבדיקה.
2. להפליל את התחזית התאורטית לגבי הנבחנים.
- להבטיח המשתתפים תגובות התנהגותיות ותנועות עיניים-עיצוב ניסיוני יכול לשמש כדי להבדיל comprehensions המשפטים מבחן והוא יכול לשמש לדון בין חשבונות שונים להיבדק.
הערה: לאור הנבחנים, התגובה הנכונה כדי הצהרה conjunctive היא תיבת פתוח גדול, כגון תיבת A באיור1. התגובה הנכונה אבל-ההצהרה היא התיבה פתוחה שמכילה את החיה שיזכירו במחצית הראשונה של קטעי השמע הבדיקה, כגון תיבת D באיור1. התגובות של המשתתפים המשפט מאמר, לעומת זאת, תלוי ו/או איך שתי מסקנות שנדונו מעובדים. אם המשתתפים לחשב את implicature שיטתית ולא היסק את הבורות, ולאחר מכן כל הקופסאות ארבע אופציות זכאי. אם המשתתפים לחשב שאת implicature שיטתית אך לא של היסק בורות, אז הגדול לפתוח, כגון תיבת איור 1, ניתן לשלול ולא בשאר שלושת התיבות B, C ו- D הם כל האפשרויות זכאי. המשתתפים לחשב את היסק בורות אבל לא את implicature שיטתית, אם התיבות פתח קטן ניתן לשלול, כלומר., תיבות C ו- D ניתן לשלול. לסיכום, התיבה סגור הקטנה, כגון תיבת B באיור 1, לא ייבחרו כמו האפשרות האחרונה של הצהרה מאמר עד implicature שיטתית את מסקנות בורות את שניהם מחושבים.
3. לבנות את ה-Script ניסיוני
- פתח את לחץ ניסוי בונה, קובץ | חדש כדי ליצור פרוייקט ניסוי. קלט את שם הפרוייקט כגון vwp_disjunction. בחר את מיקום פרוייקט. בדוק EyeLink ניסוי ובחר Eyelink 1000plus מתוך הרשימה הנפתחת. פעולות אלו תיצור ספריית משנה המכיל שכל הקבצים הקשורים בניסוי שזה יהיה ליצור ספריית משנה בשם vwp_disjunction עם קובץ בשם "graph.ebd" בתיקיה.
הערה: ניסוי בונה משמש לבניית התסריט ניסיוני כדי להציג הגירויים הבדיקה וכדי לרשום תנועות עיניים של המשתתפים, כמו גם תגובות התנהגותיות שלהם. בונה הניסוי הוא כלי של לבנות תסריט ניסיוני. זה קל לשימוש, אבל כל תוכנה מצגת אחרת של גירויים חלופה זכאי. - דמיינו את המבנה ההירארכי של ניסוי עקיבה טיפוסי באמצעות הפרדיגמה העולם הויזואלי, כפי שניתן לראות באיור3. כל מלבן ורוד באיור הוא מיושם כאובייקט רצף על ידי ניסוי בונה; כל אובייקט עם רקע אפור מיושם כאובייקט צומת.
הערה: רצף בבונה ניסוי זה לקונטרולר לולאה ניסיוני נהגה לשרשר יחד חפצים שונים כמו צומת מורכבים. רצף מתחיל תמיד עם צומת להתחיל . מקור נתונים יכול להיות מצורף לצומת רצף לספק פרמטרים שונים בכל ניסוי. - לבנות את רצף ניסוי
- לחץ על קובץ | פתח את, אתר ספריית ניסוי, לחץ פעמיים על הקובץ graph.ebd בספריית הפרוייקט כדי לפתוח את הפרוייקט השמור הניסוי.
- לחץ על ערוך | מנהל הספרייה | תמונה | להוסיף כדי לטעון את התמונות לתוך הניסוי הפרוייקט. באופן דומה, לחץ על עריכה | מנהל הספרייה | קול | להוסיף כדי לטעון את השמע לתוך הפרוייקט הניסוי.
- גרור אובייקט DISPLAY_SCREEN לתוך מרחב העבודה ושנה את הערך התווית שלו בחלונית ' מאפיינים ' כדי לשנות את זה כמו הוראה. לחץ פעמיים כדי לפתוח את הצומת הוראה , ולחץ על הלחצן הוסף משאב טקסט של שורות מרובות קלט ההוראה ניסיוני. ודא כי ההוראה מכיל את המידע הבא:
בכל ניסוי, קודם תראה תמונות של שתי החיות חיה אחת כל מודפסות במסך בתורו, יחד עם השמע של החיות שיחק בשני רמקולים ממוקם משני צידי המסך. נקודה שחורה ואז יוצגו במרכז המסך. אתה צריך ללחוץ על מקש רווח בזמן מתמקדת בנקודה. הבא, את תמונת בדיקה בהיקף של ארבע תיבות מודפס על-גבי המסך יראה וישמע משפט מבחן שמתנהל באמצעות שני רמקולים. המשימה שלך היא לאתר של Xiaoming תיבת לפי המשפט מבחן ואם ללחוץ על הכפתור המתאים בהקדם האפשרי:
השמאלית העליונה תיבת-חץ שמאלה
ראש תיבת נכון---חץ למעלה
למטה מימין תיבת-חץ שמאלה
הקופסה הנכונה למטה-חץ ימינה
בתמונה בכל מבחן ', תוכל לראות ארבע תיבות ממוקם על ארבעת הרבעים ובעלי שני המכיל בתיבות. בארבע התיבות יכול להשתנות בשני מימדים: קרבה שלה ואת גודלו. אם תיבה סגורה או לא משפיעה על הידע שלנו epistemic על הקופסה הזאת, אבל לא את animal(s) שהוא מכיל. אם תיבה פתוחה, animal(s) הכלול בתוך הקופסא הזו ידועה. אם קופסא סגורה, ואז animal(s) הכלול בתוך הקופסא הזו אינה ידועה. הגודל של תיבת משפיע על מספר החיות הכלול התיבה, אך לא epistemic את הידע שלנו על הקופסה הזו. לא משנה התיבה סגור או לא, תיבה קטנה בלבד, ותמיד מכילה חיה אחת, קופסה גדולה תמיד מכיל שתי חיות שונות.
אם אתה חש בנוח עם המטרה ניסיוני וההליך, בבקשה תן הנסיין יודע, אנחנו נעזור לך לבצע את העין רגיל מעקב רוטינות כיול ואימות. אם יש לך שאלות כלשהן, אנא אל תהססו לשאול.
הערה: זהו הוראה שיודפס על המסך לפני הניסוי (צריכה להיכתב בהתאם להוראות בשפת המקור שהמשתתפים הדיבור, כגון סינית מנדרינית כאן). - גרור אובייקט לוח המקשים לתוך מרחב עבודה.
הערה: שלב זה משמש כדי לסיים את המסך הוראה - גרור אובייקט רצף לתוך מרחב העבודה ושנה זה כמו בלוק.
- בחר את רצף בלוק , לחץ על השדה הערך של המאפיין מקור הנתונים כדי להעלות את עורך מקור נתונים. לחץ על לחצן ייבוא נתוני על המסך עורך מקור נתונים, בראו את הקובץ. txt שנוצר בשלב 1.4 כדי לייבא את מקור הנתונים.
- לחץ על לחצן הגדרה אקראיות בעורך מקור נתונים, בדוק לאפשר משפט אקראיות, בחר trial_number מן השדה ערך בשדה עמודה , בחר experimental_group מ הרשימה הנפתחת של שדה עמודה פיצול .
- גרור את השני DISPLAY_SCREEN אובייקט במרחב העבודה של ולשנות את זה בתור להתראות. לחץ פעמיים על הצומת להתראות והכנס את המידע הבא: בשפת המשתתפים (סינית מנדרינית ב פרוטוקול זה):הניסוי גמורה ותודה רבה השתתפותך.
- לחיצה שמאלית על הצומת להתחיל , גרור את החץ אל הצומת הוראה ולאחר שחרור לחצן העכבר כדי להתחבר הצומת להתחיל הצומת הוראה . חזור על שהעכבר אותו זז להתחבר הוראה צומת הצומת המקלדת , מקלדת צומת לצומת חסום , ואז לחסום צומת לצומת שלום . לחץ על תצוגה | לארגן את הפריסה לסדר את הצמתים בסביבת העבודה.
- לבנות את רצף בלוק
- לחץ פעמיים כדי לפתוח את רצף בלוק . גרור צומת El_CAMERA_SETUP לתוך הרצף בלוק להעלות מסך התקנה מצלמה במחשב המארח EyeLink עבור הנסיין לבצע מצלמה, כיול ולאחר אימות. לחץ על שדה כיול סוג בחלונית ' מאפיינים ' ובחרו HV5 מתוך הרשימה הנפתחת.
הערה: מספר מיקומים תהליך המיפוי משתנה בין עיצובים מוטוריים שונים. המיקומים יותר שנדגמו ואת הרווח יותר מכוסה, גבוה יותר הדיוק ניתן לצפות. אבל יותר דוגמאות אומר יותר זמן לסיים את התהליכים. אז למעשה, מספר מיקומים במחקר מסוים לא יכול להיות מאוד גדול, במיוחד כאשר משתתפים ילדים preliterate או מטופלים קליניים. ב הפרדיגמה העולם הויזואלי, המספר של האזורים הריבית הוא קטן יחסית, תחומי עניין נמצאות בדרך כלל יחסית גדול. תהליך המיפוי יכול להגיע לרמה מספקת עם מספר קטן יחסית של מיקומים. בפרוטוקול שתיארתי, השתמשתי כיול ואימות של חמש נקודות. - גרור צומת רצף לתוך הרצף בלוק, שם חדש למשפט. להתחבר הצומת להתחיל הצומת CAMERA_SETUP , אז אל הצומת : מסנני מהירותאלקטרוני.
- לחץ פעמיים כדי לפתוח את רצף בלוק . גרור צומת El_CAMERA_SETUP לתוך הרצף בלוק להעלות מסך התקנה מצלמה במחשב המארח EyeLink עבור הנסיין לבצע מצלמה, כיול ולאחר אימות. לחץ על שדה כיול סוג בחלונית ' מאפיינים ' ובחרו HV5 מתוך הרשימה הנפתחת.
- לבנות את רצף המשפט
- לחץ פעמיים כדי לפתוח את רצף המשפט , צומת DISPLAY_SCREEN לגרור רצף המשפט , שם חדש animal_1_image. לחץ פעמיים כדי לפתוח את הצומת מסך Builder , ולחץ על הלחצן הוסף משאב תמונה בסרגל הכלים מסך Builder כדי להוסיף תמונה חיה מן המקורות תמונות שהועלו. לחץ על השדה הערך של המאפיין שם קובץ מקור , לנווט מקור הנתונים מחובר הרצף בלוק ; לחץ פעמיים על העמודה Animal_1_Image לחבר את DISPLAY_SCREEN עם העמודה הנכון של מקור הנתונים.
- לגרור רצף המשפט צומת PLAY_SOUND , שם חדש animal_1_audio. לחץ על המאפיין קובץ צליל של הצומת animal_1_audio וחבר אותו עם העמודה המתאימה של מקור הנתונים (כמתואר להיות בשלב 3.5.1).
- צומת טיימר לגרור רצף המשפט ולשנות כמו animal_1_audio_length. לחץ על המאפיין משך של שעון העצר של צומת ונווט אל העמודה המתאימה של מקור נתונים שנוצרו ב- 3.4.1.
- גרור צומת DISPLAY_SCREEN אחר, צומת PLAY_SOUND אחר וצומת טיימר נוספת לתוך הרצף המשפט , לשנות את שמם animal_2_image, animal_2_audio, ו בעלי חיים _2_audio_duration, חזור על השלבים תוארו בשלבים 3.5.1 - 3.5.3.
הערה: השלבים הבאים כלולים לפקד על בלבול פוטנציאליים כי שניתן לכנות את אותה תמונה אחרת על ידי המשתתפים שונים. מאוזנים על רצף הצגת החיות שני לגבי זה מוזכר במחצית הראשונה או השניה של קטעי השמע הבדיקה. - לגרור אובייקט רצף להכין רצף המשפט ושנה את המאפיין לצייר את Eyelink מארח את התמונה.
הערה: צומת זה משמש לטעינה את קבצי התמונה והקול לזיכרון עבור ציור תמונה בזמן אמת, משחק קול. הוא משמש גם כדי לצייר גרפיקה משוב על המחשב המארח כך ניתן לנטר דיוק מבטו המשתתפים. - גרור צומת DRIFT_CORRECT לתוך הרצף ניסיון להציג את התיקון סחיפה.
- גרור צומת רצף חדשה, שם חדש הקלטה. לחבר את הפעלת בלוטות אלה אחד אחרי אחד.
- לבנות את רצף הקלטה
- בדוק את השדה רשומה ב- לוח המאפיינים של רצף הקלטה ולאחר לחץ פעמיים כדי לפתוח את רצף הקלטה .
הערה: רצף עם מאפיין רשומה בדק אומר כי תנועות עיניים של המשתתפים במהלך תקופה זו תירשם. - גרור החדש של DISPLAY_SCREEN לתוך הרצף רשומה , שם חדש test_image. הוסף את ההודעה test_image_onset לתוך המאפיין את ההודעה של הצומת test_image .
הערה: בשלב ניתוח הנתונים, את הצומת test_image וההודעה הצומת test_audio (סעיף 3.6.6) חשובים לאתר את התחלתה של תמונות מבחן ואת תחילתה של קטעי השמע הבדיקה בבכל ניסוי. - לחץ פעמיים כדי לפתוח את הצומת מסך Builder , ולחץ על הלחצן הוסף משאב תמונה בסרגל הכלים מסך Builder כדי להוסיף כל תמונה חיה מן המקורות תמונות שהועלו. לחץ על השדה ערך של שם קובץ מקור רכוש, לנווט מקור הנתונים מחובר הרצף בלוק ; לחץ פעמיים על העמודה test_image לחבר את DISPLAY_SCREEN עם העמודה הנכון של מקור הנתונים.
- לחץ פעמיים על הצומת DISPLAY_SCREEN כדי לפתוח את בונה מסך, לחץ על לחצן הוסף מלבן עניין באזוראזור לצייר ארבעה אזורים מלבניים של עניין כפי שממחישים את הקופסאות הכחולות באיור1. לשנות את התוויות של ארבעה אזורי עניין Top_Left, Top_Right, Bottom_Left, Bottom_Right, וחבר את השם DataViewer שהוגשו העמודות המתאימות של מקור הנתונים.
הערה: אזורים אלה הם בלתי נראה למשתתפים. כדי להפוך את תחומי עניין משמעותי יותר, תווית השם של אזור שבדוגמה כמו "תיבה (פתוח גדול)" השמאלית העליונה, העליון נכון איזור כמו "תיבת ב' (קטן סגור), למטה באזור השמאלי כמו"תיבת C (השני שהוזכרו)", אזור באזור התחתון ימני כמו" תיבת D (נזכרת לראשונה) " , כי שתי תיבות פתח קטן להכיל את שתי חיות שיזכירו במחצית הראשונה והשניה של קטעי השמע הבדיקה, בהתאמה. - צומת טיימר לגרור סביבת העבודה שם חדש הפסקה, לשנות את המאפיין משך 500 ms.
הערה: צומת טיימר זה מוסיף קצת זמן השהיה בין תחילתה של התמונה מבחן תחילת השמע מבחן. זמן השהיה מקנים למשתתפים הזדמנות לערוך היכרות עם תמונות מבחן. תנועות עיניים של המשתתפים במהלך תקופה זו תצוגה מקדימה גם לספק תוכנית בסיסית לקביעת השפעת הקלט השפה המדוברת, במיוחד כאשר המילים קריטי ממוקמים בתחילת קטעי השמע הבדיקה. - גררו צומת PLAY_SOUND במרחב העבודה של ושנה זה כמו test_audio. לחץ על המאפיין קובץ צליל , לחבר אותו עם העמודה המתאימה של מקור הנתונים (כמו להיות שמתואר בשלב 3.5.1) ולהוסיף את ההודעה test_audio_onset לתוך המאפיין את ההודעה .
- לגרור צומת טיימר לתוך מרחב עבודה, שנה את שמו כמו test_audio_length. שנה את המאפיין משך 10500 ms.
- הוסף צומת טיימר חדשה, שם חדש record_extension, ושנה את המאפיין משך ל 4000 ms.
- הוסף צומת מקלדת חדשה לתוך מרחב העבודה, שם חדש תגובות התנהגותיות, ושנה את המאפיין את המפתחות מקובל[למעלה, למטה, ימינה, שמאלה]".
הערה: בחירות התנהגותיות של המשתתפים ניתן לבדוק כפול תוקפו של המסקנה להסיק תנועות עיניים של המשתתפים. - להתחבר הצומת להתחיל השהה, test_audio, test_audio_length, ואז לצומת Record_extension . הוסף חיבור נוסף test_audio_length לצומת behavioral_responses .
הערה: על-ידי הוספת חיבורים אלה, המשפט הנוכחי יסתיים, משפט חדש יתחיל אחרי המשתתפים על מקש כדי לבחור תיבת Xiaomingאו 4000 ms אחרי ההיסט של הבדיקה שמע. - גרור צומת משתנה לתוך מרחב העבודה, שם חדש key_pressed, וחבר את המאפיין ערך behavioral_Responses מקשים | עורר נתונים | מפתח.
- גרור צומת RESULT_FILE לתוך מרחב העבודה, לגרור את צומת ADD_TO_RESULT_FILE של מרחב העבודה, וחבר הצומת record_extension והן את הצומת behavioral_responses ADD_TO_RESULT_FILE צומת.
- בדוק את השדה רשומה ב- לוח המאפיינים של רצף הקלטה ולאחר לחץ פעמיים כדי לפתוח את רצף הקלטה .
- לחץ על הניסוי | לבנות כדי לבנות את ה-script ניסיוני, לחץ על הניסוי | מבחן לרוץ כדי לבדוק לרוץ את הניסוי. אחרי הכל נעשה, לחץ על הניסוי | לפרוס כדי ליצור גירסה הפעלה של פרויקט ניסיוני.
הערה: לקבלת מידע נוסף על אופן השימוש בבונה ניסוי, להתייעץ ידנית את התוכנה27.
4. גייס משתתפים
- ודא למשתתפים יש חזון נורמלי רגיל או מתוקן. ממליצים על המשתתפים צריי ללבוש עדשות מגע, אבל משקפיים מקובלים גם כל עוד העדשות נקיים. ודא כי כל המשתתפים הם דוברי השפה הבדיקה, כגון סינית מנדרינית כאן.
הערה: כהנחיה כללית, משתתף נחשב זכאי כל עוד המשתתף יכול לראות את התמונות מבחן ממרחק של-60 ס מ. במונחים של מספר המשתתפים, על פי כמה כללי אצבע, מספר המשתתפים עבור ניתוח רגרסיה צריך להיות לא פחות מ 50. . שלושים ושבע סטודנטים לתארים מתקדמים בייג'ין לשפה, תרבות באוניברסיטה השתתפו הניסוי, אשר הוא קטן יותר מאשר הכמות המומלצת.
5. לערוך את הניסוי
הערה: כאשר המשתתפים מבוגרים מפותחת נורמלי, הנסיין אחת מספיקה כדי לנהל את התנהלות הניסוי. אך אם המשתתפים אוכלוסיות מיוחדות, כגון ילדים, ניסויים שניים או יותר יש צורך.
- בחר גשש העין כדי להקליט תנועות עיניים של המשתתפים.
הערה: עין המעקב נעשה שימוש בניסוי הזה היא Eyelink 1000plus פועל תחת מצב הראש חינם-כדי-סע. . זה מבוסס וידאו, דסקטופ הנטען (עין) מערכת מעקב, באמצעות העיקרון של התלמיד עם השתקפות הקרנית (CR) כדי לעקוב אחר הסיבוב של העין. כאשר פועל תחת מצב הראש חינם-כדי-סע, הגשש העין יש קצב הדגימה monocular של 500 הרץ, עם רזולוציה מרחבית של 0.01 מעלות, שגיאה ממוצעת של פחות מ- 0.5°. לקבלת מידע מפורט יותר של המערכת, להתייעץ שלה28,מפרט טכני29. הגששים חלופי יכול לשמש, אך אלו עם מצב מעקב מרחוק טובים יותר, במיוחד כאשר משתתפים הילדים preliterate. - אתחול המערכת במחשב המארח כדי להפעיל את היישום המארח של המצלמה.
- כדי להגדיר את המערכת מצב שולחן עבודה מרוחק, לחץ על לחצן אפשרות להגדיר , הגדר את האפשרות התצורה שולחן העבודה - היעד מדבקה - Monocular--16/25 מ"מ אורך..--RTARBLER.
- לחץ על גירסת קובץ ההפעלה של פרויקט ניסיוני על צג המחשב קלט שם המשתתף, בחר קבוצה מתוך החלון בשורת ל בחר הערך ב condition מוגדר לפעול.
הערה: בכל מפגש מבחן תיצור תיקיה עם השם וקבלתו תחת התוצאות ספריית משנה של פרויקט ניסוי. הקובץ חה כ תחת התיקיה הכיל נתונים תנועות העין הרלוונטיים. - שאלו את המשתתפים לשבת כ 60 ס מ 21 אינץ ', 4:3 צבע צג ברזולוציה של x 769px 1024px, שבו פיקסלים 27 שווה 1 מידה של זווית.
- להתאים את הגובה של צג צג המחשב, כדי להבטיח כי כאשר המשתתף מוכנס להסתכל ישר קדימה, הם מסתכלים באופן אנכי האמצע ומעל 75% של הצג.
הערה: את הכיסא, דלפק, ו/או את צג המחשב הם העדיפו אם הם מתכוונן לגובה. הכיסא ואת השולחן עם גלגלים יש להימנע, שכן הן נוטות לגרום תנועה לא מכוונת אנד רול. - מקם מדבקה היעד קטנים על המצח של המשתתפים, כדי לעקוב אחר מיקום הראש גם כאשר התמונה האישון הוא הפסיד, כגון במהלך קריצות או תנועות פתאומיות.
הערה: עיניים שונות עוקבים עשוי להשתמש שיטות שונות כדי לעקוב אחר הראש של המשתתפים. כדי להגדיל את טווח התנועה לרוחב של הנושא, העין מסומנים צריך להיות באותו צד כמו המאיר. - לסובב את הזרוע התמקדות בהר השולחן להביא את תמונת עין אל המוקד.
- לחץ על לחצן כיול מארח ה-PC כדי לנהל את תהליך הכיול לשאול המשתתפים לקבע רשת של חמש מטרות קיבוע ברצף האקראי עם אין תגובות התנהגותיות גלויה, כדי למפות תנועות עיניים של המשתתפים מבטו של כבוד בעולם החזותי.
- לחץ על הלחצן ' אימות ' מארח ה-PC כדי לאמת את התוצאות מכויל על ידי המשתתפים לשאול לקבע את הרשת באותו קיבעון מטרות. חזור על שגרות כיול ואימות, כאשר השגיאה הוא גדול יותר מאשר 1°.
- לנהל את רוטינות שני בתחילת הניסוי, ובכל פעם הדיוק מדידה הוא עני (למשל., אחרי תנועות ראש חזק או שינוי בתנוחה המשתתפים).
- לחץ על לחצן הקלט מארח ה-PC כדי להתחיל את הניסוי.
- לבצע בדיקת להיסחף בכל ניסוי על ידי מבקש ממשתתפים הקש על מקש הרווח במקלדת תוך קיבעון בנקודה השחורה שהוצגו במרכז המסך.
הערה: כאשר המשתתפים הם ילדים preliterate או חולים קליניים, במפורש שמורה להם להשמיד את הקש במקלדת בזמן קיבעון הנקודה השחורה אינה מעשית כלל. אך את הקיבועים תשומת לב ועין נוטים להימשך באופן אוטומטי על-ידי הנקודה השחורה המוצג. במקרה זה, הנסיין צריך להיות האדם להקיש על המקלדת בזמן המשתתף היא מתמקדת בנקודה השחורה. - להציג את גירויים חזותיים באמצעות הצג תצוגה PC ולשחק את גירויים שמיעתיים באמצעות זוג רמקולים חיצוניים ממוקם משמאל ומימין הצג (אוזניות מקובלים גם).
הערה: ההקלטות מנוגנות מהדיסק הקשיח כמו קטעי קול מונו 24 קילו-הרץ. אם אין סיבה מיוחדת, קטעי קול מונו הם העדיפו לקליפים צליל סטריאו. ב קובץ צליל סטריאו, ההבדל בין פסי קול שני, כמו גם את ההבדל בין שני הרמקולים עשוי להשפיע על תנועות עיניים של המשתתפים. לקבלת מידע נוסף כיצד להשתמש ברכיב המעקב העין, להתייעץ ידנית את המשתמש30.
6. נתונים קידוד וניתוחים
- פתח מציג נתונים, לחץ על קובץ | ייבוא קובץ | ייבוא קבצים מרובים של נתוני Eyelink לייבא כל עין מוקלטות המעקב הקבצים (עם הסיומת של חה כ), ולשמור אותם יחיד . EVS קובץ.
- פתח את הקובץ השמור של EVS ולחץ ניתוח | דוחות | לטעום דוח כדי לייצא את הנתונים לדוגמה גולמי עם אין צבירה.
הערה: אם המעקב העין יש קצב הדגימה של 500 הרץ, הנתונים המיוצאים יהיו 500 נקודות נתונים, מעתה ואילך 500 שורות, לכל שנייה לכל משפט. אם מעקב אחר המשתתפים עין שמאל, להבטיח את העמודות הבאות, כמו גם את המשתנים נוצר במקור הנתונים מיוצאים: RECORDING_SESSION_LABEL, LEFT_GAZE_X, LEFT_GAZE_Y, LEFT_INTEREST_AREA_LABEL, LEFT_IN_BLINK, LEFT_IN_SACCADE, LEFT_PUPIL_ גודל, SAMPLE_INDEX, SAMPLE_MESSAGE. לקבלת מידע נוסף על אופן השימוש המציג נתונים, להתייעץ ידנית את התוכנה31. - להגביל את הבדיקות הסטטיסטיות לחלון טמפורלית מראשית לתמונה מבחן ההיסט של קטעי השמע הבדיקה, כלומר., החלון זמני עם המשך של 11 s.
- מחק את הדגימות שבו תנועות עיניים של המשתתפים לא נרשמים, כגון משתתפים למצמץ עיניהם, המשפיע בערך 10% של נתוני ההקלטות.
הערה: זהו שלב אופציונלי, כפי התוצאות הן בדרך כלל זהה, לא משנה אם הדגימות נמחקה. - קוד הנתונים. כדי לבנות את הנתונים עבור אזור מסוים של עניין מסוים נקודת דגימה, קוד הנתונים כ- 1 אם קיבעון העין של המשתתפים הינו ממוקם באזור של עניין וינתח את נקודת דגימה. קוד את הנתונים כמו 0 אם הקיבעון עין לא ממוקם באזורים של הריבית בשלב הזה הדגימה.
- צייר פרופורציה-של-אובססיה להמחיש נתונים המתקבלים. כדי לחשב את שיעור-של-הקיבועים באזור מסוים של עניין, ממוצע הנתונים מקודד עבור כל. הניסויים ועבור כל המשתתפים בכל מדגם הצבע תחת כל תנאי. להתוות את מחושב שיעור-של-הקיבועים בציר ה-y נגד נקודת דגימה על הציר, לוחות שונים ציון תחומי עניין, עם הצבעים ההתוויה שמשמעו תנאים ניסויים שונים.
הערה: בניסוי, ארבעת הפנלים מתואר דפוסי המשתתפים קיבעון על ארבעה אזורים מעניינים. הקווים אדום, ירוק וכחול מאויר קיבוע דפוסים של המשתתפים בעת בדיקת הדוחות היו במילות חיבור (S1, S2), אבל-הצהרות (S1 אבל לא S2) ו disjunctions (S1 או S2), בהתאמה. התוכנה ששימשה כדי לצייר את העלילה תיאורי הוא חבילת ggplot2 מסביבת R. יש גם תוכנות אחרות. איור 5 הוא דוגמה של מגרש כזה. - מתאים בינומי כללית מעורבת מודל לינארי (GLMM) על כל תחומי עניין בכל נקודה דגימה, כפי שהנתונים ןפצוה 1 או 0, תלוי אם הקיבעון של המשתתף הינו ממוקם או אל מחוץ לאזור עניין בנקודה זו הדגימה.
הערה: כפי הנתונים הוא לא מנופה, הנתונים מוצפן יכול להיות רק 1 או 0, אז ההתפלגות של הנתונים מקודד הוא בינארי ולא נורמלי. מעתה ואילך, משמש דגם GLMM עם משפחתו של התפלגות בינומית. דגם GLMM כולל מונח קבוע, המשתתפים תנאים, ותנאי שני אקראי, ניסוי פריטים. הנוסחה להעריך את שני התנאים אקראי כוללת את שיחות והן את השיפוע של התנאים ניסיוני. התוכנה ששימשה לעשות את ההתאמה מודל הוא חבילת lme4 מסביבת R. יש גם תוכנות אחרות. דבר אחד יש לציין זה הבסיס של הפריטים קבוע שונה כאשר הריבית שנותחה שטח, כלומר., בתיבות שנותחה, הם שונים. אם לדייק, המפגש (S1, S2) נבחר כקו הבסיס בעת ניתוח תיבת גדול פתוח (תיבת א), disjunction (A ו- B) נבחר כקו הבסיס בעת ניתוח התיבה סגור קטן (התיבה B), ו המשפט אלא נבחר הבסיס בעת ניתוח תיבת הנזכרת ראשונה (תיבת D). - Bonferroni התאם את הערכים p שהושג עם מבחן z וולד, כדי להפחית את השגיאה familywise המושרה על ידי השוואות מרובות.
הערה: ההתאמה Bonferroni היא הדרך המסורתית כדי להתמודד עם השגיאה familywise המושרה על ידי השוואות מרובות. שיטות אחרות זמינים גם, כפי שהסברנו בסעיף מבוא.
Subscription Required. Please recommend JoVE to your librarian.
Representative Results
תגובות התנהגותיות של המשתתפים מסוכמות באיור4. כפי שהסברנו קודם לכן, התגובה הנכונה כדי הצהרה conjunctive (S1, S2) הוא בתיבת פתוח גדול, כגון תיבת A באיור1. התגובה הנכונה אבל-משפט (S1 אבל לא S2) היא התיבה פתוח המכיל החיה שהוזכרו קודם, כגון תיבת D באיור1. אנושות, באיזה קופסה נבחר למשפט מאמר (S1 או S2) תלוי כיצד הצהרה מאמר מעובד: התיבה סגור הקטנה, כגון תיבת B באיור 1, נבחר רק כאשר את implicature שיטתית, את מסקנות בורות הנוגעים המשפט מאמר שניהם מחושבים. איור 4 מדגימה כאשר בדיוק הצהרה מאמר (S1 או S2), המשתתפים לחשב שתי מסקנות את שני.
יתר על כן, הקיבועים המשתתפים עין על התיבה סגור, במיוחד כאשר אלה הקיבועים ואחריו את תגובות התנהגותיות על הקופסה הזאת, גם להציע את implicature שיטתית, את מסקנות בורות מחושבים. שתי מסקנות צריך עובדו לא יאוחר מהנקודה הזמנית המוקדם כאשר המשתתפים להסיט את תשומת לב ואת הקיבועים על התיבה סגור. תנועות העיניים של המשתתפים מסוכמות באיור5. כפי שניתן לראות בלוח ב', העין-הקיבועים המשתתפים על התיבה סגור קטן (תיבת B) לא להגדיל רק החיבור sentential מאמר חיבור, או. יתר על כן, עלייה זו מתחילה לא יאוחר ההיסט של החיבור מאמר. הדבר מצביע על כי את implicature שיטתיות והן את מסקנות בורות מחושבים לפני ההיסט של החיבור sentential, קרי, מיד על מפגש עם החיבור של מאמר.
איור 1 . דוגמה של מבחן התמונות המשמשות לניסוי. האזור האפור היא התמונה הבדיקה למעשה שהוצגו בפני המשתתפים. בתיבות בלוז הקווים המנוקדים, הפיקסלים המציין את הרוחב של היסודות הם רק לצורך המחשה, והם בלתי נראה למשתתפים. (הותאם מהניסוי של ל' Zhan 17 עם הרשאה). אנא לחץ כאן כדי להציג גירסה גדולה יותר של הדמות הזאת.
איור 2 . דוגמה של המשפטים מבחן המשמשים את הניסוי (הודפס מחדש של ל' Zhan17 עם הרשאה). אנא לחץ כאן כדי להציג גירסה גדולה יותר של הדמות הזאת.
איור 3 . המבנה ההירארכי של ניסוי עקיבה טיפוסי באמצעות הפרדיגמה העולם הויזואלי. האודיו מאויר בתמונה הם התרגומים לאנגלית מנדרין סיני המשמשים את הניסוי. אנא לחץ כאן כדי להציג גירסה גדולה יותר של הדמות הזאת.
איור 4 . תגובות התנהגותיות של המשתתפים טלקוה הניסוי (הותאם מהניסוי אחד של ל' Zhan17 עם הרשאה). אנא לחץ כאן כדי להציג גירסה גדולה יותר של הדמות הזאת.
איור 5 . המשתתפים עין תנועות שנמדדו בניסוי. תחילת וההיסט של connectives sentential המסומן על-ידי שני קווים אנכיים מקווקו. הבדל משמעותי הקיים בין מאמר את התנאי בסיסית בשלב מסוים דגימה מסומן על ידי האזור האפור (p <.05, Bonferroni עונתיות) (חיבור מקורי ל' Zhan17 עם הרשאה). אנא לחץ כאן כדי להציג גירסה גדולה יותר של הדמות הזאת.
Subscription Required. Please recommend JoVE to your librarian.
Discussion
לערוך מחקר העולם הויזואלי, ישנם מספר שלבים קריטיים לעקוב. ראשית, חוקרים מתכוונים להסיק את הפרשנות של השפה auditorily שהוצגו באמצעות תנועות עיניים של המשתתפים בכל העולם החזותי. מעתה ואילך, לעצב את הפריסה של גירויים חזותיים, המאפיינים של תנועות עיניים במשימה טבעיים שעלולים להשפיע על תנועות עיניים של המשתתפים צריכה להיות נשלטת. לאחר מכן ניתן לזהות את ההשפעה של השפה המדוברת על תנועות עיניים של המשתתפים. שנית, אקוסטית רמזים בשפה המדוברת ארעי ויש אין חתימות אקוסטיים המתאים אך ורק קטגוריה לשונית מסוימת. כדי תנועות כראוי נעילת-המשתתפים העיניים עם תחילתה של איזשהו סימן לשוני, חוקרים צריכים למצוא אובייקטיבית, דרך עקבית כדי להגדיר את הגבול של מבנה לשוני. שלישית, למפות כהלכה העין סיבוב של המשתתפים סביב הראש עם מבטם של כבוד בעולם החזותי, חוקרים צריך לבצע אחד או מספר הרצפים של כיול, האימות סחיפה תיקון תהליכים. רביעית, נתונים שהושגו ממחקר העולם הויזואלי יש כמה מאפיינים משונה, כגון התחתון ולא העליון מוגבל, ויש שגיאות autocorrelated ועוד. מאפיינים אלה משונה יש לקחת בחשבון כשבוחרים שיטה סטטיסטית לניתוח הנתונים.
מחקר העולם הויזואלי כוללת שלושה מרכיבים חיוניים: התצוגה החזותית, השפה המדוברת, פעילות ניסיוני. שינויים יכולים להתבצע על רכיב כלשהו כדי להגשים מטרות ספציפיות של החוקרים. ראשית, תצוגה חזותית הוא בדרך כלל תצוגה ההקרנה המתארים מגוון של תמונות. אבל זה גם יכול להיות תצוגה ההקרנה המתארים מערך של מילים32,30,הסצינה סכמטית31או סצינה בעולם האמיתי המכיל אובייקטים אמיתיים1,32. שנית, מבעים המדוברת יכול להיות מילה36,30,משפט פשוט31,34,17,משפט מורכב סמנטי35או של דיאלוג39. שלישית, מבחינת הפעילות ניסיוני, משתתפים גם פשוט מתבקש תראו את העולם החזותי ותקשיב מבעים השמיעה30,31; או להיות נדרשים לבצע כמה תגובות התנהגותיות, כגון משחק את התנועות שתיאר את האמירה השמיעה1, הקובע אם האמירה השמיעה חל התצוגה החזותית38או לבחור הנכון תמונת תצוגה חזותית האמירה המדוברת מדבר על17.
הפרדיגמה העולם הויזואלי, לעומת טכניקות אחרות psycholinguistic, יש מספר יתרונות ייחודיים. ראשית, ניתן להשתמש הפרדיגמה העולם הויזואלי רחב של אוכלוסיות, כולל אלה שלא יודעים לקרוא ו/או מי יכול לתת בגלוי שלהם תגובות התנהגותיות, כגון ילדים preliterate37,38,39, 40 , 41 , 42, מבוגרים קשישים46חולים (למשל., aphasics)47. זה בגלל השפה הגירויים מוצגים באופן שמיעתי ולא בצורה של טקסטים כתובים; הבנת שפה היא להסיק מתנועות העין אוטומטית מרומזת של המשתתפים ולא את תגובותיהם עבירה התנהגותית. שנית, הפרדיגמה העולם הויזואלי הוא רגיש מאוד מניפולציות בסדר אחרים של אותות דיבור. פרדיגמה זו ניתן ללמוד את באינטרנט עיבוד של רוב נושאים בהבנת השפה ברמות מרובות, כגון בסדר אחרים תכונות פונטי אקוסטית33,45,46, את המאפיינים של מילים30,31,1,מבנים לשוניים47ו המבנים הלוגיים של הצהרות סמנטי מורכבים כמו concessives37, biconditionals37, ההתניות38, disjunctions17.
הפרדיגמה העולם הויזואלי, לעומת טכניקה psycholinguistic אחרת, יש גם כמה מגבלות אפשריות. ראשית, הסיק המשתתפים פרשנות של השפה המדוברת של תנועות עיניים שלהם על העולם החזותי, לא מן הפרשנות בפועל של הגירויים שפה לכל se. מעתה ואילך, מאפייני השפה שניתן ללמוד עם העולם החזותי הפרדיגמה מוגבלות לאלה ניתן לאבחן, כלומר., הן אמורות להיות קשורות איכשהו ישויות או אירועים בעולם החזותי. שנית, הפרדיגמה העולם הויזואלי בשימוש היא בדרך כלל מוגבלת יותר מאשר העולם החזותי בפועל, עם קבוצה מוגבלת של referents בתמונה, קבוצה מוגבלת של פעולות אפשריות. זו בעיה סגור-set כביכול48 ליצור אסטרטגיות מוגדרות למשימה שמכלילות עיבוד שפה שנצפו לא מעבר מצבים מסוימים נוצר בתוך הניסוי. מעתה ואילך, הפרדיגמה לא בהכרח רגיש מאפייני ידע לשוני וניסיון שוכב מחוץ סגור-ערכת שהוקמו בניסוי נתון.
הפרדיגמה העולם הויזואלי בוחן בעצם השילוב של המידע מן התחום החזותי לבין המידע מהתחום השמיעה. תיאורטית, כל מידע יכולים להיות מעובדים על ידי שתי קבוצות המחשבים סנסציוני יכול באופן פוטנציאלי להילמד באמצעות הפרדיגמה הזו. לדוגמה, העולם החזותי יכול להיות מציאות מדומה או קטעי וידאו דינמי. קלט שמיעתי אינה בהכרח שפה, וניתן כל פורמט אחר, כמו מוסיקה, קול עולם הטבע, וכו '. יתר על כן, הפרדיגמה הזו ניתן להרחיב הלאה לחקור את השילוב של מידע תחומים אחרים, יותר מאשר התחום החזותי והתחום השמיעה. לדוגמה, חוקרים יכול להשתמש בטכניקה זו כדי לראות כיצד הקיבועים המשתתפים בעולם החזותי מושפעים ריחות שונים, נגיעות שונות, וכו '.
Subscription Required. Please recommend JoVE to your librarian.
Disclosures
המחבר מצהיר שאין לו שום אינטרסים כלכליים מתחרים.
Acknowledgments
מחקר זה נתמך על ידי קרן המדע של בייג'ין לשפה ואוניברסיטת התרבותית תחת המימון למחקר יסוד האוניברסיטאות סנטרל (אישור מספר 15YJ050003).
Materials
| Name | Company | Catalog Number | Comments |
| Pixelmator | Pixelmator Team | http://www.pixelmator.com/pro/ | image editing app |
| Praat | Open Sourse | http://www.fon.hum.uva.nl/praat/ | Sound analyses and editting software |
| Eyelink 1000plus | SR-Research, Inc | https://www.sr-research.com/products/eyelink-1000-plus/ | remote infrared eye tracker |
| Experimental Builder | SR-Research, Inc | https://www.sr-research.com/experiment-builder/ | eye tracker software |
| Data Viewer | SR-Research, Inc | https://www.sr-research.com/data-viewer/ | eye tracker software |
| R | Open Sourse | https://www.r-project.org | free software environment for statistical computing and graphics |
References
- Tanenhaus, M. K., Spivey-Knowlton, M. J., Eberhard, K. M., Sedivy, J. C. Integration of visual and linguistic information in spoken language comprehension. Science. 268 (5217), 1632-1634 (1995).
- Cooper, R. M. The control of eye fixation by the meaning of spoken language: A new methodology for the real-time investigation of speech perception, memory, and language processing. Cognitive Psychology. 6 (1), 84-107 (1974).
- Salverda, A. P., Tanenhaus, M. K. Research methods in psycholinguistics and the neurobiology of language: A practical guide. de Groot, A. M. B., Hagoort, P. , Wiley. (2017).
- Huettig, F., Rommers, J., Meyer, A. S. Using the visual world paradigm to study language processing: A review and critical evaluation. Acta Psychologica. 137 (2), 151-171 (2011).
- Meyer, A. S., Sleiderink, A. M., Levelt, W. J. M. Viewing and naming objects: Eye movements during noun phrase production. Cognition. 66 (2), B25-B33 (1998).
- Griffin, Z. M., Bock, K. What the eyes say about speaking. Psychological Science. 11 (4), 274-279 (2000).
- Young, L. R., Sheena, D. Survey of eye movement recording methods. Behavior Research Methods & Instrumentation. 7 (5), 397-429 (1975).
- Conklin, K., Pellicer-Sánchez, A., Carrol, G. Eye-tracking: A guide for applied linguistics research. , Cambridge University Press. (2018).
- Duchowski, A. Eye tracking methodology: Theory and practice. , 2, Springer. (2007).
- Baayen, R. H., Davidson, D. J., Bates, D. M. Mixed-effects modeling with crossed random effects for subjects and items. Journal of Memory and Language. 59 (4), 390-412 (2008).
- Barr, D. J. Analyzing 'visual world' eyetracking data using multilevel logistic regression. Journal of Memory and Language. 59 (4), 457-474 (2008).
- Nixon, J. S., van Rij, J., Mok, P., Baayen, R. H., Chen, Y. The temporal dynamics of perceptual uncertainty: eye movement evidence from Cantonese segment and tone perception. Journal of Memory and Language. 90, 103-125 (2016).
- Bolker, B. M., et al. Generalized linear mixed models: A practical guide for ecology and evolution. Trends in Ecology and Evolution. 24 (3), 127-135 (2009).
- Mirman, D., Dixon, J. A., Magnuson, J. S. Statistical and computational models of the visual world paradigm: Growth curves and individual differences. Journal of Memory and Language. 59 (4), 475-494 (2008).
- Baayen, H., Vasishth, S., Kliegl, R., Bates, D. The cave of shadows: Addressing the human factor with generalized additive mixed models. Journal of Memory and Language. 94, 206-234 (2017).
- Baayen, R. H., van Rij, J., de Cat, C., Wood, S. Mixed-Effects Regression Models in Linguistics. Speelman, D., Heylen, K., Geeraerts, D. 4, Ch 4 49-69 (2018).
- Zhan, L. Scalar and ignorance inferences are both computed immediately upon encountering the sentential connective: The online processing of sentences with disjunction using the visual world paradigm. Frontiers in Psychology. 9, (2018).
- Maris, E., Oostenveld, R. Nonparametric statistical testing of EEG- and MEG-data. Journal of Neuroscience Methods. 164 (1), 177-190 (2007).
- Barr, D. J., Jackson, L., Phillips, I. Using a voice to put a name to a face: The psycholinguistics of proper name comprehension. Journal of Experimental Psychology-General. 143 (1), 404-413 (2014).
- van Gompel, R. P. G., Fischer, M. H., Murray, W. S., Hill, R. L. Eye movements: A window on mind and brain. , Elsevier. Ch. 21 471-486 (2007).
- Parkhurst, D., Law, K., Niebur, E. Modeling the role of salience in the allocation of overt visual attention. Vision Research. 42 (1), 107-123 (2002).
- Grice, H. P. Vol. 3 Speech Acts. Syntax and semantics. Cole, P., Morgan, J. L. , Academic Press. 41-58 (1975).
- Sauerland, U. Scalar implicatures in complex sentences. Linguistics and Philosophy. 27 (3), 367-391 (2004).
- Chierchia, G. Scalar implicatures and their interface with grammar. Annual Review of Linguistics. 3 (1), 245-264 (2017).
- Fox, D. Presupposition and Implicature in Compositional Semantics. Sauerland, U., Stateva, P. , Palgrave Macmillan. Ch. 4 71-120 (2007).
- Meyer, M. C. Ignorance and grammar. , Massachusetts Institute Of Technology. Unpublished PhD Thesis (2013).
- SR Research Ltd. SR Research Experiment Builder User Manual (Version 2.1.140). , Ottawa, Canada. (2017).
- SR Research Ltd. EyeLink® 1000 Plus Technical Specifications. , Mississauga, Canada. (2017).
- SR Research Ltd. EyeLink-1000-Plus-Brochure. , Mississauga, Canada. (2017).
- SR Research Ltd. EyeLink® 1000 Plus User Manual (Version 1.0.12). , Ottawa, Canada. (2017).
- SR Research Ltd. EyeLink® Data Viewer User’s Manual (Version 3.1.97). , Ottawa, Canada. (2017).
- McQueen, J. M., Viebahn, M. C. Tracking recognition of spoken words by tracking looks to printed words. The Quarterly Journal of Experimental Psychology. 60 (5), 661-671 (2007).
- Altmann, G. T. M., Kamide, Y. Incremental interpretation at verbs: restricting the domain of subsequent reference. Cognition. 73 (3), 247-264 (1999).
- Altmann, G. T. M., Kamide, Y. The real-time mediation of visual attention by language and world knowledge: Linking anticipatory (and other) eye movements to linguistic processing. Journal of Memory and Language. 57 (4), 502-518 (2007).
- Snedeker, J., Trueswell, J. C. The developing constraints on parsing decisions: The role of lexical-biases and referential scenes in child and adult sentence processing. Cognitive Psychology. 49 (3), 238-299 (2004).
- Allopenna, P. D., Magnuson, J. S., Tanenhaus, M. K. Tracking the time course of spoken word recognition using eye movements: Evidence for continuous mapping models. Journal of Memory and Language. 38 (4), 419-439 (1998).
- Zhan, L., Crain, S., Zhou, P. The online processing of only if and even if conditional statements: Implications for mental models. Journal of Cognitive Psychology. 27 (3), 367-379 (2015).
- Zhan, L., Zhou, P., Crain, S. Using the visual-world paradigm to explore the meaning of conditionals in natural language. Language, Cognition and Neuroscience. 33 (8), 1049-1062 (2018).
- Brown-Schmidt, S., Tanenhaus, M. K. Real-time investigation of referential domains in unscripted conversation: A targeted language game approach. Cognitive Science. 32 (4), 643-684 (2008).
- Fernald, A., Pinto, J. P., Swingley, D., Weinberg, A., McRoberts, G. W. Rapid gains in speed of verbal processing by infants in the 2nd year. Psychological Science. 9 (3), 228-231 (1998).
- Trueswell, J. C., Sekerina, I., Hill, N. M., Logrip, M. L. The kindergarten-path effect: studying on-line sentence processing in young children. Cognition. 73 (2), 89-134 (1999).
- Zhou, P., Su, Y., Crain, S., Gao, L. Q., Zhan, L. Children's use of phonological information in ambiguity resolution: a view from Mandarin Chinese. Journal of Child Language. 39 (4), 687-730 (2012).
- Zhou, P., Crain, S., Zhan, L. Grammatical aspect and event recognition in children's online sentence comprehension. Cognition. 133 (1), 262-276 (2014).
- Zhou, P., Crain, S., Zhan, L. Sometimes children are as good as adults: The pragmatic use of prosody in children's on-line sentence processing. Journal of Memory and Language. 67 (1), 149-164 (2012).
- Moscati, V., Zhan, L., Zhou, P. Children's on-line processing of epistemic modals. Journal of Child Language. 44 (5), 1025-1040 (2017).
- Helfer, K. S., Staub, A. Competing speech perception in older and younger adults: Behavioral and eye-movement evidence. Ear and Hearing. 35 (2), 161-170 (2014).
- Dickey, M. W., Choy, J. W. J., Thompson, C. K. Real-time comprehension of wh-movement in aphasia: Evidence from eyetracking while listening. Brain and Language. 100 (1), 1-22 (2007).
- Magnuson, J. S., Nusbaum, H. C. Acoustic differences, listener expectations, and the perceptual accommodation of talker variability. Journal of Experimental Psychology-Human Perception and Performance. 33 (2), 391-409 (2007).
- Reinisch, E., Jesse, A., McQueen, J. M. Early use of phonetic information in spoken word recognition: Lexical stress drives eye movements immediately. Quarterly Journal of Experimental Psychology. 63 (4), 772-783 (2010).
- Chambers, C. G., Tanenhaus, M. K., Magnuson, J. S. Actions and affordances in syntactic ambiguity resolution. Journal of Experimental Psychology-Learning Memory and Cognition. 30 (3), 687-696 (2004).
- Tanenhaus, M. K., Trueswell, J. C. Approaches to Studying World-Situated Language Use: Bridging the Language-as-Product and Language-as-Action Traditions. Trueswell, J. C., Tanenhaus, M. K. , The MIT Press. (2005).
