Журнал
/
/
С помощью движений глаз, записанная в парадигме визуальный мир для изучения оперативной обработки разговорного языка
JoVE Journal
Поведение
Для просмотра этого контента требуется подписка на Jove  Войдите в систему или начните бесплатную пробную версию.
JoVE Journal Поведение
Using Eye Movements Recorded in the Visual World Paradigm to Explore the Online Processing of Spoken Language

С помощью движений глаз, записанная в парадигме визуальный мир для изучения оперативной обработки разговорного языка

English

Сгенерировано автоматически

9,712 Views

09:27 min

October 13, 2018

DOI:

09:27 min
October 13, 2018

12 Views

ТРАНСКРИПТ

Automatically generated

Этот метод может помочь ответить на ключевые вопросы в онлайн-обработке разговорного языка, включая семантически сложные предложения, такие как разъединения и условия. Основным преимуществом этой техники является то, что она может быть выполнена на широком круге групп населения для изучения большинства тем в области обработки языка. Демонстрацией процедуры будет Сюй Цзин, аспирант.

Цао Ифань, Ван Менг, Ян Сяотонг, Чжан Мин и Чжоу Сюэхан – студенты из моей исследовательской группы. Чтобы подготовить визуальные стимулы, скачать 60 авторских прав бесплатно клип художественные изображения животных из Интернета и открыть изображения в соответствующем редакторе изображений. Нажмите Инструменты и использовать быстрый выбор, чтобы выбрать и удалить фон из каждого изображения.

Нажмите изображение и размер изображения, чтобы размер изображения до 120 на 120 пикселей и сделать один большой открытый 320 х 240 пикселей окно, один небольшой закрытый 160 х 160 пикселей окно, и два небольших, открытых 160 х 240 пикселей коробки. Откройте новый файл для создания шаблона 1024 на 768 пикселей для первого тестового изображения и перетащите коробки в указанные места. Перетащите два клипа изображения искусства в большой открытой коробке и один из тех же двух изображений в двух небольших открытых ящиков.

Затем создайте еще 59 тестовых изображений, которые будут продемонстрировано с каждым изображением животного, используемым дважды на испытательном изображении, уравновешивая пространственное расположение четырех коробок между изображениями. Для подготовки стимулов разговорного языка, разработать четыре тестовых предложения, соответствующие каждому тесту изображения на родном языке участников в общей сложности 240 тестовых предложений, которые будут записаны, по крайней мере три из четырех предложений и один из каждой из форм, как показано на рисунке. Нанять женщину носителя языка для записи четырех примеров заявления, а также аудио для всех животных, используемых в эксперименте.

Разделите 240 тестовых предложений на четыре группы, каждая из которых содержит 15 конъюнктурных заявлений, 15 судебных заявлений, 15 заявлений и 15 предложений по заполнению. Затем сохраните всю важную информацию о тестовых стимулах в файл с делимитированием вкладок, при этом каждая строка соответствует каждому из 240 испытаний. Чтобы построить последовательность эксперимента, откройте строитель эксперимента и создайте новый проект.

Перетащите объект экрана дисплея в рабочее пространство и переименуем инструкцию рабочего пространства. Нажмите Вставьте многослойный текстовый ресурс и дважды щелкните, чтобы открыть последовательность блоков для построения последовательности блоков. Перетащите узел установки камеры EI в последовательность блоков, чтобы настроить экран установки камеры на пк-хозяине EyeLink для облегчения калибровки и проверки установки камеры.

Нажмите на поле типа калибровки в панели свойств и выберите HV5 из списка падения вниз. Чтобы построить пробную последовательность перетащите узел Display Screen в пробную последовательность и переименуйте его Animal_1_Image. Перетащите узел Play Sound в пробную последовательность и переименуйте его Animal_1_Audio.

Перетащите узел Таймера в пробную последовательность и переименуйте его Animal_1_Audio_Length. Продолжайте перетаскивать и переименовывать дополнительные узлы Display Screen, Play Sound и Timer в пробную последовательность до тех пор, пока не будут созданы три узла для каждого изображения клипа. Затем перетащите узел Drift Correct в пробную последовательность, чтобы ввести коррекцию дрейфа.

Чтобы построить последовательность записи, перетащите новый узел display Screen в последовательность записи. Переименуй узел Test_Image. Дважды нажмите узел Display Screen, чтобы открыть строитель экрана, нажмите на область интересов Insert Rectangle и нарисуйте четыре прямоугольные области, представляющие интерес.

Перетащите узел таймера в рабочее пространство, переименуй узел Пауза и измените свойство продолжительности до 500 миллисекунд. Перетащите узел Play Sound в рабочее пространство и переименуйте узел Test_Audio, перетащите узел Таймера в рабочее пространство и переименуйте его Test_Audio_Length. Затем добавьте узел клавиатуры в рабочее пространство, переименуйте поведенческие ответы узла и измените свойство Приемлемые ключи вверх, вниз, направо, налево.

Для проведения эксперимента загрузите систему на ПК-хозяине, чтобы начать хост-приложение камеры, и нажмите на исполнительную версию экспериментального проекта на дисплее ПК. Ввените имя участника и нажмите Select Condition Value, чтобы выбежать для выбора группы из оперативного окна. Поместите небольшую целевую наклейку на лоб участника, чтобы отслеживать положение головы, даже если изображение ученика потеряно, например, во время мигалок или резких движений. Сиденье участника примерно в 60 сантиметрах от 21-дюймового 4:3 цветового монитора с разрешением 1 024 на 769 пикселей, для которого 27 пикселей равен одному градусу угла.

Отрегулируйте высоту монитора ПК дисплея, чтобы убедиться, что, когда участник смотрит прямо вперед, они смотрят вертикально в середине к началу 75% монитора, а затем повернуть фокусировку руку на столе горе довести изображение глаза в фокусе. Далее нажмите Calibrate на ПК-хозяине и попросите участника зафиксировать на сетке пять целей фиксации, в случайной последовательности без никаких явных поведенческих реакций, чтобы сопоставить движения глаз участника с взглядом отношения в визуальном мире. Нажмите Проверить и попросите участника зафиксировать на той же сетке целей фиксации для проверки результатов калибровки.

Выполните проверку дрейфа, попросив участника нажать на планку пространства на клавиатуре, зафиксируя черную точку в центре экрана. Затем представить визуальные стимулы через монитор ПК дисплея во время воспроизведения слуховых стимулов через пару внешних динамиков, расположенных слева и справа от монитора. Для кодирования и анализа данных откройте просмотр данных и нажмите Файл, Импортный файл и импорт нескольких файлов данных EyeLink для импорта всех записанных файлов трекера глаз.

Сохранить файлы в одном файле evs, а затем открыть файл evs и нажмите Анализ, Отчеты и Пример отчета для экспорта необработанных данных образца без агрегирования. Правильный ответ на конъюнктурное заявление является большой открытой коробке, в то время как правильный ответ на заявление, но небольшой открытый ящик, содержащий первое упомянутое животное в заявлении. Критически, какая коробка выбрана для конъюнктурных заявлений зависит от того, как условное заявление обрабатывается.

Например, небольшая закрытая коробка выбирается только тогда, когда масштабарное вовлечение и выводы о невежестве вычисляются, что является результатом понимания дисъюнктивного заявления. Как показано на панели, фиксация глаз на небольшой закрытой коробке не увеличивается, если только часовой соединительной является дисъюнктивной соединительной или с увеличением начала не позднее, чем смещение дисъюнктивной соединительной. Visual World Paradigm является универсальным методом отслеживания глаз для вывода участника онлайн понимание разговорного языка от их движения глаз в реальном мире.

При наборе участники помнят, что они должны иметь нормальные или правильные нормальные зрительные способности и нормальную слуховую способность. Для разработки подходящего исследования реального мира следует контролировать или исключать другие факторы, которые могут повлиять на движения глаз участников. При статистическом анализе результатов, проблема, которая может возникнуть из-за ограниченного ответа, все авто корреляции или автоматические сравнения должны быть рассмотрены.

Резюме

Automatically generated

Парадигма визуальный мир следит за участников движения глаз в рабочей области visual как они слушать или разговорным языком. Эта парадигма может использоваться для изучения оперативной обработки широкого круга Психолингвистические вопросов, в том числе семантически сложные операторы, например дизъюнктивной заявления.

Read Article