Summary
В данной статье описывается, как реализовать батарею поведенческих задач для изучения распознавания эмоций изолированных лица и вокального выражения эмоций, а роман задача с использованием коммерческих телевизионных и кинематографических роликов для оценки мультимодального распознавания эмоций, которая включает в себя контекстные подсказки.
Abstract
В настоящем исследовании представлены 60 человек с черепно - мозговой травмой (ЧМТ) и 60 управления с изолированными выражения лица эмоции, изолированных вокальных выражения эмоций и мультимодальных (то есть., Видеороликами) раздражители , которые включали контекстные сигналы. были представлены все раздражители с помощью компьютера. Участники должны были указать, каким образом человек в каждом раздражителя чувствовал себя с использованием принудительного выбора формата. Кроме того, для клипов, участники должны были указать, как они чувствовали себя в ответ на стимул, и уровень интенсивности, с которой они испытали, что эмоции.
Introduction
Черепно - мозговая травма (ЧМТ) страдают около 10 миллионов человек каждый год по всему миру 1. После ЧМТ, способность распознавать эмоции в других , используя невербальные сигналы , такие как лицевые и вокальные выражения (то есть., Тон голоса), и контекстные подсказки, часто значительно скомпрометирована 2-7. Так как успешные межличностные взаимодействия и качества отношений, по крайней мере частично зависит от точной интерпретации эмоций других людей 7-10, это не удивительно , что трудности с распознавания эмоций, как сообщается, внести свой вклад в бедных социальных результатов обычно сообщается после TBI 3,8, 11,12.
Исследования , расследующие распознавания эмоций люди с ЧМТ имели тенденцию сосредотачиваться на изолированных киев, в частности , распознавания лица выражения эмоций с использованием статических фотографий 2. Хотя эта работа была важна в деле информирования развития лечения программ, он не адекватно представлять свою способность распознавать и интерпретировать невербальные сигналы эмоций в повседневных взаимодействиях. Мало того, что статические изображения обеспечивают увеличенное время , чтобы интерпретировать эмоции изображаемого, они также , как правило , только изображают вершину (т.е.., Максимальное представление) выражений 13-16. Кроме того, статические изображения отсутствуют временные сигналы , которые возникают при движении 12,13,15, и не являются репрезентативными быстро меняющимся мимики эмоций , возникающих в повседневных ситуациях. Кроме того, есть данные, указывающие , что статические и динамические визуальные выражения обрабатываются в различных областях мозга, с более точной реакции на раздражители динамическим 17-24.
Вокальный распознавания эмоций люди с ЧМТ также была изучена, так и без значимого словесного содержания. Было высказано предположение, что наличие вербального содержания повышает требования восприятия, так как точную интеrpretation требует одновременную обработку невербальной тоном с смыслового содержания , включенного в вербальном сообщении 25. В то время как многие исследования показали , улучшенное распознавание вокала влияет в отсутствие значимого словесного содержания, Dimoska и др. 25 не обнаружили никакой разницы в производительности. Они утверждают, что люди с ЧМТ имеют уклон к смысловому содержанию в аффективных предложениях; так что даже когда содержание семантически нейтральным или устранены, они по-прежнему сосредоточены на вербальной информации в предложении. Таким образом, их результаты не ясно показывают, помогает ли смысл словесное содержание или препятствует вокального выражения эмоций.
В дополнение к содержательной словесного содержания, которое может сопровождать невербальные голосовые сигналы, контекст также обеспечивается через саму социальную ситуацию. Ситуационный контекст содержит справочную информацию об обстоятельствах, при которых выражение эмоций, был получен и может, таким образом, в значительной степени вфлюенса интерпретацию выражения. При оценке, как кто-то чувствует, мы используем контекст, чтобы определить, если ситуация согласуется с желаниями и ожиданиями этого человека. Это в конечном счете влияет как кто - то чувствует, так что знание ситуационного контекста должно привести к более точному логического вывода эмоций чужих 26. Возможность сделать это называется теорией разума, конструкцию найденного быть значительно нарушена следующие ЧМТ 6,27-31. Milders и др. 8,31 отчет о том , что люди с ЧМТ имеют значительные трудности , делая точные суждения о том, и понимание намерения и чувства персонажей в кратких рассказах.
В то время как эти исследования выявили дефицит в невербальной и ситуативной обработки эмоций, трудно обобщить результаты повседневных социальных взаимодействий, где эти сигналы встречаются рядом друг с другом и в социальном контексте. Чтобы лучше понять, как людис ЧМТ интерпретировать эмоции в повседневных социальных взаимодействиях, мы должны использовать стимулы, которые мультимодальным по своей природе. Только две предыдущие исследования включали мультимодальные стимулы как часть их расследование, как люди с ЧМТ киев процесс эмоций. Макдональд и Сондерс 15 и Уильямс и Вуд 16 извлеченный раздражители из Emotion апробацию (EET), которая является частью осознании социального Inference Test 26. EET состоит из записанных на видео виньетками, которые показывают мужские и женские актеры, изображающие невербальные сигналы эмоций, участвуя в разговоре. Вербальное содержание в разговорах семантически нейтральным; киев относительно того, как актеры чувствуют и контекстная информация не предоставляется. Таким образом, необходимость обрабатывать и интегрировать значимые словесные содержание, одновременно делая это с помощью невербальных лицевых и голосовых подсказок было устранено. Результаты этих исследований показали, что люди с ЧМТ были significanTLY менее точны, чем контроль в их способности идентифицировать эмоции от мультимодальных стимулов. Поскольку ни исследования рассматривали влияние семантической или контекстную информацию по интерпретации эмоций выражений, остается неясным, является ли добавление такого рода информации будет способствовать обработке из-за увеличения межчувственных избыточности или отрицательно влияют на восприятие из-за увеличения познавательных потребностей.
В данной статье рассматривается ряд задач, используемых для сравнения восприятия лица и вокальных эмоциональных сигналов в изоляции, и восприятие этих реплик, происходящих одновременно в пределах значимого ситуационного контекста. Выделений задачи являются частью большого теста невербального распознавания эмоций - Диагностический анализ невербального точности 2 (DANVA2) 32. В этом протоколе, мы использовали для взрослых Faces (DANVA-начертаний) и взрослых паралингвистика (DANVA-голоса) субтестов. Каждый из этих субтестов включает в себя 24 стимулов,изображающие шесть представлений каждого из счастливых, печальных, сердитых, и страшные эмоции. DANVA2 требует от участников, чтобы идентифицировать эмоции изображаются с использованием принудительного выбора формата (4 варианта). Здесь, пятый вариант (я не знаю) предусмотрен для обоих субтестов. Количество времени, было показано, каждое выражение лица было увеличено с двух секунд до пяти секунд, чтобы гарантировать, что мы оценивали влияют на распознавание, а не скорость обработки. Мы не изменили взрослых паралингвистика подтест за добавления дополнительного выбора в формате принудительного выбора ответа. Участники слышали каждое предложение только один раз. Обратная связь не была предоставлена в любой задаче.
Фильм клипы были использованы для оценки восприятия лица и голосовых эмоций репликами, происходящих одновременно в ситуационном контексте. В то время как вербальное содержание в этих клипов не явно указать, какие были ощущения персонажи в клипах, имело бы смысл ситуационного контекста. Пятнадцать клипов, извлеченные из сотрудничестваmmercial фильмов и телесериалов были включены в исследование, каждый в пределах от 45 до 103 (среднее значение = 71.87) секунд. Обратная связь не была предоставлена участникам во время выполнения этой задачи. Были три клипа, представляющие каждый из следующих категорий: эмоции счастье, печаль, гнев, страх, нейтральная. Эти клипы были выбраны на основе результатов исследования , проведенного с молодыми взрослыми (п = 70) Жупан, Б. и Бэббидж, DR Emotion заключениях раздражители из фильма клипов и повествовательной текста. Рукопись представляется J Soc Ре дак ци. В этом исследовании участники были представлены шесть фильмов клипов для каждой из категорий целевой эмоции, и шесть нейтральных клипов фильма, начиная от 24 до 127 секунд (среднее значение = 77,3 секунды). В то время как цель состояла в том, чтобы включать в себя относительно короткие клипы фильма, каждый клип , выбранный для включения необходимо иметь достаточно контекстную информацию , что это может быть понято зрителями без дополнительных знаний пленки , из которой оно было принято 33.
Emotion выясняющих раздражители Zupan и Бэббидж из клипов и повествовательного текста, приведенное выше в качестве целевой эмоции между 83 и 89% для счастливых, 86 - 93 % для грустной, 63 - 93% для сердится, 77 - 96% за страх, а 81 - 87% для нейтральных. В то время как имеющие одинаковое количество экземпляров каждой категории эмоций, как это было в задачах DANVA2 (п = 6) был бы идеальным, мы выбрали только три из-за увеличения длины клипа раздражителей пленки по сравнению с раздражителями в DANVA-Faces и DANVA-Voices задачи.
Данные из этих задач были собраны из 60 участников с ЧМТ и 60 по возрасту и полу контрольной группы. Участники были замечены либо индивидуально, либо в небольших группах (максимум = 3) и порядка трех задач была рандомизированы по тестированию сеансов.
Subscription Required. Please recommend JoVE to your librarian.
Protocol
Этот протокол был одобрен этическими комитетами в Брок Университете и в Carolinas реабилитации.
1. Перед тестированием
- Создание 3 отдельные списки для 15 клипов, каждый из которых содержит клипы в другом ограниченном порядке.
- Убедитесь в том, что каждый список начинается и заканчивается с нейтральным раздражителем, и что никакие два клипа, которые нацелены на те же эмоции не происходит последовательно.
- Создайте отдельную папку на рабочем столе для каждого списка представления заказа пленки и пометить папку с именем Order (например., Заказ 1).
- Сохраните 15 клипов в каждой из трех папок.
- Повторно маркировать каждую клипом , так что отражает количество презентаций и не дает никаких намеков относительно целевой эмоции (то есть, 01;. 02; 03;. И т.д.).
- Создайте шесть рандомизированные порядков задачи (DANVA-Faces, DANVA-голоса, кино клипы) презентации (рисунок 1).
- Назначают входящий participмуравей к одному из трех ограниченных порядках видеороликом презентации.
- Назначают входящего участника к одному из шести рандомизированных порядков представления задач.
2. День тестирования
- Доведите участника (ов) в лабораторию и место их удобно за столом.
- Прочтите форму согласия с участником, читая каждый раздел с ним / ней.
- Ответьте на любые вопросы, участник может иметь о форме согласия и иметь его / ее подписать.
- Были ли участники завершить краткий демографический вопросник (дата рождения, пол). У участников с ЧМТ дополнительно заполнить раздел вопросника по соответствующей медицинской истории вопросник (дата получения травмы, причиной травмы, тяжесть травмы).
Примечание: Когда участники завершают вопросник, узнать о каких-либо известных визуальных трудностей обработки, так что вы можете усадить участников с ЧМТ соответственно - Поместите участника перед гое компьютер в кресле. Убедитесь в том, что все участники (если их больше одного) иметь четкое представление экрана.
Задача 3. DANVA-Грани
- Дайте каждому участнику клип доски с Faces-DANVA лист ответа прилагается и ручка, чтобы круг ответов.
- Обеспечить участника следующие инструкции: "После того, как вы видите, каждый элемент, круг вашего ответа (счастье, печаль, гнев, страх, или нейтральный) на линии, которая соответствует номеру элемента, показанного на каждом слайде."
ПРИМЕЧАНИЕ: Если участники с ЧМТ показали визуальные трудности обработки или мелкие трудности двигателя очевидны, обеспечивают участника со страницей альтернативного ответа. На этой странице перечислены пять ответов в большем тексте в альбомном формате. - Откройте задачу DANVA-фейсы в презентации и воспроизвести его с помощью слайд-шоу View.
- Дайте участникам следующие инструкции: "Для этой деятельности, я собираюсь показать вам некоторые лица народов, и я хочу, чтобы выскажите мне, как они чувствуют. Я хочу, чтобы вы сказать мне, если они счастливы, грустно, гнев или страх. Опасаясь это то же самое, боится или страшно. Если вы не уверены в правильности эмоций, выбрать ответ: «Я не знаю». Есть 24 лица в целом. Каждое лицо будет на экране в течение пяти секунд. Вы должны ответить, прежде чем лицо исчезает ваш ответ рассчитывать. Укажите свой ответ, обведя его на листе перед вами ".
Примечание: Если участник не в состоянии окружить его / ее собственные ответы и участвует в в исследовании в составе небольшой группы, предоставьте следующую инструкцию: "Укажите свой ответ, указав на него на листе перед вами". Экзаменатор будет записывать реакцию участника на DANVA-Faces листа ответа. - Убедитесь в том, что участники не имеют каких-либо вопросов, прежде чем начать.
- Запустить задачу с двумя практических испытаний. Дайте участникам следующие инструкции: "Мы собираемся завершить два PRActice испытания, так что вы получите ощущение того, как долго каждая грань будет появляться на экране, и как долго вы должны предоставить свой ответ ".
- Хит ввести на клавиатуре, когда лицо исчезает, чтобы перейти к следующему стимулу. Убедитесь, что все участники смотрят на экран, прежде чем сделать это.
- Убедитесь в том, что участники не имеют вопросы. Если нет, начать тестовые испытания. Убедитесь, что все участники смотрят на экран. Нажмите Enter, чтобы начать тестовые стимулы.
- Продолжайте процедуру, описанную для задач практики, пока 24 раздражители не будут завершены.
- Соберите листы ответов участника.
4. DANVA-Голоса задач
- Дайте каждому участнику клип борту с ответом листа DANVA-голоса и прикрепленной ручкой к кругу ответов.
ПРИМЕЧАНИЕ: Если участники с ЧМТ показали визуальные трудности обработки или мелкие трудности двигателя очевидны, обеспечивают участника со страницей альтернативного ответа. Это годовыхGE перечислены пять ответов в большем тексте в альбомном формате. - Откройте задачу DANVA-Voices, перейдя на следующий веб-сайт:
http://www.psychology.emory.edu/clinical/interpersonal/danva.htm - Нажмите на ссылку для взрослых лица, голоса и позы.
- Заполните логин и пароль, введя любую букву для входа в систему и набрав EMORYDANVA2 для ввода пароля.
- Нажмите кнопку Продолжить.
- Нажмите на голоса (зеленый круг в центре экрана).
- Проверьте уровень громкости. Предоставить следующие инструкции: "Я хочу, чтобы быть уверенным, что вы можете услышать звук на компьютере и что она находится в удобном объеме для Вас я собираюсь нажать тестовый звук Пожалуйста, скажите мне, если вы можете услышать звук, и.. Кроме того, если вам нужен звук громче или тише, чтобы быть удобным для вас ".
- Нажмите тестовый звук.
- Отрегулируйте громкость в соответствии с запросом участника (увеличение / уменьшение).
- Нажмите кнопку "Проверить звук" еще раз, Отрегулируйте громкость в соответствии с запросом участника. Делайте это до тех пор, пока участник сообщает, что находится в удобном объеме.
- Просмотрите инструкции задач с участником. Дайте участникам следующие инструкции: Для этой деятельности, вы собираетесь услышать кто-то сказал фразу "Я выхожу из комнаты, но я вернусь позже. Я хочу, чтобы вы сказать мне, если они счастливы, грустно, гнев или страх. Опасаясь это то же самое, боится или страшно. Если вы не уверены в правильности эмоций, выбрать ответ: «Я не знаю». Есть 24 предложения. Перед тем как каждое предложение говорится, номер будет объявлено дополнительно. Вы должны слушать предложения, которое следует. Предложения, не будут повторяться, так что вам нужно внимательно слушать. Скажите, как человек чувствует, обведя свой ответ на листе перед вами ". После того, как вы сделали свой выбор, мне нужно выбрать ответ на экране компьютера, чтобы перейти к следующему пункту. Я всегда буду выбирать тон же эмоции (страшно). Мой выбор не указывает на правильный ответ в любом случае. "
Примечание: Если участник не в состоянии окружить его / ее собственные ответы и участвует в в исследовании в составе небольшой группы, предоставьте следующую инструкцию: "Укажите свой ответ, указав на него на листе перед вами". Экзаменатор будет записывать реакцию участника на листе ответа DANVA-голоса. - Нажмите кнопку "Продолжить".
- Прямые участники круга (или точки) на их ответ на их ответ листа, когда предложение играл.
- Нажмите 'страшно'. Нажмите "Далее'.
- Продолжайте эту процедуру до тех пор, 24 предложения не являются полными.
- Выйдите из веб-сайта, когда вы дойдете до конца задачи.
- Сбор листов ответов участников.
5. Фильм Целевой клип
- Участники сидений комфортно в передней части компьютера. Убедитесь в том, что экран может быть FULLY видно все.
- Дайте каждому человеку буфер обмена с копией эмоциональный фильм клип листа Response.
ПРИМЕЧАНИЕ: Если участники с ЧМТ показали визуальные трудности обработки или мелкие трудности двигателя очевидны, обеспечивают участника двух альтернативных страниц ответа. На первой странице перечислены пять принудительного выбора ответов, а второй обеспечивает шкалу 0-9. Обе страницы ответа в большем тексте и в альбомном формате. - Откройте папку на компьютере для назначенного порядка пленки клипа презентации.
- Предоставьте участникам по следующим направлениям: "Вы собираетесь просмотреть в общей сложности 15 фильмов клипов В каждом клипе фильма, вы собираетесь увидеть персонаж, который выглядит, как они чувствуют определенные эмоции они могут выглядеть" счастливый ",".. печально "," сердится "," страшно ", или" нейтральной ". Во-первых, я хочу, чтобы вы сказать мне, какие эмоции характер показывает. Тогда скажите, какие эмоции вы испытывали во время просмотра фильмаклип. И, наконец, скажите мне номер, который наилучшим образом описывает интенсивность эмоций вы чувствовали во время просмотра клипа. Например, если лицо человека заставило вас чувствовать себя 'мягко' счастливым или грустным, круг число в диапазоне от 1 до 3. Если вы почувствовали "умеренно" счастливым или грустным, круг число в диапазоне от 4 до 6. Если вы чувствовали себя "очень 'счастливым или грустным, круг число в диапазоне от 7 до 9. только круг 0, если вы не чувствуете никаких эмоций вообще. У вас есть вопросы?"
Примечание: Только первый вопрос (Скажи мне, что эмоции характер показывает) была проанализирована для текущего исследования. - Двойной щелчок 01, чтобы открыть первый клипом.
- Скажите участника, какой символ, чтобы сосредоточиться на время просмотра клипа.
- Выберите "Просмотреть в полноэкранном режиме 'в меню опций для воспроизведения клипа.
- Направьте участников ответить на линии а (Какие эмоции главный герой испытывает?) На их ответного листа, когда клип закончил играть.
- Прямой участник ответить на линии с (Как бы вы оценили интенсивность эмоции вы испытывали во время просмотра клипа?) Один раз линия б был дан ответ.
- Прямой участник перенаправлять его / ее внимание на экране компьютера, как только ответы являются полными.
- Вернитесь в папку на компьютере, который содержит зажимы пленки в указанном порядке для участника.
- Двойной ССК на 02, чтобы открыть второй клипом. Повторите шаги от 5,5 до 5,12, пока участник не просмотрел все 15 видеороликами.
- Возьмите лист ответа от участника (ов).
6. Переход от одной задачи к другой (необязательный шаг)
- Предоставить участникам возможность сделать перерыв между задачами 2 и 3.
- Обратитесь к ключу ответов на странице 25 руководства 32 DANVA2 забить задачу DANVA-Faces.
- Оценка предметов, которые соответствуют ключ ответа как 1 и неправильные детали как 0. 'я не знаю' ответы оцениваются как 0.
- Вычислить сырой балл, добавив общее число правильных ответов. Разделить сырой балл по 24 (всего позиций), чтобы получить оценку процент точности.
- Обратитесь к ключу ответов на странице 27 руководства 32 DANVA2 и повторите шаги 7.2 и 7.3 , чтобы забить задачу DANVA-голоса.
- Обратитесь к ключу для ответа назначенного порядка фильма клипа презентации для участника. 1 балл, если участник определил целевой эмоции при ответе на вопрос о том, какие эмоции характер показывал, и 0, если участник не выбрать целевой эмоции (в том числе, если участник сказал: «Я не знаю»).
- Вычислить сырой балл, добавив количество correcт ответы. Разделить сырой балл по 15 (всего позиций), чтобы получить оценку процент точности.
- Создать счет подмножество для клипа задачи Film, которая содержит только ответы на счастье, печаль, гнев, и страшные сцены из фильмов, добавляя правильные ответы только эти 12 клипов. Разделите количество правильных ответов на 12, чтобы получить оценку процент точности.
- Создание оценки ответов на нейтральных клипов фильма, добавив количество правильных ответов на нейтральных клипов. Разделите количество правильных ответов на 3, чтобы получить оценку процент точности.
ПРИМЕЧАНИЕ: оценка подмножество должен быть создан, потому что задачи DANVA не включают в себя представления образа Нейтральная в то время как клипы задача фильм сделал. - Вычислить оценки ответов положительно valenced пунктов (то есть., Счастливые) и отрицательно valenced элементы (объединить ответы на сердитых, печальных и страшных раздражителей) для всех трех задач.
- Разделите оценку положительно valenced пунктов для каждой задачи на 3, чтобы получить PERCentage Точность оценка.
- Разделите оценку отрицательно valenced пунктов для каждой задачи на 9, чтобы получить процентные показатели точности.
Анализ 8. Данные
- Провести смешанная модель анализа дисперсии (ANOVA) для изучения ответов на изолированных лицевых эмоциональных раздражителей, изолированных вокальной эмоции раздражители и мультимодальных фильм клип раздражители участников с ЧМТ и управления участниками.
- Изучите основные эффекты, обнаруженные в ANOVA с помощью последующих унивариантный сравнений.
Subscription Required. Please recommend JoVE to your librarian.
Representative Results
Эта задача батарея была использована для сравнения распознавания эмоций для отдельных выражений эмоций (т.е. лицом только;. Голос только) и комбинированные выражения эмоций (т. Е, лицо и голос) , которые происходят в ситуационном контексте. В общей сложности 60 (37 мужчин и 23 женщин) участников с умеренной до тяжелой ЧМТ в возрасте от 21 до 63 лет (среднее = 40,98) и 60 (38 мужчин и 22 женщины) возраст -matched управления (диапазон = 18 до 63; среднее значение = 40,64) завершили три задачи. Для участия в исследовании, участники с ЧМТ необходимо иметь либо комы Глазго показатель по шкале, посттравматический амнезия или потеря сознательного, что свидетельствует о умеренной до тяжелой ЧМТ. Среднее время с момента травмы был 13.68 лет и наиболее частой причиной травм, было дорожно-транспортного происшествия (72%). Участники с ЧМТ завершили в среднем 14,43 лет обучения и контроля участников 15.72 лет обучения. Участники с ТBI были исключены из исследования, если они имели с развитием аффективного расстройства, приобретенного неврологические расстройства, серьезных психических расстройств или ослабленное зрение или слух, что будет препятствовать полному участию в исследовании задач. Участники управления были исключены, если они сообщили о какой-либо истории ЧМТ любой степени тяжести, в том числе сотрясение мозга, что приводит к postconcussive синдрома. Все участники говорили на английском языке в качестве основного языка.
Для того, чтобы гарантировать , что не было никаких эффектов порядка задач, мы назначили участников к одному из трех ограниченных рандомизированных порядков клипов и один из шести заданиям (см рисунок 1). Фильм и задачи заказ были предварительно определены с помощью компьютера рандомизированы числа генератора он-лайн. Ни фильм, ни порядка задач было показано, что влияние на производительность и, таким образом, не были использованы в качестве регрессоров в анализах.
На рисунке 2 включает в себя иллюстрированную Пример ОФ.А. стимул от задачи DANVA-граней и клипов задачи Film. Преимущества и проблемы с помощью зажима раздражители DANVA2 и кинопрессы рассматриваются в обсуждении.
An различия изучения группы ANOVA через три влияют на задачи распознавания были обнаружены значительные основные эффекты для группы [F (1, 100) = 9,32; р = 0,003] и задачи [F (2, 200) = 11,05, р <0,001]. Как и предполагалось, люди с ЧМТ были значительно менее точными , чем в контрольной группе для исполнения на задаче DANVA-фейсы, F (1, 101) = 6,77, р = 0,005, и задача DANVA-голоса, F (1, 100) = 9,64, р = 0,002 (смотри рисунок 3). Это было удивительно, что признание эмоций в задаче видеороликами существенно не отличалась между этими двумя группами, F (1, 118) = 2.12, p = 0,15. Мы ожидали, что мультимодальный характер фильма клипы приведет к увеличению спроса познавательный задачи, что делает его болеетрудно для людей с ЧМТ распознавать эмоции в фильме клипов по сравнению с контрольной группой. Это был не тот случай. Оказывается, что мультимодальные киев увеличилась избыточность, что позволяет людям с ЧМТ распознавать эмоции более легко, чем они могли бы разрозненные выражения.
По аналогии с предыдущей работы в этой области, люди с ЧМТ нашел , что это значительно более сложной задачей распознавать негативные выражения эмоций , чем положительных для обоих DANVA-Faces [F (1, 101) = 6,8, p = 0,01] и DANVA-голосов [ DANVA-голоса; F (1,100) = 10,85, р = 0,001] задачи (смотри рисунок 4).
В то время как исследования в этой области сообщили о валентности эффектов, мало исследований ответов на целевые эмоции. Мы проанализировали ответы на счастье, печаль, страх, и гневных стимулов для всех трех задач (рисунок 5) и дополнительно анализировалиответы на нейтральных клипов фильма (смотрите рисунок 6). Хотя результаты валентных показали , что люди с ЧМТ обычно встречаются отрицательно valenced стимулы более сложной задачей , чтобы определить , чем люди без ЧМТ, возникло желание исследовать ли та или иная эмоция (например., Сердится) проезжал этот результат. Так как счастлив был наш только положительно valenced эмоции, наши результаты здесь отражали те, для валентности. При рассмотрении ответов на отрицательно valenced эмоции (грустно, сердитые, страшными), результаты показали, что люди с ЧМТ нашли страшно быть самым трудным для идентификации эмоции. На самом деле, это различие только между группой ответ нашел в клипе задачи Film. Определение нейтрально было значительно более трудным для людей с ЧМТ , чем у контрольных, F (1, 118) = 6,68, р = 0,001. Когда нейтральный неправильно был идентифицирован, люди с ЧМТ, значительно более вероятно, чтобы обеспечить отрицательно valenced отклик, чем у контрольных, F (2,236) = 4,75,р = 0,009.
Рисунок 1. Схематическое изображение протокола. Перед тестированием участники были отнесены к одной из трех презентаций заказов для клипов. Там также были отнесены к одному из шести рандомизированных порядков завершения задачи. В день тестирования, участники представили предварительную информацию до завершения экспериментальных задач [видеороликом, DANVA-Faces (Грани) и DANVA-голоса (голоса)]. Пожалуйста , нажмите здесь , чтобы посмотреть увеличенную версию этой фигуры.
Рисунок 2. Примеры раздражители Б. A) Пример изолированных стимулов для лица в DANVA-Грани задачи. Все стимулы в этой задаче являются статические снимки с одинаковым фоном. Б) скриншот одного клипа фильма в клипах задаче Film. Все клипы фильма были взяты из коммерческих фильмов и телевизионных и колебалась от 45 -. 103 миллисекунд в длину Пожалуйста , нажмите здесь , чтобы посмотреть увеличенную версию этой фигуры.
Рисунок 3. Ответы через средства массовой информации, по группам. Ответы для каждого типа задач людьми с и без ЧМТ. Участники с ЧМТ были значительно менее точными, чем Controls для распознавания статических мимики эмоций [DANVA-Faces; F (1, 101) = 6,77; р = 0,005], и вокальная эмоция выражения [DANVA-Voices; F (1, 100) = 9,64, р = 0,002]. Различие распознавания эмоций для контекстно-обогащенные пленкиклипы не было статистически значимым [F (1, 118) = 2,12, р = 0,15]. Столбики ошибок показывают стандартную ошибку среднего (SEM). Пожалуйста , нажмите здесь , чтобы посмотреть увеличенную версию этой фигуры.
Рисунок 4. Валентные Ответы через средства массовой информации, по группам. Ответы на положительных и отрицательных стимулов через задачи. Люди с ЧМТ были способны распознавать положительные эмоции выражения аналогично контроля, но имели значительно больше трудности с распознаванием негативные выражения лица эмоции [DANVA-Faces; F (1, 101) = 6,8, р = 0,01], так и отрицательные эмоции вокальные выражения [DANVA-голоса; F (1,100) = 10,85, р = 0,001]. Столбики ошибок показывают стандартную ошибку среднего (SEM). Пожалуйста , нажмите здесь , чтобы просмотреть круп эр версия этой фигуры.
Рисунок 5. Ответы на каждой эмоции Категория через СМИ, по группам. На этом рисунке показаны ответы на каждый из целевых эмоций для людей с ЧМТ и управления для DANVA-Faces, DANVA-голоса, и видеороликами задач. Люди с ЧМТ осуществляется аналогично управления для Happy, независимо от типа стимула. Для грустно, сердитые, и страшно, люди с ЧМТ были значительно менее точными, чем для управления DANVA-Faces и DANVA-Voices задач. Люди с ЧМТ также имели значительно больше трудностей , идентифицирующую страшнее контроля в клипах Film. Пожалуйста , нажмите здесь , чтобы посмотреть увеличенную версию этой фигуры.
.jpg "/>
Рисунок 6. Ответы на индифферентные раздражители в клипах Film Task, по группе. Люди с TBI имели значительно больше трудностей , маркируя нейтральные зажимы пленки нейтральна по сравнению с контрольными, F (1, 118) = 6,68, р = 0,001. Когда нейтральный был неправильно идентифицирован, люди с ЧМТ также были значительно более вероятно , чтобы обеспечить отрицательно valenced ответ вместо того, чтобы чем в контрольной группе , F (2,236) = 4,75, p = 0,009. Пожалуйста , нажмите здесь , чтобы посмотреть увеличенную версию этой фигуры.
| эмоция | Телешоу / коммерческий фильм | Место действия | Длина (сек) |
| Счастливый | Sweet Home Alabama, D & D Фильмы, 2002 | Человек удивляет свою подругу с предложением брака в ювелирном магазине. | |
| Режиссер: А. Теннант | |||
| Счастливый | Незваные, New Line Cinema, 2005 | Молодая пара сидит на пляже, играя кокетливые игры. | 62 |
| Режиссер: Д. Добкин | |||
| Счастливый | Помните титанов, Джерри Брукхаймер Фильмы, 2000 | Черная семья принята в белом обществе после того, как футбольная команда средней школы выигрывает игру чемпионата. | 65 |
| Режиссер: B. Якин | |||
| Грустный | Анатомия Грей, ABC, 2006 | Отец собирается на операцию и только в состоянии общаться со своей семьей мерцанием глаза. | 98 |
| Режиссер: П. Хортон | |||
| Грустный | Armageddon, Touchstone Pictures, 1998 | Дочь должна попрощаться с отцом, пока он находится на опасной миссии. | 75 |
| Режиссер: М. Бей | |||
| Грустный | Анатомия Грей, ABC, 2006 | Женщина сердце разбито после того, как ее жених скончался. | 87 |
| Режиссер: М. Тинкер | |||
| Сердитый | Энн из Зеленых крыш, канадской Broadcast Corporation, 1985 | Пожилая женщина открыто говорит о физических недостатках ребенка перед ней. | 62 |
| Режиссер: К. Салливана | |||
| Канада: Энн из Зеленых крыш Productions | |||
| Сердитый | Достаточно, Columbia Pictures, 2002 | Жена противостоит своему мужу о неверности, и он гesponds, оказывая физическое и эмоциональное доминирование. | 103 |
| Режиссер: М. Эптед | |||
| Соединенные Штаты: Columbia Pictures | |||
| Сердитый | Pretty Woman, Touchstone Pictures, 1990 | Девушка вызов пытается купить одежду из дорогого магазина и магазина клерков повернуть ее в сторону. | 65 |
| Режиссер: Г. Маршалл | |||
| напуганный | Кровавый алмаз, Warner Bros Pictures, 2006 | Отец и сын идут вместе, когда многочисленные транспортные средства, перевозящие милицейского подхода. | 50 |
| Режиссер: Е. Цвик | |||
| напуганный | Жизнь перед ее глазами, 2929 Productions, 2007 | Две девочки-подростки говорят в лицейного ванной, когда они слышат звуки выстрелов, которые продолжают получать ближе. | 79 |
| Режиссер: В. Перельман | |||
| напуганный | Шестое чувство, Барри Мендель Productions, 1999 | Мальчик просыпается от своего сна и входит в кухню, чтобы найти свою мать готовит обед. | 70 |
| нейтральный | Другая сестра, Mandeville Films, 1999 | Мать и дочь сидят и обсуждают художественную книгу. | 45 |
| нейтральный | Игра, Polygram Снятый Entertainment, 1999 | Один господин объясняет правила игры к другому джентльмену. | 85 |
| нейтральный | Ноутбук, New Line Cinema, 2004 | Старшего господа и его врач беседуют во время обычной проверки. | 56 |
| Режиссер: Н. Кассаветис |
Subscription Required. Please recommend JoVE to your librarian.
Discussion
Рукопись описывает три задачи, используемые для оценки способности распознавания эмоций людей с ЧМТ. Целью описанного метода было сравнение точности отклика для лица и голосовых эмоциональных сигналов в изоляции, к восприятию этих реплик, происходящих одновременно в пределах значимого ситуационного контекста. Фильм клипы были включены в настоящем исследовании, поскольку их приближение повседневных ситуаций сделало их более экологически обоснован, чем отдельных представлений эмоций выражений. При выполнении этого протокола с людьми, с черепно-мозговой травмой, важно рассмотреть визуальные навыки сканирования индивидуума и убедитесь, что стимулы и листы ответов полностью видимы. Для того, чтобы помочь с этим, листы ответов были созданы , которые состояли из одной строки для каждого стимула, и использовали чередовались цветовую кодировку для каждой строки (например, строка 1 = серый;. Строка 2 = белый, линия 3 = серый, и т.д..).
DANVA2 полностью доступенонлайн. Тем не менее, версия он-лайн из DANVA-фейсы не используется, потому что предварительно настроен, чтобы каждое лицо, показанное только в течение двух секунд. Учитывая скорость вопросов обработки часто испытывают люди с ЧМТ, мы были обеспокоены тем, что ошибки, сделанные на этой версии могут быть более показательными скорости обработки проблем, чем отражает распознавания эмоций на лице. Наша версия презентация DANVA-Faces увеличивает время каждого стимула показано 5 секунд.
Стимулы, используемые в настоящем исследовании при условии, важное понимание способностей распознавания эмоций людей с ЧМТ. Тем не менее, существует множество способов, в которых стимулы могут быть улучшены для использования в будущих исследованиях такого характера. Стимулы, используемые для оценки распознавания изолированных выражения лица эмоции были из DANVA-фейсы задачей DANVA2. Преимущество использования DANVA-Faces стимулов является то , что они стандартизированы и использовались ранее с людьми с ЧМТ 3,34. 24 пунктов включаяудэ высокой и низкой интенсивности образы эмоций от небольшой группы громкоговорителей, участники подвергаются тем же динамиком, производящей переменные выражения. Кроме того, задача DANVA-Faces включает в себя цветные фотографии в сравнении с черно-белых изображений, часто используемых. Мало того, цветные изображения более современный, Макдональд и Сондерс 15 утверждают , что они, вероятно , менее абстрактным людям с ЧМТ. Основная проблема с раздражителями, используемых в задаче DANVA-граней, в том, что выражения эмоций являются статическими. Как обсуждалось ранее, статические изображения дают людям больше времени , чтобы интерпретировать эмоции изображаемого, отсутствие временных сигналы , которые возникают , когда лицо движется 12,13,15, и не обрабатываются в той же области мозга, динамические 17- 23. Таким образом, используя только статические выражения лица эмоции при оценке распознавания эмоций не обеспечивают надлежащее обобщение на обработку реальной жизни. Кроме того, исследования показали, что мы можем идентифицировать EMotions на фотографиях более точно , чем движущиеся изображения, поэтому тесты с использованием статических изображений может переоценивать способности 13,35,36. Таким образом, будущие исследования должны включать в себя отдельные динамические лицевые эмоции стимулы, чтобы более точно оценить, как люди с ЧМТ интерпретировать эмоции изображали только в лицо. Эти стимулы потенциально могут быть созданы с помощью клипов фильма, выбирая кадры, в которых изображалась целевой эмоции, удаление звука, и обрезка пленки, чтобы сосредоточиться только на голову и шею персонажа. Это позволило бы устранить дополнительные контекстные сигналы, в том числе жестикуляционных киев и язык тела.
Вокальные эмоция выражения, используемые в настоящем исследовании были также взяты из DANVA2. Аналогично задаче DANVA-фейсы, задача DANVA-голоса включает в себя 24 пунктов обоих высокой и низкой интенсивности. Каждый элемент на DANVA-Voices использует ту же семантически нейтральное предложение (я выхожу из комнаты, и я вернусь позже). повторениеиз одного предложения позволяет слушателям сосредоточиться на невербальные сигналы эмоций (то есть., тон голоса) и игнорировать словесное содержание. Это в отличие от стимулов , используемых в предыдущих исследованиях , которые включали различные (семантически нейтральный) вербальное содержание для каждого элемента 15. В отличие от результатов данного исследования, Макдональд и Сондерс 15 сообщили , что люди с ЧМТ имели значительные трудности при определении эмоций в отдельных выражениях вокальной эмоции по сравнению с изолированными мимики эмоции. Словесная содержание голосовых стимулов, используемых в этом исследовании варьировалось для каждого элемента, поэтому возможно, что участники были сосредоточены на интерпретации словесного содержание, которое было семантически нейтральным, и, таким образом, бессмысленно. Это утверждение подтверждается исследованиями, которые показали , что люди с (и без него ) ЧМТ, более вероятно, использовать словесное содержание по сравнению с невербальным акустических сигналов для интерпретации вокальной выражение эмоций 37-39. Будущие исследования должны Furtей исследовать степень, в которой люди с ЧМТ используют невербальное по сравнению с вербальной содержания в отдельных вокальных выражений, чтобы определить, является ли семантическая информация, передаваемая в словесной сообщении преобладает в большей степени, чем эмоции, перемещаемых через тон голоса. Это может быть достигнуто путем создания стимулов с ограниченным числом предложений, как значимых и нейтральных в словесной содержания. Эти предложения могли бы быть объединены с или сравнимых или неконгруэнтных невербальных вокальных сигналов. Приговоры, сравнимых в вербальной и невербальной содержание эмоций, скорее всего, приведет к более быстрой и точной идентификации эмоций выражается 40. Тем не менее, остается неясным, участники которого биток основное внимание будет уделено, когда вербальное и невербальное содержание несравнимы, и будет ли один канал доминировать на всей задачи, или если доминирующий кий будет зависеть от эмоций изображаемого через каждый канал.
Стимулы в DANVA2 были созданы врenting акустические системы с короткой виньетка с целью выявить целевую эмоции, а затем инструктаж тех ораторов, чтобы выразить, что эмоции с помощью лица или голоса. Было высказано предположение , что такие методы приводят к преувеличенным и стереотипных выражений , которые могут привести к завышенным способностей распознавания 41. Клипы фильм с другой стороны включены лица и вокальные выражения, которые произошли с ситуационного контекста, что делает их более экологически обоснован, чем использование отдельных выражений. Важно отметить, что в то время не семантически нейтральным, вербальное содержание не уточнил, эмоциональное состояние персонажей каким-либо образом. Использование клипов этой природы с людьми с ЧМТ является новым. В то время как результаты данного исследования свидетельствуют о том , что дополнительная контекстная информация , включенная в клипах пленки значительно облегчило распознавание эмоций, вполне возможно , что участники находились под влиянием дополнительных репликами присутствующих (например., Поза тела) и / или кинематографический дизайн Oе клипов (например., ЭКС, освещение и кадрирование) 42,43. Участники могут также оказали влияние присутствия фоновой музыки, так что результаты должны быть интерпретированы и тщательно обобщается. Влияние аффективных фоновой музыки следует дополнительно изучить в будущих исследованиях, сравнивая фрагменты фильмов без и без этого кия, чтобы установить, является ли наличие сравнимых фоновой музыки облегчает распознавание эмоций. Хотя эта информация не обязательно будет обобщать повседневных социальных взаимодействий, это может иметь важные последствия для лечения дефицита распознавания эмоций. Также возможно, что участники данного исследования были полагаться на положение тела и жесты персонажей фильма клипов для облегчения восприятия эмоций. Опять же, найти фрагменты фильмов, которые манипулируют наличие и отсутствие таких реплик будет иметь важное значение для изучения которых Кии люди с ЧМТ сделать максимально использовать при интерпретации эмоций в когда-либоyday ситуации. Тем не менее, определение коммерческих клипов фильмов, которые управляют каждой из этих внешних факторов, в той или иной степени представляет собой значительную проблему. Вместо этого, будущие исследования могли бы сосредоточиться на создании высококачественных клипов фильмов в различные ситуационные параметры показывают символы, участвующих в значимых взаимодействий. Эти клипы можно контролировать наличие и отсутствие контекстных подсказок, позы, жесты, и фоновая музыка. Кроме того, зажимы могут быть использованы для оценки распознавания динамических выражений изолированных лица, как описано ранее, распознавание изолированных вокального выражения эмоций, эти две реплики в сочетании, а затем добавление контекстной информации. Это позволило бы обеспечить столь необходимый понимание того, как люди с ЧМТ воспринимать эмоции и может позволить для лучшего обобщения на реальных условиях.
Другие методологические соображения для будущих исследований, как один, представленные здесь количество целевых эмоций и форма ответана избранных. Настоящее исследование включает в себя четыре основных эмоций: счастье, печаль, гнев, и страх. Нейтральная также оценивали в задаче видеороликом. Этот выбор целевых эмоций включает в себя только один положительные эмоции (то есть., Счастливый) , что делает его трудно сравнивать точность отклика для положительных и отрицательных эмоций. Кроме того, такой ограниченный набор эмоций делает его более легким для участников полагаться на процесс исключения при принятии их выбор, стратегию, которая не может быть надежно использован в повседневных взаимодействиях. Будущие исследования должны расширяться от количества эмоций, включенных и должны также включать в себя отдельные лица и вокальные выражения, изображающие нейтральный. Кроме того, сердитые клипы фильма не были хорошо определены одной из групп, предполагая, что фильм сами клипы могут быть плохо выбраны. Средняя скорость идентификации раздраженной клипов фильма в предыдущем исследовании по валидации Zupan и Бэббиджа Zupan, B. & Бэббиджа, DR Emotion выясняющих раздражители из фильма Cгубы и описательная текста. Рукопись представляется J Soc Ре дак ци была только 73% по сравнению с 85 - 90% для остальных четырех категорий. Предыдущие исследования с использованием видеороликами также сообщают о трудности выбора гневные клипов 33,44,45. Остается неясным, почему это является более сложной задачей, чтобы выбрать клипы, которые приводят к высокой идентификации зол. Это может быть потому , что гнев является более сложным , эмоция , которая служит целый ряд социальных функций (например., Выражая неприязнь против утверждения полномочий), требуя от воспринимающего , чтобы оценить ситуацию с точки зрения его значимости для их собственных систем верований 46.
Кроме того, будущие исследования следует рассмотреть вопрос о валентности и интенсивности пленки клипа показанных ответов влияет на участников, в частности, для нейтральных клипов. Хотя в настоящее время исследование не показало никакого эффекта порядка, в котором 15 видеороликом были показаны участникам, это все еще возможно, что некоторые клипы, возможно, привели к большим чувствамэмпатии, в результате чего эффект перенесенных когда играл следующий клип. В то время как мы имели участникам заполнить анкету , чтобы оценить их общую способность к сопереживанию (см Neumann, Жупан, Malec и Hammond 47) Мы специально не попросите участников указать , является ли или не подчеркнуть , что они с персонажами, и если да, то в какой степени , Эти вопросы могут обеспечить более полное представление, почему наши результаты показали, участникам ЧМТ были более склонны предоставлять отрицательные ответы на нейтральные раздражители.
В настоящем исследовании использовали формат ответа принудительного выбора, обычно используемой парадигмы в исследованиях распознавания эмоций. Вполне возможно , что ограниченные варианты сдерживаются участников , чтобы выбрать одну эмоцию , когда они воспринимают наличие множественных эмоций 48. Кроме того, они могут быть выбраны эмоции они не воспринимают , а не выбирать альтернативный ответ (то есть., Я не знаю). Использование штрафной Choiв.п. формат ответа с людьми с тяжелой черепно - мозговой травмой может привести к дополнительным и / или более проблемных вопросов (например, трудности поколения. слово, длинные потоки объяснений по сравнению с одним словом). Поэтому, возможно, было бы лучше сначала принять принудительного выбора формата, который позволяет дополнительно свободного выбора слова или комментарии, которые будут добавлены, прежде чем перейти к следующему пункту.
Использование клипов в настоящем исследовании был новый подход к оценке распознавания эмоций люди с ЧМТ. Было высказано предположение, что люди с ЧМТ бы найти мультимодальный характер клипов более сложных, и, следовательно, более сложные, чем изолированные лица и голосовых подсказок. Тем не менее, результаты свидетельствуют о том, что вместо того, повышенные требования к обработке, наличие многочисленных аффективных репликами, включая контекстную информацию, облегчило обработку. Тем не менее, в повседневных ситуациях, когда множество киев, предположительно, присутствует, распознавание эмоций является серьезной проблемой для рюди с ЧМТ. Таким образом, в то время как клипы пленки являются экологически более обоснован, чем отдельных выражений эмоций, они не в полной мере представитель киев доступных в повседневных социальных взаимодействиях. Это может быть, что, действуя в качестве наблюдателя в зависимости от участника позволяет обеспечить более эффективную интеграцию имеющихся киев эмоций.
Subscription Required. Please recommend JoVE to your librarian.
Materials
| Name | Company | Catalog Number | Comments |
| Diagnostic Analysis of Nonverbal Accuracy-2 | Department of Pychology, Emory University. Atlanta, GA | DANVA-Faces subtest, DANVA-Voices subtest | |
| Computer | Apple iMac Desktop, 27" display | ||
| Statistical Analysis Software | SPSS | University Licensed software for data analysis | |
| Happy Film Clip 1 | Sweet Home Alabama, D&D Films, 2002, Director: A Tennant | A man surprises his girlfriend by proposing in a jewelry store | |
| Happy Film Clip 2 | Wedding Crashers, New Line Cinema, 2005, Director: D. Dobkin | A couple is sitting on the beach and flirting while playing a hand game | |
| Happy Film Clip 3 | Reme-mber the Titans, Jerry Bruckheimer Films, 2000, Director: B. Yakin | An African American football coach and his family are accepted by their community when the school team wins the football championship | |
| Sad Film Clip 1 | Grey's Anatomy, ABC, 2006, Director: P. Horton | A father is only able to communicate with his family using his eyes. | |
| Sad Film Clip 2 | Armageddon, Touchstone Pictures, 1998, Director: M. Bay | A daughter is saying goodbye to her father who is in space on a dangerous mission | |
| Sad Film Clip 3 | Grey's Anatomy, ABC, 2006, Director: M. Tinker | A woman is heartbroken her fiance has died | |
| Angry Film Clip 1 | Anne of Green Gables, Canadian Broadcast Corporation, 1985, Director: K. Sullivan | An older woman speaks openly about a child's physical appearance in front of her | |
| Angry Film Clip 2 | Enough, Columbia Pictures, 2002, Director: M. Apted | A wife confronts her husband about an affair when she smells another woman's perfume on his clothing | |
| Angry Film Clip 3 | Pretty Woman, Touchstone Pictures, 1990, Director: G. Marshall | A call girl attempts to purchase clothing in an expensive boutique and is turned away | |
| Fearful Film Clip 1 | Blood Diamond, Warner Bros Pictures, 2006, Director: E. Zwick | Numerous vehicles carrying militia approach a man and his son while they are out walking | |
| Fearful Film Clip 2 | The Life Before Her Eyes, 2929 Productions, 2007, Directors: V. Perelman | Two teenaged gilrs are talking in the school bathroom when they hear gunshots that continue to get closer | |
| Fearful Film Clip 3 | The Sixth Sense, Barry Mendel Productions, 1999, Director: M. N. Shyamalan | A young boy enters the kitchen in the middle of the night and finds his mother behaving very atypically | |
| Neutral Film Clip 1 | The Other Sister, Mandeville Films, 1999, Director: G. Marshall | A mother and daughter are discussing an art book while sitting in their living room | |
| Neutral Film Clip 2 | The Game, Polygram Filmed Entertainment, 1999, Director: D. Fincher | One gentleman is explaining the rules of a game to another | |
| Neutral Film Clip 3 | The Notebook, New Line Cinema, 2004, Director: N. Cassavetes | An older gentleman and his doctor are conversing during a routine check-up |
References
- Langlois, J., Rutland-Brown, W., Wald, M. The epidemiology and impact of traumatic brain injury: A brief overview. J. Head Trauma Rehabil. 21 (5), 375-378 (2006).
- Babbage, D. R., Yim, J., Zupan, B., Neumann, D., Tomita, M. R., Willer, B. Meta-analysis of facial affect recognition difficulties after traumatic brain injury. Neuropsychology. 25 (3), 277-285 (2011).
- Neumann, D., Zupan, B., Tomita, M., Willer, B. Training emotional processing in persons with brain injury. J. Head Trauma Rehabil. 24, 313-323 (2009).
- Bornhofen, C., McDonald, S. Treating deficits in emotion perception following traumatic brain injury. Neuropsychol Rehabil. 18 (1), 22-44 (2008).
- Zupan, B., Neumann, D., Babbage, D. R., Willer, B. The importance of vocal affect to bimodal processing of emotion: implications for individuals with traumatic brain injury. J Commun Disord. 42 (1), 1-17 (2009).
- Bibby, H., McDonald, S. Theory of mind after traumatic brain injury. Neuropsychologia. 43 (1), 99-114 (2005).
- Ferstl, E. C., Rinck, M., von Cramon, D. Y. Emotional and temporal aspects of situation model processing during text comprehension: an event-related fMRI study. J. Cogn. Neurosci. 17 (5), 724-739 (2005).
- Milders, M., Fuchs, S., Crawford, J. R. Neuropsychological impairments and changes in emotional and social behaviour following severe traumatic brain injury. J. Clin. Exp. Neuropsychol. 25 (2), 157-172 (2003).
- Spikman, J., Milders, M., Visser-Keizer, A., Westerhof-Evers, H., Herben-Dekker, M., van der Naalt, J. Deficits in facial emotion recognition indicate behavioral changes and impaired self-awareness after moderate to severe tramatic brain injury. PloS One. 8 (6), e65581 (2013).
- Zupan, B., Neumann, D. Affect Recognition in Traumatic Brain Injury: Responses to Unimodal and Multimodal Media. J. Head Trauma Rehabil. 29 (4), E1-E12 (2013).
- Radice-Neumann, D., Zupan, B., Babbage, D. R., Willer, B. Overview of impaired facial affect recognition in persons with traumatic brain injury. Brain Inj. 21 (8), 807-816 (2007).
- McDonald, S. Are You Crying or Laughing? Emotion Recognition Deficits After Severe Traumatic Brain Injury. Brain Impair. 6 (01), 56-67 (2005).
- Cunningham, D. W., Wallraven, C. Dynamic information for the recognition of conversational expressions. J. Vis. 9 (13), 1-17 (2009).
- Elfenbein, H. A., Marsh, A. A., Ambady, W. I. N. Emotional Intelligence and the Recognition of Emotion from Facid Expressions. The Wisdom in Feeling: Psychological Processes in Emotional Intelligence. , Guilford Press. New York. 37-59 (2002).
- McDonald, S., Saunders, J. C. Differential impairment in recognition of emotion across different media in people with severe traumatic brain injury. J. Int Neuropsycho. Soc. : JINS. 11 (4), 392-399 (2005).
- Williams, C., Wood, R. L. Impairment in the recognition of emotion across different media following traumatic brain injury. J. Clin. Exp. Neuropsychol. 32 (2), 113-122 (2010).
- Adolphs, R., Tranel, D., Damasio, A. R. Dissociable neural systems for recognizing emotions. Brain Cogn. 52 (1), 61-69 (2003).
- Biele, C., Grabowska, A. Sex differences in perception of emotion intensity in dynamic and static facial expressions. Exp. Brain Res. 171, 1-6 (2006).
- Collignon, O., Girard, S., et al.
- LaBar, K. S., Crupain, M. J., Voyvodic, J. T., McCarthy, G. Dynamic perception of facial affect and identity in the human brain. Cereb. Cortex. 13 (10), 1023-1033 (2003).
- Mayes, A. K., Pipingas, A., Silberstein, R. B., Johnston, P. Steady state visually evoked potential correlates of static and dynamic emotional face processing. Brain Topogr. 22 (3), 145-157 (2009).
- Sato, W., Yoshikawa, S. Enhanced Experience of Emotional Arousal in Response to Dynamic Facial Expressions. J. Nonverbal Behav. 31 (2), 119-135 (2007).
- Schulz, J., Pilz, K. S. Natural facial motion enhances cortical responses to faces. Exp. Brain Res. 194 (3), 465-475 (2009).
- O'Toole, A., Roark, D., Abdi, H. Recognizing moving faces: A psychological and neural synthesis. Trends Cogn. Sci. 6 (6), 261-266 (2002).
- Dimoska, A., McDonald, S., Pell, M. C., Tate, R. L., James, C. M. Recognizing vocal expressions of emotion in patients with social skills deficits following traumatic brain injury. J. Int. Neuropsyco. Soc.: JINS. 16 (2), 369-382 (2010).
- McDonald, S., Flanagan, S., Rollins, J., Kinch, J. TASIT: A new clinical tool for assessing social perception after traumatic brain injury. J. Head Trauma Rehab. 18 (3), 219-238 (2003).
- Channon, S., Pellijeff, A., Rule, A. Social cognition after head injury: sarcasm and theory of mind. Brain Lang. 93 (2), 123-134 (2005).
- Henry, J. D., Phillips, L. H., Crawford, J. R., Theodorou, G., Summers, F. Cognitive and psychosocial correlates of alexithymia following traumatic brain injury. Neuropsychologia. 44 (1), 62-72 (2006).
- Martìn-Rodrìguez, J. F., Leòn-Carriòn, J. Theory of mind deficits in patients with acquired brain injury: a quantitative review. Neuropsychologia. 48 (5), 1181-1191 (2010).
- McDonald, S., Flanagan, S. Social perception deficits after traumatic brain injury: interaction between emotion recognition, mentalizing ability, and social communication. Neuropsychology. 18 (3), 572-579 (2004).
- Milders, M., Ietswaart, M., Crawford, J. R., Currie, D. Impairments in theory of mind shortly after traumatic brain injury and at 1-year follow-up. Neuropsychology. 20 (4), 400-408 (2006).
- Nowicki, S. The Manual for the Receptive Tests of the Diagnostic Analysis of Nonverbal Accuracy 2 (DANVA2). , (2008).
- Gross, J. J., Levenson, R. W.
- Spell, L. A., Frank, E. Recognition of Nonverbal Communication of Affect Following Traumatic Brain Injury. J. Nonverbal Behav. 24 (4), 285-300 (2000).
- Edgar, C., McRorie, M., Sneddon, I. Emotional intelligence, personality and the decoding of non-verbal expressions of emotion. Pers. Ind. Dif. 52, 295-300 (2012).
- Nowicki, S., Mitchell, J. Accuracy in Identifying Affect in Child and Adult Faces and Voices and Social Competence in Preschool Children. Genet. Soc. Gen. Psychol. 124 (1), (1998).
- Astesano, C., Besson, M., Alter, K. Brain potentials during semantic and prosodic processing in French. Cogn. Brain Res. 18, 172-184 (2004).
- Kotz, S. A., Paulmann, S. When emotional prosody and semantics dance cheek to cheek: ERP evidence. Brain Res. 115, 107-118 (2007).
- Paulmann, S., Pell, M. D., Kotz, S. How aging affects the recognition of emotional speech. Brain Lang. 104 (3), 262-269 (2008).
- Pell, M. D., Jaywant, A., Monetta, L., Kotz, S. A. Emotional speech processing: disentangling the effects of prosody and semantic cues. Cogn. Emot. 25 (5), 834-853 (2011).
- Bänziger, T., Scherer, K. R. Using Actor Portrayals to Systematically Study Multimodal Emotion Expression: The GEMEP Corpus. Affective Computing and Intelligent Interaction, LNCS 4738. , 476-487 (2007).
- Busselle, R., Bilandzic, H. Fictionality and Perceived Realism in Experiencing Stories: A Model of Narrative Comprehension and Engagement. Commun. Theory. 18 (2), 255-280 (2008).
- Zagalo, N., Barker, A., Branco, V. Story reaction structures to emotion detection. Proceedings of the 1st ACM Work. Story Represent. Mech. Context - SRMC. 04, 33-38 (2004).
- Hagemann, D., Naumann, E., Maier, S., Becker, G., Lurken, A., Bartussek, D. The Assessment of Affective Reactivity Using Films: Validity, Reliability and Sex Differences. Pers. Ind. Dif. 26, 627-639 (1999).
- Hewig, J., Hagemann, D., Seifert, J., Gollwitzer, M., Naumann, E., Bartussek, D. Brief Report. A revised film set for the induction of basic emotions. Cogn. Emot. 19 (7), 1095-1109 (2005).
- Wranik, T., Scherer, K. R. Why Do I Get Angry? A Componential Appraisal Approach. International Handbook of Anger. , 243-266 (2010).
- Neumann, D., Zupan, B., Malec, J. F., Hammond, F. M. Relationships between alexithymia, affect recognition, and empathy after traumatic brain injury. J. Head Trauma Rehabil. 29 (1), E18-E27 (2013).
- Russell, J. A. Is there universal recognition of emotion from facial expression? A review of the cross-cultural studies. Psychol. Bull. 115 (1), 102-141 (1994).
