Subskrypcja JoVE jest wymagana do oglądania tego materiału. Zaloguj się lub rozpocznij bezpłatny okres próbny.

Artykuł metodologiczny

Badanie wykorzystania izolowanych wyrażeń i klipów filmowych do oceny rozpoznawania emocji przez osoby z urazowym uszkodzeniem mózgu

8.5K wyświetleń

⸱

DOI:

10.3791/53774

⸱

15 maja 2016

 , 
1Department of Applied Linguistics, Brock University, 2Department of Physical Medicine and Rehabilitation, Indiana School of Medicine and Rehabilitation Hospital of Indiana

W tym artykule

Podsumowanie

Ten artykuł opisuje, jak zaimplementować zestaw zadań behawioralnych do badania rozpoznawania emocji w izolowanych wyrazach twarzy i głosu, a także nowatorskie zadanie wykorzystujące komercyjne klipy telewizyjne i filmowe do oceny multimodalnego rozpoznawania emocji, które zawiera kontekstowe wskazówki.

Streszczenie

Obecne badanie przedstawiło 60 osób z urazowym uszkodzeniem mózgu (TBI) i 60 osób z grupy kontrolnej z izolowanymi wyrazami emocji twarzy, izolowanymi wyrazami emocji wokalnych i multimodalnymi (np. klipami filmowymi) bodźcami, które zawierały wskazówki kontekstowe. Wszystkie bodźce zostały zaprezentowane za pomocą komputera. Uczestnicy zostali poproszeni o wskazanie, jak czuje się osoba w każdym bodźcu, używając formatu wymuszonego wyboru. Dodatkowo, w przypadku klipów filmowych, uczestnicy musieli wskazać, jak się czuli w odpowiedzi na bodziec i poziom intensywności, z jaką doświadczyli tej emocji.

Wprowadzenie

Urazowe uszkodzenie mózgu (TBI) dotyka około 10 milionów ludzi rocznie na całym świecie 1. Po TBI zdolność do rozpoznawania emocji u innych osób za pomocą wskazówek niewerbalnych, takich jak mimika twarzy i wyraz twarzy (tj. ton głosu) oraz wskazówki kontekstowe, jest często znacznie zagrożona 2-7. Ponieważ udane interakcje interpersonalne i wysokiej jakości relacje są przynajmniej częściowo zależne od prawidłowej interpretacji emocji innych7-10, nie jest zaskakujące, że trudności z rozpoznawaniem emocji przyczyniają się do złych wyników społecznych powszechnie zgłaszanych po TBI3,8,11,12.

Badania badające rozpoznawanie emocji przez osoby z TBI skupiały się na pojedynczych sygnałach, szczególnie rozpoznawaniu wyrazu twarzy za pomocą statycznych fotografii2. Chociaż praca ta była ważna w informowaniu o rozwoju programów leczenia, nie reprezentuje ona odpowiednio zdolności do rozpoznawania i interpretowania niewerbalnych sygnałów emocji w codziennych interakcjach. Statyczne obrazy nie tylko zapewniają więcej czasu na interpretację przedstawianych emocji, ale także zazwyczaj przedstawiają tylko wierzchołek (tj. maksymalną reprezentację) wyrażeń13-16. Ponadto obrazy statyczne nie mają wskazówek czasowych, które pojawiają się wraz z ruchem12,13,15 i nie są reprezentatywne dla szybko zmieniającej się mimiki emocji spotykanej w codziennych sytuacjach. Co więcej, istnieją dowody wskazujące, że statyczne i dynamiczne ekspresje wizualne są przetwarzane w różnych obszarach mózgu, z dokładniejszymi reakcjami na bodźce dynamiczne17-24.

Rozpoznawanie emocji głosowych przez osoby z TBI również zostało zbadane, zarówno z treścią słowną, jak i bez niej. Sugeruje się, że obecność treści werbalnej zwiększa wymagania percepcyjne, ponieważ dokładna interpretacja wymaga jednoczesnego przetwarzania niewerbalnego tonu głosu z treścią semantyczną zawartą w przekazie werbalnym25. Podczas gdy wiele badań wykazało lepsze rozpoznawanie afektu wokalnego przy braku znaczącej treści werbalnej, Dimoska i wsp. 25 nie stwierdzili różnicy w wykonaniu. Twierdzą, że osoby z TBI mają skłonność do treści semantycznych w zdaniach afektywnych; Więc nawet jeśli treść jest semantycznie neutralna lub wyeliminowana, nadal skupiają się na informacjach werbalnych w zdaniu. W związku z tym ich wyniki nie pokazały jednoznacznie, czy znaczące treści werbalne pomagają, czy utrudniają wyrażanie emocji wokalnych.

Oprócz znaczącej treści werbalnej, która może towarzyszyć niewerbalnym sygnałom wokalnym, kontekst jest również dostarczany przez samą sytuację społeczną. Kontekst sytuacyjny dostarcza podstawowych informacji o okolicznościach, w których ekspresja emocji została wyprodukowana, a zatem może mieć duży wpływ na interpretację tego wyrażenia. Oceniając, jak ktoś się czuje, używamy kontekstu, aby określić, czy sytuacja jest zgodna z pragnieniami i oczekiwaniami tej osoby. To ostatecznie wpływa na to, jak ktoś się czuje, więc znajomość kontekstu sytuacyjnego powinna zaowocować dokładniejszym wnioskowaniem o emocjach innych26. Zdolność do tego jest określana jako teoria umysłu, konstrukt, który został uznany za znacznie upośledzony po TBI6,27-31. Milders i wsp. 8,31 podają, że osoby z TBI mają znaczne trudności z dokonywaniem trafnych osądów i zrozumieniem intencji i uczuć postaci w krótkich historiach.

Chociaż te badania wykazały deficyty w przetwarzaniu emocji niewerbalnych i sytuacyjnych, trudno jest uogólnić wyniki na codzienne interakcje społeczne, w których te sygnały występują obok siebie i w kontekście społecznym. Aby lepiej zrozumieć, w jaki sposób osoby z TBI interpretują emocje w codziennych interakcjach społecznych, musimy używać bodźców, które mają charakter multimodalny. Tylko dwa wcześniejsze badania obejmowały bodźce multimodalne w ramach badania tego, jak osoby z TBI przetwarzają sygnały emocjonalne. McDonald i Saunders15 oraz Williams i Wood16 wyodrębnili bodźce z Testu Oceny Emocji (EET), który jest częścią Testu Świadomości Wnioskowania Społecznego26. EET składa się z nagranych na wideo winiet, które pokazują aktorów płci męskiej i żeńskiej przedstawiających niewerbalne sygnały emocjonalne podczas angażowania się w rozmowę. Treść werbalna w rozmowach jest semantycznie neutralna; Nie podaje się wskazówek dotyczących tego, jak czują się aktorzy, ani informacji kontekstowych. W ten sposób wyeliminowano potrzebę przetwarzania i integrowania znaczących treści werbalnych przy jednoczesnym robieniu tego z niewerbalnymi sygnałami mimicznymi i głosowymi. Wyniki tych badań wykazały, że osoby z TBI były znacznie mniej dokładne niż grupa kontrolna pod względem zdolności do identyfikowania emocji na podstawie bodźców multimodalnych. Ponieważ w żadnym z badań nie rozważano wpływu informacji semantycznych lub kontekstowych na interpretację wyrażania emocji, nie jest jasne, czy dodanie tego typu informacji ułatwiłoby przetwarzanie ze względu na zwiększoną redundancję międzyzmysłową, czy też negatywnie wpłynęłoby na percepcję ze względu na zwiększone wymagania poznawcze.

Ten artykuł przedstawia zestaw zadań służących do porównania percepcji sygnałów emocjonalnych twarzy i głosu w izolacji, oraz percepcji tych sygnałów występujących jednocześnie w znaczącym kontekście sytuacyjnym. Zadania związane z izolacją są częścią większego testu rozpoznawania emocji niewerbalnych — The Diagnostic Analysis of Nonverbal Accuracy 2 (DANVA2)32. W tym protokole użyliśmy podtestów Adult Faces (DANVA-Faces) i Adult Paralanguage (DANVA-Voices). Każdy z tych podtestów obejmuje 24 bodźce, z których każdy przedstawia sześć reprezentacji radosnych, smutnych, złych i lękliwych emocji. DANVA2 wymaga od uczestników zidentyfikowania przedstawianych emocji za pomocą formatu wymuszonego wyboru (4 wybory). Tutaj piąta opcja (nie wiem) jest przewidziana dla obu podtestów. Czas, w którym pokazywany był każdy wyraz twarzy, został zwiększony z dwóch sekund do pięciu sekund, aby upewnić się, że oceniamy rozpoznawanie afektów, a nie szybkość przetwarzania. Nie zmieniliśmy podtestu parajęzykowego dla dorosłych, poza dodaniem dodatkowego wyboru w formacie odpowiedzi wymuszonego wyboru. Uczestnicy słyszeli każde zdanie tylko raz. W żadnym z tych zadań nie udzielono informacji zwrotnej.

Klipy filmowe zostały użyte do oceny percepcji sygnałów emocjonalnych twarzy i głosu występujących jednocześnie w kontekście sytuacyjnym. Chociaż treść werbalna w tych klipach nie określała wyraźnie, co czują postacie w klipach, miała ona znaczenie w kontekście sytuacyjnym. Do badania włączono piętnaście klipów pochodzących z komercyjnych filmów i seriali telewizyjnych, z których każdy trwał od 45 do 103 sekund (średnia = 71,87). Podczas tego zadania uczestnikom nie udzielono informacji zwrotnej. Były to trzy klipy reprezentujące każdą z następujących kategorii emocji: radość, smutek, złość, strach, neutralność. Klipy te zostały wybrane na podstawie wyników badania przeprowadzonego z młodymi dorosłymi (n = 70) Zupan, B. & Babbage, D. R. Emotion elicitation stimuli from films and narrative text. Rękopis złożony do J Soc Psyc. W tym badaniu uczestnikom zaprezentowano sześć klipów filmowych dla każdej z docelowych kategorii emocji oraz sześć neutralnych klipów filmowych o długości od 24 do 127 sekund (średnia = 77,3 sekundy). Chociaż celem było zamieszczenie stosunkowo krótkich klipów filmowych, każdy klip wybrany do włączenia musiał zawierać wystarczające informacje kontekstowe, aby mógł być zrozumiały dla widzów bez konieczności posiadania dodatkowej wiedzy na temat filmu, z którego został zaczerpnięty33.

Klipy wybrane do obecnego badania zostały poprawnie zidentyfikowane w badaniu Zupana i Babbage'a Bodźce wywołujące emocje z klipów filmowych i tekstu narracyjnego, cytowane powyżej jako docelowa emocja między 83 a 89% dla radości, 86 - 93% dla smutku, 63 - 93% dla złości, 77 - 96% dla strachu i 81 - 87% dla neutralnego. Podczas gdy posiadanie takiej samej liczby przykładów dla każdej kategorii emocji, jak w zadaniach DANVA2 (n = 6) byłoby idealne, zdecydowaliśmy się tylko na trzy ze względu na zwiększoną długość bodźców z klipów filmowych w porównaniu z bodźcami w zadaniach DANVA-Twarze i DANVA-Głosy.

Dane z tych zadań zostały zebrane od 60 uczestników z TBI i 60 osób z grupy kontrolnej dopasowanej pod względem wieku i płci. Uczestnicy byli obserwowani indywidualnie lub w małych grupach (maks. = 3), a kolejność trzech zadań była losowa w sesjach testowych.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Protokół

Ten protokół został zatwierdzony przez instytucjonalne komisje rewizyjne na Uniwersytecie Brock i w Carolinas Rehabilitation.

1. Przed testowaniem

  1. Utwórz 3 oddzielne listy dla 15 klipów filmowych, z których każda będzie zawierać listę klipów w innej ograniczonej kolejności.
  2. Upewnij się, że każda lista zaczyna się i kończy neutralnym bodźcem i że nie występują kolejno dwa klipy dotyczące tej samej emocji.
  3. Utwórz osobny folder na pulpicie dla każdej listy prezentacji zamówienia filmowego i oznacz folder nazwą zamówienia (np. Zamówienie 1).
  4. Zapisz 15 klipów w każdym z trzech folderów.
  5. Ponownie oznacz każdy klip filmowy tak, aby odzwierciedlał numer prezentacji i nie dawał wskazówek dotyczących docelowej emocji (np. 01; 02; 03; itp.).
  6. Utwórz sześć losowych kolejności prezentacji zadań (DANVA-Twarze, DANVA-Głosy, Klipy Filmowe) (patrz Rysunek 1).
  7. Przypisz przychodzącego uczestnika do jednej z trzech ograniczonych kolejności prezentacji klipów filmowych.
  8. Przypisz przychodzącego uczestnika do jednej z sześciu losowych kolejności prezentacji zadań.

2. Dzień testów

  1. Zaproś uczestnika (uczestników) do laboratorium i posadź ich wygodnie przy stole.
  2. Omów z uczestnikiem formularz zgody, czytając z nim każdą sekcję.
  3. Odpowiedz na wszelkie pytania uczestnika dotyczące formularza zgody i poproś go o jego podpisanie.
  4. Poproś uczestników o wypełnienie krótkiego kwestionariusza demograficznego (data urodzenia, płeć). Poproś uczestników z TBI o dodatkowe wypełnienie sekcji kwestionariusza dotyczącej odpowiedniego kwestionariusza historii medycznej (data urazu, przyczyna urazu, ciężkość urazu).
    UWAGA: Kiedy uczestnicy wypełniają kwestionariusz, zapytaj o wszelkie znane trudności z przetwarzaniem wzrokowym, aby móc odpowiednio usadzić uczestników z TBI
  5. Ustaw uczestnika przed komputerem na krześle. Upewnij się, że wszyscy uczestnicy (jeśli jest więcej niż jeden) mają wyraźny widok na ekran.

3. Zadanie DANVA-Faces

  1. Daj każdemu uczestnikowi tablicę z dołączonymi arkuszami odpowiedzi DANVA-Faces i długopisem do zakreślania odpowiedzi.
  2. Przekaż uczestnikowi następujące instrukcje: "Po zobaczeniu każdego elementu zakreśl swoją odpowiedź (radość, smutek, złość, strach lub neutralna) na linii odpowiadającej numerowi elementu pokazanemu na każdym slajdzie."
    UWAGA: Jeśli uczestnicy z TBI wskazali, że widoczne są trudności z przetwarzaniem wzrokowym lub trudności motoryczne, zapewnij uczestnikowi alternatywną stronę odpowiedzi. Na tej stronie wymieniono pięć odpowiedzi w większym tekście w formacie poziomym.
  3. Otwórz zadanie DANVA-Faces w prezentacji i odtwórz je w widoku pokazu slajdów.
  4. Daj uczestnikom następujące instrukcje: "W tym ćwiczeniu pokażę wam twarze niektórych osób i chcę, żebyście powiedzieli mi, jak się czują. Chcę, żebyś mi powiedział, czy są szczęśliwi, smutni, źli czy przestraszeni. Lękliwy to to samo, co strach lub przestraszenie. Jeśli nie masz pewności co do emocji, wybierz odpowiedź "Nie wiem". W sumie są 24 twarze. Każda twarz będzie widoczna na ekranie przez pięć sekund. Musisz odpowiedzieć, zanim twarz zniknie, aby Twoja odpowiedź się liczyła. Wskaż swoją odpowiedź, zakreślając ją na arkuszu przed sobą".
    UWAGA: Jeśli uczestnik nie jest w stanie zakreślić własnych odpowiedzi i bierze udział w badaniu w małej grupie, przekaż następującą instrukcję: "Wskaż swoją odpowiedź, wskazując ją na arkuszu przed sobą". Następnie egzaminator zapisze odpowiedź uczestnika na karcie odpowiedzi DANVA-Faces.
  5. Przed rozpoczęciem upewnij się, że uczestnicy nie mają żadnych pytań.
  6. Rozpocznij zadanie od dwóch prób praktycznych. Przekaż uczestnikom następujące instrukcje: "Zamierzamy przeprowadzić dwie próby praktyczne, abyś mógł zorientować się, jak długo każda twarz będzie widoczna na ekranie i ile czasu masz na udzielenie odpowiedzi".
  7. Naciśnij enter na klawiaturze, gdy twarz zniknie, aby przejść do następnego bodźca. Zanim to zrobisz, upewnij się, że wszyscy uczestnicy patrzą na ekran.
  8. Upewnij się, że uczestnicy nie mają pytań. Jeśli ich nie ma, rozpocznij próby testowe. Upewnij się, że wszyscy uczestnicy patrzą na ekran. Naciśnij Enter, aby rozpocząć bodźce testowe.
  9. Kontynuuj procedurę opisaną dla zadań praktycznych, aż 24 bodźce zostaną zakończone.
  10. Zbierz arkusze odpowiedzi uczestników.

4. Zadanie DANVA-Voices

  1. Daj każdemu uczestnikowi tablicę z dołączonymi arkuszami odpowiedzi DANVA-Voices i długopisem do zakreślenia odpowiedzi.
    UWAGA: Jeśli uczestnicy z TBI wskazali, że widoczne są trudności z przetwarzaniem wzrokowym lub trudności motoryczne, zapewnij uczestnikowi alternatywną stronę odpowiedzi. Na tej stronie wymieniono pięć odpowiedzi w większym tekście w formacie poziomym.
  2. Otwórz zadanie DANVA-Voices, przechodząc na następującą stronę internetową:
    http://www.psychology.emory.edu/clinical/interpersonal/danva.htm
  3. Kliknij link, aby wyświetlić twarze, głosy i postawy dorosłych.
  4. Uzupełnij login i hasło, wpisując dowolną literę loginu i wpisując EMORYDANVA2 jako hasło.
  5. Kliknij Dalej.
  6. Kliknij Głosy (zielone kółko na środku ekranu).
  7. Przetestuj poziom głośności. Podaj następujące instrukcje: "Chcę mieć pewność, że słyszysz dźwięk na komputerze i że ma on komfortową dla Ciebie głośność. Zamierzam kliknąć dźwięk testowy. Powiedz mi, proszę, czy słyszysz dźwięk, a także czy chcesz, aby dźwięk był głośniejszy czy cichszy, aby był dla ciebie komfortowy".
  8. Kliknij przycisk Testuj dźwięk.
  9. Dostosuj głośność zgodnie z życzeniem uczestnika (zwiększanie/zmniejszanie).
  10. Kliknij ponownie "przetestuj dźwięk". Dostosuj głośność zgodnie z życzeniem uczestnika. Rób to, dopóki uczestnik nie zgłosi, że ma komfortową głośność.
  11. Omów z uczestnikiem instrukcje dotyczące zadania. Daj uczestnikom następujące instrukcje: W tym ćwiczeniu usłyszysz, jak ktoś wypowiada zdanie: "Teraz wychodzę z pokoju, ale wrócę później". Chcę, żebyś powiedział mi, czy są szczęśliwi, smutni, źli czy przestraszeni. Lękliwy to to samo, co strach lub przestraszenie. Jeśli nie masz pewności co do emocji, wybierz odpowiedź "Nie wiem". Składa się z 24 zdań. Zanim każde zdanie zostanie wypowiedziane, zostanie ogłoszony numer. Musisz posłuchać następującego po sobie zdania. Zdania nie będą się powtarzać, więc musisz uważnie słuchać. Powiedz mi, jak się czuje ta osoba, zakreślając swoją odpowiedź na arkuszu przed tobą". Po dokonaniu wyboru muszę wybrać odpowiedź na ekranie komputera, aby przejść do następnego elementu. Zawsze wybieram tę samą emocję (bojaźliwy). Mój wybór w żaden sposób nie wskazuje poprawnej odpowiedzi."
    UWAGA: Jeśli uczestnik nie jest w stanie zakreślić własnych odpowiedzi i bierze udział w badaniu w małej grupie, przekaż następującą instrukcję: "Wskaż swoją odpowiedź, wskazując ją na arkuszu przed sobą". Następnie egzaminator zapisze odpowiedź uczestnika na karcie odpowiedzi DANVA-Voices.
  12. Kliknij "kontynuuj".
  13. Poproś uczestników, aby zakreślili (lub wskazali na) swoją odpowiedź na karcie odpowiedzi, gdy zdanie zostanie odtworzone.
  14. Kliknij "bojaźliwy". Kliknij "Dalej".
  15. Kontynuuj tę procedurę, aż 24 zdania zostaną ukończone.
  16. Wyjdź ze strony internetowej, gdy dotrzesz do końca zadania.
  17. Zbierz arkusze odpowiedzi uczestników.

5. Zadanie z klipem filmowym

  1. Posadź uczestników wygodnie przed komputerem. Upewnij się, że ekran jest w pełni widoczny dla wszystkich.
  2. Daj każdej osobie notatnik z egzemplarzem arkusza Emocjonalna odpowiedź na klip filmowy.
    UWAGA: Jeśli uczestnicy z TBI wskazali, że trudności z przetwarzaniem wzrokowym lub trudności motoryczne są widoczne, zapewnij uczestnikowi dwie alternatywne strony odpowiedzi. Pierwsza strona zawiera listę pięciu odpowiedzi wymuszonego wyboru, a druga zawiera skalę 0-9. Obie strony odpowiedzi są w większym tekście i w formacie poziomym.
  3. Otwórz folder na komputerze dla przypisanej kolejności prezentacji klipu filmowego.
  4. Udziel uczestnikom następujących wskazówek: "Obejrzycie w sumie 15 klipów filmowych. W każdym klipie filmowym zobaczysz postać, która wygląda, jakby odczuwała określone emocje. Mogą wyglądać na "szczęśliwych", "smutnych", "złych", "przestraszonych" lub "neutralnych". Po pierwsze, chcę, żebyś mi powiedział, jakie emocje pokazuje ta postać. Następnie powiedz mi, jakie emocje przeżyłeś podczas oglądania klipu do filmu. Na koniec podaj mi liczbę, która najlepiej opisuje intensywność emocji, które poczułeś podczas oglądania klipu. Na przykład, jeśli twarz tej osoby sprawiła, że poczułeś się "umiarkowanie" szczęśliwy lub smutny, zakreśl liczbę z zakresu od 1 do 3. Jeśli czułeś się "umiarkowanie" szczęśliwy lub smutny, zakreśl liczbę z zakresu od 4 do 6. Jeśli czujesz się "bardzo" szczęśliwy lub smutny, zakreśl liczbę z zakresu od 7 do 9. Kółko 0 tylko wtedy, gdy w ogóle nie czułeś żadnych emocji. Masz pytania?"
    UWAGA: Tylko pierwsze pytanie (Powiedz mi, jakie emocje pokazuje postać) zostało przeanalizowane na potrzeby obecnego badania.
  5. Kliknij dwukrotnie 01, aby otworzyć pierwszy klip filmowy.
  6. Powiedz uczestnikowi, na której postaci ma się skupić podczas oglądania klipu.
  7. Wybierz opcję "Wyświetl na pełnym ekranie" w menu opcji, aby odtworzyć klip.
  8. Poproś uczestników, aby odpowiedzieli na wiersz a (Jaką emocję przeżywa główny bohater?) na swoim arkuszu odpowiedzi, gdy klip zostanie odtworzony.
  9. Poproś uczestników, aby odpowiedzieli na wiersz b (wybierz jedną emocję, która najlepiej opisuje, jak się czułeś podczas oglądania klipu) na karcie odpowiedzi, gdy odpowiedź na wiersz a zostanie udzielona .
  10. Poproś uczestnika, aby odpowiedział na pytanie c (Jak oceniłbyś intensywność emocji, których doświadczyłeś podczas oglądania klipu?) po udzieleniu odpowiedzi na pytanie b.
  11. Poinstruuj uczestnika, aby ponownie skierował swoją uwagę na ekran komputera po zakończeniu odpowiedzi.
  12. Wróć do folderu na komputerze, który zawiera klipy filmowe w kolejności przypisanej uczestnikowi.
  13. Dwukrotnie włącz przycisk 02, aby otworzyć drugi klip filmowy. Powtarzaj kroki od 5.5 do 5.12, aż uczestnik obejrzy wszystkie 15 klipów filmowych.
  14. Odbierz arkusz odpowiedzi od uczestnika (uczestników).

6. Przechodzenie od jednego zadania do drugiego (krok opcjonalny)

  1. Daj uczestnikom możliwość zrobienia przerwy między zadaniami 2 i 3.

7. Ocenianie zadań

  1. Zapoznaj się z kluczem odpowiedzi na stronie 25 podręcznika DANVA232, aby wykonać zadanie DANVA-Faces.
  2. Oceniaj elementy, które pasują do klucza odpowiedzi, jako 1, a niepoprawne elementy jako 0. Odpowiedzi "Nie wiem" są oceniane jako 0.
  3. Oblicz surowy wynik, dodając łączną liczbę poprawnych odpowiedzi. Podziel surowy wynik przez 24 (łączna liczba pozycji), aby uzyskać procentowy wynik dokładności.
  4. Zapoznaj się z kluczem odpowiedzi na stronie 27 instrukcji DANVA232 i powtórz kroki 7.2 i 7.3, aby ocenić zadanie DANVA-Voices.
  5. Zapoznaj się z kluczem odpowiedzi, aby uzyskać przypisaną kolejność prezentacji klipu filmowego dla uczestnika. Zdobądź 1, jeśli uczestnik zidentyfikował docelową emocję, odpowiadając na pytanie o to, jaką emocję okazywała postać, i 0, jeśli uczestnik nie wybrał docelowej emocji (w tym, jeśli uczestnik powiedział "Nie wiem").
  6. Oblicz surowy wynik, dodając liczbę poprawnych odpowiedzi. Podziel surowy wynik przez 15 (łączna liczba elementów), aby uzyskać procentowy wynik dokładności.
  7. Utwórz podzbiór wyników dla zadania Klip filmowy, który zawiera tylko odpowiedzi na radosne, smutne, gniewne i lękliwe klipy filmowe, dodając poprawne odpowiedzi tylko do tych 12 klipów. Podziel liczbę poprawnych odpowiedzi przez 12, aby uzyskać procentowy wynik dokładności.
  8. Utwórz punktację dla odpowiedzi na neutralne klipy filmowe, dodając liczbę poprawnych odpowiedzi do neutralnych klipów. Podziel liczbę poprawnych odpowiedzi przez 3, aby uzyskać procentowy wynik dokładności.
    UWAGA: Konieczne jest utworzenie podzbioru partytur, ponieważ zadania DANVA nie zawierały portretów neutralnych, podczas gdy zadanie Klipy filmowe zawierało.
  9. Oblicz wynik dla odpowiedzi na pozycje o pozytywnej wartości (tj. szczęśliwe) i negatywnie wartościowane (połącz reakcje na złe, lękliwe i smutne bodźce) dla wszystkich trzech zadań.
  10. Podziel wynik dla elementów o dodatniej wartości dla każdego zadania przez 3, aby uzyskać procentowy wynik dokładności.
  11. Podziel wynik dla elementów o ujemnej wartości dla każdego zadania przez 9, aby uzyskać procentowe wyniki dokładności.

8. Analiza danych

  1. Przeprowadź analizę wariancji modelu mieszanego (ANOVA) w celu zbadania reakcji na izolowane bodźce emocjonalne twarzy, izolowane bodźce emocji wokalne i multimodalne bodźce klipów filmowych przez uczestników z TBI i uczestników kontrolnych.
  2. Zbadaj główne efekty stwierdzone w ANOVA za pomocą uzupełniających porównań jednowymiarowych.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Wyniki

Ten zestaw zadań został wykorzystany do porównania rozpoznawania emocji dla wyizolowanych ekspresji emocjonalnych (tj. tylko twarz; tylko głos) oraz połączonych ekspresji emocjonalnych (tj. twarz i głos), które występują w kontekście sytuacyjnym. Trzy zadania ukończyło łącznie 60 uczestników (37 mężczyzn i 23 kobiety) z umiarkowanym lub ciężkim TBI w wieku od 21 do 63 lat (średnia = 40,98) oraz 60 dopasowanych wiekowo uczestników z grupy kontrolnej (zakres = 18 do 63; śr...

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Dyskusja

W pracy opisano trzy zadania służące do oceny zdolności rozpoznawania emocji u osób z TBI. Celem opisanej metody było porównanie dokładności reakcji na sygnały emocjonalne twarzy i głosu w izolacji, z percepcją tych sygnałów występujących jednocześnie w znaczącym kontekście sytuacyjnym. Klipy filmowe zostały włączone do niniejszego badania, ponieważ ich przybliżenie codziennych sytuacji sprawiło, że były one bardziej ekologicznie ważne niż izolowane reprezentacje ekspresji emocji. Podczas przeprowadzania tego protokołu z...

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Oświadczenia

Autor nie ma nic do zdradzienia.

Podziękowania

Ta praca była wspierana przez Instytut Badań Humanistycznych na Uniwersytecie Brock w St. Catharines, Ontario, Kanada oraz przez Cannon Research Center w Carolinas Rehabilitation w Charlotte, Północna Karolina, USA.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Materiały

Lista materiałów użytych w tym artykule
NazwaFirmaNumer katalogowyKomentarze
Analiza diagnostyczna dokładności niewerbalnej-2Zakład Pychologii, Emory University. Atlanta, GADANVA-Faces podtest, DANVA-Voices podtest
KomputerApple iMac Desktop, 27-calowy wyświetlacz
Oprogramowanie do analizy statystycznejSPSSUniversity Licencjonowane oprogramowanie do analizy danych
Happy Film Clip 1Sweet Home Alabama, D& D Films, 2002, Reżyser: A TennantMężczyzna zaskakuje swoją dziewczynę, oświadczając się w sklepie jubilerskim
Happy Film Clip 2Wedding Crashers, New Line Cinema, 2005, Reżyseria: D. DobkinPara siedzi na plaży i flirtuje, grając w grę ręczną
Happy Film Clip 3Reme-mber the Titans, Jerry Bruckheimer Films, 2000, Reżyseria: B. YakinAfroamerykański trener futbolu i jego rodzina są akceptowani przez swoją społeczność, gdy szkolna drużyna wygrywa mistrzostwa w piłce nożnej
Smutny klip filmowy 1Chirurdzy, ABC, 2006, Reżyseria: P. HortonOjciec jest w stanie komunikować się z rodziną tylko za pomocą oczu.
Smutny klip filmowy 2Armageddon, Touchstone Pictures, 1998, Reżyseria: M. BayCórka żegna się z ojcem, który przebywa w kosmosie z niebezpieczną misją
Smutny klip filmowy 3Chirurdzy, ABC, 2006, Reżyseria: M. TinkerKobieta jest załamana, zmarł jej narzeczony
Angry Film Clip 1Ania z Zielonego Wzgórza, Canadian Broadcast Corporation, 1985, Reżyseria: K. SullivanStarsza kobieta otwarcie mówi o wyglądzie fizycznym dziecka przed nią
Angry Film Clip 2Enough, Columbia Pictures, 2002, Reżyseria: M. AptedŻona konfrontuje się z mężem na temat romansu, gdy wyczuwa perfumy innej kobiety na jego ubraniu
Angry Film Clip 3Pretty Woman, Touchstone Pictures, 1990, Reżyseria: G. MarshallDziewczyna na telefon próbuje kupić ubrania w drogim butiku i zostaje odrzucona
Przerażający klip filmowy 1Krwawy diament, Warner Bros Pictures, 2006, Reżyseria: E. ZwickLiczne pojazdy przewożące milicję zbliżają się do mężczyzny i jego syna, gdy są na spacerze
Przerażający klip filmowy 2Życie przed jej oczami, 2929 Productions, 2007, Reżyseria: V. PerelmanDwóch nastoletnich gilrów rozmawia w szkolnej łazience, kiedy słyszą strzały, które są coraz bliżej
Przerażający klip filmowy 3Szósty zmysł, Barry Mendel Productions, 1999, Reżyseria: M. N. ShyamalanMłody chłopiec wchodzi do kuchni w środku nocy i zastaje swoją matkę zachowującą się bardzo nietypowo
Neutralny klip filmowy 1Druga siostra, Mandeville Films, 1999, Reżyseria: G. MarshallMatka i córka dyskutują o książce o sztuce, siedząc w swoim salonie
Neutral Film Clip 2The Game, Polygram Filmed Entertainment, 1999, Reżyseria: D. FincherJeden pan tłumaczy zasady gry drugiemu
Neutralny klip filmowy 3Notatnik, New Line Cinema, 2004, reż. N. CassavetesStarszy pan i jego lekarz rozmawiają podczas rutynowej kontroli

Bibliografia

  1. Langlois, J., Rutland-Brown, W., Wald, M. The epidemiology and impact of traumatic brain injury: A brief overview. J. Head Trauma Rehabil. 21 (5), 375-378 (2006).
  2. Babbage, D. R., Yim, J., Zupan, B., Neumann, D., Tomita, M. R., Willer, B. Meta-analysis of facial affect recognition difficulties after traumatic brain injury. Neuropsychology. 25 (3), 277-285 (2011).
  3. Neumann, D., Zupan, B., Tomita, M., Willer, B. Training emotional processing in persons with brain injury. J. Head Trauma Rehabil. 24, 313-323 (2009).
  4. Bornhofen, C., McDonald, S. Treating deficits in emotion perception following traumatic brain injury. Neuropsychol Rehabil. 18 (1), 22-44 (2008).
  5. Zupan, B., Neumann, D., Babbage, D. R., Willer, B. The importance of vocal affect to bimodal processing of emotion: implications for individuals with traumatic brain injury. J Commun Disord. 42 (1), 1-17 (2009).
  6. Bibby, H., McDonald, S. Theory of mind after traumatic brain injury. Neuropsychologia. 43 (1), 99-114 (2005).
  7. Ferstl, E. C., Rinck, M., von Cramon, D. Y. Emotional and temporal aspects of situation model processing during text comprehension: an event-related fMRI study. J. Cogn. Neurosci. 17 (5), 724-739 (2005).
  8. Milders, M., Fuchs, S., Crawford, J. R. Neuropsychological impairments and changes in emotional and social behaviour following severe traumatic brain injury. J. Clin. Exp. Neuropsychol. 25 (2), 157-172 (2003).
  9. Spikman, J., Milders, M., Visser-Keizer, A., Westerhof-Evers, H., Herben-Dekker, M., van der Naalt, J. Deficits in facial emotion recognition indicate behavioral changes and impaired self-awareness after moderate to severe tramatic brain injury. PloS One. 8 (6), e65581(2013).
  10. Zupan, B., Neumann, D. Affect Recognition in Traumatic Brain Injury: Responses to Unimodal and Multimodal Media. J. Head Trauma Rehabil. 29 (4), E1-E12 (2013).
  11. Radice-Neumann, D., Zupan, B., Babbage, D. R., Willer, B. Overview of impaired facial affect recognition in persons with traumatic brain injury. Brain Inj. 21 (8), 807-816 (2007).
  12. McDonald, S. Are You Crying or Laughing? Emotion Recognition Deficits After Severe Traumatic Brain Injury. Brain Impair. 6 (01), 56-67 (2005).
  13. Cunningham, D. W., Wallraven, C. Dynamic information for the recognition of conversational expressions. J. Vis. 9 (13), 1-17 (2009).
  14. Elfenbein, H. A., Marsh, A. A., Ambady, W. I. N. Emotional Intelligence and the Recognition of Emotion from Facid Expressions. The Wisdom in Feeling: Psychological Processes in Emotional Intelligence. , Guilford Press. New York. 37-59 (2002).
  15. McDonald, S., Saunders, J. C. Differential impairment in recognition of emotion across different media in people with severe traumatic brain injury. J. Int Neuropsycho. Soc. : JINS. 11 (4), 392-399 (2005).
  16. Williams, C., Wood, R. L. Impairment in the recognition of emotion across different media following traumatic brain injury. J. Clin. Exp. Neuropsychol. 32 (2), 113-122 (2010).
  17. Adolphs, R., Tranel, D., Damasio, A. R. Dissociable neural systems for recognizing emotions. Brain Cogn. 52 (1), 61-69 (2003).
  18. Biele, C., Grabowska, A. Sex differences in perception of emotion intensity in dynamic and static facial expressions. Exp. Brain Res. 171, 1-6 (2006).
  19. Collignon, O., Girard, S., et al. Audio-visual integration of emotion expression. Brain Res. 1242, 126-135 (2008).
  20. LaBar, K. S., Crupain, M. J., Voyvodic, J. T., McCarthy, G. Dynamic perception of facial affect and identity in the human brain. Cereb. Cortex. 13 (10), 1023-1033 (2003).
  21. Mayes, A. K., Pipingas, A., Silberstein, R. B., Johnston, P. Steady state visually evoked potential correlates of static and dynamic emotional face processing. Brain Topogr. 22 (3), 145-157 (2009).
  22. Sato, W., Yoshikawa, S. Enhanced Experience of Emotional Arousal in Response to Dynamic Facial Expressions. J. Nonverbal Behav. 31 (2), 119-135 (2007).
  23. Schulz, J., Pilz, K. S. Natural facial motion enhances cortical responses to faces. Exp. Brain Res. 194 (3), 465-475 (2009).
  24. O'Toole, A., Roark, D., Abdi, H. Recognizing moving faces: A psychological and neural synthesis. Trends Cogn. Sci. 6 (6), 261-266 (2002).
  25. Dimoska, A., McDonald, S., Pell, M. C., Tate, R. L., James, C. M. Recognizing vocal expressions of emotion in patients with social skills deficits following traumatic brain injury. J. Int. Neuropsyco. Soc.: JINS. 16 (2), 369-382 (2010).
  26. McDonald, S., Flanagan, S., Rollins, J., Kinch, J. TASIT: A new clinical tool for assessing social perception after traumatic brain injury. J. Head Trauma Rehab. 18 (3), 219-238 (2003).
  27. Channon, S., Pellijeff, A., Rule, A. Social cognition after head injury: sarcasm and theory of mind. Brain Lang. 93 (2), 123-134 (2005).
  28. Henry, J. D., Phillips, L. H., Crawford, J. R., Theodorou, G., Summers, F. Cognitive and psychosocial correlates of alexithymia following traumatic brain injury. Neuropsychologia. 44 (1), 62-72 (2006).
  29. Martìn-Rodrìguez, J. F., Leòn-Carriòn, J. Theory of mind deficits in patients with acquired brain injury: a quantitative review. Neuropsychologia. 48 (5), 1181-1191 (2010).
  30. McDonald, S., Flanagan, S. Social perception deficits after traumatic brain injury: interaction between emotion recognition, mentalizing ability, and social communication. Neuropsychology. 18 (3), 572-579 (2004).
  31. Milders, M., Ietswaart, M., Crawford, J. R., Currie, D. Impairments in theory of mind shortly after traumatic brain injury and at 1-year follow-up. Neuropsychology. 20 (4), 400-408 (2006).
  32. Nowicki, S. The Manual for the Receptive Tests of the Diagnostic Analysis of Nonverbal Accuracy 2 (DANVA2). , (2008).
  33. Gross, J. J., Levenson, R. W. Emotion Elicitation Using Films. Cogn. Emot. 9 (1), 87-108 (1995).
  34. Spell, L. A., Frank, E. Recognition of Nonverbal Communication of Affect Following Traumatic Brain Injury. J. Nonverbal Behav. 24 (4), 285-300 (2000).
  35. Edgar, C., McRorie, M., Sneddon, I. Emotional intelligence, personality and the decoding of non-verbal expressions of emotion. Pers. Ind. Dif. 52, 295-300 (2012).
  36. Nowicki, S., Mitchell, J. Accuracy in Identifying Affect in Child and Adult Faces and Voices and Social Competence in Preschool Children. Genet. Soc. Gen. Psychol. 124 (1), (1998).
  37. Astesano, C., Besson, M., Alter, K. Brain potentials during semantic and prosodic processing in French. Cogn. Brain Res. 18, 172-184 (2004).
  38. Kotz, S. A., Paulmann, S. When emotional prosody and semantics dance cheek to cheek: ERP evidence. Brain Res. 115, 107-118 (2007).
  39. Paulmann, S., Pell, M. D., Kotz, S. How aging affects the recognition of emotional speech. Brain Lang. 104 (3), 262-269 (2008).
  40. Pell, M. D., Jaywant, A., Monetta, L., Kotz, S. A. Emotional speech processing: disentangling the effects of prosody and semantic cues. Cogn. Emot. 25 (5), 834-853 (2011).
  41. Bänziger, T., Scherer, K. R. Using Actor Portrayals to Systematically Study Multimodal Emotion Expression: The GEMEP Corpus. Affective Computing and Intelligent Interaction, LNCS 4738. , 476-487 (2007).
  42. Busselle, R., Bilandzic, H. Fictionality and Perceived Realism in Experiencing Stories: A Model of Narrative Comprehension and Engagement. Commun. Theory. 18 (2), 255-280 (2008).
  43. Zagalo, N., Barker, A., Branco, V. Story reaction structures to emotion detection. Proceedings of the 1st ACM Work. Story Represent. Mech. Context - SRMC. 04, 33-38 (2004).
  44. Hagemann, D., Naumann, E., Maier, S., Becker, G., Lurken, A., Bartussek, D. The Assessment of Affective Reactivity Using Films: Validity, Reliability and Sex Differences. Pers. Ind. Dif. 26, 627-639 (1999).
  45. Hewig, J., Hagemann, D., Seifert, J., Gollwitzer, M., Naumann, E., Bartussek, D. Brief Report. A revised film set for the induction of basic emotions. Cogn. Emot. 19 (7), 1095-1109 (2005).
  46. Wranik, T., Scherer, K. R. Why Do I Get Angry? A Componential Appraisal Approach. International Handbook of Anger. , 243-266 (2010).
  47. Neumann, D., Zupan, B., Malec, J. F., Hammond, F. M. Relationships between alexithymia, affect recognition, and empathy after traumatic brain injury. J. Head Trauma Rehabil. 29 (1), E18-E27 (2013).
  48. Russell, J. A. Is there universal recognition of emotion from facial expression? A review of the cross-cultural studies. Psychol. Bull. 115 (1), 102-141 (1994).

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Przedruki i uprawnienia

Tagi

Bod ce multimodalneekspresja twarzyekspresja wokalnazadanie DANVAocena emocjiewaluacja poznawcza
Badanie wykorzystania izolowanych wyrażeń i klipów filmowych do oceny rozpoznawania emocji przez osoby z urazowym uszkodzeniem mózgu
Skontaktuj się z nami
Poleć bibliotece

Prywatność

Warunki Korzystania

Zasady

Copyright © 2026 MyJoVE Corporation. Wszelkie prawa zastrzeżone.