Name: Badanie produkcji gestów w obliczu wyzwań komunikacyjnych (Wideo) | JoVE Journal
Uploaded: 2024-01-26T14:50:00.000+00:00
Duration: 7 min 18 s
Description: Poznaj metodę badania produkcji gestów w komunikacji międzyosobowej przy różnym widoczności rozmówcy. Protokół ten umożliwia analizę zachowań gestycznych u osób z trudnościami komunikacyjnymi, w tym uczących się języka obcego i osób z autyzmem.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Rozwój i walidacja protokołu nauki słów L2 była wspierana przez stypendium National Defense Science and Engineering Graduate (NDSEG) Fellowship (32 CFR 168a) wydane przez Biuro Badań Naukowych Sił Powietrznych Departamentu Obrony USA. Opracowanie i walidacja protokołu opowiadania kreskówek z młodzieżą z ASD była wspierana przez Ruth S. Kirschstein Institutional National Research Service Award (T32) przyznaną przez National Institutes of Mental Health. Autor dziękuje Rachel Fader, Theo Haugenowi, Andrew Lynnowi, Ashlie Caputo i Marco Pilotcie za pomoc w zbieraniu danych i kodowaniu.

Wszyscy uczestnicy wyrazili pisemną zgodę, a wszystkie protokoły zostały zatwierdzone przez Instytucjonalne Komisje Rewizyjne w instytucji goszczącej. Protokoły uczenia się słów L2 i opowiadania kreskówek zostały zaimplementowane w badaniach, na których opierają się reprezentatywne wyniki21,33. Chociaż do tej pory protokoły te były przeprowadzane tylko w kontekstach osobistych, powiązany protokół manipulujący widocznością rozmówcy i uczestnika niezależnie, który nie został tutaj opisany, jest obecnie prowadzony w celu zapewnienia wglądu w możliwość powielania w tym kontekście, z planami rozszerzenia go na populacje z wyzwaniami komunikacyjnymi, takie jak osoby z ASD.
1. Uczestnicy
UWAGA: Przestrzegając niezbędnych ograniczeń dotyczących charakterystyki uczestników dla każdego badania, próby powinny być reprezentatywne dla większej populacji na tyle, na ile to możliwe.
<ol>
	<li>Rekrutacja uczestników do protokołu nauki słów L2
	<ol>
		<li>Rekrutacja uczestników w wieku 18 lat i starszych z normalnym lub skorygowanym do normalnego widzeniem i prawidłowym słuchem, którzy posługują się językiem angielskim na poziomie L1. Aby upewnić się, że badanie analizuje wpływ gestów na początkowy etap nauki słów L2, rekrutuj uczestników bez znajomości języka węgierskiego, języka docelowego.</li>
	</ol>
	</li>
	<li>Rekrutacja uczestników do protokołu retellingu kreskówek
	<ol>
		<li>Rekrutuj uczestników w wieku zdolnym do wykonania zadania eksperymentalnego (10-20 lat w Morett et al.21.) z diagnozą ASD lub u których rozwija się typowo (TD).
		<ol>
			<li>Aby upewnić się, że uczestnicy mogą pomyślnie wykonać zadanie eksperymentalne, zrekrutuj uczestników, którzy mówią w języku angielskim na poziomie L1, mają normalny lub skorygowany do normalnego wzrok i normalny słuch oraz mają IQ w pełnej skali 85 lub wyższej, mierzone przed lub w czasie badania za pomocą standaryzowanej oceny46.</li>
			<li>Aby upewnić się, że badanie analizuje konkretny wpływ ASD na wytwarzanie gestów, rekrutuj uczestników z ASD bez padaczki, zapalenia opon mózgowych, zapalenia mózgu, cukrzycy, dziecięcego zaburzenia dezintegracyjnego lub całościowego zaburzenia rozwojowego - nieokreślonego inaczej (PDD-NOS).</li>
			<li>Aby upewnić się, że wytwarzanie gestów w ASD można porównać z typową produkcją gestów, zrekrutuj uczestników TD bez współistniejących zaburzeń psychicznych lub krewnych pierwszego stopnia, u których zdiagnozowano całościowe zaburzenia rozwojowe.</li>
		</ol>
		</li>
	</ol>
	</li>
</ol>
2. Przegląd manipulacji widocznością
<ol>
	<li>Rekrutuj uczestników w parach, jeśli badane będą efekty wytwarzania i obserwowania spontanicznych gestów, tak jak w protokole nauki słów L2. Rekrutuj uczestników indywidualnie w koordynacji z asystentem naukowym pełniącym rolę uczestnika, jeśli tylko badane będą efekty wytwarzania spontanicznych gestów, tak jak w protokole opowiadania kreskówek.</li>
	<li>Przekaż uczestnikom formularz świadomej zgody z informacjami o badaniu, aby mogli go podpisać i odpowiedzieć na wszelkie pytania na jego temat, uważając, aby nie ujawnić, że badanie koncentruje się na wytwarzaniu gestów. Odbierz formularz po podpisaniu go przez uczestników.</li>
	<li>W przypadku uczestników zrekrutowanych w parach użyj metody selekcji, takiej jak rzut monetą, aby określić, który uczestnik będzie służył jako mówca, kto będzie mówił większość w zadaniu eksperymentalnym, a który uczestnik będzie służył jako rozmówca, który będzie słuchał głównie i od czasu do czasu wchodził w interakcję z mówcą w zadaniu eksperymentalnym. W przypadku uczestników rekrutowanych indywidualnie, w których asystent naukowy pełni rolę uczestnika, należy zastosować metodę ustalonej selekcji, taką jak sfałszowany rzut monetą, aby upewnić się, że uczestnik zawsze służy jako mówca, a asystent badawczy zawsze służy jako rozmówca.</li>
	<li>W połowie sesji eksperymentalnych umieść nieprzezroczystą przegrodę między mówcą a rozmówcą, aby upewnić się, że nie widzą nawzajem swoich twarzy ani rąk.</li>
	<li>Wyjaśnij uczestnikom, co będą robić w zadaniu eksperymentalnym i odpowiedz na wszelkie pytania na jego temat. Poinformuj uczestników, że ich wypowiedź będzie nagrywana w formie audio, wskazując na używany do tego celu mikrofon. Aby uniknąć wpływu świadomości nagrania wideo na produkcję gestów, nie informuj uczestników, że będą nagrywani na wideo i upewnij się, że kamera wideo używana w tym celu nie jest widoczna dla uczestników.</li>
	<li>Rozpocznij nagrywanie wideo i audio, naciskając odpowiednie przyciski. Wykonaj zadanie eksperymentalne, aby wydobyć mowę i gest od mówcy i rozmówcy uczestniczącego, jeśli taki istnieje.</li>
	<li>Jeśli stosowany jest projekt wewnątrzpartykularny, usuń nieprzezroczystą przegrodę, jeśli została użyta w pierwszej iteracji, lub umieść ją między mówcą a rozmówcą, jeśli nie została użyta w pierwszej iteracji.</li>
	<li>Powtarzaj zadanie eksperymentalne w razie potrzeby, aż wszystkie bodźce zostaną wyczerpane.</li>
	<li>Zatrzymaj nagrywanie wideo i audio, naciskając odpowiednie przyciski. Poinformuj uczestników, że badanie koncentrowało się na gestach i że zostały one nagrane na wideo, a w razie potrzeby zaproponuj usunięcie swoich filmów przed analizą danych.</li>
	<li>Odpowiedz na wszelkie pytania uczestników i podziękuj im za udział, zanim ich zwolnisz.</li>
</ol>
3. Protokół nauki słów L2
<ol>
	<li>Wideo i audio nagrywają mówcę i rozmówcę, aby można było później przeanalizować produkcję mowy i gestów podczas zadania eksperymentalnego.
	<ol>
		<li>Umieść mikrofon stołowy między mówcą a rozmówcą w celu nagrywania dźwięku. Umieść kamerę wideo z boku między mówcą a rozmówcą pod kątem 90° i upewnij się, że nie jest widoczna dla uczestników.</li>
		<li>Dodatkowo należy upewnić się, że zarówno mówca, jak i rozmówca znajdują się w polu widzenia kamery wideo oraz aby ekran komputera nie był widoczny w polu widzenia kamery wideo, aby zachować ślepotę na stan, w jakim słowa L2 są prezentowane w analizie.</li>
	</ol>
	</li>
	<li>Za pomocą komputera przedstaw słowo L2 z języka docelowego językowi dźwiękowo do mówcy przez słuchawki, aby upewnić się, że jest ono niesłyszalne dla rozmówcy, aby mówca mógł go następnie nauczyć rozmówcy. W tym samym czasie zaprezentuj mówcy film przedstawiający osobę mówiącą w języku docelowym na poziomie L1 wypowiadającą słowo L2 i wykonującą gest przedstawiający jego znaczenie za pomocą tekstu słowa L2 u dołu ekranu lub słowo L2 jako tekst na środku ekranu bez wideo.</li>
	<li>Po przerwie trwającej 500 ms przedstaw mówcy tłumaczenie L1 słowa L2 jako tekst na środku ekranu przez 2000 ms.</li>
	<li>Zachęć osobę wyjaśniającą, aby nauczyła rozmówcę słowa L2 i jego znaczenia za pomocą mowy i/lub gestu.</li>
	<li>Poinstruuj głośnik, aby nacisnął przycisk, aby przejść dalej, gdy będzie gotowy. Po tym, jak mówca to zrobi, przedstaw kolejne słowo L2. Powtarzaj ten proces, aż wszystkie 20 słów L2 zostanie przedstawionych w losowej kolejności.</li>
	<li>Indywidualnie przetestuj wiedzę mówcy i rozmówcy na temat słów L2 przedstawionych w zadaniu eksperymentalnym, prezentując każde słowo L2 jako tekst i prosząc ich o wypowiedzenie jego tłumaczenia L1 lub pominięcie słowa, jeśli nie pamiętają jego tłumaczenia.</li>
</ol>
4. Protokół opowiadania kreskówek
<ol>
	<li>Jeśli IQ uczestnika nie zostało wcześniej zmierzone za pomocą standaryzowanej oceny IQ, podaj ją, aby upewnić się, że jego IQ wynosi 85 lub więcej.</li>
	<li>Wideo i audio nagrywają uczestników, aby ich produkcja mowy i gestów mogła być później analizowana. Umieść mikrofon stołowy przed uczestnikiem w celu nagrywania dźwięku. Umieść kamerę po jednej stronie uczestnika pod kątem 90° i upewnij się, że kamera nie jest widoczna dla uczestnika.</li>
	<li>Zaprezentuj uczestnikowi pierwszą połowę kreskówki Looney Tunes Canary Row. Ta połowa kreskówki zawiera kilka winiet, w których kot Sylvester próbuje złapać ptaka Tweety'ego i nie udaje mu się to.</li>
	<li>Poinstruuj uczestnika, aby opowiedział rozmówcy wydarzenia z pierwszej połowy kreskówki tak szczegółowo, jak tylko jest w stanie sobie przypomnieć. Poinstruuj rozmówcę, aby wysłuchał opowieści uczestnika, zachęcając uczestnika do powiedzenia więcej, jeśli jest ona krótka.</li>
	<li>Powtórz kroki 4.1. i 4.2. dla drugiej połowy filmu Canary Row, który zawiera kilka dodatkowych winiet, w których kot Sylvester próbuje złapać ptaka Tweety'ego i nie udaje mu się.</li>
</ol>
5. Transkrypcja i kodowanie
UWAGA: Aby zminimalizować stronniczość, jeśli to możliwe, transkrybuj i koduj dane na ślepo, nie wiedząc, którzy uczestnicy i badania zostały przypisane do jakich warunków. Idealnie byłoby, gdyby transkrybentzy i koderzy nie byli zaangażowani w gromadzenie danych.
<ol>
	<li>Transkrybuj całą mowę uczestnika ortograficznie ręcznie za pomocą odpowiedniego oprogramowania zgodnie ze standardowym schematem, takim jak CHAT47, aby uzyskać liczbę słów. Transkrybuj wszystkie informacje werbalne, takie jak wypełniacze i poprawki, ale nie przepisuj pauz.</li>
	<li>Zidentyfikuj i zakoduj wszystkie gesty uczestnika, aby uzyskać liczbę dla każdego typu gestu. Zidentyfikuj gesty od spoczynku do spoczynku i podziel je na cztery typy na podstawie taksonomii McNeilla2,3: ikoniczny, metaforyczny, beatowy i deiktyczny. Należy pamiętać, że niektóre gesty mogą być klasyfikowane jako więcej niż jeden typ.</li>
	<li>Oblicz wskaźnik gestów na sto słów, dzieląc liczbę gestów reprezentacyjnych przez liczbę słów i mnożąc ją przez 100 dla każdej winiety.</li>
	<li>Niezależny koder koduje gesty uczestnika dla 25% danych. Oblicz procentową zgodność dla danych zakodowanych przez obu koderów i upewnij się, że wynosi ona co najmniej 80%, aby zapewnić wystarczającą niezawodność między oceniającymi.</li>
</ol>

Protocol for Assessing Gestures Under Communication Challenges

Autor nie ma żadnych konkurencyjnych interesów finansowych, które mógłby zadeklarować.

Obecny protokół manipuluje widocznością mówcy i rozmówcy względem siebie nawzajem, zapewniając wgląd w jego wpływ na produkcję gestów w trudnych okolicznościach: uczenie się słów L2 i opowiadanie narracji przez nastolatków z ASD. Protokół ten może być wdrożony zarówno osobiście, jak i wirtualnie, co pozwala na manipulowanie widocznością uczestników i rozmówców w tandemie lub niezależnie. Może pomieścić szeroką gamę eksperymentalnych zadań, gestów i populacji, zapewniając im elastyczność do realizacji w różnych okolicznościach, w których komunikacja jest trudna, i ujawniając wiele sposobów, w jakie produkcja gestów jest zmieniana w tych okolicznościach. W ten sposób, manipulując widocznością rozmówców, obecny protokół zapewnia wgląd w to, jak gest wpływa na komunikację interpersonalną w populacjach z wyzwaniami komunikacyjnymi.
Podobnie jak w innych podobnych protokołach stosowanych u zdrowych dorosłych użytkowników L1 13,26,42,43, najbardziej krytycznym aspektem obecnego protokołu jest manipulacja widocznością mówców i rozmówców względem siebie. Ze względu na to, że obecny protokół został przeprowadzony osobiście w obu badaniach opisanych tutaj(21,33), widoczność była manipulowana w tandemie, tak że mówcy i rozmówcy byli dla siebie widoczni lub niewidoczni. Obecny protokół można łatwo dostosować do wdrożenia w kontekście wideokonferencji, tak aby można było niezależnie manipulować widocznością mówcy i rozmówcy, co pozwala na rozplątanie wpływu widoczności na wytwarzanie gestów przez mówcę i rozmówcę43. Innym krytycznym aspektem obecnego protokołu jest jego dialogiczny charakter, który odzwierciedla naturalistyczne konteksty konwersacyjne poprzez włączenie zarówno mówcy, jak i rozmówcy, zgodnie z poprzednimi ustrukturyzowanymi zadaniami interaktywnymi używanymi do badania produkcji gestów 11,12,17,18,19,20,22. Warto zauważyć, że rozmówcą może być zarówno drugi uczestnik, jak i asystent naukowy, w zależności od tego, czy jego produkcja gestów jest interesująca. Ostatnim krytycznym aspektem obecnego protokołu jest nieinformowanie uczestników o jego skupieniu się na produkcji gestów i upewnienie się, że nie są świadomi, że są nagrywani na wideo, dopóki zadanie eksperymentalne niezostanie zakończone. Chociaż uczestnicy byli świadomi nagrywania wideo w niektórych badaniach wykorzystujących podobne protokoły 12,20,43, produkcja gestów w protokołach takich jak obecny protokół jest bardziej zbliżona do produkcji gestów w naturalistycznych ustawieniach konwersacyjnych, gdy uczestnicy nie są świadomi, że ich gesty są nagrywane.
Główną zaletą obecnego protokołu jest jego elastyczność w zakresie zadań, uczestników i gestów. Chociaż zadania związane z opowiadaniem narracji są często stosowane ze względu na ich skuteczność w wywoływaniu różnic w produkcji gestów reprezentacyjnych w kontekstach twarzą w twarz26,42, manipulacja może obejmować inne zadania w celu wywołania produkcji gestów, takie jak opisany tutaj paradygmat uczenia się słów L233,48, a także wywiady11,12, opis obrazu13,14, rozwiązywanie zagadek15,16 i prowiantkierunkowy 17,19,27. Ze względu na przyjazność dla uczestników, manipulacja widocznością rozmówcy może być stosowana w populacjach z wyzwaniami komunikacyjnymi, takich jak osoby uczące się L2 i dzieci z zaburzeniami ze spektrum autyzmu, jak opisano tutaj, a także dzieci i dorośli ze specyficznymi zaburzeniami językowymi, jąkaniem, uszkodzeniem mózgu i afazją. Manipulacja widocznością rozmówcy pozwala na badanie gestów reprezentacyjnych, rytmicznych i deiktycznych, umożliwiając ilościowe określenie różnic w ich produkcji przez widoczność rozmówcy w różnych populacjach. Wreszcie, mimo że manipulacja widocznością rozmówcy została pierwotnie opracowana do użytku w kontekście twarzą w twarz, można ją wdrożyć w kontekście wideokonferencji poprzez włączanie i wyłączanie kamery internetowej, co pozwala na bezpośrednie porównanie produkcji gestów, gdy widoczność jest manipulowana w kontekstach wideokonferencyjnych i twarzą w twarz49, a także niezależne badanie wpływu widoczności głównego mówcy i rozmówcy na produkcję gestów43.
Chociaż manipulacja widocznością rozmówcy może przyczynić się do lepszego zrozumienia produkcji gestów w populacjach i okolicznościach, w których występują wyzwania komunikacyjne, ze względu na jej przyjazność i elastyczność dla uczestników, ma ona pewne ograniczenia. W obecnej instancji jest wdrażany osobiście, co może ograniczyć rekrutację do lokalnych prób wygodnych. Ograniczenie to zostało przezwyciężone poprzez wdrożenie w kontekście wideokonferencji, ale do tej pory nie zostało ono wdrożone w populacjach z wyzwaniami komunikacyjnymi w kontekście wideokonferencji, więc stopień, w jakim ustalenia dotyczące wytwarzania gestów w tych populacjach powielają się w tych kontekstach, jest obecnie niejasny. Aby rozwiązać ten problem, obecnie wdrażamy wersję zadania manipulacji z opowiadaniem kreskówek w kontekście wideokonferencji z osobami zdrowymi użytkownikami języka angielskiego L1, którą planujemy wdrożyć w późniejszym czasie z osobami z ASD. Pomimo dostępności manipulacji widocznością dla szerokiego grona potencjalnych uczestników z problemami komunikacyjnymi, uczestnicy muszą być w stanie pomyślnie wykonać zadania, co czyni je niedostępnymi dla uczestników, którzy nie posiadają wystarczającej znajomości języka, w którym są one prowadzone. Chociaż ograniczenie to można do pewnego stopnia rozwiązać poprzez uproszczenie zadań, zmniejszenie wymagań dotyczących produkcji mowy może zmniejszyć produkcję gestów, utrudniając wykrycie różnic w produkcji gestów ze względu na widoczność rozmówcy.
Obecny protokół stanowi pierwszą implementację manipulacji widocznością rozmówcy w populacjach mających problemy z komunikacją. Chociaż widoczność rozmówców była wcześniej manipulowana w celu zbadania jej wpływu na wytwarzanie gestów u zdrowych małych dzieci26, które w niektórych przypadkach mogą mieć trudności z komunikowaniem się w języku angielskim L1, nie doświadczają one stopnia i trwałości wyzwań komunikacyjnych, jak początkujący uczniowie L2 lub młodzież z ASD. Wyniki wcześniej opublikowanych badań omówionych w sekcji21,33 reprezentatywnych wyników służą jako dowód koncepcji, że obecny protokół może ujawnić podobieństwa i różnice w tym, jak widoczność rozmówcy wpływa na produkcję gestów w tych populacjach, pokazując, że można go wdrożyć u osób z większymi i bardziej uporczywymi wyzwaniami komunikacyjnymi niż zdrowe małe dzieci mówiące po angielsku L1. W przyszłości owocne będzie wdrożenie obecnego protokołu w populacjach o jeszcze większych i bardziej uporczywych wyzwaniach komunikacyjnych, takich jak osoby z afazją12,38, specyficznymi zaburzeniami językowymi 35,36,37 lub jąkaniem się 40,41 w celu zbadania wpływu manipulowania widocznością rozmówcy na jego produkcję gestów.
Ogólnie rzecz biorąc, obecne protokoły umożliwiają zbadanie wpływu widoczności rozmówcy na produkcję gestów w obliczu wyzwań komunikacyjnych podczas uczenia się słów L2 i opowiadania narracji u osób z ASD. W ten sposób daje wgląd w stopień, w jakim gesty wykonywane przez osoby z wyzwaniami komunikacyjnymi reagują na potrzeby rozmówców, ujawniając, w jakim stopniu osoby z wyzwaniami komunikacyjnymi angażują się w przyjmowanie perspektywy podczas komunikacji. Manipulacja widocznością rozmówcy zapewnia elastyczność w badaniu tego, jak również innych ważnych pytań teoretycznych dotyczących produkcji gestów z różnymi zadaniami, populacjami i typami gestów w kontekstach wirtualnych, a także twarzą w twarz, ujawniając zakres, w jakim wyniki są uogólnione i powtarzalne oraz zapewniając wgląd w sytuacje, w których można zaobserwować indywidualne różnice w produkcji gestów. W związku z tym manipulacja widocznością rozmówcy może przyczynić się do lepszego zrozumienia produkcji gestów w trudnych okolicznościach komunikacyjnych w kontekstach bezpośrednich i wirtualnych.

Gesty współmowy (dotychczas gesty) - znaczące ruchy rąk wykonywane równolegle z mową - przyczyniają się do komunikacji interpersonalnej poprzez przekazywanie informacji uzupełniających treść werbalną1. Zgodnie z najczęściej używaną taksonomią2,3, gesty można podzielić na trzy kategorie: gesty reprezentacyjne, które przekazują desygnaty poprzez swoją formę i ruch (np. machanie rękami w przód iw tył razem, aby przekazać latanie); gesty beatowe, które przekazują nacisk za pomocą prostych ruchów punktowych (np. przesuwanie dominującej ręki lekko w dół w połączeniu z każdym słowem we frazie "właśnie teraz"); oraz gesty deiktyczne, które zwracają uwagę na obecność lub brak bytu poprzez wskazywanie (np. machanie kciukiem do tyłu, aby wskazać coś za sobą). Gesty reprezentacyjne można dalej podzielić na dwie dodatkowe kategorie: gesty ikoniczne, które przekazują konkretne odniesienia (np. ptak) oraz gesty metaforyczne, które przekazują metaforyczne odniesienia (np. ekstaza). Ponieważ gest i mowa wywodzą się z tej samej treści pojęciowej, są ściśle powiązane znaczeniem4,5. Służąc jako ikoniczne medium wizualne do komunikacji, gesty mogą pomóc zrekompensować pojawiające się wyzwania w rozumieniu języka mówionego6, czy to z powodu indywidualnych czynników, takich jak ograniczona biegłość w mówionym języku7,8 lub czynników środowiskowych, takich jak trudności w słyszeniu mowy9,10. W związku z tym gesty są integralną częścią zrozumienia komunikacji interpersonalnej w kontekstach bezpośrednich i wirtualnych, zapewniając wgląd w to, w jaki sposób mówcy i słuchacze przekazują i rozumieją informacje w sposób multimodalny.
Kilka ustrukturyzowanych interaktywnych zadań zostało opracowanych w celu zmierzenia, jak gest wpływa na komunikację interpersonalną. Zadania te obejmują wywiady, w których uczestnicy odpowiadają na pytania, opisując swoje osobiste doświadczenia11,12; opis obrazu, w którym uczestnikom prezentowany jest statyczny obraz w celu opisania13,14; rozwiązywanie zagadek, w którym uczestnicy opisują, jak rozwiązać zagadkę poprzez prawidłowe zorientowanie przestrzenne komponentów15,16; Przepis kierunkowy, w którym uczestnicy są instruowani, aby udzielać wskazówek do miejsca nieznanego słuchaczom17,18,19; oraz opowiadanie narracyjne, w którym uczestnicy oglądają kreskówkę przedstawiającą sekwencję wydarzeń, a następnie je opowiadają20,21,22. Wiele zadań wykorzystanych w cytowanych powyżej badaniach obejmuje treści przestrzenne i działania, które gest przekazuje ze szczególną skutecznością15,23,24,25. W zadaniach do cytowanych powyżej badań uczestnicy zazwyczaj wytwarzają gesty w połączeniu z językiem, a informacje przekazywane za pomocą gestu i jego związek z jednocześnie wytwarzanym językiem są oceniane. Alternatywnie, uczestnicy mogą obejrzeć nagranie, na którym ktoś gestykuluje (lub nie gestykuluje) i wydobywa język podczas wykonywania jednego z tych zadań, po czym oceniane jest zrozumienie uczestników. Wszystkie te zadania mogą być wykonywane zarówno wirtualnie, jak i twarzą w twarz, co umożliwia zbieranie danych od szerokiego grona uczestników i porównywanie ich między modalnościami.
Wpływ gestów na komunikację interpersonalną został zaimplementowany z szerokim gronem uczestników. Szczególnym zainteresowaniem cieszyły się populacje z problemami komunikacyjnymi, w tym małe dzieci26,27,28,29,30, użytkownicy drugiego języka (L2)8,31,32,33, osoby z zaburzenie ze spektrum autyzmu (ASD)20,21,22,34, osoby ze specyficznymi zaburzeniami językowymi35,36,37, osoby z afazją12,38, osoby z uszkodzeniem mózgu39oraz osoby jąkające się40,41. Praca ta ujawniła, że podczas gdy wiele z tych populacji może wykorzystywać gesty do ułatwiania komunikacji, niektóre, takie jak osoby z zaburzeniami ze spektrum autyzmu, mogą napotkać trudności z wykorzystaniem gestów do skutecznej komunikacji. Wyniki sugerują, że może to wynikać ze stopnia, w jakim populacje te biorą pod uwagę projekt publiczności i wskazówki środowiskowe, podkreślając praktyczne implikacje tych wyjaśnień dla wpływu gestów na komunikację.
Kluczową funkcją pozwalającą na wgląd w wpływ gestów na komunikację interpersonalną jest widoczność rozmówców. Kwestią o dużym znaczeniu w dziedzinie badań gestami jest stopień, w jakim uczestnicy wykonują gest na własną korzyść, wskazując na przeładowanie operacji poznawczych na ciało, a vs. na korzyść ich rozmówców, wskazując na użycie gestu do komunikowania się. To pytanie zostało zbadane poprzez zbadanie wpływu (nie)widoczności rozmówcy na produkcję gestów w kontekstach twarzą w twarz za pomocą nieprzezroczystej partycji26,42, a także w kontekstach telefonicznych13 i virtual contexts43. Ogólnie rzecz biorąc, wyniki tej pracy wskazują, że chociaż mówcy gestykulują dla własnej korzyści, wytwarzają więcej gestów reprezentacyjnych podczas komunikowania się z widzialnymi niż niewidocznymi rozmówcami, podczas gdy produkcja gestów rytmu jest podobna niezależnie od widoczności rozmówcy. W związku z tym sugerują, że gest reprezentacyjny ułatwia komunikację w różnych kontekstach, sugerując, że mówcy biorą pod uwagę perspektywę swoich rozmówców i odpowiednio modyfikują swoją produkcję gestów. Chociaż wcześniejsze badania badające wpływ widoczności rozmówców odegrały zasadniczą rolę w dostarczeniu wglądu w wkład gestów w komunikację interpersonalną, koncentrowały się na języku angielskim jako pierwszym języku (L1) w typowo rozwijających się populacjach, więc nie jest jasne, czy wyniki można rozszerzyć na populacje z wyzwaniami komunikacyjnymi. Dwie takie populacje to osoby uczące się L2, które mogą mieć trudności z komunikowaniem się za pomocą mowy w języku docelowym, oraz dzieci z ASD, których komunikacja werbalna i niewerbalna jest nieprawidłowa. Co więcej, niewiele badań dotyczyło wpływu widoczności rozmówcy na produkcję gestów w kontekstach wirtualnych, które pozwalają na oddzielenie wpływu widoczności rozmówcy na uczestnika od efektu widoczności uczestnika dla rozmówcy, więc powtarzalność wyników z tych kontekstów jest obecnie niejasna. Wreszcie, niektóre badania koncentrowały się na wpływie widoczności rozmówcy na produkcję określonych typów gestów, więc nie jest jasne, czy na produkcję innych rodzajów gestów w podobny sposób wpływa widoczność rozmówcy.
Opisane poniżej protokoły manipulują widocznością rozmówcy, aby zbadać produkcję gestów w trudnych warunkach: nauka słów L2 i opowiadanie narracji przez osoby z ASD. Protokół uczenia się słów L2 łączy badania badające wpływ obserwowania gestów na uczenie się słów L2 z badaniami badającymi wkład gestów w komunikację za pośrednictwem interaktywnego paradygmatu uczenia się słów. W tym paradygmacie uczestnicy niezaznajomieni z językiem docelowym uczą się słów w tym języku, a następnie uczą tych słów innych uczestników niezaznajomionych z językiem docelowym, co pozwala na zbadanie wpływu widoczności rozmówcy na produkcję gestów na najwcześniejszych etapach przyswajania L2 w kontekście konwersacyjnym. Paradygmat opowiadania kreskówek wykorzystuje szeroko stosowane zadanie opowiadania narracyjnego, w którym zaobserwowano różnice w produkcji gestów, gdy manipuluje się widocznością rozmówcy w nowej populacji: nastolatkach z ASD. Populacja ta jest interesująca, ponieważ rozwój języka, w tym produkcja gestów, dojrzewa w okresie dojrzewania, a ASD pociąga za sobą trudności w komunikacji werbalnej i niewerbalnej, w tym gestach, a także brak wrażliwości na potrzeby komunikacyjne rozmówców. Razem protokoły te dają wgląd w stopień, w jakim produkcja gestów jest zależna od mowy i odwrotnie, może ją kompensować, gdy komunikacja interpersonalna jest trudna.
Na podstawie wyników pokazujących, jak widoczność słuchaczy wpływa na produkcję gestów przez osoby mówiące po angielsku L113,26,42,43, postawiono hipotezę, że uczestnicy będą wykonywać więcej ogólnych gestów i więcej gestów reprezentacyjnych podczas omawiania słów L2 z widocznym niż niewidocznym rozmówcą. Na podstawie wyników wykazujących nieprawidłowości w produkcji gestów w ASD20,44, postawiono hipotezę, że nastolatki z ASD będą wytwarzać mniej ogólnych gestów, a także mniej gestów reprezentacyjnych i deiktycznych niż nastolatki z typowo rozwijającymi się (TD). Ponadto, na podstawie wyników wskazujących, że ASD wiąże się z trudnościami w przyjmowaniu perspektywy45, postawiono hipotezę, że wykonywanie gestów przez nastolatków z ASD nie różniłoby się istotnie w obecności widocznych i niewidocznych rozmówców. Wreszcie, przewidywano interakcję między diagnozą a widocznością, tak że produkcja gestów nie różniłaby się w zależności od widoczności u nastolatków z ASD, ale u nastolatków z TD.

<table><tbody><tr><td>Komputer</td><td>Apple</td><td>Z131</td><td>24" iMac, 8-rdzeniowy procesor i GPU, układ M3</td></tr><tr><td>Konferencyjny mikrofon USB</td><td>Tonor</td><td>B07GVGMW59</td><td></td></tr><tr><td>ELAN</td><td>Archiwum</td><td></td> językowe <td>Aplikacja do transkrypcji mowy i gestów</td></tr><tr><td>Magnetowid</td><td>Vjianger</td><td>B07YBCMXJJ</td><td>FHD 2.7K 30 FPS 24 MP 16-krotny zoom cyfrowy 3-calowy magnetowid z ekranem dotykowym</td></tr><tr><td>Weschler Skrócona Skala Inteligencji</td><td>Pearson</td><td>158981561</td><td>Służy do weryfikacji IQ w pełnej skali &ge; 80 w Morett et al. (2016)</td></tr></tbody></table>

badanie produkcji gestów w obliczu wyzwań komunikacyjnych

Examining Gesture Production in the Presence of Communication Challenges

Zrozumienie, dlaczego mówcy modyfikują swoje gesty podczas rozmowy z rozmówcami, dostarcza cennych informacji na temat tego, jak te gesty przyczyniają się do komunikacji interpersonalnej w kontekstach twarzą w twarz i wirtualnych. Obecne protokoły manipulują widocznością mówców i ich rozmówców w kontekście twarzą w twarz, aby zbadać wpływ widoczności na produkcję gestów, gdy komunikacja jest trudna. W tych protokołach mówcy wykonują zadania, takie jak nauczanie słów z nieznanego drugiego języka lub opowiadanie o wydarzeniach z winiet z kreskówek rozmówcy, który jest albo innym uczestnikiem, albo konfederatem. Podczas wykonywania tych zadań mówcy są widoczni lub niewidoczni dla swojego rozmówcy, a mówca jest widoczny lub niewidoczny dla uczestnika. W zadaniu uczenia się słów mówcy i rozmówcy widoczni dla siebie nawzajem wytwarzają więcej gestów reprezentacyjnych, które przekazują znaczenie za pomocą kształtu dłoni i ruchu, oraz gestów deiktycznych (wskazujących) niż mówcy i rozmówcy, którzy nie są dla siebie widoczni. W protokole opowiadania narracyjnego nastolatki z zaburzeniami ze spektrum autyzmu (ASD) wykonywały więcej gestów podczas rozmowy z widocznymi rozmówcami niż z niewidocznymi rozmówcami. Główną zaletą obecnego protokołu jest jego elastyczność pod względem badanych zadań, populacji i gestów, a obecny protokół może być wdrażany zarówno w kontekście wideokonferencji, jak i twarzą w twarz. W związku z tym obecny protokół ma potencjał, aby pogłębić zrozumienie produkcji gestów poprzez wyjaśnienie jej roli w komunikacji interpersonalnej w populacjach z wyzwaniami komunikacyjnymi.

Nauka słownictwa w języku L2 
Implementacja: Wyniki przedstawione poniżej opierają się na danych zebranych od 52 zdrowych uczestników (21 mężczyzn, 31 kobiet; wiek: M = 20,15, SD = 1,73, zakres = 18-28) zgodnie z opisanym powyżej protokołem. Wszystkie wypowiedzi i gesty zostały zakodowane przez głównego koderem, który nie mógł być zaślepiony co do warunku widoczności, ponieważ dane od mówcy i interlokutora były rejestrowane za pomocą jednej kamery, jak opisano w kroku 3.4. W celu ustalenia niezawodności między sędziami, drugi koder niezależnie zakodował wszystkie gesty wykonane przez 6 losowo wybranych par (k = 389, 23,08% danych). Zgodność między koderem głównym a pomocniczym wyniosła 92% w identyfikacji gestów i 90% w ich kategoryzacji.
Przegląd analiz: W poniższych analizach porównano całkowitą produkcję gestów oraz produkcję różnych rodzajów gestów zarówno u mówców, jak i u rozmówców, w zależności od widoczności, aby ocenić ich wpływ na komunikowanie słów w języku L2. Ze względu na brak normalności rozkładu i występowanie skośności, porównania w zależności od widoczności przeprowadzono za pomocą nieparametrycznych testów U Manna-Whitneya, które nie wymagają założeń dotyczących normalności i skośności rozkładu. Bardziej szczegółowo, testy U Manna-Whitneya wykorzystano do ustalenia, czy prawdopodobieństwo wystąpienia większej liczby gestów w warunku widoczności niż w warunku braku widoczności było równe prawdopodobieństwu wystąpienia większej liczby gestów w warunku braku widoczności niż w warunku widoczności.
Wyniki: test Manna-Whitneya U testy wykazały, że mówcy główni, których rozmówcy byli widoczni, wykonywali więcej gestów niż mówcy główni, których rozmówcy nie byli widoczni, U = 53, p = ,02. W szczególności mówcy główni z widocznymi rozmówcami produkowali więcej treści reprezentacyjnych, U = 30, p = 0,001 i deiktyczny, U = 52, p = 0, gestykulują częściej niż główni mówcy z niewidocznymi rozmówcami (patrz Rycina 1). Produkcja gestów rytmicznych (beat gestures) u głównych mówców nie różniła się istotnie w zależności od warunków widoczności, U = 82, n.s., choć gesty te pojawiały się częściej w obecności widocznych niż niewidocznych interlokutorów. Choć interlokutorzy widoczni dla głównych mówców również wykonywali więcej gestów niż interlokutorzy niewidoczni dla głównych mówców, różnica ta nie osiągnęła poziomu istotności statystycznej, U = 89, n.s. Żadne z porównań między różnymi typami gestów w zależności od widoczności nie osiągnęło poziomu istotności w przypadku interlokutorów, pomimo faktu, że produkowali oni więcej gestów każdego typu w obecności widocznych, a nie niewidocznych mówców głównych. Wyniki te stanowią dowód na to, że mówcy główni zwiększają produkcję gestów reprezentacyjnych i deiktycznych w obecności widocznych interlokutorów, podczas gdy ich interlokutorzy mogą tego nie robić.
Wyniki retellingu komiksu 
Realizacja: Wyniki przedstawione poniżej opierają się na danych zebranych od 41 uczestników w wieku adolescentnym, z czego 18 zdiagnozowano w kierunku ASD (15 osób płci męskiej, 3 osoby płci żeńskiej; wiek: M = 15,17, SD = 2,75, zakres = 10,44 - 19,49), a 23 rozwijało się typowo (15 osób płci męskiej, 6 osób płci żeńskiej; wiek: M = 15,81, SD = 2,42, zakres = 11,52-19,36). Uczestnicy w obu grupach zostali dopasowani pod względem wieku chronologicznego, płci oraz werbalnego IQ. Cała mowa i gestykulacja zostały zakodowane przez dwóch koderów, którzy nie znali warunków widoczności ani diagnozy. W celu ustalenia niezawodności między sędziami, drugi koder niezależnie zakodował wszystkie gesty wykonane przez 10 losowo wybranych uczestników (24,3% danych). Zgodność między głównym a pomocniczym sędzią wyniosła 98% w zakresie identyfikacji gestów i 95,4% w zakresie ich kategoryzacji.
Przegląd analiz: W poniższych analizach porównano ogólną produkcję gestów oraz produkcję różnych typów gestów w zależności od diagnozy i widoczności, aby ocenić ich wpływ na komunikację. W szczególności zastosowano dwuczynnikową analizę wariancji w celu zbadania zarówno niezależnych, jak i interakcyjnych efektów diagnozy (ASD vs. TD) oraz widoczności (widoczna vs. niewidoczna).
Wyniki: W odniesieniu do ogólnej produkcji gestów nie stwierdzono głównego efektu diagnozy (F &lt; 1). Odnotowaliśmy jednak interakcję między rodzajem gestu a diagnozą (F(3,117) = 0.74, p = 0,05, ηp2 = 0,07). W szczególności młodzież z ASD wykonywała mniej gestów metaforycznych (M = 0.48; SD = 0.63), t(39) = 1.99, p = 0.05, d = 0,49 oraz gesty rytmiczne (M = 0.26; SD = 0.60, t(39) = 2.13, p = 0.04, d = 0,67) niż typowo rozwijający się nastolatkowie (metaforycznie: M = 1.08; SD = 1,62; uderzenie: M = 1.14; SD = 1,76). Nie stwierdzono różnic między młodzieżą z ASD a młodzieżą z TD w zakresie produkcji gestów ikonicznych (ASD: M = 0.79; SD = 0,25; TD: M = 0.77; SD = 0.25; t &lt; 1) lub deiktyczne (ASD: M = 0.36; SD = 0,16; TD: M = 0.25; SD = 0.10; t&lt;1) gesty. Zarówno młodzieży z ASD, jak i młodzieży z typowym rozwojem (TD) towarzyszyła większa liczba gestów podczas mówienia do widocznego słuchacza (M = 0,97 g/100; SD = 1,45) niż słuchacz niewidoczny (M = 0,36 g/100; SD = 0.83; F(1,39) = 18.18, p &lt; 0,001, ηp2 = 0,32; patrz Rysunek 2). Jednakże ogólna produkcja gestów nie wykazała interakcji między diagnozą a widocznością rozmówcy (F &lt; 1). Podsumowując, wyniki te wskazują, że młodzież z ASD posługuje się innymi rodzajami gestów niż ich rówieśnicy z grupy TD, jednak – podobnie jak w przypadku rówieśników z grupy TD – młodzież z ASD zwiększa częstotliwość stosowania wszystkich rodzajów gestów podczas rozmowy z widocznym rozmówcą.
<img alt="Wykres słupkowy porównujący częstotliwość gestykulacji: główny mówca vs rozmówca, w kontekstach widocznych i niewidocznych." class="xfigimg" src="/files/ftp_upload/66256/66256fig01.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 1"> 
Rycina 1: Produkcja gestów przez głównych mówców i rozmówców w zadaniu nauki słownictwa L2. Produkcja gestów przez głównych mówców i rozmówców na sto słów w zależności od warunku widoczności (słupki błędu przedstawiają błąd standardowy). <a href="https://www.jove.com/files/ftp_upload/66256/66256fig01large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić większą wersję tej ryciny.</a>
<img alt="Wykres słupkowy analizy gestów dla ASD i TD, porównujący rodzaje gestów: ikoniczne, metaforyczne, beaty, deiktyczne." class="xfigimg" src="/files/ftp_upload/66256/66256fig02.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 2"> 
Rysunek 2: Produkcja gestów u nastolatków z ASD i TD w zależności od widoczności słuchacza w zadaniu retellingu komiksu. Produkcja różnych typów gestów na sto słów przez nastolatków z ASD i TD w (A) warunku z widocznym słuchaczem oraz (B) warunku z niewidocznym słuchaczem (słupki błędów reprezentują błąd standardowy). Rysunek został zmodyfikowany za zgodą Morett et al.21. <a href="https://www.jove.com/files/ftp_upload/66256/66256fig02large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.</a>

Tutaj prezentujemy protokół, który manipuluje widocznością rozmówcy, aby zbadać jego wpływ na produkcję gestów w komunikacji interpersonalnej. Protokół ten jest elastyczny w stosunku do realizowanych zadań, badanych gestów i modalności komunikacji. Jest idealny dla populacji z problemami komunikacyjnymi, takich jak osoby uczące się drugiego języka i osoby z zaburzeniami ze spektrum autyzmu.

Badanie produkcji gestów w obliczu wyzwań komunikacyjnych

Understanding why speakers modify their co-speech hand gestures when speaking to interlocutors provides valuable insight into how these gestures ...

W swoich badaniach badam poznawcze i neuronalne mechanizmy wpływu organizmu na komunikację za pomocą gestów dłoni i języka migowego. Głównym celem mojej pracy jest to, jak związek między gestem a mową różni się w typowym i nietypowym rozwoju i przetwarzaniu języka. Techniki neurobiologiczne in vivo, takie jak elektroencefalografia lub EEG, funkcjonalny rezonans magnetyczny lub fMRI oraz funkcjonalna spektroskopia bliskiej podczerwieni lub fNIRS, odegrały zasadniczą rolę w ujawnieniu mechanizmów neuronalnych gestów dłoni i języka migowego.Ponadto śledzenie ruchu gałek ocznych zapewnia wgląd w przetwarzanie gestów dłoni i języka migowego w czasie rzeczywistym. Moja praca była pierwszą, która pokazała, że obserwowanie gestów rąk przekazujących kontury wysokości dźwięku pomaga osobom posługującym się językami atonalnymi, takimi jak angielski, w nauce tonu leksykalnego i języków tonalnych, takich jak mandaryński. Obecnie używam EEG i fNIRS do badania sygnatur neuronalnych tego efektu.Protokół ten zapewnia środki do badania produkcji gestów w obecności wyzwań komunikacyjnych. Z powodzeniem wykorzystałem go do zbadania produkcji gestów u osób uczących się drugiego języka i osób z zaburzeniami ze spektrum autyzmu w sytuacjach osobistych i planuję rozszerzyć go na dodatkowe populacje i ustawienia wirtualne. Moje odkrycia dają wgląd w to, w jaki sposób obserwowanie i wytwarzanie gestów dłoni może ułatwić przyswajanie i przetwarzanie języka.Co więcej, pomagają one w ujawnieniu potencjalnych biomarkerów nietypowych cech językowych, a także skuteczności leczenia.

examining-gesture-production-presence-communication

Research

JoVE Journal

Behavior

Zachowanie

Obiektywne oceny mechanizmów fizjologicznych wspierających mowę są niezbędne do monitorowania początku i postępu choroby u osób z ALS oraz do ilościowego określenia efektów leczenia w badaniach klinicznych. W niniejszym filmie przedstawiamy kompleksowy protokół oparty na instrumentacji, służący do ilościowej oceny sprawności motorycznej mowy w populacjach klinicznych.

Protokół kompleksowej oceny dysfunkcji opuszkowej w stwardnieniu bocznym zanikowym (SLA)

Jednopulsowa przezczaszkowa stymulacja magnetyczna nad główną korą ruchową, neuronawigacja i rejestracja aktywności elektromiograficznej mięśni dłoni zostały wykorzystane w tym badaniu do zbadania pobudliwości korowo-rdzeniowej, podczas gdy uczestnicy obserwowali sekwencje działań.

Modulacja pobudliwości korowo-rdzeniowej podczas obserwacji działania

Podczas gdy poprzednie badania nad samoświadomością ciała zakładały, że ruchy własne i pochodzące od innych osób są percepcyjnie rozróżnialne, ten protokół pozwala im być niejednoznacznym na wirtualnej ręce z niezamierzonymi niewielkimi ruchami. To pozwala nam obserwować czyjeś doświadczenie utworzone przez SoO i inne wytworzone SoA, a nie brak SoA.

Wirtualna ręka z niejednoznacznym ruchem między sobą a innym pochodzeniem: poczucie własności i sprawczość "wyprodukowana przez innych"

Protokół jest proponowany do uchwycenia naturalnej funkcji ręki osób z upośledzeniem ręki podczas ich codziennych czynności za pomocą egocentrycznej kamery. Celem protokołu jest zapewnienie, że nagrania są reprezentatywne dla typowego użycia dłoni przez daną osobę podczas codziennych czynności w domu.

Uchwycenie reprezentatywnego użycia dłoni w domu za pomocą egocentrycznego wideo u osób z upośledzeniem kończyn górnych

Obecny protokół łączy funkcjonalną spektroskopię bliskiej podczerwieni (fNIRS) i obserwację opartą na wideo, aby zmierzyć synchronizację interpersonalną w kwartetach podczas wspólnego zadania rysowania.

Synchronizacja grupowa podczas wspólnego rysowania przy użyciu funkcjonalnej spektroskopii bliskiej podczerwieni

Badanie wprowadza paradygmat treningowo-testujący w celu zbadania efektów starych/nowych potencjałów związanych z wydarzeniem w pewnych i wątpliwych scenariuszach prozodycznych. Dane ujawniają zwiększoną późną składową dodatnią w przedziale 400-850 ms w Pz i innych elektrodach. Ten proces może badać czynniki poza prozodią mowy i ich wpływ na identyfikację wskaźników wiązania celu.

Trening i testowanie oparte na zapamiętywaniu paradygmatu dla solidnej identyfikacji głosu w emocjonalnej mowie z wykorzystaniem analizy potencjałów związanych z wydarzeniami

Artykuł przedstawia kompleksowy protokół jednoczesnego rejestrowania elektromiografii dłoni (EMG) i wizualnego śledzenia palców podczas naturalnej gestykulacji palcami. Dane wizualne mają służyć jako podstawa do opracowania dokładnych modeli obliczeniowych opartych na EMG do rozpoznawania gestów palców.

Rejestrowanie dynamicznych gestów palcami za pomocą elektromiografii powierzchniowej o wysokiej rozdzielczości i komputerowego systemu wizyjnego

Procedura imitacji wywołanej została ustanowiona w celu zbadania rozwoju pamięci pamięciowej w niemowlęctwie i wczesnym dzieciństwie. Procedura ta jest szeroko stosowana w celu ustanowienia solidnych podstaw natury pamięci przywoławczej w niemowlęctwie i wczesnym dzieciństwie.

Badanie pamięci przywoławczej w niemowlęctwie i wczesnym dzieciństwie przy użyciu paradygmatu wywołanego naśladownictwa

Mysie ultradźwiękowe wokalizacje są używane jako proxy do modelowania genetycznych podstaw deficytów komunikacji głosowej w mysich modelach zaburzeń neuropsychiatrycznych. Niniejszy protokół opisuje trzy konteksty eksperymentalne, które niezawodnie wywołują ultradźwiękowe wokalizacje od szczeniąt (w trakcie rozwoju) i dorosłych myszy (interakcje tej samej płci, interakcje samca-samicy w rui).

Nagrywanie wokalizacji ultradźwiękowych myszy w celu oceny komunikacji społecznej

Pamięć robocza przewiduje znaczną ilość wariancji dla różnych zadań poznawczych, w tym mówienia, czytania i pisania. Dostępnych jest jednak niewiele narzędzi do oceny pamięci roboczej u dzieci. Prezentujemy innowacyjną, komputerową baterię, która kompleksowo ocenia różne składowe pamięci operacyjnej u dzieci w wieku szkolnym.

Ocena pamięci roboczej u dzieci: Kompleksowa bateria oceny dla dzieci – Pamięć robocza (CABC-WM)

Poznaj metodę badania produkcji gestów w komunikacji międzyosobowej przy różnym widoczności rozmówcy. Protokół ten umożliwia analizę zachowań gestycznych u osób z trudnościami komunikacyjnymi, w tym uczących się języka obcego i osób z autyzmem.

Badanie produkcji gestów w obliczu wyzwań komunikacyjnych

Przeglądaj więcej filmów