Name: Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych (Wideo) | JoVE Journal
Uploaded: 2018-11-30T12:30:00.000+00:00
Duration: 7 min 36 s
Description: Poznaj metodologię śledzenia ruchu gałek ocznych w badaniach psycholingwistycznych nad rozumieniem języka. Precyzyjna kalibracja i analiza wzorców wzrokowych pozwalają zbadać wpływ kontekstu wizualnego na przetwarzanie językowe.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

To badanie zostało sfinansowane przez ZuKo (Inicjatywa Doskonałości, Humboldt-Universität zu Berlin), Klaster Doskonałości 277 'Technologia interakcji kognitywnej' (Niemiecka Rada ds. Badań Naukowych, DFG) oraz przez Siódmy Program Ramowy Unii Europejskiej w zakresie badań, rozwoju technologicznego i demonstracji na podstawie umowy o grant nr 316748 (LanPercept). Autorzy dziękują również za wsparcie ze strony Funduszy Podstawowych dla Centrów Doskonałości, projektu FB0003 z Programu Badań Stowarzyszeniowych CONICYT (rząd Chile) oraz projektu "FoTeRo" w centrum Focus XPrag (DFG). Pia Knoeferle dostarczyła pierwszy szkic artykułu oparty na protokole laboratoryjnym, który Helene Kreysa stworzyła na Uniwersytecie w Bielefeld i który jest nadal używany na Uniwersytecie Humboldta w Berlinie. Wszyscy autorzy przyczynili się do powstania treści, dostarczając informacji na temat metod i wyników w takiej czy innej formie. Camilo Rodríguez Ronderos i Pia Knoeferle koordynowali wkład autorów i w dwóch wersjach znacznie poprawili pierwotny projekt. Ernesto Guerra stworzył rysunki 2-4 w oparciu o wkład Katji Münster, Alby Rodríguez i Ernesto Guerry. Helene Kreysa dostarczyła rysunek 1, a Pia Knoeferle go zaktualizowała. Część przedstawionych wyników została opublikowana w czasopiśmie Proceedings of the Annual Meeting of the Cognitive Science Society.

Ten protokół jest zgodny z wytycznymi etycznymi instytucji, w której dane zostały zebrane, tj. Klastra Doskonałości Technologii Interakcji Kognitywnej (CITEC) Uniwersytetu w Bielefeld i Humboldt-Universität zu Berlin. Eksperymenty przeprowadzone na Uniwersytecie w Bielefeld zostały zatwierdzone indywidualnie przez komisję etyczną Uniwersytetu w Bielefeld. Laboratorium psycholingwistyki na Uniwersytecie Humboldta w Berlinie posiada laboratoryjny protokół etyczny, który został zatwierdzony przez komisję etyczną Deutsche Gesellschaft für Sprachwissenschaft, Niemieckiego Towarzystwa Językoznawczego (DGfS).
1. Konfiguracja pulpitu
UWAGA: Poniżej znajdują się kluczowe kroki w eksperymencie ze śledzeniem ruchu gałek ocznych.
<ol>
	<li>Przygotowanie instrumentu
	<ol>
		<li>Włącz kamerę śledzącą ruch gałek ocznych i komputer hosta (patrz Rysunek 1 dla ilustracji zbierania danych w laboratorium i konfiguracji wstępnego przetwarzania).</li>
		<li>Uruchom oprogramowanie do śledzenia ruchu gałek ocznych.</li>
		<li>Włącz komputer z wyświetlaczem. Otwórz folder zawierający eksperymenty.</li>
		<li>Uruchom "wdrożoną" wersję z rozszerzeniem .exe, klikając je dwukrotnie.</li>
		<li>W zależności od konfiguracji może pojawić się monit o wybranie listy eksperymentalnej, która zazwyczaj jest plikiem .csv/.txt rozdzielanym tabulatorami, zawierającym warunki, nazwy plików dźwiękowych, napisane zdania i/lub obrazy, na które uczestnik będzie narażony. Wybierz listę, a program się uruchomi. Nazwij plik wyjściowy, w którym będą przechowywane wyniki. 
		UWAGA: Plik wyjściowy jest zapisywany na komputerze wyświetlającym, a kopia zapasowa jest zapisywana na komputerze hosta.</li>
		<li>Pozostaw otwarty pierwszy ekran eksperymentu (ekran wprowadzający lub powitalny).</li>
		<li>Zdejmij osłonę ochronną z kamery śledzącej ruch gałek ocznych.</li>
		<li>Ze względów higienicznych umieść chusteczkę na uchwycie podbródka.</li>
		<li>Opcjonalnie: Przygotuj konsolę odpowiedzi i/lub klawiaturę zgodnie z wymaganiami eksperymentu.</li>
		<li>Opcjonalnie: Jeśli prezentujesz bodźce słuchowe, dostosuj głośność głośników i przetestuj je przed rozpoczęciem eksperymentu. Alternatywnie przetestuj funkcjonalność słuchawek, z których będzie korzystał uczestnik.</li>
		<li>Przygotuj niezbędne formularze do podpisania przez uczestnika.</li>
		<li>Dostosuj natężenie światła w laboratorium, aby pomieszczenie było słabo oświetlone i miało stałą luminancję przez cały czas trwania procesu zbierania danych.</li>
	</ol>
	</li>
	<li>Przygotowanie dla uczestników 
	<ol>
		<li>Po przybyciu uczestników przedstaw się.</li>
		<li>Umieść znak "Nie przeszkadzać" na drzwiach laboratorium.</li>
		<li>Poproś uczestnika, aby usiadł.</li>
		<li>Przeprowadź uczestnika przez arkusz informacyjny oraz niezbędne formularze zgody i dane demograficzne.</li>
		<li>Pozwól uczestnikowi przeczytać i podpisać formularz zgody.</li>
		<li>Wyjaśnij pokrótce ogólne aspekty eksperymentu i czas jego trwania. Nie podawaj zbyt wielu informacji przed eksperymentem, ponieważ może to wpłynąć na zachowanie wzroku uczestnika i uzyskane dane.</li>
		<li>Przekaż pisemne instrukcje i daj uczestnikowi możliwość zadawania pytań.</li>
		<li>Krótko wyjaśnij działanie urządzenia śledzącego ruch gałek ocznych.</li>
		<li>W razie potrzeby wyjaśnij zadanie i wskaż wszelkie przyciski/, które będą musiały zostać naciśnięte podczas eksperymentu.</li>
		<li>Wyjaśnij, w jaki sposób podpórka podbródka ma na celu zminimalizowanie ruchów głowy podczas eksperymentu. Wspomnij, że urządzenie działa najlepiej, jeśli uczestnik unika jakichkolwiek ruchów.</li>
	</ol>
	</li>
	<li>Konfiguracja urządzenia do śledzenia ruchu gałek ocznych
	<ol>
		<li>Przygotuj uczestnika do eksperymentu: poproś go, aby usiadł przy stole i położył brodę na podbródku. Poproś go, aby oparł czoło o zagłówek.</li>
		<li>Poproś uczestnika, aby w razie potrzeby wyregulował wysokość i pozycję krzesła: uczestnik powinien czuć się komfortowo, opierając brodę na podbródku, a czoło na zagłówku.</li>
		<li>Wyjaśnij, że podczas eksperymentu często zdarza się przypadkowe poruszenie głową i że należy tego unikać. Wyjaśnij, że podczas eksperymentu może zaistnieć potrzeba skorygowania ułożenia głowy.</li>
		<li>Jeśli eksperyment wymaga naciśnięcia przycisku (np. za pomocą podkładki odpowiedzi), poinstruuj uczestnika, aby pozostawił palce spoczywające na przyciskach, które mają zostać naciśnięte i unikał patrzenia w dół na podkładkę odpowiedzi podczas naciskania przycisku.</li>
		<li>Poproś uczestnika, aby przeczytał ekran powitalny/wprowadzający.</li>
		<li>Usiądź przed komputerem hosta. Jeśli na ekranie nie ma jeszcze ustawień kamery, kliknij Ustawienia kamery, aby przejść do prawego ekranu. Jeśli osłona ochronna została zdjęta z obiektywu kamery, a uczestnik jest prawidłowo umieszczony na podbródku, na ekranie powinny pojawić się trzy obrazy oczu uczestnika: większy obraz u góry i dwa mniejsze na dole po lewej i prawej stronie. Te mniejsze obrazy pokazują po jednym oku, odpowiadającym lewemu i prawemu oku.</li>
		<li>Wybierz oko, które ma być śledzone. Zwyczajowo śledzi się dominujące oko uczestnika. Jeśli uczestnik nie wie, które oko jest dominujące, przeprowadź test dominacji oka (krok 1.3.8).</li>
		<li>Określ dominację oka. Poproś uczestnika, aby wyciągnął jedną rękę i wyrównał kciuk z odległym obiektem z otwartymi oczami. Poproś uczestnika, aby na przemian zamykał lewe lub prawe oko. Oko dominujące to takie, w którym kciuk pozostaje wyrównany z obiektem, gdy oko jest otwarte35,36.</li>
		<li>Kliknij na Obrazek | Wyświetl komputer (lub naciśnij Enter), a obrazy opisane w kroku 1.3.6 również pojawią się na ekranie wyświetlacza uczestnika, ale tylko pojedynczo.</li>
		<li>Naciśnij strzałkę w lewo/w prawo na klawiaturze komputera eksperymentatora lub uczestnika, aby przełączać się między mniejszym i większym obrazem oka. Skoncentruj się na mniejszym obrazie (oku).</li>
		<li>Naciśnij A (Wyrównaj okno oka) na dowolnej klawiaturze, aby wyśrodkować pole limitów wyszukiwania na pozycji źrenicy. Następnie powinien pojawić się czerwony kwadrat wokół oka z turkusowym okręgiem ['odbicie rogówki', (cr)] w pobliżu dolnej części źrenicy. Sama źrenica powinna być niebieska.</li>
		<li>Upewnij się, że na ekranie pojawiają się dwa krzyżyki ("krzyżyki") — jeden na środku źrenicy, a drugi na środku odbicia rogówki. Czerwona ramka i dwa krzyżyki oznaczają, że eye tracker wykrywa źrenicę i cr. 
		UWAGA: Jeśli czerwona ramka lub krzyżyki są nieobecne, oko nie jest śledzone - jeśli tak się stanie, na komputerze eksperymentatora pojawi się brak źrenicy.</li>
		<li>Dostosuj ostrość aparatu, ręcznie obracając obiektyw ostrości. Uważaj, aby nie dotknąć przedniej części obiektywu. Obracaj obiektyw, aż zostanie osiągnięty najlepszy punkt ostrości. 
		UWAGA: Najlepszy punkt ostrości jest osiągany, gdy turkusowy okrąg (odbicie rogówki) jest tak mały, jak to możliwe (tj. gdy ten okrąg jest ostry).</li>
		<li>Ustaw próg źrenicy. Upewnij się, że tylko obraz źrenicy jest niebieski (np. rzęsy nie powinny być niebieskie) na komputerze hosta. Upewnij się również, że cała źrenica (nie tylko jej środkowa część) jest niebieska. Martw się tylko o to, co znajduje się w czerwonym kwadracie.</li>
		<li>Naciśnij A. Spowoduje to automatyczne ustawienie progu źrenicy. Jeśli źrenica nie jest dokładnie wyświetlana na niebiesko, wyreguluj próg ręcznie, używając W GÓRĘ, aby zwiększyć, i W DÓŁ, aby zmniejszyć ilość niebieskiej części powierzchni obrazu. 
		UWAGA: Tusz do rzęs (który zwykle jest, podobnie jak źrenica) może przeszkadzać w ustawieniu progu - eye tracker może wziąć ciemne rzęsy za źrenicę. W takim przypadku poproś uczestnika o usunięcie makijażu, dostarczając mu chusteczki do demakijażu.</li>
		<li>Ustaw próg cr. Jeśli A został naciśnięty w kroku 1.3.15, próg cr powinien zostać ustawiony automatycznie. 
		UWAGA: Wartości liczbowe dla wszystkich ustawień progowych powinny być widoczne. Jeśli w którymś z nich pojawi się znak zapytania, oznacza to, że wystąpił problem w jednym z poprzednich kroków i progi należy ustawić ręcznie.</li>
	</ol>
	</li>
	<li>Kalibracja urządzenia do śledzenia ruchu gałek ocznych 
	UWAGA: Sprawdź, czy eye tracker może konsekwentnie identyfikować pozycję oka, gdy uczestnik patrzy na inne części ekranu.
	<ol>
		<li>Poproś uczestnika, aby spojrzał na cztery rogi ekranu pojedynczo, gdy okno ustawień kamery jest widoczne. Uważnie poszukaj wszelkich nieregularnych odbić (pojawią się one jako turkusowe "plamy" na ekranie), które zakłócają odbicie rogówki, gdy wzrok jest skierowany na róg.</li>
		<li>Poproś uczestnika, aby spojrzał na środek ekranu, a następnie skierował swój wzrok na problematyczny róg, jeśli czerwona ramka wokół oka i jeden z krzyżyków nie są widoczne w żadnym momencie kroku 1.4.1. Pomoże to określić źródło problemu.</li>
		<li>Ponownie dostosuj pozycję głowy uczestnika i sprawdź, czy przynosi to jakąkolwiek poprawę. W razie potrzeby powtórz ten krok. Jeśli po kilku próbach urządzenie nadal nie jest w stanie dokładnie śledzić wzroku uczestnika, przerwij eksperyment.</li>
		<li>Poinformuj uczestnika, że eye tracker zostanie skalibrowany i że zobaczy czarne kółko (z małą szarą kropką) poruszające się w różnych częściach ekranu. Poinstruuj uczestnika, aby unieruchomił okrąg, dopóki nie przesunie się w nowe miejsce. Poinstruuj uczestnika, aby nie męczył oczu i skupił się na małej szarej kropce wewnątrz czarnego kółka, aby uzyskać optymalne rezultaty.</li>
		<li>Powiedz uczestnikowi, że ważne jest, aby pozostać nieruchomo i nie próbować przewidzieć położenia następnego okręgu podczas kalibracji. Poinstruuj ich, aby podążali za kręgami oczami, a nie głową. Kliknij Kalibruj, aby rozpocząć proces kalibracji. Zwykle stosuje się procedurę kalibracji 9-punktowej, w której czarne kółko przesuwa się do dziewięciu miejsc w sposób szeregowy.</li>
		<li>Aby przeprowadzić automatyczną kalibrację, naciśnij ENTER po dokładnym ustaleniu przez uczestnika pierwszej kropki na środku ekranu. W przypadku ręcznej kalibracji (np. gdy występują problemy ze śledzeniem oka uczestnika lub gdy mamy do czynienia ze specjalnymi grupami uczestników, takimi jak dzieci), zaakceptuj każdą fiksację, naciskając ENTER (lub klikając przycisk Zaakceptuj fiksację/naciskając spację). 
		UWAGA: Pod koniec procesu kalibracji na ekranie eksperymentatora powinien być widoczny prawie prostokątny wzór. Reprezentuje to wzorce wzroku uczestnika. Dodatkowo wyniki dobrej kalibracji powinny być podświetlone na zielono. Jeśli tak nie jest, powtórz procedurę kalibracji (tj. kliknij Kalibracja).</li>
		<li>Sprawdź poprawność wyników. Powiedz uczestnikowi, aby przeszedł przez tę samą procedurę (patrząc na kropki) w celu walidacji wyników procesu kalibracji. Przypomnij im, aby patrzyli na kropkę i byli spokojni. 
		UWAGA: Proces walidacji jest podobny do procesu kalibracji i oba wyniki są porównywane przez oprogramowanie do śledzenia ruchu gałek ocznych, aby upewnić się, że oko jest dokładnie śledzone.</li>
		<li>Kliknij przycisk Weryfikuj.</li>
		<li>Zaakceptuj każdą fiksację, naciskając ENTER (lub klikając przycisk Zaakceptuj fiksację/naciskając spację).</li>
		<li>Po walidacji wyniki pojawią się na ekranie eksperymentatora. Zwróć szczególną uwagę na dwie miary błędu: błąd średni (np. 0,23°) i błąd maksymalny (np. 0,70°). Reprezentują one stopień, w jakim śledzony obraz odbiega od rzeczywistej pozycji wzroku uczestnika.</li>
		<li>Korzystając z paradygmatu świata wizualnego, utrzymuj średni błąd (pierwsza liczba) poniżej 0,5°, a maksymalny błąd (druga liczba) poniżej 1°.</li>
		<li>Jeśli wartości błędów przekraczają próg, poproś uczestnika o ponowne ustawienie głowy i ponowne rozpoczęcie procedury kalibracji. Jeśli nie zaobserwuje się poprawy, przerwij eksperyment. 
		UWAGA: Często obserwuje się duże błędy kalibracji, gdy uczestnik nosi soczewki kontaktowe. Uczestnika należy wcześniej poprosić o zabranie ze sobą okularów korekcyjnych zamiast soczewek kontaktowych.</li>
		<li>Po pomyślnym zakończeniu procesu kalibracji kliknij przycisk Wyjście/Nagrywanie, aby rozpocząć eksperyment. Poinformuj uczestnika, że eksperyment się teraz rozpocznie.</li>
	</ol>
	</li>
	<li>Podczas eksperymentu 
	UWAGA: Podczas eksperymentu (w zależności od tego, jak zaprogramowany jest dany eksperyment, ale zazwyczaj przed każdą próbą eksperymentalną), na ekranie kontroli dryfu lub prawidła dryfu pojawi się kropka na środku ekranu. Jego celem jest raportowanie obliczonego błędu fiksacji dla bieżącej próby i, w zależności od modelu śledzenia wzroku, jego automatyczne dostosowanie.
	<ol>
		<li>Podczas fazy instruktażowej uczestnik został poinstruowany, aby unieruchomić środkową kropkę za każdym razem, gdy się pojawi. Upewnij się, że podczas każdej fazy sprawdzania driftu/prawidłowego driftu, uczestnicy ponownie ustalają kropkę. Można to zrobić, podążając za wzrokiem uczestnika na komputerze hosta, gdzie wzrok uczestnika jest wyświetlany jako poruszający się zielony okrąg.</li>
		<li>Po zakończeniu sprawdzania/prawidłowego dryfu naciśnij ENTER (lub spację), aby kropka zniknęła i wyświetliła następną próbę.</li>
		<li>Określ, jak postępować w przypadku nieprzejścia fazy kontroli dryftu zgodnie z modelem zastosowanego urządzenia śledzącego ruch gałek ocznych. W zależności od modelu, urządzenie śledzące ruch gałek ocznych albo wykona automatyczną korekcję dryfu, dostosowując współrzędne spojrzenia do współrzędnych centralnej kropki, albo wyda sygnał dźwiękowy, aby skłonić eksperymentatora do ponownej kalibracji przed kontynuowaniem eksperymentu (kontrola dryfu).</li>
		<li>W przypadku korzystania z automatycznej korekcji dryftu należy pamiętać, że zbyt wiele poprawek dryftu w kolejnych próbach i/lub zbyt duży stopień korekcji dryftu zniekształci wyniki i będzie wymagało ponownej kalibracji urządzenia.</li>
	</ol>
	</li>
	<li>Ponowna kalibracja podczas eksperymentu
	<ol>
		<li>Możliwa jest ponowna kalibracja w dowolnym momencie eksperymentu. Podczas prezentacji ekranu korekcji dryfu/sprawdzania dryfu kliknij na Ustawienia kamery, a następnie kliknij na Kalibruj. Przejdź przez procesy kalibracji i walidacji, aż do osiągnięcia zadowalającej wartości, a następnie kliknij Wyjście/rekord. Eksperyment zostanie wznowiony od punktu wyjścia w sekwencji próbnej.</li>
	</ol>
	</li>
	<li>Po eksperymencie
	<ol>
		<li>Dostarcz uczestnikowi kwestionariusz, aby ocenić, czy był w stanie odgadnąć kluczowe manipulacje eksperymentalne. W tym miejscu ważne jest również, aby zapytać o potencjalne strategie, które można było opracować w trakcie eksperymentu.</li>
		<li>Poinformuj uczestnika o celu eksperymentu. Podziękuj im za udział i zapewnij niezbędną rekompensatę pieniężną lub przypisz punkty za kurs, jeśli ma to zastosowanie.</li>
	</ol>
	</li>
</ol>
2. Konfiguracja zdalna: Dostosowywanie ustawień do nauki z dziećmi i osobami starszymi
UWAGA: Ta sekcja opisuje tylko różnice między konfiguracją zdalną a konfiguracją pulpitu, jak opisano w kroku 1. Należy przyjąć, że punkty, które nie zostały tutaj wyraźnie wymienione, są identyczne z procedurą opisaną w kroku 1.
<ol>
	<li>Wymień standardowy obiektyw kamery śledzącej ruch gałek ocznych 35 mm na obiektyw 16 mm.</li>
	<li>Podłącz cały niezbędny sprzęt (komputer hosta, głośniki, eye tracker i laptop, jeśli używany jest laptop).</li>
	<li>Umieść laptopa na podstawce pod laptopa, a eyetracker przed nim (uczestnik powinien być w stanie zobaczyć górne 75% ekranu).</li>
	<li>Umieść "naklejkę docelową" (dostępną u producenta trackera) na czole uczestnika (nad brwią prawego oka lub na prawym policzku, jeśli czoło jest zbyt małe (np. w przypadku niemowląt); ta naklejka zastępuje podbródek w zestawie biurkowym i pozwala urządzeniu śledzącemu dokładnie określić pozycję głowy uczestnika.</li>
	<li>Upewnij się, że uczestnik siedzi w odległości 550 - 600 mm od kamery (odległość naklejki z celem od kamery).</li>
	<li>Upewnij się, że słowa "duży kąt" lub "bliskie oko" nie pojawiają się na komputerze hosta. Jeśli tak, oznacza to, że położenie naklejki docelowej nie jest idealne. W takim przypadku ponownie dostosuj naklejkę docelową. Może to również oznaczać, że czoło uczestnika jest szczególnie małe. W takim przypadku umieść naklejkę na policzku uczestnika. 
	UWAGA: Jeśli naklejka zostanie umieszczona zbyt blisko ucha, prawdopodobnie pojawi się komunikat "duży kąt" i naklejka musi zostać ponownie położona.</li>
	<li>Przed rozpoczęciem procesu kalibracji opisanego w kroku 1.4 upewnij się, że uczestnik siedzi wygodnie. Poproś ich, aby utrzymywali tę samą pozycję przez cały eksperyment i wyjaśnij, że eye tracker jest bardzo wrażliwy na ruchy ciała. Nalegaj, aby trzymali głowę nieruchomo. Jeśli uczestnik poruszy się zbyt mocno, urządzenie wyemituje brzęczący dźwięk. 
	UWAGA: Jeśli konfiguracja zdalnego śledzenia wzroku jest używana do testowania wrażliwych populacji, takich jak dzieci lub osoby starsze, zaleca się zastosowanie procedury kalibracji ręcznej.</li>
</ol>
3. Dostosowywanie ustawień do czytania
UWAGA: Podczas badania wpływu kontekstu wizualnego na czytanie, należy zwrócić szczególną uwagę na procesy kalibracji i ponownej kalibracji. W przeciwieństwie do badań świata wizualnego, śledzenie ruchu gałek ocznych podczas czytania wymaga znacznie wyższego stopnia precyzji urządzenia, biorąc pod uwagę dokładność potrzebną do śledzenia wzorców czytania słowo po słowie i litera po literze.
<ol>
	<li>Upewnij się, że zarówno średni, jak i maksymalny błąd wyświetlany podczas fazy walidacji pozostają poniżej 0,5°.</li>
	<li>Upewnij się, że do kalibracji używasz co najmniej 9-punktowej skali. Zapewnia to dokładniejsze śledzenie pozycji wzroku, co jest niezbędne, biorąc pod uwagę niewielki rozmiar obszarów zainteresowania podczas czytania.</li>
</ol>

Autorzy nie mają nic do ujawnienia.

Podsumowując, przeanalizowane warianty śledzenia ruchu gałek ocznych w kontekstach wizualnych ujawniły wiele sposobów, w jakie scena wizualna może wpływać na rozumienie języka. Metoda ta zapewnia kluczowe korzyści w porównaniu z metodami takimi jak pomiar czasu reakcji. Na przykład ciągłe ruchy gałek ocznych dają nam wgląd w procesy rozumienia języka i to, jak wpływają one na nasze postrzeganie świata wizualnego w czasie. Co więcej, uczestnicy niekoniecznie muszą wykonywać wyraźne zadanie podczas rozumienia języka (takie jak ocena gramatyczności zdania za pomocą naciśnięcia przycisku). Dzięki temu naukowcy mogą stosować tę metodę w populacjach, które mogą zmagać się z jawnymi reakcjami behawioralnymi innymi niż wzrok wzrokowy, takich jak niemowlęta, dzieci i, w niektórych przypadkach, osoby starsze. Śledzenie ruchu gałek ocznych jest uzasadnione ekologicznie, ponieważ odzwierciedla reakcje uwagi uczestników – podobnie jak wizualne zapytywanie przez ludzi o rzeczy istotne z punktu widzenia komunikacji w otaczającym ich świecie podczas mniej lub bardziej uważnego słuchania rozwijających się wypowiedzi.
Jedną z granic (a może cech charakterystycznych) paradygmatu świata wizualnego jest to, że nie wszystkie wydarzenia da się przedstawić w prosty i jednoznaczny sposób. Konkretne przedmioty i wydarzenia można oczywiście przedstawić. Ale to, w jaki sposób najlepiej przedstawia się abstrakcyjne pojęcia, jest mniej jasne. Może to ograniczać (lub definiować) wgląd w interakcję między przetwarzaniem języka a percepcją świata wizualnego za pomocą paradygmatu świata wizualnego śledzącego ruch gałek ocznych. Kolejne wyzwania wiążą się z powiązaniem hipotez między obserwowanym zachowaniem a procesami rozumienia. Fiksacje wzroku to pojedyncza reakcja behawioralna, która prawdopodobnie odzwierciedla wiele podprocesów podczas rozumienia języka (np. dostęp leksykalny, procesy referencyjne, oczekiwania zapośredniczone przez język, efekty kontekstu wizualnego). Biorąc pod uwagę ten wgląd, naukowcy muszą być ostrożni, aby nie zinterpretować nadmiernie lub błędnie zaobserwowanego wzorca spojrzenia. Aby rozwiązać ten problem, wcześniejsze badania podkreśliły rolę podzadań rozumienia w wyjaśnianiu interpretacji zapisu spojrzenia40.
Jednym ze sposobów na zwiększenie możliwości interpretacji ruchów gałek ocznych jest zintegrowanie ich z innymi pomiarami, takimi jak potencjały mózgu związane ze zdarzeniami (ERP). Badając to samo zjawisko za pomocą dwóch metod, które są porównywalne pod względem szczegółowości czasowej i komplementarne pod względem hipotez łączących, badacze mogą wykluczyć alternatywne wyjaśnienia swoich wyników i wzbogacić interpretację każdego indywidualnego pomiaru41. Podejście to było kontynuowane w eksperymentach43, ale ostatnio również w ramach jednego eksperymentu (choć w kontekstach ściśle językowych)44. Przyszłe badania mogą odnieść ogromne korzyści z takiej integracji metodologicznej i ciągłego łączenia z zadaniami popróbowymi i poeksperymentalnymi.
Metoda śledzenia ruchu gałek ocznych może powielić ustalone wyniki, a także przetestować nowe hipotezy dotyczące interakcji uwagi wzrokowej w scenach ze zrozumieniem języka. Procedura opisana w protokole musi być dokładnie przestrzegana, ponieważ nawet drobne błędy eksperymentatora mogą wpłynąć na jakość danych. Na przykład w badaniach nad czytaniem odpowiednie obszary analizy to często pojedyncze słowa lub nawet litery, co oznacza, że nawet niewielkie błędy kalibracji mogą zniekształcić wyniki (patrz artykuł Raneya i współpracowników42). Kroki 1.4 i 1.5 protokołu, kalibracja urządzenia śledzącego ruch gałek ocznych i kontrola dryftu/korekta dryfu, mają szczególne znaczenie, ponieważ mają bezpośredni wpływ na dokładność zapisu. Nieprawidłowa kalibracja urządzenia śledzącego ruch gałek ocznych może spowodować, że monitor nie będzie dokładnie śledził ruchów gałek ocznych w ustalonych wcześniej obszarach zainteresowania. Takie niepowodzenie śledzenia doprowadzi do brakujących punktów danych i utraty mocy statystycznej, co może być problematyczne podczas badania relacji między światem a językiem, które są bardzo subtelne i dają małe rozmiary efektu statystycznego (patrz opis eksperymentów Guerry i Knoeferle'a32 oraz Münstera i współpracowników37 wśród wyników reprezentatywnych).
Biorąc pod uwagę potrzebę maksymalizacji mocy i czułości sprzętu, ważne jest, aby eksperymentatorzy wiedzieli, jak radzić sobie z problemami, które rutynowo występują podczas sesji eksperymentalnej. Na przykład położenie źrenicy i ruch uczestników noszących okulary mogą powodować trudności z kalibracją z powodu odbić światła na soczewkach okularów uczestnika. Jednym ze sposobów rozwiązania tego problemu jest odbicie lustrzane obrazu oka uczestnika na komputerze z wyświetlaczem i zachęcenie go do poruszania głową, aż odbicie światła na okularach nie będzie już widoczne na ekranie, co oznacza, że nie będzie już rejestrowane przez kamerę. Kolejną przyczyną niepowodzenia kalibracji może być zwężenie źrenicy, które może być konsekwencją nadmiernej ekspozycji na światło. W takim przypadku przyciemnienie światła w laboratorium zwiększy rozszerzenie źrenicy, a tym samym pomoże urządzeniu śledzącemu ruch gałek ocznych w dokładnym wykryciu źrenicy.
Na zakończenie chcielibyśmy zwrócić uwagę na potencjał, jaki paradygmat świata wizualnego ma dla badań nad uczeniem się języków obcych. Paradygmat ten został już z powodzeniem wykorzystany w badaniach psycholingwistycznych do badania zjawisk takich jak interakcja leksykalna i fonologiczna między językami 46,47,48. Ponadto ścisły związek między uwagą wzrokową a uczeniem się języków obcych był często podkreślany w literaturze lingwistyki stosowanej dotyczącej przyswajania drugiego języka 49,50,51. Przyszłe badania nad nauką drugiego języka będą prawdopodobnie nadal korzystać z korzystnej pozycji śledzenia ruchu gałek ocznych jako metody zapewniającej wskaźnik uwagi wzrokowej w rozdzielczości milisekundowej.

Badania psycholingwistyczne podkreśliły znaczenie analiz ruchów gałek ocznych w zrozumieniu procesów związanych ze zrozumieniem języka. Istotą wnioskowania o procesach rozumienia na podstawie zapisu spojrzenia jest hipoteza, która łączy poznanie z ruchami gałek ocznych5. Istnieją trzy główne rodzaje ruchów gałek ocznych: sakkady, ruchy przedsionkowo-gałkowe i płynne ruchy pościgowe. Sakkady to szybkie i balistyczne ruchy, które zachodzą głównie nieświadomie i są niezawodnie powiązane ze zmianami uwagi6. Uważa się, że momenty względnej stabilności wzroku między sakkadami, znane jako fiksacje, indeksują aktualną uwagę wzrokową. Pomiar miejsca fiksacji i czasu ich trwania w odniesieniu do procesów poznawczych jest znany jako "metoda śledzenia ruchu gałek ocznych". Wczesne implementacje tej metody służyły do badania czytania ze zrozumieniem w kontekstach ściśle lingwistycznych (zobacz Rayner7 w celu zapoznania się z recenzją). W tym podejściu czas sprawdzania obszaru słowa lub zdania jest związany z trudnościami w przetwarzaniu. Śledzenie ruchu gałek ocznych zostało jednak również zastosowane do badania rozumienia języka mówionego podczas inspekcji obiektów w świecie (lub na ekranie komputera2). W tej wersji śledzenia wzroku w "świecie wizualnym" inspekcja obiektów odbywa się za pomocą języka. Na przykład, kiedy rozumiejący słyszą zebrę, ich oględziny zebry na ekranie są brane pod uwagę, że myślą o zwierzęciu. W tak zwanym paradygmacie świata wizualnego wzrok osoby rozumiejącej jest brany pod uwagę w celu odzwierciedlenia rozumienia języka mówionego i aktywacji związanej z nim wiedzy (np. słuchacze obserwują również zebrę, gdy słyszą wypas, wskazując na czynność wykonaną przez zebrę)2. Takie badania sugerują systematyczny związek między relacjami język-świat a ruchami gałek ocznych2. Powszechnym sposobem ilościowego określenia tego powiązania jest obliczenie proporcji spojrzeń do różnych, z góry określonych regionów na ekranie. Pozwala to naukowcom na bezpośrednie porównanie (w różnych warunkach, przez uczestników i pozycje) ilości uwagi poświęconej różnym obiektom w danym momencie i jak te wartości zmieniają się w rozdzielczości milisekundowej.
Badania w psycholingwistyce wykorzystały śledzenie ruchu gałek ocznych w światach wizualnych, aby rozdzielić konkurencyjne hipotezy teoretyczne dotyczące architektury umysłu1. Fiksacja wzroku na przedstawionych obiektach ujawniła ponadto, że osoby rozumiejące mogą – zakładając wystarczająco restrykcyjny kontekst językowy – dokonywać przyrostowej interpretacji semantycznej8, a nawet rozwijać oczekiwania co do nadchodzących postaci9. Takie dane dotyczące spojrzenia w oczy rzuciły również światło na szereg dalszych procesów rozumienia, takich jak leksykalna niejednoznaczność resolution10,11, pronoun resolution12, ujednoznacznienie strukturalnego i tematycznego przypisywania ról za pomocą informacji w kontekście wizualnym13,14,16 oraz procesy pragmatyczne15, wśród wielu innych4. Oczywiste jest, że ruchy gałek ocznych w kierunku obiektów podczas rozumienia języka mogą być źródłem informacji o związanych z tym procesach.
Metoda śledzenia ruchu gałek ocznych jest nieinwazyjna i może być stosowana u niemowląt, młodych i starszych użytkowników języka. Kluczową zaletą jest to, że w przeciwieństwie do punktowych odpowiedzi na sondy lub naciśnięć przycisku odpowiedzi w zadaniach weryfikacyjnych, zapewnia wgląd w czasie w rozdzielczości milisekundowej na to, w jaki sposób język kieruje uwagą i jak kontekst wizualny (w postaci obiektów, działań, zdarzeń, spojrzenia mówcy i emocjonalnej mimiki twarzy, a także konfiguracji obiektów przestrzennych) przyczynia się do przetwarzania języka. Ciągłość pomiaru podczas rozumienia zdań dobrze uzupełnia się z innymi miarami po zdaniu i po eksperymencie, takimi jak jawna weryfikacja zdań obrazkowych/wideo, pytania ze zrozumieniem i zadania przypominania pamięci. Jawne odpowiedzi w tych zadaniach mogą wzbogacić interpretację zapisu spojrzenia, zapewniając wgląd w wynik procesu rozumienia, pamięci i uczenia się2. Połączenie śledzenia ruchu gałek ocznych z tymi innymi zadaniami pozwoliło odkryć, w jakim stopniu różne aspekty kontekstu wizualnego modulują uwagę wzrokową i (natychmiastowe, jak również opóźnione) zrozumienie przez całe życie.
Prezentacja języka (mówionego lub pisanego) i scen może być symultaniczna lub sekwencyjna. Na przykład Knoeferle i współpracownicy17 przedstawili scenę 1000 ms przed wypowiadanym zdaniem i pozostała ona obecna podczas rozumienia. Przedstawili dowody na to, że clipartowe przedstawienia zdarzeń akcji przyczyniają się do rozwiązania lokalnej niejednoznaczności strukturalnej w niemieckich zdaniach podmiot-orzeczenie-dopełnienie (SVO) w porównaniu ze zdaniami dopełnienie-orzeczenie-podmiot (OVS). Knoeferle i Crocker18 zaprezentowali scenę clipart przed napisanym zdaniem i przetestowali przyrostową integrację zdarzeń clipart podczas rozumienia zdań. Zaobserwowali przyrostowe efekty kongruencji, co oznacza, że czas czytania przez uczestników składników zdania był dłuższy, gdy nie pasowały one (vs. pasowały) do zdarzenia przedstawionego w poprzedniej scenie. W innym wariancie prezentacji bodźca uczestnicy najpierw przeczytali zdanie opisujące relację przestrzenną, a następnie zobaczyli scenę określonego układu przestrzennego obejmującego rysunki linii obiektów19. W badaniu tym oceniono przewidywania obliczeniowych modeli języka przestrzennego, prosząc uczestników o ocenę dopasowania zdania wydanego do sceny, przy czym ruchy gałek ocznych były rejestrowane podczas przesłuchania w scenie. Wzorce spojrzenia uczestników były modulowane przez kształt obiektu, z którym zostali skonfrontowani – częściowo potwierdzając przewidywania modelu i dostarczając danych do udoskonalenia modelu.
Chociaż w wielu badaniach wykorzystano obrazy clipartów17,18,19,20,21,22,23, możliwe jest również łączenie rzeczywistych obiektów, filmów przedstawiających te obiekty lub statycznych zdjęć z językiem mówionym1,21,24,25,26,46. Knoeferle i jego koledzy wykorzystali rzeczywiste ustawienia24, a Abashidze i koledzy użyli formatu prezentacji nagranej na wideo do badania zdarzeń akcji i efektów czasu25. Możliwe jest różnicowanie dokładnej zawartości scen (np. przedstawiających akcje lub nie)22,27,38 jest możliwe i może również ujawniać efekty kontekstu wizualnego. Podobne badanie przeprowadzone przez Rodrígueza i współpracowników26 miało na celu zbadanie wpływu nagranych na wideo wizualnych wskazówek dotyczących płci na rozumienie następnie prezentowanych zdań mówionych. Uczestnicy oglądali filmy, na których widać męskie lub żeńskie dłonie wykonujące stereotypowo związane z płcią czynność. Następnie usłyszeli zdanie o stereotypowo męskim lub kobiecym wydarzeniu akcji, jednocześnie oglądając wystawę przedstawiającą dwie fotografie obok siebie, jedną przedstawiającą mężczyznę, a drugą kobietę. To bogate środowisko wizualne i językowe pozwoliło autorom oddzielić wpływ stereotypowej wiedzy za pośrednictwem języka na rozumienie od efektów wizualnie przedstawionych (ręcznych) wskazówek dotyczących płci.
Dalsze zastosowanie tego paradygmatu ma na celu zmiany rozwojowe w przetwarzaniu języka. Ruchy gałek ocznych na obiektach podczas rozumienia języka mówionego ujawniły efekty przedstawionych wydarzeń u dzieci w wieku 4 - 5 lat27,28 oraz u osób starszych29 w czasie rzeczywistym, ale nieco opóźnione w porównaniu z młodymi dorosłymi. Kröger i współpracownicy22 zbadali wpływ wskazówek prozodycznych i oznaczania przypadków w eksperymencie i porównali je w eksperymentach u dorosłych i dzieci. Uczestnicy przyjrzeli się niejednoznacznej scenie akcji-zdarzenia, słuchając powiązanego, jednoznacznie oznaczonego przypadkiem niemieckiego zdania. Ruchy gałek ocznych ujawniły, że wyraźne wzorce prozodyczne nie pomogły ani dorosłym, ani 4- lub 5-latkom w ujednoznacznieniu, kto komu co robi. Zaznaczanie przypadków w początkowym zdaniu wpływało jednak na ruchy gałek ocznych dorosłych, ale nie u dzieci. Sugeruje to, że rozumienie przypadków przez 5-latków nie jest wystarczająco solidne, aby umożliwić przypisanie ról tematycznych (patrz badanie przeprowadzone przez Özge i współpracowników30), przynajmniej nie wtedy, gdy zdarzenia związane z akcją nie ujednoznaczniały relacji ról tematycznych. Wyniki te są interesujące, biorąc pod uwagę, że kontrastują z poprzednimi wynikami efektów prozodycznych na przypisywanie ról tematycznych31. Kröger i współpracownicy22 zasugerowali, że (mniej lub bardziej wspierający) kontekst wizualny jest odpowiedzialny za kontrastujące wyniki. W zakresie, w jakim te interpretacje są prawdziwe, podkreślają one rolę kontekstu w rozumieniu języka przez całe życie.
Metoda śledzenia wzroku dobrze łączy się z pomiarami z zadań weryfikacji zdań obrazkowych (lub wideo)zdań18,20,26, zadania weryfikacyjne obrazka32, badania korpusowe24, zadania oceniające19, lub posteksperymentalne zadania przypominania25,33. Abashidze i współpracownicy34 oraz Kreysa i współpracownicy33 zbadali wzajemne oddziaływanie spojrzenia mówcy i filmów akcji w świecie rzeczywistym34 oraz spojrzenia mówcy i przedstawień akcji33, odpowiednio, jako wskazówki dotyczące nadchodzącej treści zdań. Łącząc śledzenie wzroku w scenie podczas rozumienia języka z posteksperymentalnym zadaniem pamięciowym, naukowcy lepiej zrozumieli, w jaki sposób percepcja spojrzenia mówcy przez słuchaczy i przedstawione działania oddziałują na siebie i wpływają zarówno na natychmiastowe przetwarzanie języka, jak i przywoływanie wspomnień. Wyniki ujawniły wyraźny wpływ działań i wzroku mówcy na zrozumienie w czasie rzeczywistym w porównaniu z procesami przypominania pamięci po eksperymencie.
Chociaż metoda śledzenia ruchu gałek ocznych może być stosowana z dużą elastycznością, pewne standardy są kluczowe. Poniższy protokół podsumowuje uogólnioną procedurę, którą można dostosować do różnych typów pytań badawczych zgodnie z konkretnymi potrzebami badaczy. Protokół ten jest ustandaryzowaną procedurą stosowaną w Laboratorium Psycholingwistyki na Uniwersytecie Humboldta w Berlinie, a także w dawnym Laboratorium Języka i Poznania w Klastrze Doskonałości Technologii Interakcji Kognitywnej (CITEC) na Uniwersytecie w Bielefeld. Protokół opisuje pulpit i konfigurację zdalną. Ten ostatni jest zalecany do stosowania w badaniach z udziałem dzieci lub osób starszych. We wszystkich eksperymentach wymienionych w Reprezentatywnych Wynikach wykorzystuje się urządzenie śledzące ruch gałek ocznych, które ma częstotliwość próbkowania 1000 Hz i jest używane razem ze stabilizatorem głowy, komputerem PC do testowania uczestników (Display PC) oraz komputerem PC do monitorowania eksperymentu i ruchów gałek ocznych uczestników (Host PC). Główną różnicą tego urządzenia w stosunku do poprzednika jest to, że pozwala na obuoczne śledzenie oczu. Protokół ma być wystarczająco ogólny, aby można go było używać z innymi urządzeniami śledzącymi ruch gałek ocznych, które zawierają stabilizator głowy i wykorzystują konfigurację z dwoma komputerami (Host + Wyświetlacz). Należy jednak pamiętać, że inne konfiguracje prawdopodobnie będą miały różne metody radzenia sobie z problemami, takimi jak niepowodzenia kalibracji lub utrata ścieżki, w takim przypadku eksperymentator powinien zapoznać się z instrukcją obsługi swojego konkretnego urządzenia.

<table><tbody><tr><td>Okulisty eye-tracker montowany na biurku, w tym podpórka pod głowę/podbródek</td><td>SR Research Ltd.</td><td>EyeLink 1000 plus</td><td>http://www.sr-research.com/eyelink1000plus.html</td></tr><tr><td>Oprogramowanie do zaprojektowania i przeprowadzenia eksperymentu okulograficznego</td><td>SR Research Sp. z o.o.</td><td>Konstruktor eksperymentów</td><td>http://www.sr-research.com/eb.html</td></tr></tbody></table>

Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych

Eye Tracking During Visually Situated Language Comprehension: Flexibility and Limitations in Uncovering Visual Context Effects

Niniejsza praca jest opisem i oceną metodologii zaprojektowanej do ilościowego określenia różnych aspektów interakcji między przetwarzaniem języka a percepcją świata wizualnego. Rejestrowanie wzorców wzrokowych dostarczyło dobrych dowodów na wkład zarówno kontekstu wizualnego, jak i wiedzy językowej/światowej w rozumieniu języka. Wstępne badania oceniały efekty obiektowo-kontekstowe w celu przetestowania teorii modularności w przetwarzaniu języka. We wstępie opisujemy, w jaki sposób kolejne badania przyjęły rolę szerszego kontekstu wizualnego w przetwarzaniu języka jako samodzielnego tematu badawczego, zadając pytania, takie jak to, w jaki sposób nasza wizualna percepcja wydarzeń i mówców przyczynia się do rozumienia opartego na doświadczeniu osób rozumiejących. Wśród badanych aspektów kontekstu wizualnego znajdują się działania, zdarzenia, spojrzenie mówiącego i emocjonalna mimika twarzy, a także konfiguracje obiektów przestrzennych. Po zapoznaniu się z metodą śledzenia ruchu gałek ocznych i jej różnymi zastosowaniami, wymieniamy kluczowe etapy tej metodologii w protokole, ilustrując, jak skutecznie wykorzystać ją do badania rozumienia języka usytuowanego wizualnie. W ostatniej części przedstawiono trzy zestawy reprezentatywnych wyników i zilustrowano korzyści i ograniczenia śledzenia ruchu gałek ocznych w celu zbadania zależności między percepcją świata wizualnego a rozumieniem języka.

Badanie przeprowadzone przez Münstera i współpracowników37 zbadano wzajemny wpływ struktury zdania, przedstawionych działań oraz mimicznych sygnałów emocjonalnych podczas rozumienia języka. Badanie to jest odpowiednie do zilustrowania zalet i ograniczeń tej metody, ponieważ wykazało zarówno silne efekty przedstawionych działań, jak i marginalne efekty mimicznych sygnałów emocjonalnych na rozumienie zdań. Autorzy stworzyli 5-sekundowe filmy przedstawiające wyraz twarzy kobiety, który zmieniał się z pozycji spoczynkowej w wyraz szczęścia lub smutku. Stworzyli również niemieckie zdania o strukturze Obiekt-Czasownik-Przysłówek-Podmiot (OVAdvS) o dodatniej walencji emocjonalnej w formie „[obiekt/pacjent]biernik[Czasownik] [przysłówek pozytywny] [podmiot/sprawca]mianownik].' Za pośrednictwem przysłówek o zabarwieniu pozytywnym; zdania pasowały do filmu „wesołego” i nie pasowały do filmu „smutnego”, co w zasadzie pozwalało na antycypację sprawcy (który uśmiechał się i został opisany przez pozytywny przysłówek jako działający w sposób wesoły). Po wyświetleniu filmu z mówcą pojawiało się zdanie wraz z jedną z dwóch wersji sceny w formie grafik clipart przedstawiających sprawcę, obiekt i dystraktor. W jednej wersji sprawca był przedstawiony jako wykonujący wspomnianą czynność na obiekcie, podczas gdy postać dystraktora wykonywała inną czynność. Druga wersja sceny nie przedstawiała żadnych czynności między postaciami. Ruchy gałek ocznych w obrębie sceny ujawniły wpływ podejmowanych działań oraz wyrazu twarzy mówcy na rozumienie zdań.
Przedstawienie akcji szybko wpłynęło na uwagę wizualną uczestników, co oznacza, że uczestnicy częściej spoglądali na agenta niż na dystraktor, gdy wspomniana akcja była przedstawiona (vs. nie była przedstawiona). Spojrzenia te miały charakter antycypacyjny (i.e., występowały przed wspomnieniem o agencie), co sugeruje, że przedstawienie akcji doprecyzowało tożsamość agenta przed treścią zdania. Najwcześniejszy efekt przedstawienia akcji pojawił się podczas przetwarzania czasownika (i.e., czasownik pośredniczył w identyfikacji agenta powiązanego z akcją). W przeciwieństwie do tego, to, czy poprzedzający mówca uśmiechał się, czy wyglądał na nieszczęśliwego, nie miało wyraźnego wpływu na antycypację agenta (Rycina 2). Ten drugi wynik może odzwierciedlać słabszy związek między uśmiechem mówcy a pozytywnym przysłówkiem zdaniowym odnoszącym się do akcji przedstawionego agenta (w porównaniu do bezpośredniego odniesienia czasownik-akcja pośredniczącego w identyfikacji agenta powiązanego z akcją). Alternatywnie, może to być specyficzne dla zadania i sposobu prezentacji bodźców: być może efekty emocjonalne byłyby bardziej wyraźne w zadaniu o większym charakterze interakcji społecznych lub w takim, w którym twarz mówcy jest prezentowana w trakcie (a nie przed) rozumieniem zdania. Jednakże prezentowanie uśmiechniętej twarzy mówcy podczas rozumienia mogłoby spowodować, że uczestnicy skupiliby się na twarzy kosztem innych elementów sceny, co być może zamaskowałoby w innym przypadku obserwowalne efekty manipulowanych zmiennych (źródło: niepublikowane dane).
W kolejnym wariancie paradygmatu Guerra i Knoeferle32 badali, czy przestrzenno-semantyczne relacje między światem a językiem mogą modulować rozumienie abstrakcyjnej treści semantycznej podczas czytania. Guerra i Knoeferle oparli się na idei z teorii metafory pojęciowej38, według której odległość przestrzenna (np. bliskość) stanowi podstawę znaczenia abstrakcyjnych relacji semantycznych (np. podobieństwa). Zgodnie z tą hipotezą, uczestnicy szybciej czytali skoordynowane rzeczowniki abstrakcyjne, gdy były one podobne (vs. przeciwstawne) znaczeniowo i gdy poprzedzało je wideo przekazujące bliskość (vs. dystans; karty do gry zbliżają się do siebie vs. oddalają od siebie). W drugim zestawie badań39 zdania opisywały interakcję między dwiema osobami jako intymną lub nieprzyjazną, co doprowadziło do odkrycia, że filmy przedstawiające dwie zbliżające się do siebie karty przyspieszały czytanie fragmentów zdań przekazujących bliskość społeczną/intymność. Należy zauważyć, że odległość przestrzenna wpływała na czytanie zdań szybko i inkrementalnie, nawet gdy zdania nie odnosiły się do obiektów widocznych na wideo. Filmy wyraźnie modulowały czas czytania w zależności od zgodności między odległością przestrzenną a semantycznymi oraz społecznymi aspektami znaczenia zdania. Efekty te pojawiły się zarówno w czasie pierwszego przejścia (czas trwania pierwszej inspekcji określonego regionu zdania), jak i w całkowitym czasie spędzonym na tym regionie zdania (ilustrację wyników badań Guerry i Knoeferle przedstawia Rysunek 3)32. Analizy ujawniły jednak znaczne różnice między uczestnikami, co doprowadziło do wniosku, że tak subtelne efekty odległości kart mogą nie być tak silne, jak np. efekty relacji czasownik-czynność.
Kolejny zestaw badań ilustruje, w jaki sposób zmienność struktury zdania może pomóc w ocenie ogólności efektów kontekstu wizualnego. Abashidze i współpracownicy34 oraz Rodríguez i współpracownicy26 badali wpływ niedawnych działań na późniejsze przetwarzanie wypowiadanych zdań. W obu badaniach uczestnicy najpierw oglądali wideo przedstawiające czynność (np. eksperymentator doprawiający ogórki lub kobiece dłonie piekące ciasto). Następnie słuchali zdania w języku niemieckim, które odnosiło się albo do niedawnej czynności, albo do innej czynności, która mogłaby zostać wykonana w następnej kolejności (doprawianie pomidorów34; budowanie modelu26). Podczas rozumienia tekstu uczestnicy oglądali scenę przedstawiającą dwa obiekty (ogórki, pomidory)34 lub dwie fotografie twarzy agentów (twarz kobiety i mężczyzny, nazwana odpowiednio „Susanna” i „Thomas”)26. W badaniu Abashidze i współpracowników34 mówca najpierw wymienił eksperymentatora, a następnie czasownik (np. doprawianie), co wywołało oczekiwania dotyczące tematu (np. ogórków lub pomidorów). W badaniu Rodríguez i współpracowników26 mówca najpierw wymienił temat (ciasto), a następnie czasownik (pieczenie), co wywołało oczekiwania dotyczące agenta czynności (kobieta: Susanna lub mężczyzna: Thomas, przedstawieni poprzez zdjęcia twarzy kobiety i mężczyzny).
W obu badaniach kwestią sporną było to, czy ludzie będą (wizualnie) antycypować temat/agent ostatniego zdarzenia czynnościowego, czy też inny temat/agent, w oparciu o dalsze wskazówki kontekstowe dostarczone podczas rozumienia. W badaniu Abashidze i współpracowników34 wzrok eksperymentatora wskazywał na przyszły obiekt tematu (pomidory) od momentu wypowiedzenia czasownika (tłumaczenie dosłowne z języka niemieckiego: „Eksperymentator-agent wkrótce doprawia...”). W badaniu Rodríguez i współpracowników26 wiedza o płci związana ze stereotypowymi działaniami stała się dostępna w momencie wspomnienia o temacie i czasowniku (np. dosłowne tłumaczenie niemieckich bodźców brzmiało: „Ciasto-temat wkrótce się piecze...”). W obu zestawach badań uczestnicy podczas słuchania zdania preferencyjnie obserwowali cel/agenta ostatniej czynności (ogórki34 lub Susannę26) zamiast alternatywnego (przyszłego/drugiej płci) celu (pomidory34 lub Thomas26).
Ta tak zwana „preferencja zdarzeń niedawnych” wydaje się zatem być odporna na znaczne różnice w strukturze zdań i materiałach eksperymentalnych. Była ona jednak modulowana przez ograniczenia wizualne wynikające z towarzyszącej sceny26, tak że prezentowanie prawdopodobnych fotografii tematów czasowników obok fotografii agentów określonych pod względem płci zmniejszało zależność od niedawno analizowanych zdarzeń akcji i modulowało uwagę w oparciu o wiedzę dotyczącą stereotypów płciowych przekazywaną przez język. Rycina 4 ilustruje główne wyniki eksperymentów przeprowadzonych przez Rodrígueza i współpracowników26.
Choć ta wersja paradygmatu świata wizualnego przyniosła wiarygodne wyniki, inne badania podkreśliły złożoność (i ograniczenia) hipotezy powiązania. Burigo i Knoeferle20 odkryli, że uczestnicy — słysząc wypowiedzi takie jak Die Box ist über der Wurst ('Pudełko jest nad kiełbasą') — w większości podążali za treścią wypowiedzi podczas oglądania grafik tych obiektów. Jednak w pewnej proporcji prób wzrok uczestników oddzielał się od tego, co było wymienione. Po usłyszeniu słowa „kiełbasa” i co najmniej jednokrotnym obejrzeniu kiełbasy, w kolejnym etapie obserwacji wzrok uczestników powrócił do pudełka w około 21% prób w weryfikacji przyspieszonej (Eksperyment 1) oraz w 90% prób w weryfikacji po zdaniu (Eksperyment 2). Taki wzorzec fiksacji sugeruje, że odniesienie (usłyszenie słowa „kiełbasa”) kierowało tylko niektórymi (oglądanie kiełbasy), ale nie wszystkimi ruchami gałek ocznych (oglądanie pudełka). Tego rodzaju projekt badawczy mógłby zostać wykorzystany do oddzielenia procesów leksykalno-referencyjnych od innych procesów (w tym interpretacyjnych na poziomie zdania). Badacze muszą jednak zachować ostrożność przy formułowaniu twierdzeń na temat różnych poziomów przetwarzania językowego na podstawie względnych różnic w proporcjach ruchów gałek ocznych, biorąc pod uwagę niejednoznaczność w wiązaniu kierunku spojrzenia z procesami poznawczymi i rozumieniem tekstu.
<img alt="Schemat procesu śledzenia ruchów gałek ocznych za pomocą EyeLink 1000, wyjścia danych i przepływu analizy." class="xfigimg" src="/files/ftp_upload/57694/57694fig1v3.jpg" data-altupdatedat="1788250015000" data-alt="Rycina 1"> 
Rycina 1: Przegląd środowiska gromadzenia danych. Wykres przedstawia zależności między różnymi elementami programowymi i sprzętowymi wykorzystywanymi do zbierania i wstępnego przetwarzania danych. <a href="https://www.jove.com/files/ftp_upload/57694/57694fig1v3large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>
<img alt="Wykres słupkowy porównujący średni logarytm stosunku spojrzeń w obszarach czasownika i czasownika-przysłówka; analiza wizualna." class="xfigimg" src="/files/ftp_upload/57694/57694fig2.jpg" data-altupdatedat="1788250015000" data-alt="Rycina 2"> 
Rycina 2: Reprezentatywne wyniki Münstera i współpracowników37. Panele te przedstawiają średnie dla każdego badanego logarytmiczne stosunki prawdopodobieństwa spojrzeń na warunek w obszarze czasownika (dla przedstawionej czynności) oraz w połączonym obszarze czasownika-przysłówka (dla efektu emocjonalnego torowania). Wyniki wykazują znacznie wyższą proporcję spojrzeń w kierunku obrazu docelowego, gdy czynność wspomniana w zdaniu była przedstawiona, niż gdy nie była ona przedstawiona. Wyniki dotyczące efektu emocjonalnego torowania twarzą były mniej jednoznaczne: sugerują one jedynie niewielki wzrost średniego logarytmu stosunku spojrzeń na cel, gdy torowanie twarzą miało pozytywną walencję emocjonalną (uśmiech), w porównaniu do sytuacji, gdy miało walencję negatywną (smutna twarz). Słupki błędów reprezentują błąd standardowy średniej. Rycina została zmodyfikowana na podstawie pracy Münstera et al.37. <a href="https://www.jove.com/files/ftp_upload/57694/57694fig2large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>
<img alt="Wykres słupkowy czasów czytania; odległości: blisko kontra daleko; warunki: podobne, różne; wyniki eksperymentalne." class="xfigimg" src="/files/ftp_upload/57694/57694fig3v2.jpg" data-altupdatedat="1788250015000" data-alt="Rysunek 3"> 
Rysunek 3: Reprezentatywne wyniki Guerra i Knoeferle32. Panel ten przedstawia średnie czasy pierwszego czytania (w milisekundach) przymiotnika określającego (nie)podobieństwo. Wyniki wskazują na krótsze czasy czytania zdań o podobieństwie po zobaczeniu dwóch kart do gry zbliżających się do siebie w porównaniu do kart oddalających się od siebie. Słupki błędu reprezentują błąd standardowy średniej. Rysunek ten został zmodyfikowany na podstawie pracy Guerra i Knoeferle32. <a href="https://www.jove.com/files/ftp_upload/57694/57694fig3v2large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.</a>
<img alt="Wykres słupkowy porównujący średni logarytm stosunku spojrzeń w analizie zgodności i niezgodności stereotypów czasowników określających czynności." class="xfigimg" src="/files/ftp_upload/57694/57694fig4v3.jpg" data-altupdatedat="1788250015000" data-alt="Rycina 4"> 
Rycina 4: Reprezentatywne wyniki Rodríguez i współpracowników26. Ten panel przedstawia średnie dla poszczególnych osób logarytmiczne stosunki prawdopodobieństwa spojrzeń na warunek w regionie czasownika. Udziały spojrzeń powyżej 0 wskazują na preferencję obrazu agenta docelowego, a udziały poniżej 0 wskazują na preferencję obrazu agenta konkurencyjnego. Wyniki pokazują, że uczestnicy chętniej analizowali obraz agenta docelowego, gdy obiekt i czasownik wymienione w zdaniu były zgodne z wcześniej zarejestrowanymi na wideo zdarzeniami, niż gdy nie były one zgodne. Dodatkowo, odnotowano więcej spojrzeń w stronę obrazu agenta docelowego, gdy czynność opisana w zdaniu była zgodna ze stereotypami płciowymi. Słupki błędów reprezentują błąd standardowy średniej. Rycina ta została zmodyfikowana na podstawie pracy Rodríguez et al.26. <a href="https://www.jove.com/files/ftp_upload/57694/57694fig4v3large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>

Niniejszy artykuł omawia metodologię śledzenia wzroku w badaniach nad rozumieniem języka. Aby uzyskać wiarygodne dane, należy postępować zgodnie z kluczowymi krokami protokołu. Należą do nich m.in. prawidłowa konfiguracja eye trackera (np. zapewniająca dobrą jakość obrazów oka i głowy) oraz dokładna kalibracja.

The present work is a description and an assessment of a methodology designed to quantify different aspects of the interaction between language processing ...

Metoda ta może pomóc odpowiedzieć na kluczowe pytania badawcze w psycholingwistyce dotyczące procesów psychicznych związanych ze zrozumieniem języka. Zaletą tej techniki jest to, że zapewnia ona wskaźnik uwagi wzrokowej o wysokiej rozdzielczości czasowej, nastawiony na badanie relacji między światem wizualnym a przetwarzaniem języka. Osoby, które są nowe w tej metodzie, mogą mieć trudności, ponieważ protokół musi być wykonywany z dużą precyzją.Wizualna demonstracja tej metody ma kluczowe znaczenie, ponieważ prawidłowa implementacja metody często wymaga doraźnego rozwiązywania problemów. Aby określić dominację oka, poproś uczestnika o wyciągnięcie jednej ręki i wyrównanie kciuka z odległym obiektem przy otwartych obu oczach. Poproś uczestnika, aby na zmianę zamykał każde oko.Oko dominujące to oko, w którym kciuk pozostaje wyrównany z obiektem, gdy to oko jest otwarte. Następnie poproś uczestnika, aby usiadł przy stole z brodą opartą o podbródek i czołem opartym o zagłówek. Następnie kliknij obraz, aby wyświetlić komputer. Powinien pojawić się jeden duży i dwa mniejsze obrazy oczu uczestnika.Użyj strzałek na klawiaturze, aby wybrać jeden z mniejszych dominujących obrazów oka i naciśnij A, aby wyśrodkować pole limitów wyszukiwania na pozycji źrenicy. Wokół oka powinien pojawić się czerwony kwadrat z turkusowym okręgiem w pobliżu dolnej części źrenicy. Sama źrenica powinna być niebieska.Potwierdź obecność dwóch krzyżyków na ekranie, jednego na środku źrenicy i jednego w środku odbicia rogówki. Dostosowanie wielkości odbicia rogówki ma kluczowe znaczenie. To podstawa dobrej kalibracji eye trackera.Ręcznie obróć obiektyw ostrości, aby w razie potrzeby wyregulować aparat, uważając, aby nie dotknąć przedniej części obiektywu, dopóki odbicie rogówki nie będzie tak małe, jak to możliwe. Następnie naciśnij A, aby automatycznie ustawić próg źrenicy i rogówki na komputerze hosta, tak aby cała źrenica i tylko źrenica była niebieska. Aby skalibrować urządzenie śledzące ruch gałek ocznych, poproś uczestnika, aby patrzył na cztery rogi ekranu pojedynczo z widocznym oknem ustawień kamery, uważnie szukając wszelkich nieregularnych odbić, które zakłócają odbicie w rogówce, gdy wzrok uczestnika jest skierowany na róg.Jeśli czerwona ramka wokół oka lub którykolwiek z krzyżyków nie jest widoczny w żadnym momencie, poproś uczestnika, aby najpierw spojrzał na środek ekranu, a następnie na problematyczny róg, aby określić źródło problemu. Dostosuj pozycję głowy uczestnika, aby sprawdzić, czy przynosi to jakąkolwiek poprawę. Następnie poinformuj uczestnika, że eye tracker zostanie skalibrowany i że mają skupić się na małej szarej kropce w większym czarnym okręgu, gdy okrąg przesuwa się do różnych części ekranu.Gdy uczestnik będzie gotowy, kliknij przycisk kalibruj, aby rozpocząć proces kalibracji dziewięciopunktowej, naciskając Enter po dokładnym skupieniu się uczestnika na pierwszej kropce na środku ekranu w celu automatycznej kalibracji. Pod koniec procesu kalibracji na ekranie eksperymentatora powinien być widoczny prawie prostokątny wzór, który reprezentuje wzorce wzroku uczestnika. Wyniki dobrej kalibracji zostaną podświetlone na zielono.Aby potwierdzić wyniki, poproś uczestnika, aby powtórzył procedurę, przypominając uczestnikowi, aby spojrzał na kropkę i pozostał nieruchomy. Kliknij przycisk zatwierdź i wprowadź, aby zaakceptować każdą fiksację. Wyniki pojawią się na monitorze komputera hosta.Zwróć uwagę na błędy średnie i maksymalne. Dane te reprezentują stopień, w jakim śledzony obraz odbiega od rzeczywistej pozycji wzroku uczestnika. Jeśli średni błąd wynosi powyżej 0,5 stopnia i/lub błąd maksymalny przekracza jeden stopień, poproś uczestnika o ponowne ustawienie pozycji głowy i wznowienie procedury kalibracji.Utrzymanie maksymalnego poziomu błędu poniżej jednego stopnia ma kluczowe znaczenie dla gromadzenia danych o wysokiej jakości. Należy pamiętać, że są to progi śledzenia wzroku na stosunkowo dużych obiektach podczas rozumienia języka mówionego. Progi śledzenia ruchu gałek ocznych podczas czytania są jeszcze niższe.Po pomyślnym zakończeniu procesu kalibracji kliknij opcję Rekord wyjściowy, aby rozpocząć eksperyment. Jako jeden z przykładów śledzenia ruchów gałek ocznych podczas czytania usytuowanego, najpierw wyświetl dwie karty do gry, które zbliżają się do siebie lub oddalają od siebie. Następnie poproś uczestnika, aby przeczytał zdanie o dwóch pojęciach, które są reprezentowane jako podobne lub niepodobne do siebie, aby ocenić, czy odległość między kartami może modulować rozumienie podobieństwa w języku.Jednym z przykładów rejestrowania ruchów gałek ocznych podczas słuchowego rozumienia języka jest najpierw pokazanie uczestnikowi filmu z interesującego go wydarzenia. Następnie pokaż uczestnikowi scenę docelową zawierającą obrazy agenta i obiektów z filmu oraz agenta płci przeciwnej oraz obraz innego obiektu. Jednocześnie odtwórz zdanie opisujące zdarzenie, które pasuje lub nie pasuje do poprzedniego filmu, aby ocenić, w jakim stopniu płeć rąk agenta przedstawionych w poprzednich wydarzeniach może wpływać na to, którą twarz ze sceny docelowej uczestnik będzie przewidywał podczas mówienia ze zrozumieniem.W tym reprezentatywnym eksperymencie śledzenia ruchu gałek ocznych średni czas czytania przymiotników podobieństwa przy pierwszym przejściu był krótszy dla zdań podobieństwa po zaobserwowaniu dwóch kart do gry zbliżających się do siebie w porównaniu z sytuacją, gdy karty były odsunięte od siebie. W tym przypadku analiza średnich wskaźników spojrzenia logarytmicznego w regionie czasownika w teście rozumienia słuchowego wykazała, że uczestnicy byli bardziej skłonni do sprawdzenia zdjęcia agenta, którego płeć pasowała do zdarzeń we wcześniej pokazanym filmie, gdy przedmiot i czasownik wymienione w następnym zdaniu były zgodne z filmem i stereotypowo pasowały do tego agenta, niż gdy nie pasowały do tych dwóch wymiarów. Wykonując tę procedurę, należy pamiętać, że precyzja w wykonaniu każdego kroku jest kluczowa dla wysokiej jakości zbierania danych.W ten sposób możemy uzyskać wgląd w stopień, w jakim konteksty obrazkowe stopniowo modulują rozumienie języka w czasie rzeczywistym. Miary po zdaniu lub po eksperymencie, takie jak czas odpowiedzi i dokładność, lub dane z innych testów offline mogą wzbogacić informacje, które można uzyskać dzięki miarom fiksacji online. Technika ta umożliwiła psycholingwistom badanie reprezentacji mentalnych i procesów czasu rzeczywistego związanych ze zrozumieniem języka.

eye-tracking-during-visually-situated-language-comprehension

Research

JoVE Journal

Behavior

Zachowanie

Niniejszy artykuł opisuje, jak używać metodologii śledzenia ruchu gałek ocznych do badania procesów poznawczych związanych ze zrozumieniem tekstu. Dołączono opisy sprzętu do śledzenia ruchu gałek ocznych, sposób opracowywania bodźców eksperymentalnych oraz zalecenia proceduralne. Przedstawione informacje można zastosować do większości badań z wykorzystaniem bodźców werbalnych.

Wykorzystanie ruchów gałek ocznych do oceny procesów poznawczych związanych ze zrozumieniem tekstu

Paradygmat świata wizualnego monitoruje ruchy gałek ocznych uczestników w przestrzeni wizualnej, gdy słuchają lub mówią w języku mówionym. Paradygmat ten może być wykorzystany do zbadania przetwarzania online szerokiego zakresu pytań psycholingwistycznych, w tym stwierdzeń semantycznie złożonych, takich jak zdania rozłączne.

Wykorzystanie ruchów gałek ocznych zarejestrowanych w paradygmacie świata wizualnego do zbadania przetwarzania języka mówionego online

Metoda została zaprojektowana w celu zbadania roli hamowania powrotu (IOR) w regresyjnych ruchach gałek ocznych podczas czytania. Nacisk kładziony jest na rozróżnienie między regresjami wywołanymi w wyniku trudności ze zrozumieniem a tymi wywołanymi błędem okoruchowym, w tym na roli IOR w tych dwóch typach regresji.

Śledzenie ruchu gałek ocznych w celu rozróżnienia regresywnych ruchów gałek ocznych opartych na rozumieniu i okoruchowych podczas czytania

Przedstawiamy protokół do badania wykorzystania wskazówek morfologicznych podczas rozumienia zdań w czasie rzeczywistym przez dzieci z autyzmem.

Wykorzystanie paradygmatu świata wizualnego do badania rozumienia zdań u dzieci z autyzmem mówiących po mandaryńsku

Badania śledzenia ruchu gałek ocznych wykorzystujące paradygmat preferencyjnego patrzenia mogą być wykorzystane do badania nowego rozumienia i zwracania uwagi na ich zewnętrzny świat wizualny przez niemowlęta.

Badanie wrażliwości niemowląt na język wizualny za pomocą śledzenia ruchu gałek ocznych i paradygmatu preferencyjnego patrzenia

Zadania behawioralne, które pozwalają na ocenę zdolności percepcyjnych i sensomotorycznych w populacji ogólnej (tj. nie-muzykach) są przedstawione. Synchronizacja stukania palcami w rytm bodźców słuchowych i wykrywanie nieprawidłowości rytmicznych pozwala na wykrycie zaburzeń rytmu.

Odkrywanie głuchoty rytmu: wykrywanie zaburzeń rytmu za pomocą zsynchronizowanych zadań stukania palcami i percepcyjnego pomiaru czasu

Opisano metodę ilościowego określania jakości przetwarzania informacji wizualnych na podstawie odruchowych ruchów gałek ocznych w odpowiedzi na określone modalności wizualne. Czasy reakcji i wyjściowe parametry fiksacji służą do charakteryzowania sprawności wzrokowej u dzieci z wadami wzroku i bez wad wzroku od 6 miesiąca życia.

Metoda ilościowego określania przetwarzania informacji wzrokowych u dzieci za pomocą śledzenia ruchu gałek ocznych

Małe dzieci nie obserwują świata biernie, ale raczej aktywnie eksplorują i angażują się w swoje otoczenie. Protokół ten zawiera zasady przewodnie i praktyczne zalecenia dotyczące korzystania z urządzeń śledzących ruch gałek ocznych montowanych na głowie do rejestrowania dynamicznego środowiska wzrokowego niemowląt i małych dzieci oraz uwagi wzrokowej w kontekście naturalnego zachowania.

Spojrzenie w akcji: śledzenie dynamicznej uwagi wzrokowej dzieci na głowie podczas zachowań naturalistycznych

Tutaj prezentujemy protokół rozkładu różnic w czytaniu ze zrozumieniem na unikalne i powszechne efekty języka i dekodowania.

Dekompozycja wariancji w czytaniu ze zrozumieniem w celu ujawnienia unikalnych i powszechnych efektów języka i dekodowania

Opisujemy metodę przeprowadzania nagrań pojedynczych neuronów z jednoczesnym śledzeniem ruchu gałek ocznych u ludzi. Pokazujemy użyteczność tej metody i ilustrujemy, w jaki sposób wykorzystaliśmy to podejście do uzyskania neuronów w ludzkim przyśrodkowym płacie skroniowym, które kodują cele wyszukiwania wzrokowego.

Jednoczesne śledzenie ruchu gałek ocznych i zapisy pojedynczych neuronów u pacjentów z padaczką u ludzi

Poznaj metodologię śledzenia ruchu gałek ocznych w badaniach psycholingwistycznych nad rozumieniem języka. Precyzyjna kalibracja i analiza wzorców wzrokowych pozwalają zbadać wpływ kontekstu wizualnego na przetwarzanie językowe.

Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych (Wideo) | JoVE Journal

Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych

Przeglądaj więcej filmów