Śledzenie ruchu gałek ocznych podczas wizualnego rozumienia języka: elastyczność i ograniczenia w odkrywaniu wizualnych efektów kontekstowych
30 listopada 2018
Niniejszy artykuł omawia metodologię śledzenia wzroku w badaniach nad rozumieniem języka. Aby uzyskać wiarygodne dane, należy postępować zgodnie z kluczowymi krokami protokołu. Należą do nich m.in. prawidłowa konfiguracja eye trackera (np. zapewniająca dobrą jakość obrazów oka i głowy) oraz dokładna kalibracja.
Metoda ta może pomóc odpowiedzieć na kluczowe pytania badawcze w psycholingwistyce dotyczące procesów psychicznych związanych ze zrozumieniem języka. Zaletą tej techniki jest to, że zapewnia ona wskaźnik uwagi wzrokowej o wysokiej rozdzielczości czasowej, nastawiony na badanie relacji między światem wizualnym a przetwarzaniem języka. Osoby, które są nowe w tej metodzie, mogą mieć trudności, ponieważ protokół musi być wykonywany z dużą precyzją.
Wizualna demonstracja tej metody ma kluczowe znaczenie, ponieważ prawidłowa implementacja metody często wymaga doraźnego rozwiązywania problemów. Aby określić dominację oka, poproś uczestnika o wyciągnięcie jednej ręki i wyrównanie kciuka z odległym obiektem przy otwartych obu oczach. Poproś uczestnika, aby na zmianę zamykał każde oko.
Oko dominujące to oko, w którym kciuk pozostaje wyrównany z obiektem, gdy to oko jest otwarte. Następnie poproś uczestnika, aby usiadł przy stole z brodą opartą o podbródek i czołem opartym o zagłówek. Następnie kliknij obraz, aby wyświetlić komputer. Powinien pojawić się jeden duży i dwa mniejsze obrazy oczu uczestnika.
Użyj strzałek na klawiaturze, aby wybrać jeden z mniejszych dominujących obrazów oka i naciśnij A, aby wyśrodkować pole limitów wyszukiwania na pozycji źrenicy. Wokół oka powinien pojawić się czerwony kwadrat z turkusowym okręgiem w pobliżu dolnej części źrenicy. Sama źrenica powinna być niebieska.
Potwierdź obecność dwóch krzyżyków na ekranie, jednego na środku źrenicy i jednego w środku odbicia rogówki. Dostosowanie wielkości odbicia rogówki ma kluczowe znaczenie. To podstawa dobrej kalibracji eye trackera.
Ręcznie obróć obiektyw ostrości, aby w razie potrzeby wyregulować aparat, uważając, aby nie dotknąć przedniej części obiektywu, dopóki odbicie rogówki nie będzie tak małe, jak to możliwe. Następnie naciśnij A, aby automatycznie ustawić próg źrenicy i rogówki na komputerze hosta, tak aby cała źrenica i tylko źrenica była niebieska. Aby skalibrować urządzenie śledzące ruch gałek ocznych, poproś uczestnika, aby patrzył na cztery rogi ekranu pojedynczo z widocznym oknem ustawień kamery, uważnie szukając wszelkich nieregularnych odbić, które zakłócają odbicie w rogówce, gdy wzrok uczestnika jest skierowany na róg.
Jeśli czerwona ramka wokół oka lub którykolwiek z krzyżyków nie jest widoczny w żadnym momencie, poproś uczestnika, aby najpierw spojrzał na środek ekranu, a następnie na problematyczny róg, aby określić źródło problemu. Dostosuj pozycję głowy uczestnika, aby sprawdzić, czy przynosi to jakąkolwiek poprawę. Następnie poinformuj uczestnika, że eye tracker zostanie skalibrowany i że mają skupić się na małej szarej kropce w większym czarnym okręgu, gdy okrąg przesuwa się do różnych części ekranu.
Gdy uczestnik będzie gotowy, kliknij przycisk kalibruj, aby rozpocząć proces kalibracji dziewięciopunktowej, naciskając Enter po dokładnym skupieniu się uczestnika na pierwszej kropce na środku ekranu w celu automatycznej kalibracji. Pod koniec procesu kalibracji na ekranie eksperymentatora powinien być widoczny prawie prostokątny wzór, który reprezentuje wzorce wzroku uczestnika. Wyniki dobrej kalibracji zostaną podświetlone na zielono.
Aby potwierdzić wyniki, poproś uczestnika, aby powtórzył procedurę, przypominając uczestnikowi, aby spojrzał na kropkę i pozostał nieruchomy. Kliknij przycisk zatwierdź i wprowadź, aby zaakceptować każdą fiksację. Wyniki pojawią się na monitorze komputera hosta.
Zwróć uwagę na błędy średnie i maksymalne. Dane te reprezentują stopień, w jakim śledzony obraz odbiega od rzeczywistej pozycji wzroku uczestnika. Jeśli średni błąd wynosi powyżej 0,5 stopnia i/lub błąd maksymalny przekracza jeden stopień, poproś uczestnika o ponowne ustawienie pozycji głowy i wznowienie procedury kalibracji.
Utrzymanie maksymalnego poziomu błędu poniżej jednego stopnia ma kluczowe znaczenie dla gromadzenia danych o wysokiej jakości. Należy pamiętać, że są to progi śledzenia wzroku na stosunkowo dużych obiektach podczas rozumienia języka mówionego. Progi śledzenia ruchu gałek ocznych podczas czytania są jeszcze niższe.
Po pomyślnym zakończeniu procesu kalibracji kliknij opcję Rekord wyjściowy, aby rozpocząć eksperyment. Jako jeden z przykładów śledzenia ruchów gałek ocznych podczas czytania usytuowanego, najpierw wyświetl dwie karty do gry, które zbliżają się do siebie lub oddalają od siebie. Następnie poproś uczestnika, aby przeczytał zdanie o dwóch pojęciach, które są reprezentowane jako podobne lub niepodobne do siebie, aby ocenić, czy odległość między kartami może modulować rozumienie podobieństwa w języku.
Jednym z przykładów rejestrowania ruchów gałek ocznych podczas słuchowego rozumienia języka jest najpierw pokazanie uczestnikowi filmu z interesującego go wydarzenia. Następnie pokaż uczestnikowi scenę docelową zawierającą obrazy agenta i obiektów z filmu oraz agenta płci przeciwnej oraz obraz innego obiektu. Jednocześnie odtwórz zdanie opisujące zdarzenie, które pasuje lub nie pasuje do poprzedniego filmu, aby ocenić, w jakim stopniu płeć rąk agenta przedstawionych w poprzednich wydarzeniach może wpływać na to, którą twarz ze sceny docelowej uczestnik będzie przewidywał podczas mówienia ze zrozumieniem.
W tym reprezentatywnym eksperymencie śledzenia ruchu gałek ocznych średni czas czytania przymiotników podobieństwa przy pierwszym przejściu był krótszy dla zdań podobieństwa po zaobserwowaniu dwóch kart do gry zbliżających się do siebie w porównaniu z sytuacją, gdy karty były odsunięte od siebie. W tym przypadku analiza średnich wskaźników spojrzenia logarytmicznego w regionie czasownika w teście rozumienia słuchowego wykazała, że uczestnicy byli bardziej skłonni do sprawdzenia zdjęcia agenta, którego płeć pasowała do zdarzeń we wcześniej pokazanym filmie, gdy przedmiot i czasownik wymienione w następnym zdaniu były zgodne z filmem i stereotypowo pasowały do tego agenta, niż gdy nie pasowały do tych dwóch wymiarów. Wykonując tę procedurę, należy pamiętać, że precyzja w wykonaniu każdego kroku jest kluczowa dla wysokiej jakości zbierania danych.
W ten sposób możemy uzyskać wgląd w stopień, w jakim konteksty obrazkowe stopniowo modulują rozumienie języka w czasie rzeczywistym. Miary po zdaniu lub po eksperymencie, takie jak czas odpowiedzi i dokładność, lub dane z innych testów offline mogą wzbogacić informacje, które można uzyskać dzięki miarom fiksacji online. Technika ta umożliwiła psycholingwistom badanie reprezentacji mentalnych i procesów czasu rzeczywistego związanych ze zrozumieniem języka.
Przegląd
Niniejszy artykuł omawia metodologię okulografii (eye-tracking) w badaniach nad rozumieniem języka, podkreślając znaczenie precyzyjnej realizacji protokołu dla zapewnienia wiarygodności gromadzonych danych.
Kluczowe elementy badania
Dziedzina nauki
- Psycholingwistyka
- Rozumienie języka
- Metodologia eye-trackingu
Wprowadzenie
- Okulografia (eye-tracking) dostarcza indeksu uwagi wizualnej o wysokiej rozdzielczości czasowej.
- Metoda ta bada związek między bodźcami wizualnymi a przetwarzaniem języka.
- Właściwa kalibracja i konfiguracja są kluczowe dla dokładnego gromadzenia danych.
- Uczestnicy mogą wymagać instruktażu, aby skutecznie przeprowadzić protokół.
Cel badania
- Zbadanie procesów poznawczych zaangażowanych w rozumienie języka.
- Ocena wpływu kontekstu wizualnego na przetwarzanie języka.
- Opracowanie niezawodnej metody kalibracji dla badań z wykorzystaniem okulografii.
Zastosowane metody
- Kalibracja eyetrackera poprzez fiksację wzroku uczestnika.
- Demonstracje wizualne wspomagające zrozumienie protokołu.
- Śledzenie ruchów gałek ocznych podczas zadań z czytania i rozumienia słuchowego.
- Analiza wzorców fiksacji wzroku w odpowiedzi na bodźce wizualne i słuchowe.
Główne wyniki
- Pomyślna kalibracja zapewnia dokładne śledzenie ruchów gałek ocznych.
- Uczestnicy wykazali różne wzorce fiksacji wzroku w zależności od kontekstu wizualnego.
- Precyzja w realizacji protokołu jest kluczowa dla uzyskania wysokiej jakości danych.
- Wyniki wskazują na wpływ bliskości wizualnej na rozumienie języka.
Wnioski
- Okulografia jest cennym narzędziem w badaniach psycholingwistycznych.
- Precyzyjna kalibracja jest niezbędna do uzyskania wiarygodnych danych.
- Kontekst wizualny znacząco wpływa na wyniki przetwarzania języka.
Najczęściej zadawane pytania
Znaczenie dla przemysłu
Metodologia okulografii (eye-tracking) dostarcza wskaźnik uwagi wizualnej o wysokiej rozdzielczości czasowej, który pozwala badać współzależność między kontekstem wizualnym a przetwarzaniem języka, oferując mechanistyczny wgląd w funkcje poznawcze istotne dla walidacji celów neuropsychiatrycznych. Precyzyjna kalibracja i rygorystyczna realizacja protokołu są niezbędne do generowania wiarygodnych, ilościowych danych dotyczących fiksacji wzroku, które mogą wspomóc opracowywanie biomarkerów oraz udoskonalanie modeli przedklinicznych w procesie odkrywania leków na schorzenia ośrodkowego układu nerwowego (CNS).
Strategiczne zastosowania w badaniach i rozwoju biofarmaceutycznym
Wczesne odkrywanie i walidacja celu
- Wartość naukowa: Umożliwia weryfikację hipotez terapeutycznych poprzez kwantyfikację wpływu kontekstu wizualnego na rozumienie języka w czasie rzeczywistym, co wspiera wyjaśnianie szlaków sygnałowych oraz biologiczną redukcję ryzyka w odniesieniu do celów terapeutycznych w OUN.
- Wartość operacyjna: Zapewnia zestandaryzowaną, powtarzalną metodę oceny fenotypów poznawczych z wysoką rozdzielczością czasową, co ułatwia spójny pomiar zaangażowania celu w różnych badaniach.
Przesiewy i opracowywanie testów
- Wartość naukowa: Generuje ilościowe pomiary zmiennych zależnych (np. czas trwania fiksacji wzroku, wzorce sakkad), które umożliwiają obiektywną ocenę wpływu związków na integrację wizualno-językową.
- Wartość operacyjna: Wspiera standaryzację testów poprzez zdefiniowane progi kalibracji (średni błąd <0,5°, maksymalny błąd <1°), zapewniając powtarzalność i skalowalność w zastosowaniach do wysokoprzepustowego przesiewania.
Badania translacyjne i przedkliniczne
- Wartość naukowa: Wykazuje zgodność z systemami istotnymi dla przebiegu chorób poprzez rejestrację wpływu kontekstu wizualnego na przetwarzanie języka, oferując potencjał w zakresie translacyjnych biomarkerów dla zaburzeń wiążących się z deficytami uwagi lub językowymi.
- Wartość operacyjna: Ułatwia zachowanie ciągłości od etapu odkrycia po walidację przedkliniczną, dostarczając metody możliwej do adaptacji międzygatunkowej w celu oceny punktów końcowych funkcji poznawczych w procesach minimalizacji ryzyka mechanistycznego.
Integracja potoku i przepływu pracy
Okulografia wpisuje się w kontinuum odkryć – od testowania hipotez we wczesnej fazie poszukiwań, po identyfikację związków wiodących i walidację przedkliniczną, w której ilościowe dane dotyczące fiksacji wzroku wspierają decyzje o kontynuacji lub przerwaniu badań (go/no-go) w oparciu o poznawcze efekty pośredniczone przez cel.
- Biologia odkrywcza: Wspiera testowanie hipotez poprzez izolację zmiennej niezależnej (kontekstu wizualnego) w celu pomiaru wpływu zmiennej zależnej na wzorce spojrzeń podczas przetwarzania języka.
- Przesiewanie: Zapewnia gotowość do analizy dzięki precyzyjnym protokołom kalibracji i mierzalnym wynikom, które umożliwiają wiarygodną ocenę związków w testach poznawczych.
- Analityka: Dostarcza pomiarów gotowych do analizy statystycznej (średnie stosunki spojrzeń, czasy fiksacji), które pomagają zespołom porównywać warunki i oceniać istotność efektów kontekstu wizualnego.
- Badania translacyjne: Zapewniają ciągłość przedkliniczną, oferując metodę oceny integracji wizualno-językowej w modelach chorobowych, co wspiera dopasowanie biomarkerów i postępy dostosowane do poziomu ryzyka.
- Ponowne wykorzystanie w przedsiębiorstwie: Stanowi wielokrotnie wykorzystywalną funkcjonalność w programach CNS dzięki zestandaryzowanej konfiguracji, porównywalności między badaniami oraz możliwości adaptacji do różnych bodźców wizualnych i językowych.
Wpływ operacyjny i przedsiębiorczy
- Wartość naukowa: Zwiększenie pewności predykcyjnej w walidacji celu poprzez mechanistyczną redukcję ryzyka związanego z wpływem kontekstu wizualnego na rozumienie języka, co zmniejsza niejednoznaczność w interpretacji fenotypu poznawczego.
- Wartość operacyjna: Standaryzacja i powtarzalność dzięki rygorystycznym progom kalibracji i precyzji protokołu, co umożliwia spójność wdrożenia testów poznawczych w wielu ośrodkach.
- Wartość strategiczna: Lepsze podejmowanie decyzji go/no-go poprzez ilościowe określenie wpływu celu na przetwarzanie wizualno-lingwistyczne, co poprawia efektywność kapitałową i redukuje ryzyko biologiczne w późnych fazach rozwoju leków na OUN.
- Wpływ na portfolio: Priorytetyzacja skorygowana o ryzyko dzięki obiektywnym, ilościowym punktom końcowym w zakresie funkcji poznawczych, które informują decyzje o dalszym rozwoju w oparciu o zmiany w zachowaniu wzroku pośredniczone przez cel.
Uwagi dotyczące wdrożenia
- Wymagana jest wiedza z zakresu projektowania eksperymentów psycholingwistycznych oraz obsługi aparatury do eyetrackingu w celu prawidłowego opracowania bodźców i interpretacji danych.
- Metoda jest zależna od systemów eyetrackingu o wysokiej rozdzielczości, umożliwiających śledzenie odbić rogówkowych i kalibrację z dokładnością poniżej jednego stopnia.
- Konieczna jest standaryzacja międzyzespołowa w grupach neuronauki, nauk behawioralnych i analityki danych, aby zapewnić przestrzeganie protokołu i powtarzalność wyników.
- Wymagane jest uwzględnienie adaptacji w różnych systemach modelowych, w tym walidacja istotności bodźców wizualnych oraz wierności pomiaru spojrzenia u gatunków przedklinicznych.
- Ograniczenia praktyczne obejmują konieczność zachowania bezruchu przez uczestnika podczas kalibracji oraz wrażliwość na nieregularne odbicia, co może obniżyć jakość danych, jeśli nie zostanie rozwiązane zgodnie z progami określonymi w protokole.
