Method Article

Badanie przetwarzania składniowego online mówionych zdań złożonych w języku chińskim przy użyciu zadań interferencji dwumodalnej

DOI:

10.3791/59660

September 5th, 2019

In This Article

Summary

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Tutaj prezentujemy protokół wykorzystujący zadania interferencji dwumodalnej do badania przetwarzania online zdań względnych mówionych w języku chińskim. Opisano dwa przykładowe eksperymenty polegające na przetwarzaniu słuchowym z interferencjami wewnątrz- i zewnątrzsennymi. Paradygmat zapewnia metodologię zajmowania się naturą pamięci roboczej i jej wpływem na przetwarzanie zdań.

Abstract

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Pamięć robocza (WM) odgrywa kluczową rolę w zrozumieniu złożonych zdań. Jego funkcja w przetwarzaniu mówionych zdań złożonych jest szczególnie widoczna, ponieważ przetwarzanie zdań złożonych wymaga dużej ilości pamięci. Paradygmat interferencji dwumodalnej został wykorzystany do zbadania, w jaki sposób system WM jest zaangażowany w złożone przetwarzanie syntaktyczne. W artykule przedstawiono dwa przykładowe eksperymenty polegające na przetwarzaniu słuchowym z interferencjami wewnątrz- lub zewnątrzsentencyjnymi. W pierwszym eksperymencie bodźce słuchowe [zdania mówione w języku chińskim (RC) o dwóch typach składniowych: z przerwami podmiotowymi (SRC) i dopełnieniowymi (ORC)] są zakłócane za pomocą wizualnie przedstawionego zadania leksykalnego w zdaniu i manipulowane przy użyciu trzech różnych punktów czasowych interferencji. W drugim eksperymencie te same bodźce słuchowe, prezentowane za pomocą techniki przesuwania okna słuchowego, są zakłócane za pomocą wizualnie przedstawionego zadania cyfrowego przypominania poza zdaniem i manipulowane za pomocą trzech ładunków pamięci cyfrowej. Oceniając, w jaki sposób zadanie drugorzędne wpływa na zadanie podstawowe, jakim jest zrozumienie zdań RC, możemy zająć się kontrowersyjną kwestią dotyczącą asymetrii przetwarzania RC w Chinach. Nasze wyniki ujawniają różne wzorce przetwarzania RC w porównaniu z tymi zgłoszonymi w poprzednich badaniach. Eksperyment 1 nie wykazuje wyraźnych zalet przetwarzania RC ani w SRC, ani w ORC; jednak preferencja dla ORC jest obserwowana na końcach zdań, a preferencja dla SRC znajduje się na głównej stronie czasownika. Podobnie, Eksperyment 2 przedstawia dynamiczny wzór. Przy obciążeniu bezcyfrowym SRC wykazują zalety przetwarzania w obszarze znaczników RC. Jednak w przypadku zakłóceń o większym obciążeniu cyfrowym ORC wykazują zalety przetwarzania w tym samym regionie. Wyniki te prowadzą do przypuszczenia, że nie ma oczywistej lub wewnętrznej asymetrii przetwarzania w przetwarzaniu chińskich RC. Wykorzystując podejście polegające na ocenie specyficznych zakłóceń podczas przetwarzania składniowego, eksperymenty te demonstrują przyszłe zastosowania badawcze, które badają metryki przetwarzania wypowiadanych zdań z udziałem pamięci roboczej.

Introduction

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Rola pamięci roboczej (WM) podczas przetwarzania zdań mówionych jest oczywista: ze względu na przejściową naturę mowy, słuchacze muszą zachować składowe formy akustyczne w swoich wspomnieniach, dopóki nie zostaną one przetworzone. Ten aspekt staje się jeszcze ważniejszy podczas przetwarzania zdań złożonych składniowo. Przypisywanie relacji składniowych słowom w zdaniach złożonych polega na wykonywaniu operacji obliczeniowych na elementach przechowywanych w pamięci przez krótki czas, co skutkuje większym zapotrzebowaniem na pamięć. Jednak sposób, w jaki system WM jest zaangażowany w przetwarzanie zdań mówionych, jest kontrowersyjny.

Ten spór wiąże się z dwoma głównymi nieporozumieniami: niektórzy badacze twierdzą, że istnieje jeden system WM, który jest używany do wszystkich zadań werbalnych1,2 - innymi słowy, przetwarzanie składniowe opiera się na tych samych zasobach pamięci, które są używane przez bardziej ogólne procesy poznawcze. Jest to model jednego zasobu. Inni twierdzą, że określanie znaczenia zdania na podstawie jego struktury składniowej wymaga wyspecjalizowanego systemu WM odrębnego od tego używanego do innych zadań werbalnych3,4. W tym duchu przetwarzanie składniowe jest modułowe. Jest to model zasobów z oddzielną interpretacją zdań.

W badaniach psycholingwistycznych paradygmat interferencji dual-modalnej został wykorzystany do zbadania dwóch konkurujących ze sobą konkurencji. Opierając się na założeniu, że pojemność pamięci WM jest ograniczona5,6, paradygmat rozwiązuje problemy, komplikując zadanie podstawowe zadaniem pomocniczym pośrednim. Biorąc pod uwagę, że zadanie podstawowe konkuruje o ograniczone zasoby z zadaniem pobocznym, trudność wzrasta, a zadanie podstawowe wykazuje dłuższy czas reakcji. Biorąc pod uwagę tę sytuację, podejście interferencyjne oparte na dwóch modalnościach umożliwia ocenę obciążenia przetwarzania i stopnia zaangażowania WM w sytuacji, gdy uczestnik otrzymuje zadanie, które wymaga wykonania obu zadań jednocześnie.

Zdania zawierające komponenty RC, które powodują większe trudności w zrozumieniu ze względu na ich dobrze znane skomplikowane struktury składniowe, są powszechnie używane do badania, w jaki sposób system WM jest zaangażowany w przetwarzanie złożonych zdań. Jednakże, mimo że przetwarzanie zdań złożonych wiąże się z większym zapotrzebowaniem na zasoby WM związane z przetwarzaniem mowy, mniej jasne jest, czy WM, który uważa się za przyczyniający się do kosztów ruchów składniowych w językach z początkowymi konstrukcjami RC (takich jak angielski), odzwierciedla złożoność składniową języków z RC na końcu głowy (takich jak chiński). Dzięki zastosowaniu paradygmatu interferencji dwumodalnej, obecne badanie rzuca światło na tę kwestię.

Trudności związane z przetwarzaniem dwóch struktur RC, zdań względnych z odstępami podmiotowymi i obiektowymi (SRC vs. ORC), były przedmiotem obszernej debaty. Kontrowersje te obserwuje się głównie w różnych typologicznie językach. W językach rozpoczynających głowę, takich jak angielski, w których zdanie względne następuje po zmodyfikowanym przez siebie rzeczowniku głównym, ogólny wniosek jest taki, że SRC, takie jak w przykładzie 1(a) poniżej, są przetwarzane łatwiej niż ORC w przykładzie 1(b).

figure-introduction-1

Jak pokazano w przykładzie (1), w języku angielskim, położenie powierzchni szczeliny różni się minimalnie między SRC i ORC. Przerwa ta jest indeksowana jako e1, pusta pozycja po rzeczowniku głównym "aktor" (zwanym wypełniaczem) pozostawiona przez jego usunięcie z RC. SRC i ORC różnią się jednak znacznie pod względem struktury gramatycznej i funkcji luki w dziedzinie RC. Koszt pamięci potrzebny do zintegrowania i rozwiązania zależności strukturalnej między wypełniaczem a luką jest odpowiednim celem dla badań eksperymentalnych i jest szeroko stosowany w celu uzyskania wglądu w rolę WM w przetwarzaniu i rozumieniu języka.

Na przykład, zrozumienie i przetworzenie tych postnominalnych RC wymaga zindeksowania rzeczownika głównego 'aktor' jako podmiotu funkcyjnego lub obiektu czasownika 'krytykowany' w SRC i ORC, a następnie zapisania rzeczownika głównego w WM, aby można go było później przypisać do podmiotu gramatycznego czasownika 'dopuszczony' w zdaniu głównym.

W przeciwieństwie do spójnego stwierdzenia z językami początkowymi główki, że zrozumienie SRC jest łatwiejsze niż zrozumienie ORC, zgłoszono mieszane wyniki dotyczące asymetrii przetwarzania RC dla języka chińskiego, który jest językiem końcowym, w którym zdanie względne poprzedza rzeczownik główny. Niektórzy zaobserwowali przewagę przetwarzania SRC, podczas gdy inni zgłosili odwrotny wzorzec (tj. przewagę przetwarzania ORC). Ostatnie kierunki badań sugerowały również, że asymetria przetwarzania RC może być modulowana przez WM, co sugerują wyniki uzyskane z badań nad wydajnością czytania we własnym tempie7,8,9.

Jak wspomniano powyżej, istnieją dwa konkurencyjne modele dotyczące roli, jaką WM odgrywa w (złożonym) przetwarzaniu składniowym. Jednym z nich jest to, że "przetwarzanie składniowe jest modułowe", a drugim, że "przetwarzanie składniowe jest ogólne". Zdania złożone z dobrze znanymi różnicami w trudnościach ze zrozumieniem, tj. SRC vs. ORC w języku angielskim, są często używane w zadaniach interferencji dual-modalnej (DMI) do zbadania tych dwóch twierdzeń w odniesieniu do kwestii modularności, ponieważ twierdzi się, że udział WM jest równoległy do asymetrii przetwarzania. W ten sposób indukowanie jednoczesnego obciążenia pamięci poprzez zadania zakłócające demonstruje wpływ WM na przetwarzanie składniowe. Uzasadnieniem jest to, że niezależnie od tego, czy istnieje pojedynczy werbalny system WM, czy oddzielne modularne systemy syntaktyczne, zaangażowanie systemu w zadanie zakłócające sprawia, że przetwarzanie składniowe jest mniej wydajne ze względu na ograniczenia zasobów WM. Sposób, w jaki przetwarzanie składniowo bardziej złożonych zdań (ORC, w języku angielskim) cierpi w zadaniach DMI, w porównaniu z przetwarzaniem zdań prostszych składniowo (SRC, w języku angielskim) dostarcza dowodów na specyficzny efekt WM i wskazuje, w jakim stopniu WM jest zaangażowany.

W przeciwieństwie do języków rozpoczynających głowę, takich jak angielski, chiński RCs manifestuje formację głowy i wykazuje relację wypełniania luk. Indeksowany element przeniesiony, przerwa, poprzedza związany z nim rzeczownik główny, jak pokazano w 2(a), SRC i 2(b), ORC.

figure-introduction-2

Kontrowersje wynikające z przetwarzania chińskich RC polegają na tym, że SRC nie są konsekwentnie zgłaszane jako łatwiejsze do przetworzenia niż ORC, a ta rozbieżność stanowi wyzwanie dla teorii przetwarzania i rozumienia języka. Ponieważ zawartość przednominalna przed relatywizatorem "DE" musi być przechowywana w WM do momentu, gdy przerwa – przesunięty rzeczownik główny "aktor" zostanie połączony i odzyskany – zrozumienie tego procesu nadal pomaga w uzyskaniu wglądu w rolę WM w przetwarzaniu języka.

W obecnym badaniu, przetwarzanie zdań RC mówionych jest badane, ponieważ słuchanie jest bardzo kompresyjne podczas przetwarzania i jest ściśle związane z funkcjonowaniem WM. Paradygmat podwójnej interferencji modalnej jest używany, ponieważ interferencja jest dobrze ugruntowaną funkcją zapominania w krótkotrwałej pamięci słuchowej. Reprezentacje przechowywane w pamięci mogą zostać zdegradowane, a następnie utracone w przypadku wystąpienia zdarzeń zakłócających10. Dystraktory, które różnią się w różnych aspektach (w tym przypadku: wewnątrzjęzykowym i pozacyfrowym, patrz poniżej) kanonicznego zdania mówionego, pozwalają nam zmierzyć koszt integracji przyrostowych danych wejściowych podczas różnych faz przetwarzania i w różnych warunkach interferencji.

Opierając się na stanowisku, że przetwarzanie bardziej złożonych składniowo zdań obciąża WM bardziej niż przetwarzanie prostszych zdań, można postawić hipotezę, że manipulowanie rodzajem ingerencji w trakcie rozumienia powinno mieć wpływ na przetwarzanie zdań. Z tego wynika, że przetwarzanie składniowo bardziej złożonych zdań będzie wymagało proporcjonalnie dłuższego lub nieproporcjonalnie dłuższego czasu słuchania online i będzie wykazywać gorsze wyniki w ocenie rozumienia zdań po wyświetleniu online niż przetwarzanie składniowo prostszych konstrukcji. Obecne badanie analizuje hipotezę, że interferencja podczas przetwarzania zdań może wskazywać na zaangażowanie WM i praktycznie umieszcza jej wartość poza kwestią modularności składniowej: proponuje ideę, że kontrowersje dotyczące chińskiego przetwarzania RC mogą zostać wyjaśnione poprzez badanie WM ze względu na jego fundamentalną rolę w rozumieniu języka. W związku z tym, znaczenie przypisywane wykorzystaniu zadań DMI w chińskim przetwarzaniu RC stanowi drogę do rozwiązania toczącej się debaty na temat chińskiej asymetrii przetwarzania RC.

Ten artykuł przedstawia dwa przykładowe eksperymenty polegające na przetwarzaniu słuchowym przy użyciu interferencji wewnątrz- i pozasentencyjnej. Celem tych dwóch eksperymentów było zbadanie, w jakim stopniu WM jest zaangażowany w przetwarzanie chińskiego RC w różnych typach zakłóceń.

W pierwszym eksperymencie, wizualnie przedstawione zadanie decyzji leksykalnej zostało użyte jako interferencja śródsentencyjna. Jako drugorzędne zadanie zakłócające, zadanie decyzji leksykalnej słowa / niesłowa (LDT) zostało wprowadzone w trzech punktach podczas dźwiękowej prezentacji zdania z docelowym zdaniem względnym, umożliwiając w ten sposób zmierzenie trudności przetwarzania w tych punktach. Głównym problemem w tym eksperymencie jest to, w jaki sposób luka w zdaniu względnym (RC) jest związana z wypełniaczem w klauzuli macierzowej (MC) i czy wpływa na przetwarzanie kolejnych MC. W związku z tym trzy miejsca pomiarowe, które miały być mierzone, zostały ustawione po regionie MC. Przykład, powtórzony z (2), trzech miejsc sondowania oznaczonych strzałkami i wyrównanych z odpowiadającą im konkatenacją syntaktyczną, jest zilustrowany w przykładzie 3, gdzie 3(a) pokazuje SRC, a 3(b) pokazuje ORC.

figure-introduction-3

Rysunek 1 pokazuje procedurę zakłócania ciągłej słuchowej prezentacji RC przez LDT w dowolnym z trzech miejsc pomiarowych. Projekt taktowania jest zgodny z konwencjonalnym protokołem zadania LDT z poprzedniego chińskiego badania przetwarzania11. Na przykład, każda wizualna próba LDT rozpoczyna się od znaku krzyżyka "+", który wskazuje punkt fiksacji w środku monitora przez 500 ms, po którym następuje wizualny bodziec LDT, który jest wyświetlany na ekranie przez 3000 ms i znika natychmiast po podjęciu decyzji leksykalnej. Typowy uczestnik kończy Eksperyment 1, łącznie z sesją ćwiczeniową, w ciągu 30-35 minut.

figure-introduction-4
Rysunek 1: Procedura interferencji śródzdaniowej z leksykalnym zadaniem decyzyjnym.
Kliknij tutaj, aby zobaczyć większą wersję tego rysunku.

Trzy miejsca sondowania wraz z zadaniem LDT:

1. Pozycja 1 (P1): RegionMC Post-S

Pierwsza pozycja (P1) do zmierzenia znajduje się bezpośrednio po obiekcie MC w regionie za granicą RC. Oczekuje się, że w tej lokacji zostanie poniesione obciążenie przetwarzaniem. Po pierwsze, przed tym punktem (SMC) konstrukcja podmiot-przerwa i dopełnienie-luka w domenie RC tworzy odpowiednio kontrastywne struktury czasownik-dopełnienie (VO) i podmiot-czasownik (SV). Po drugie, aby zintegrować składniki w regionie RC z rzeczownikiem głównym w MC, słuchacze muszą zidentyfikować gramatyczną rolę luki i powiązać ją z nadchodzącym rzeczownikiem głównym wypełniacza

2. Pozycja 2 (P2): Region MC po V

Druga pozycja (P2) do zmierzenia znajduje się bezpośrednio po czasowniku w zdaniu macierzowym (VMC). Zakłada się również, że ta strona indukuje obciążenie przetwarzania. Integracja informacji werbalnej wymaga od słuchaczy odnalezienia argumentów rzeczownikowych w zdaniu i zidentyfikowania agenta czasownika macierzowego albo z poprzedniej domeny RC, albo z rzeczownika głównego, który RC modyfikuje.

3. Pozycja 3 (P3): Region po zdaniu

Trzecia pozycja (P3) do zmierzenia znajduje się bezpośrednio po końcu zdania. Wcześniejsze badania nad przetwarzaniem sugerują, że istnieje efekt podsumowania końca zdania – zjawisko, w którym informacje nieskładniowe (np. dyskurs i poziom semantyczny) są brane pod uwagę na końcu zdania w celu aktywacji i pełnego zrozumienia12,13. W związku z tym obciążenie przetwarzania powinno wzrosnąć pod koniec zdania ze względu na konieczność zintegrowania tych informacji nieskładniowych14,15. Zakłada się, że pozycja 3 pokazuje degradację obciążenia przetwarzania, ponieważ podjęto próbę rozwiązania zdania w tej witrynie.

W drugim eksperymencie zastosowano zadanie z ruchomym oknem słuchowym (AMW). Uważa się, że technika AMW jest w stanie uchwycić wzorce alokacji zasobów podczas przetwarzania językowego online i jest szeroko stosowana w próbach rozróżnienia między dwoma konkurencyjnymi podejściami WM16,17. Zakłada się, że ingerencja pozasentencyjna powinna kosztować słuchaczy dodatkowy czas w trakcie przetwarzania nadchodzącego zdania mówionego w trakcie przemijania. Zgodnie z paradygmatem AMW uczestnicy słyszeli zdania, które były podzielone na słowa, a następnie naciskali na klawiaturze, aby rozpocząć odtwarzanie kolejnego segmentu. W związku z tym czas trwania przerw między naciśnięciami w celu zainicjowania kolejnego segmentu i kontrolowania przepływu napływających informacji odzwierciedla reakcję uczestników na określone cechy językowe, o których mowa. Na przykład, jeśli interferencja pozasenitencyjna ma pewien wpływ na przetwarzanie zdań o różnej złożoności składniowej, uczestnicy będą wykazywać odpowiednio dłuższe czasy trwania pauzy przed zainicjowaniem kolejnych segmentów. Procedury są schematyczne i przedstawione w Rysunek 2.

figure-introduction-5
Rysunek 2: Procedura interferencji pozazmysłowej z zadaniem przywołania cyfry.
Kliknij tutaj, aby zobaczyć większą wersję tego rysunku.

Poniższy protokół pokazuje, jak badacze wykorzystują wizualnie przedstawione zadanie decyzji leksykalnej jako interferencję wewnątrzsentencyjną i równoczesne obciążenie interferencją arytmetyczną jako interferencję pozazdaniową, aby zbadać udział WM i asymetrię przetwarzania chińskich RC oraz opracować logikę leżącą u podstaw.

Access restricted. Please log in or start a trial to view this content.

Protocol

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Administracja tych eksperymentów przestrzegała wszystkich przepisów etyki badawczej. Wszyscy badani wyrazili świadomą ustną i pisemną zgodę przed przeprowadzeniem eksperymentów. Wszystkie procedury, formularze zgody i protokół eksperymentalny zostały zatwierdzone przez Komitet ds. Etyki Badań Naukowych Narodowego Uniwersytetu Cheng Kung na Tajwanie. Eksperyment 1 i Eksperyment 2 były odpowiednio oparte na wcześniejszych badaniach18,19. Przedstawione tutaj reprezentatywne wyniki zostały zaczerpnięte z tych poprzednich publikacji.

1. Eksperyment 1 ―dwumodalne zadanie interferencji wewnątrzzdaniowej

  1. Zwerbuj 97 uczniów, 54 kobiety i 42 mężczyzn, z National Tainan Institute of Nursing i National Tainan Secondary High School, do udziału w eksperymencie 1.
    UWAGA: Wszyscy uczestnicy muszą być biegłymi native speakerami języka chińskiego z normalnym lub skorygowanym do normalnego widzeniem i bez upośledzenia słuchu na podstawie samooceny.
  2. Przygotowanie materiału
    1. Zaznacz słowa i nie-słowa dla LDT. Uwzględnij łącznie 48 dwusylabowych (dwuznakowych) chińskich słów, z których 24 to słowa, a 24 to niesłowa.
      UWAGA: Chiński znak reprezentuje sylabę, która zwykle jest morfemem (tj. najmniejszym znaczącym elementem). Słowa docelowe są tutaj dwusylabowymi słowami złożonymi. Zapoznaj się z plikiem uzupełniającym, aby uzyskać listę wizualnych słów docelowych/niesłów używanych w zadaniu LDT.
      1. Wybierz 24 słowa z raportu technicznego Sinica Corpus20, upewniając się, że wszystkie słowa docelowe mają średnią częstotliwość. Szukane słowa o średnim procencie częstości około 0.00030 i kolejności rankingu około 4 000 w bazie danych.
        UWAGA: Wybór słów o średniej częstotliwości jako słów docelowych ma na celu zmniejszenie efektu częstotliwości, co skutkuje krótszymi czasami odpowiedzi (RT) dla słów o wysokiej częstotliwości i dłuższymi RT dla słów o niskiej częstotliwości.
      2. Utwórz 24 nie-słowa, używając dwóch znaków jednosylabowych, które są indywidualnie znaczące, ale ich kombinacja jest semantycznie nienormalna. Aby zapobiec potencjalnym aktywacjom, unikaj słów dwusylabowych z identycznymi pierwiastkami (np. haiyang, oznaczający 'ocean', jest reprezentowany w chińskim słowie dwusylabowym jako figure-protocol-1, gdzie składnik pierwiastkowy figure-protocol-2 związane z wodami jest wspólne dla znaków figure-protocol-3 i figure-protocol-4).
      3. Ręcznie skolokuj 24 nie-słowa w zdaniach wypełniających i 24 słowa w docelowych zdaniach RC.
        UWAGA: Zestawienie słów z RC i niesłów z wypełniaczami było konieczne, ponieważ tylko RT LDT z 24 słów z RC powinny być brane pod uwagę i uwzględniane w analizach statystycznych.
    2. Zdania słuchowe RC i wypełniające
      UWAGA: Zapoznaj się z plikiem uzupełniającym, aby zapoznać się z przykładami zdań SRC, ORC i wypełniaczy.
      1. Skomponuj bodźce słuchowe w 72 zdania, obejmujące trzy rodzaje zdań: 24 SRC, 24 ORC i 24 zdania wypełniające.
      2. Podziel 48 zdań RC równomiernie na dwie grupy, aby stworzyć niekompletny-zrównoważony projekt, tworząc 48 prób (12 SRC, 12 ORC i 24 wypełniacze) w warunkach 2 (SRC, ORC) * 3 (miejsce sondowania) * 2 (słowo/brak słowa).
  3. Instalowanie eksperymentalnego oprogramowania
    1. Użyj standardowego oprogramowania eksperymentalnego (np. E-Prime21), aby zaprogramować eksperyment zgodnie z protokołami oprogramowania.
    2. Losowo zlosuj wszystkie bodźce za pomocą eksperymentalnego oprogramowania.
    3. Skonfiguruj system oprogramowania tak, aby rejestrował następujące dane: (1) czas odpowiedzi, (2) wskaźnik dokładności odpowiedzi uczestnika w LDT oraz (3) rozumienie po zdaniu na podstawie naciśnięć klawiatury przez uczestników.
    4. Dołącz informację zwrotną dotyczącą nieprawidłowej decyzji leksykalnej uczestników lub braku odpowiedzi. Wyświetlaj informacje zwrotne na ekranie monitora natychmiast po nieprawidłowej lub brakującej odpowiedzi uczestnika. Informacja zwrotna nie jest wyświetlana, jeśli odpowiedź uczestnika była poprawna.
    5. Przedstaw sekcję praktyczną obejmującą badania kliniczne z informacjami zwrotnymi.
  4. Po sesji treningowej rozpocznij dwumodalne zadanie interferencyjnej interferencji LDT. Podczas sesji eksperymentalnych pozwól uczestnikom na przerwę między każdymi 24 próbami.
    1. Niech każdy uczestnik wykona zadanie indywidualnie. Po pierwsze, przekaż uczestnikom instrukcje zarówno w formie pisemnej na ekranie komputera, jak i w formie ustnej przez eksperymentatora. Posadź uczestników przed komputerem i wyposaż ich w słuchawki.
    2. Poinstruuj uczestników, aby słuchali zdań odtwarzanych przez słuchawki, a jednocześnie, w pewnym momencie procesu słuchania, wykonali leksykalne zadanie decyzyjne.
    3. Poproś uczestników, aby zdecydowali, czy zakłócająca sonda wizualna wyświetlana na ekranie była słowem czy niesłowem i poinstruuj ich, aby nacisnęli odpowiedzi "Tak" dla słowa lub "Nie" dla słowa tak szybko i dokładnie, jak to możliwe.
    4. Poinformuj uczestników, że pytanie sprawdzające zrozumienie tekstu pojawi się bezpośrednio po zdaniu. Przypomnij im, aby uważnie słuchali zdania słuchowego, jednocześnie wykonując zadanie LDT.

2. Eksperyment 2 ―dwumodalne zadanie interferencji pozazmysłowej

  1. Zwerbuj 61 studentów, 40 kobiet i 21 mężczyzn, z National Taipei University of Technology i National Tainan Junior College of Nursing jako uczestników Eksperymentu 2.
    UWAGA: Wszyscy uczestnicy muszą być biegłymi native speakerami języka chińskiego z normalną lub skorygowaną do normalnej ostrością wzroku i bez upośledzenia słuchu na podstawie samooceny.
  2. Przygotowanie materiału
    1. Zdania słuchowe RC i wypełniające
      1. Skomponuj bodźce słuchowe w trzy rodzaje zdań: SRC, ORC i zdania wypełniające. Podziel 48 zdań RC równomiernie na dwie grupy, aby utworzyć niekompletny projekt z przeciwwagą z 96 całkowitymi próbami (24 SRC, 24 ORC i 48 wypełniaczy) dla warunków 2 (typ zdania: SRC, ORC) * 3 (obciążenie cyframi).
        UWAGA: Proszę zapoznać się z plikiem uzupełniającym, aby zapoznać się z przykładami docelowych prób słuchowych SRC, ORC i zdań wypełniających.
    2. 0/3/5 cyfr
      1. Zbuduj łącznie 96 cyfrowych przedmiotów, składających się z kombinacji cyfr 0/3/5. Przypisz każde obciążenie 0, 3 lub 5 cyframi równomiernie do wszystkich prób zdań.
  3. Dwumodalne zadanie interferencji cyfrowej poza sentencją z paradygmatem AMW
    1. Użyj standardowego oprogramowania eksperymentalnego (np. E-Prime21), aby zaprogramować eksperyment zgodnie z protokołami oprogramowania.
    2. Losowo przypisz uczestników do jednego z dwóch zestawów bodźców reprezentujących kombinacje dwóch czynników wewnątrzprzedmiotowych typu zdania (SRC vs. ORC) i obciążenia pamięci (brak obciążenia, obciążenie 3-cyfrowe, obciążenie 5-cyfrowe). Zapewnij uczestnikom wizualną prezentację cyfr w czasie 1 500 ms przed zadaniem AMW.
  4. Następnie uruchom zadanie AMW.
    UWAGA: AMW task22 to zadanie do słuchania we własnym tempie.
    1. Poinstruuj uczestników, aby zachowali w pamięci poprzednią prezentację wizualną (cyfry lub brak cyfr).
    2. Następnie poinstruuj uczestników, aby wysłuchali zdań podzielonych na słowa i odtwarzanych przez słuchawki. Powiedz im, aby nadawali sobie tempo tak szybko, jak to możliwe, naciskając klawiaturę, aby rozpocząć odtwarzanie kolejnego słowa podzielonego na segmenty.
    3. Poinstruuj uczestników, aby odpowiedzieli na pytanie ze zrozumieniem tak/nie, które pojawiło się na ekranie komputera po wysłuchaniu każdego zdania próbnego. Poinformuj uczestników, że pytanie jest poprzedzone znakiem zapytania "?" na ekranie komputera oraz że pytanie jest związane z informacjami, które usłyszeli w poprzednim zdaniu.
    4. Krótki sygnał dźwiękowy jest odtwarzany, gdy uczestnicy naciskają tak/nie, aby odpowiedzieć na pytanie ze zrozumieniem. Po sygnale dźwiękowym, postępując zgodnie z instrukcją pojawiającą się na ekranie, poproś uczestników o powtórzenie cyfry, którą widzieli przed wysłuchaniem zdania.
    5. Poproś eksperymentatora, aby zapisał odpowiedzi uczestników dotyczące przypominania sobie cyfr na arkuszu wyników.

Access restricted. Please log in or start a trial to view this content.

Results

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Efekt interferencji zaobserwowano zarówno w zadaniach z podwójnym modalnym intra-LDT, jak i z obciążeniem dodatkowym. Biorąc pod uwagę trzy lokalizacje sondy w eksperymencie 1, wyniki RT zadania wewnątrz LDT wykazały dynamiczny wzorzec przetwarzania RC jako funkcję dwóch typów RC. Jak pokazano na rysunku Rysunek 3, typ ORC wykazuje przewagę w przetwarzaniu w pozycji po podmiocie macierzy (SMC) po RC (P1) i na końcu zdania (P3), podczas gdy typ SRC ma przewagę w pozycji po czasowni...

Access restricted. Please log in or start a trial to view this content.

Discussion

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Badanie to pokazuje, że zastosowanie metod DMI zarówno z zadaniami interferencji wewnątrz-, jak i pozasentencyjnej może pomóc w wyjaśnieniu roli WM w przetwarzaniu zdań mówionych i rzucić światło na kwestię chińskiej asymetrii przetwarzania RC. Zgodnie z oczekiwaniami, mierząc stopień, w jakim zakłócenia z zadania drugorzędnego wpłynęły na wyniki słuchaczy w zakresie przetwarzania zdań pierwotnych, możemy wywnioskować wzorce chińskiego przetwarzania RC i dojść do wykonalnego rozwiązania debaty na temat przewagi przetwarz...

Access restricted. Please log in or start a trial to view this content.

Disclosures

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Autorzy nie mają nic do ujawnienia.

Acknowledgements

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

To badanie było wspierane przez granty z Ministerstwa Nauki i Technologii, Tajwanu, R.O.C. [NSC-101-2410-H-439-001] dla pierwszego autora, Tuyuan Cheng. Autorzy dziękują członkom laboratorium, Yang Ya-Hui i Chen Pei-Han, za ich pomoc w przygotowaniu i przeprowadzeniu eksperymentu.

Access restricted. Please log in or start a trial to view this content.

Materials

List of materials used in this article
NameCompanyCatalog NumberComments
narzędzi programowychE-PrimeProfessional 2.0
SłuchawkiLogitech
PraatPraat5.3.43Oprogramowanie online używane do edycji plików dźwiękowych do słuchania; http://www.fon.hum.uva.nl/praat/
Serial Response BoxPsychologia Narzędzia programowe Standardowy
komputer PCLaptop ASUS K42Jv
Wersja Psychology

References

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,
  1. Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
  2. King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
  3. Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
  4. Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
  5. Cowan, N. Working Memory Capacity. , Psychology Press. New York, NY. (2005).
  6. Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
  7. Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
  8. Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
  9. Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
  10. Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
  11. Wu, J. T., Chou, T. L., Liu, I. M. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. , Taipei. Taipei: National Taiwan University (in Chinese) 31-58 (1994).
  12. Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
  13. Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
  14. Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
  15. Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
  16. Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
  17. Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
  18. Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
  19. Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), https://doi.org/10.1007/s10936-018-9576-5 1035-1055 (2018).
  20. CKIP. Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , Institute of Information Science, Academia Sinica. Taipei. (1994).
  21. MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
  22. Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
  23. Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
  24. Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
  25. Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).

Access restricted. Please log in or start a trial to view this content.

Reprints and Permissions

Request permission to reuse the text or figures of this JoVE article

Request Permission

Tags

Dual Modal InterferenceWorking MemoryChinese Relative ClauseSubject Gapped Relative ClauseObject Gapped Relative ClauseLexical Decision TaskDigital Recall TaskAuditory Moving WindowSentence ComprehensionSyntactic Processing

Related Articles