Subskrypcja JoVE jest wymagana do oglądania tego materiału. Zaloguj się lub rozpocznij bezpłatny okres próbny.

Artykuł metodologiczny

Badanie przetwarzania składniowego online mówionych zdań złożonych w języku chińskim przy użyciu zadań interferencji dwumodalnej

4.9K wyświetleń

DOI:

10.3791/59660

5 września 2019

W tym artykule

Podsumowanie

Tutaj prezentujemy protokół wykorzystujący zadania interferencji dwumodalnej do badania przetwarzania online zdań względnych mówionych w języku chińskim. Opisano dwa przykładowe eksperymenty polegające na przetwarzaniu słuchowym z interferencjami wewnątrz- i zewnątrzsennymi. Paradygmat zapewnia metodologię zajmowania się naturą pamięci roboczej i jej wpływem na przetwarzanie zdań.

Streszczenie

Pamięć robocza (WM) odgrywa kluczową rolę w zrozumieniu złożonych zdań. Jego funkcja w przetwarzaniu mówionych zdań złożonych jest szczególnie widoczna, ponieważ przetwarzanie zdań złożonych wymaga dużej ilości pamięci. Paradygmat interferencji dwumodalnej został wykorzystany do zbadania, w jaki sposób system WM jest zaangażowany w złożone przetwarzanie syntaktyczne. W artykule przedstawiono dwa przykładowe eksperymenty polegające na przetwarzaniu słuchowym z interferencjami wewnątrz- lub zewnątrzsentencyjnymi. W pierwszym eksperymencie bodźce słuchowe [zdania mówione w języku chińskim (RC) o dwóch typach składniowych: z przerwami podmiotowymi (SRC) i dopełnieniowymi (ORC)] są zakłócane za pomocą wizualnie przedstawionego zadania leksykalnego w zdaniu i manipulowane przy użyciu trzech różnych punktów czasowych interferencji. W drugim eksperymencie te same bodźce słuchowe, prezentowane za pomocą techniki przesuwania okna słuchowego, są zakłócane za pomocą wizualnie przedstawionego zadania cyfrowego przypominania poza zdaniem i manipulowane za pomocą trzech ładunków pamięci cyfrowej. Oceniając, w jaki sposób zadanie drugorzędne wpływa na zadanie podstawowe, jakim jest zrozumienie zdań RC, możemy zająć się kontrowersyjną kwestią dotyczącą asymetrii przetwarzania RC w Chinach. Nasze wyniki ujawniają różne wzorce przetwarzania RC w porównaniu z tymi zgłoszonymi w poprzednich badaniach. Eksperyment 1 nie wykazuje wyraźnych zalet przetwarzania RC ani w SRC, ani w ORC; jednak preferencja dla ORC jest obserwowana na końcach zdań, a preferencja dla SRC znajduje się na głównej stronie czasownika. Podobnie, Eksperyment 2 przedstawia dynamiczny wzór. Przy obciążeniu bezcyfrowym SRC wykazują zalety przetwarzania w obszarze znaczników RC. Jednak w przypadku zakłóceń o większym obciążeniu cyfrowym ORC wykazują zalety przetwarzania w tym samym regionie. Wyniki te prowadzą do przypuszczenia, że nie ma oczywistej lub wewnętrznej asymetrii przetwarzania w przetwarzaniu chińskich RC. Wykorzystując podejście polegające na ocenie specyficznych zakłóceń podczas przetwarzania składniowego, eksperymenty te demonstrują przyszłe zastosowania badawcze, które badają metryki przetwarzania wypowiadanych zdań z udziałem pamięci roboczej.

Wprowadzenie

Rola pamięci operacyjnej (WM) podczas przetwarzania zdań mówionych jest oczywista: ze względu na przemijający charakter mowy, słuchacze muszą przechowywać poszczególne formy akustyczne w pamięci do momentu ich przetworzenia. Aspekt ten staje się jeszcze istotniejszy podczas przetwarzania zdań o złożonej strukturze syntaktycznej. Przypisywanie relacji syntaktycznych słowom w złożonych zdaniach wiąże się z wykonywaniem operacji obliczeniowych na elementach przechowywanych w pamięci przez krótkie okresy czasu, co skutkuje większym zapotrzebowaniem na zasoby pamięciowe. Jednakże sposób, w jaki system WM jest zaangażowany w przetwarzanie zdań mówionych, pozostaje kwestią sporną.

Kontrowersja ta obejmuje dwa główne punkty sporne: niektórzy badacze twierdzą, że istnieje jeden system WM wykorzystywany we wszystkich zadaniach werbalnych1,2 — innymi słowy, przetwarzanie syntaktyczne opiera się na tych samych zasobach pamięci, które są wykorzystywane przez bardziej ogólne procesy poznawcze. Jest to model pojedynczego zasobu. Inni twierdzą, że określanie znaczenia zdania na podstawie jego struktury syntaktycznej angażuje wyspecjalizowany system WM, oddzielny od tego używanego w innych zadaniach werbalnych3,4. W tym ujęciu przetwarzanie syntaktyczne ma charakter modularny. Jest to model oddzielnego zasobu interpretacji zdań.

W badaniach psycholingwistycznych paradygmat interferencji dwumodalnej jest wykorzystywany do zbadania dwóch konkurencyjnych koncepcji. Opierając się na założeniu, że pojemność pamięci operacyjnej (WM) jest ograniczona5,6, paradygmat ten rozwiązuje problemy poprzez komplikowanie zadania głównego dodatkowym zadaniem interferencyjnym. Ponieważ zadanie główne konkuruje o ograniczone zasoby z zadaniem interferencyjnym, trudność wzrasta, a w zadaniu głównym obserwuje się dłuższy czas reakcji. W tej sytuacji podejście oparte na interferencji dwumodalnej umożliwia ocenę obciążenia przetwarzania oraz zakresu zaangażowania pamięci operacyjnej, gdy uczestnik otrzymuje zadanie wymagające jednoczesnej realizacji obu czynności.

Zdania zawierające zdania względne (RC), które ze względu na swoje złożone struktury składniowe sprawiają większe trudności w rozumieniu, są powszechnie wykorzystywane do badania roli systemu pamięci roboczej (WM) w przetwarzaniu zdań złożonych. Jednakże, choć przetwarzanie zdań złożonych nakłada większe obciążenie na zasoby WM związane z przetwarzaniem mowy, nie jest jasne, czy WM, która rzekomo wpływa na koszty przesunięć składniowych w językach z konstrukcjami RC z wyrazem głównym na początku (takimi jak angielski), odzwierciedla złożoność składniową języków z RC z wyrazem głównym na końcu (takich jak chiński). Niniejsze badanie, z wykorzystaniem paradygmatu interferencji dwumodalnej, rzuca światło na tę kwestię.

Trudności związane z przetwarzaniem dwóch struktur zdań względnych (RC) – zdań względnych z luką podmiotową i z luką przedmiotową (SRCs vs. ORCs) – były przedmiotem szerokiej debaty. Kontrowersje te obserwuje się głównie w językach różniących się typologicznie. W językach o szyku głowa-dopełnienie, takich jak język angielski, w których zdanie względne następuje po rzeczowniku będącym głową frazy, ogólnym stwierdzeniem jest to, że zdania SRC, jak w przykładzie 1(a) poniżej, są przetwarzane łatwiej niż zdania ORC w przykładzie 1(b).

Analiza struktury składniowej; diagram osadzania zdań; relacja podmiot-dopełnienie.

Jak pokazano w przykładzie (1), w języku angielskim położenie powierzchniowe luki różni się minimalnie między SRC i ORC. Luka ta jest indeksowana jako e1, czyli pusta pozycja po rzeczowniku głównym „actor” (zwanym fillerem), która pozostała po jego usunięciu z RC. Jednakże SRC i ORC różnią się znacząco pod względem struktury gramatycznej i funkcji luki w domenie RC. Koszt pamięciowy związany z integracją i rozwiązaniem zależności strukturalnej między fillerem a luką stanowi odpowiedni cel badań eksperymentalnych i był szeroko wykorzystywany do uzyskania wglądu w rolę WM w przetwarzaniu i rozumieniu języka.

Na przykład rozumienie i przetwarzanie tych pozapozycyjnych zdań względnych wymaga zaindeksowania rzeczownika głównego „actor” jako podmiotu funkcjonalnego lub dopełnienia czasownika „criticized” w SRC i ORC, a następnie zapisania rzeczownika głównego w pamięci roboczej, aby mógł on zostać później przypisany do podmiotu gramatycznego czasownika „admitted” w zdaniu głównym.

W przeciwieństwie do spójnych wyników uzyskanych w przypadku języków z głową na początku zdania, w których rozumienie SRC jest łatwiejsze niż rozumienie ORC, w odniesieniu do asymetrii przetwarzania RC w języku chińskim – który jest językiem z głową na końcu zdania, gdzie zdanie względne poprzedza rzeczownik główny – zgłaszano mieszane rezultaty. Niektórzy zaobserwowali przewagę w przetwarzaniu SRC, podczas gdy inni raportowali odwzorowany wzorzec (tj. przewagę w przetwarzaniu ORC). Te ostatnie kierunki badań sugerowały również, że asymetria przetwarzania RC może być modulowana przez WM, co wynika z rezultatów uzyskanych w badaniach nad wydajnością czytania w tempie własnym7,8,9.

Jak wspomniano powyżej, istnieją dwa konkurencyjne modele dotyczące roli, jaką pamięć robocza (WM) odgrywa w (złożonym) przetwarzaniu składniowym. Pierwszy zakłada, że „przetwarzanie składniowe jest modularne”, a drugi, że „przetwarzanie składniowe ma charakter ogólny”. Zdania złożone o dobrze znanych różnicach w trudności zrozumienia, t.j. zdania z relatywnym podmiotem (SRC) i zdania z relatywnym dopełnieniem (ORC) w języku angielskim, są często wykorzystywane w zadaniach z interferencją dwumodalną (DMI) w celu zbadania tych dwóch twierdzeń w kontekście kwestii modularności, ponieważ twierdzi się, że zaangażowanie WM odzwierciedla asymetrię przetwarzania. Zatem wywołanie jednoczesnego obciążenia pamięci poprzez zadania interferencyjne wykazuje wpływ WM na przetwarzanie składniowe. Uzasadnienie polega na tym, że niezależnie od tego, czy istnieje pojedynczy werbalny system WM, czy oddzielne modularne systemy składniowe, obciążenie systemu zadaniem interferencyjnym sprawia, że przetwarzanie składniowe staje się mniej efektywne ze względu na ograniczenia zasobów WM. Sposób, w jaki w zadaniach DMI pogarsza się przetwarzanie zdań bardziej złożonych składniowo (ORC w języku angielskim) w porównaniu do przetwarzania zdań prostszych składniowo (SRC w języku angielskim), dostarcza dowodów na specyficzny efekt WM i wskazuje, w jakim stopniu WM jest zaangażowana.

W przeciwieństwie do języków z głową na początku zdania, takich jak angielski, chińskie zdania względne (RC) wykazują strukturę z głową na końcu i przejawiają relację luka-wypełniacz (gap-filler). Indeksowany element przemieszczony na zewnątrz, czyli luka, poprzedza powiązany z nim rzeczownik głowny, co zilustrowano w 2(a), SRC, oraz 2(b), ORC.

Diagram analizy struktury składniowej, przedstawiający chińskie zdania względne oraz tłumaczenie na język angielski.

Kontrowersja wynikająca z przetwarzania chińskich zdań względnych (RCs) polega na tym, że zdania względne z podmiotem (SRCs) nie są konsekwentnie raportowane jako łatwiejsze w przetwarzaniu niż zdania względne z dopełnieniem (ORCs), a ta rozbieżność stanowi wyzwanie dla teorii przetwarzania i rozumienia języka. Ponieważ treść przednominalna przed relatywizatorem „DE” musi być przechowywana w pamięci roboczej (WM) aż do momentu powiązania i odzyskania luki — przeniesionego rzeczownika głównego „aktor” — zrozumienie tego procesu nadal pomaga w uzyskaniu wglądu w rolę WM w przetwarzaniu języka.

W niniejszym badaniu analizowane jest przetwarzanie mówionych zdań z klauzulami względnymi (RC), ponieważ słuchanie podczas przetwarzania charakteryzuje się wysoką kompresją i jest ściśle powiązane z funkcjonowaniem pamięci roboczej (WM). Wykorzystano paradygmat interferencji dwumodalnej, ponieważ interferencja jest dobrze udokumentowaną funkcją zapominania w słuchowej pamięci krótkotrwałej. Reprezentacje przechowywane w pamięci mogą ulec degradacji, a następnie zostać utracone w wyniku wystąpienia zdarzeń interferujących10. Dystraktory różniące się od kanonicznego mówionego zdania pod różnymi względami (w tym przypadku: wewnątrzjęzykowo i pozacyfrowo, patrz poniżej) pozwalają na pomiar kosztu integrowania przyrostowych danych wejściowych podczas różnych faz przetwarzania oraz w różnych warunkach interferencji.

Wychodząc z założenia, że przetwarzanie zdań o większym stopniu złożoności składniowej bardziej obciąża pamięć roboczą (WM) niż przetwarzanie zdań prostszych, można postawić hipotezę, że manipulowanie rodzajem interferencji w trakcie rozumienia tekstu powinno wpłynąć na procesy przetwarzania zdań. W konsekwencji przetwarzanie zdań bardziej złożonych składniowo będzie wymagać proporcjonalnie dłuższego lub nieproporcjonalnie dłuższego czasu słuchania w czasie rzeczywistym oraz wiązać się będzie z gorszymi wynikami w ocenie rozumienia zdań po zakończeniu ich odsłuchania w porównaniu do przetwarzania konstrukcji prostszych składniowo. Niniejsze badanie weryfikuje hipotezę, według której interferencja podczas przetwarzania zdań może wskazywać na zaangażowanie WM, przenosząc tym samym kwestię tej wartości poza problem modularności składniowej: proponuje ono ideę, że kontrowersje wokół przetwarzania zdań z klauzulami względnymi (RC) w języku chińskim można wyjaśnić poprzez badanie WM ze względu na jej fundamentalną rolę w rozumieniu języka. Zatem znaczenie przypisywane zastosowaniu zadań z interferencją w czasie odroczonym (DMI) w badaniach nad przetwarzaniem chińskich RC wyznacza drogę do rozwiązania trwającej debaty dotyczącej asymetrii w przetwarzaniu chińskich RC.

Niniejszy artykuł przedstawia dwa przykładowe eksperymenty dotyczące przetwarzania słuchowego z wykorzystaniem interferencji wewnątrz- i pozazdaniowych. Celem tych dwóch eksperymentów było zbadanie, w jakim stopniu pamięć operacyjna (WM) jest zaangażowana w przetwarzanie zdań z częścią względną (RC) w języku chińskim przy różnych rodzajach interferencji.

W pierwszym eksperymencie jako zakłócenie wewnątrzzdaniowe wykorzystano zadanie decyzyjne leksykalne prezentowane wizualnie. Jako drugorzędne zadanie zakłócające wprowadzono zadanie decyzyjne leksykalne (LDT) polegające na rozróżnianiu słów od pseudosłów w trzech punktach podczas słuchania docelowego zdania z klauzulą względną, co pozwoliło na pomiar trudności przetwarzania w tych konkretnych momentach. Głównym celem tego eksperymentu jest zbadanie, w jaki sposób luka w klauzuli względnej (RC) wiąże się z wypełniaczem w klauzuli macierzystej (MC) oraz czy wpływa to na przetwarzanie dalszej części MC. Z tego powodu trzy punkty pomiarowe zostały ustawione po obszarze MC. Przykład trzech punktów pomiarowych wskazanych strzałkami i dopasowanych do odpowiadającej im konkatenacji syntaktycznej, powielony z (2), przedstawiono w przykładzie 3, gdzie 3(a) obrazuje SRC, a 3(b) obrazuje ORC.

Porównanie składni dwujęzycznej, schemat struktur zdań w języku mandaryńskim i angielskim, analiza lingwistyczna.

Rysunek 1 przedstawia procedurę zakłócania ciągłej prezentacji słuchowej RC przez LDT w każdym z trzech miejsc badania. Projekt czasowy jest zgodny z konwencjonalnym protokołem zadania LDT zastosowanym w poprzednim badaniu nad przetwarzaniem języka chińskiego1. Na przykład każda próba wizualnego LDT rozpoczyna się znakiem krzyżyka „+”, który wskazuje punkt fiksacji w centrum monitora przez 50 ms, po czym następuje bodziec wizualnego LDT, wyświetlany na ekranie przez 3 0 ms i znikający natychmiast po podjęciu decyzji leksykalnej przez badanego. Typowy uczestnik kończy Eksperyment 1, wliczając w to sesję treningową, w ciągu 30–35 minut.

Schemat przetwarzania słuchowego ilustrujący etapy rozumienia zdań i reagowania.
Rycina 1: Procedura interferencji wewnątrzzdaniowej z zadaniem decyzji leksykalnej.
Proszę kliknąć tutaj, aby wyświetlić powiększoną wersję tego rysunku.

Trzy miejsca badania wraz z zadaniem LDT:

1. Pozycja 1 (P1): region za SMC

Pierwsza pozycja (P1) podlegająca pomiarowi znajduje się bezpośrednio po podmiocie zdania głównego (MC), w obszarze za granicą zdania względnego (RC). Przewiduje się, że w tym miejscu wystąpi obciążenie przetwarzaniem. Po pierwsze, przed tym punktem (SMC), konstrukcje z luką po podmiocie i luką po dopełnieniu w obrębie domeny RC tworzą odpowiednio kontrastujące struktury czasownik-dopełnienie (VO) oraz podmiot-czasownik (SV). Po drugie, aby zintegrować składniki z obszaru RC z rzeczownikiem głównym w MC, słuchacze muszą zidentyfikować rolę gramatyczną luki i powiązać ją z nadchodzącym rzeczownikiem pełniącym rolę wypełniacza

2. Pozycja 2 (P2): obszar za VMC

Drugą pozycją (P2) podlegającą pomiarowi jest miejsce bezpośrednio po czasowniku w zdaniu głównym (VMC). Zakłada się, że punkt ten również wywołuje obciążenie przetwarzania. Integracja informacji werbalnej wymaga od słuchaczy wydobycia argumentów rzeczownikowych w zdaniu oraz zidentyfikowania sprawcy czasownika głównego, albo z poprzedzającej domeny zdania względnego (RC), albo z rzeczownika głównego, który to zdanie względne modyfikuje.

3. Pozycja 3 (P3): Region pozdaniowy

Trzecia pozycja (P3) przeznaczona do pomiaru znajduje się bezpośrednio po zakończeniu zdania. Poprzednie badania nad przetwarzaniem sugerują istnienie efektu podsumowania na końcu zdania – zjawiska, w którym informacje niesyntaktyczne (np. na poziomie dyskursu i semantyki) są analizowane na końcu zdania w celu aktywacji i sfinalizowania rozumienia12,13. W związku z tym obciążenie przetwarzaniem powinno wzrastać w kierunku końca zdania ze względu na konieczność integracji tych informacji niesyntaktycznych14,15. Zakłada się, że w pozycji 3 nastąpi spadek obciążenia przetwarzaniem, ponieważ w obrębie tego miejsca podjęta została próba rozstrzygnięcia struktury zdania.

W drugim eksperymencie zastosowano zadanie z ruchomym oknem słuchowym (AMW). Uważa się, że technika AMW pozwala uchwycić wzorce alokacji zasobów podczas przetwarzania lingwistycznego w czasie rzeczywistym i była ona szeroko wykorzystywana w próbach rozróżnienia dwóch konkurujących ze sobą podejść do pamięci roboczej (WM)16,17. Zakłada się, że interferencja pozazdaniowa powinna kosztować słuchaczy dodatkowy czas w trakcie przetwarzania nadchodzącego, przejściowego zdania mówionego. W paradygmacie AMW uczestnicy słuchali zdań podzielonych na słowa i naciskali klawisz na klawiaturze, aby rozpocząć odtwarzanie kolejnego segmentu. W związku z tym czas trwania przerw między naciśnięciami klawisza w celu uruchomienia następnego segmentu i kontrolowania przepływu napływających informacji odzwierciedla reaktywność uczestników na rozważane cechy lingwistyczne. Na przykład, jeśli interferencja pozazdaniowa wywiera określony wpływ na przetwarzanie zdań o różnej złożoności syntaktycznej, uczestnicy będą wykazywać odpowiednio dłuższe przerwy przed uruchomieniem kolejnych segmentów. Procedury zostały przedstawione schematycznie na Rysunku 2.

Schemat procesów obciążenia poznawczego; wizualne przypominanie cyfr, słuchowe rozumienie zdań, V/S oraz O/V.
Rysunek 2: Procedura interferencji pozdaniowej z zadaniem zapamiętywania cyfr.
Aby wyświetlić powiększoną wersję tej figury, kliknij tutaj.

Poniższy protokół przedstawia sposób, w jaki badacze wykorzystują zadanie decyzji leksykalnej przedstawione wizualnie jako interferencję wewnątrzzdaniową oraz jednoczesne obciążenie interferencją arytmetyczną jako interferencję pozazdaniową, aby zbadać zaangażowanie pamięci roboczej (WM) oraz asymetrię przetwarzania chińskich zdań względnych (RC) i szczegółowo opisać leżącą u ich podstaw logikę.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Protokół

Przeprowadzenie tych eksperymentów odbyło się zgodnie ze wszystkimi regulacjami dotyczącymi etyki badań. Wszyscy uczestnicy wyrazili świadomą zgodę w formie ustnej i pisemnej przed przystąpieniem do eksperymentów. Wszystkie procedury, formularze zgody oraz protokół eksperymentalny zostały zatwierdzone przez Komisję Etyki Badań Uniwersytetu Narodowego Cheng Kung na Tajwanie. Eksperyment 1 oraz Eksperyment 2 oparto odpowiednio na wcześniejszych badaniach18,19. Przedstawione tutaj reprezentatywne wyniki zostały zaczerpnięte z tych wcześniejszych publikacji.

1. Eksperyment 1 — dwumodalne zadanie interferencji wewnątrzzdaniowej

  1. Zrekrutowano 97 studentów, w tym 54 kobiety i 42 mężczyzn, z National Tainan Institute of Nursing oraz National Tainan Secondary High School do udziału w eksperymencie 1.
    UWAGA: Wymagane jest, aby wszyscy uczestnicy byli native speakerami języka chińskiego, wykazującymi biegłość w tym języku, z prawidłowym lub skorygowanym do normy wzrokiem oraz bez zaburzeń słuchu (na podstawie autoopisu).
  2. Przygotowanie materiałów
    1. Wybierz słowa i nie-słowa do testu LDT. Uwzględnij łącznie 48 dwusylabowych (dwuznakowych) słów chińskich, z czego 24 były słowami, a 24 nie-słowami.
      UWAGA: Jeden znak chiński reprezentuje sylabę, która zazwyczaj jest morfemem (tj. najmniejszym elementem znaczącym). Słowa docelowe w tym przypadku to dwusylabowe słowa złożone. Proszę zapoznać się z Plik uzupełniający zawierająca listę wizualnych słów i pseudosłów docelowych użytych w zadaniu LDT.
      1. Wybierz 24 słowa z Raportu Technicznego Korpusu Sinica20podczas gdy należy zapewnić, aby wszystkie słowa docelowe charakteryzowały się średką częstotliwością. Należy wyszukać słowa o średniej procentowej częstotliwości wynoszącej około 0,030 i pozycji w rankingu około 400 w bazie danych.
        UWAGA: Wybór słów o średniej częstotliwości jako słów docelowych ma na celu zminimalizowanie efektu częstotliwości, który objawia się krótszymi czasami reakcji (RT) w przypadku słów o wysokiej częstotliwości i dłuższymi czasami reakcji w przypadku słów o niskiej częstotliwości.
      2. Stwórz 24 pseudosłowa, wykorzystując dwa jednosylabowe znaki, które są indywidualnie znaczące, lecz których kombinacja jest semantycznie anomalna. Aby zapobiec potencjalnym aktywacjom, unikaj dwusylabowych słów z identycznymi radykałami (np. Haiyang, co oznacza „oceanjest reprezentowane w chińskim dwusylabowym słowie zapisanym znakami jako japońskie znaki kanji dla słowa „ocean” (海洋), symbol lingwistyczny., gdzie komponent rodnikowy  Równowaga statyczna; ΣFx=0, MA=0; schemat do celów badawczych i edukacyjnych. powiązane z wodami, wspólne dla cech Chiński znak oznaczający „morze” 海, logogram używany w chińskich systemach pisma. i Chiński znak „yang” oznaczający ocean lub zachód.).
      3. Ręcznie rozmieść 24 nie-słowa w zdaniach wypełniających oraz 24 słowa w docelowych zdaniach z różnicowaniem relacyjnym (RC).
        UWAGA: Połączenie słów z RC oraz pseudosłów z wypełniaczami było konieczne, ponieważ w analizach statystycznych powinny zostać uwzględnione jedynie czasy reakcji (RT) w teście LDT dla 24 słów z RC.
    2. Słuchowe zdania z częścią względną i zdania wypełniające
      UWAGA: Prosimy zapoznać się z Plik uzupełniający dla przykładów zdań SRC, ORC i zdań wypełniających.
      1. Sformułuj bodźce słuchowe w postaci 72 zdań, obejmujących trzy rodzaje zdań: 24 zdanie SRC, 24 zdanie ORC oraz 24 zdania wypełniające.
      2. Podziel 48 zdań RC po równo na dwie grupy, aby stworzyć niepełny projekt zrównoważony (incomplete-counterbalanced design), tworząc 48 prób (12 SRC, 12 ORC i 24 wypełniacze) w warunkach 2 (SRC, ORC) * 3 (miejsce badania) * 2 (słowo/niesłowo).
  3. Konfiguracja oprogramowania eksperymentalnego
    1. Użyj standardowego oprogramowania eksperymentalnego (np. E-Prime21) w celu zaprogramowania eksperymentu zgodnie z protokołami oprogramowania.
    2. Zrandomizuj wszystkie bodźce za pomocą oprogramowania eksperymentalnego.
    3. Skonfiguruj system oprogramowania tak, aby rejestrował następujące dane: (1) czas reakcji, (2) wskaźnik dokładności odpowiedzi uczestnika w LDT oraz (3) rozumienie po zdaniu na podstawie naciśnięć klawiszy przez uczestników.
    4. Należy uwzględnić informację zwrotną w przypadku błędnych decyzji leksykalnych lub braku odpowiedzi uczestników. Informacja zwrotna powinna wyświetlać się na ekranie monitora natychmiast po błędnej odpowiedzi uczestnika lub w przypadku jej braku. W sytuacji, gdy odpowiedź uczestnika była prawidłowa, informacja zwrotna nie jest wyświetlana.
    5. Zapewnij sekcję ćwiczeń obejmującą próby z informacją zwrotną.
  4. Po sesji treningowej należy rozpocząć dwumodalne wewnątrzzdaniowe zadanie interferencyjne LDT. Podczas sesji eksperymentalnych należy umożliwić uczestnikom zrobienie przerwy po każdych 24 próbach.
    1. Każdy uczestnik powinien wykonać zadanie indywidualnie. Najpierw należy przekazać uczestnikom instrukcje zarówno w formie pisemnej na ekranie komputera, jak i w formie ustnej przez eksperymentatora. Uczestników należy posadzić przed komputerem i wyposażyć w słuchawki.
    2. Poleć uczestnikom słuchanie zdań odtwarzanych przez słuchawki, wykonując jednocześnie w pewnym momencie procesu słuchania zadanie decyzji leksykalnej.
    3. Poproś uczestników o rozstrzygnięcie, czy wyświetlona na ekranie zakłócająca sonda wizualna była słowem, czy pseudosłowem, i poleć im jak najszybsze i najdokładniejsze naciśnięcie klawisza odpowiedzi „Tak” w przypadku słowa lub „Nie” w przypadku pseudosłowa.
    4. Poinformuj uczestników, że bezpośrednio po zdaniu pojawi się pytanie sprawdzające zrozumienie. Przypomnij im, aby uważnie słuchali zdania dźwiękowego, jednocześnie wykonując zadanie LDT.

2. Eksperyment 2―dwumodalne zadanie interferencyjne pozazdaniowe

  1. Zrekrutować 61 studentów, 40 kobiet i 21 mężczyzn, z National Taipei University of Technology oraz National Tainan Junior College of Nursing jako uczestników Eksperymentu 2.
    UWAGA: Wszyscy uczestnicy muszą być biegłymi rodzimymi użytkownikami języka chińskiego z normalnym lub skorygowanym do normy wzrokiem oraz bez upośledzenia słuchu według własnej oceny.
  2. Przygotowanie materiałów
    1. Słuchowe zdania RC i zdania wypełniające
      1. Opracować bodźce słuchowe w postaci trzech typów zdań: SRC, ORC oraz zdań wypełniających. Podzielić 48 zdań RC równomiernie na dwie grupy, aby stworzyć niepełny zrównoważony projekt z łącznie 96 próbami (24 SRC, 24 ORC i 48 wypełniaczy) dla warunków 2 (typ zdania: SRC, ORC) * 3 (obciążenie cyframi).
        UWAGA: Przykłady docelowych prób słuchowych dla zdań SRC, ORC i wypełniaczy znajdują się w Pliku uzupełniającym.
    2. 0/3/5 cyfr
      1. Przygotować łącznie 96 elementów cyfrowych, składających się z kombinacji 0, 3 lub 5 cyfr. Przypisać każde z obciążeń (0, 3 lub 5 cyfr) równomiernie do wszystkich prób zdaniowych.
  3. Dwumodalne pozazdaniowe zadanie interferencji cyfrowej z paradygmatem AMW
    1. Wykorzystać standardowe oprogramowanie eksperymentalne (np. E-Prime21) do zaprogramowania eksperymentu zgodnie z protokołami oprogramowania.
    2. Losowo przypisać uczestników do jednego z dwóch zestawów bodźców reprezentujących kombinacje dwóch czynników wewnątrzpodmiotowych: typu zdania (SRC vs ORC) oraz obciążenia pamięci (brak obciążenia, obciążenie 3 cyframi, obciążenie 5 cyframi). Przedzadaniem AMW wyświetlić uczestnikom cyfry przez 1 50 ms.
  4. Następnie rozpocząć zadanie AMW.
    UWAGA: Zadanie AMW2 jest zadaniem słuchowym wykonywanym we własnym tempie.
    1. Polecić uczestnikom zapamiętanie poprzedniej prezentacji wizualnej (cyfr lub ich braku).
    2. Następnie polecić uczestnikom wysłuchanie zdań podzielonych na słowa i odtwarzanych przez słuchawki. Poinformować ich, aby tempo odtwarzania było jak najszybsze, poprzez naciskanie klawisza inicjującego odtworzenie kolejnego podzielonego słowa.
    3. Polecić uczestnikom odpowiedź na pytanie sprawdzające rozumienie (tak/nie), które pojawi się na ekranie komputera po wysłuchaniu każdego zdania próbnego. Poinformować uczestników, że pytaniu poprzedza znak zapytania „?” na ekranie komputera i że pytanie dotyczy informacji usłyszanych w poprzedzającym zdaniu.
    4. Krótki sygnał dźwiękowy „beep” zostaje odtworzony, gdy uczestnicy nacisną klawisz tak/nie w odpowiedzi na pytanie sprawdzające rozumienie. Po sygnale, zgodnie z instrukcją pojawiającą się na ekranie, poprosić uczestników o powtórzenie cyfr, które widzieli przed wysłuchaniem zdania.
    5. Eksperymentator powinien zapisać odpowiedzi uczestników dotyczące odtwarzania cyfr w arkuszu wyników.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Wyniki

Efekt interferencji zaobserwowano zarówno w zadaniach dual-modalnych intra-LDT, jak i w zadaniach obciążenia poza palcami (extradigit load). Biorąc pod uwagę trzy miejsca badania w Eksperymencie 1, wyniki czasu reakcji (RT) w zadaniu intra-LDT wykazały dynamiczny wzorzec przetwarzania zdań z częścią względną (RC) w zależności od dwóch typów RC. Jak pokazano na Rysunku 3, typ ORC wykazuje przewagę przetwarzania w pozycji po podmiocie zdania głównego (SMC) po RC (P1) oraz na końcu z...

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Dyskusja

Badanie to pokazuje, że zastosowanie metod DMI zarówno z zadaniami interferencji wewnątrz-, jak i pozasentencyjnej może pomóc w wyjaśnieniu roli WM w przetwarzaniu zdań mówionych i rzucić światło na kwestię chińskiej asymetrii przetwarzania RC. Zgodnie z oczekiwaniami, mierząc stopień, w jakim zakłócenia z zadania drugorzędnego wpłynęły na wyniki słuchaczy w zakresie przetwarzania zdań pierwotnych, możemy wywnioskować wzorce chińskiego przetwarzania RC i dojść do wykonalnego rozwiązania debaty na temat przewagi przetwarz...

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Oświadczenia

Autorzy nie mają nic do ujawnienia.

Podziękowania

To badanie było wspierane przez granty z Ministerstwa Nauki i Technologii, Tajwanu, R.O.C. [NSC-101-2410-H-439-001] dla pierwszego autora, Tuyuan Cheng. Autorzy dziękują członkom laboratorium, Yang Ya-Hui i Chen Pei-Han, za ich pomoc w przygotowaniu i przeprowadzeniu eksperymentu.

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Materiały

Lista materiałów użytych w tym artykule
NazwaFirmaNumer katalogowyKomentarze
narzędzi programowychE-PrimeProfessional 2.0
SłuchawkiLogitech
PraatPraat5.3.43Oprogramowanie online używane do edycji plików dźwiękowych do słuchania; http://www.fon.hum.uva.nl/praat/
Serial Response BoxPsychologia Narzędzia programowe Standardowy
komputer PCLaptop ASUS K42Jv
Wersja Psychology

Bibliografia

  1. Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
  2. King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
  3. Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
  4. Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
  5. Cowan, N. Working Memory Capacity. , Psychology Press. New York, NY. (2005).
  6. Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
  7. Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
  8. Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
  9. Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
  10. Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
  11. Wu, J. T., Chou, T. L., Liu, I. M. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. , Taipei. Taipei: National Taiwan University (in Chinese) 31-58 (1994).
  12. Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
  13. Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
  14. Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
  15. Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
  16. Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
  17. Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
  18. Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
  19. Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), https://doi.org/10.1007/s10936-018-9576-5 1035-1055 (2018).
  20. CKIP. Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , Institute of Information Science, Academia Sinica. Taipei. (1994).
  21. MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
  22. Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
  23. Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
  24. Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
  25. Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).

Dostęp ograniczony. Zaloguj się lub rozpocznij wersję próbną, aby wyświetlić tę treść.

Przedruki i uprawnienia

Tagi

pamięć roboczachińskie zdania względnezdania względne z luką podmiotowązdania względne z luką obiektowązadanie decyzji leksykalnejzadanie cyfrowego przypominaniasłuchowe przesuwne oknorozumienie zdań