Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Undersøgelse af online syntaktisk behandling af talte komplekse sætninger på kinesisk ved hjælp af Dual-modal interferens opgaver

Published: September 5, 2019 doi: 10.3791/59660
Automatic Translation
1, 2
1General Education Center, National Tainan Junior College of Nursing, 2Department of Psychology, National Taiwan University

Summary

Her præsenterer vi en protokol, der anvender Dual-modal interferens opgaver for at undersøge onlinebehandling af talte-kinesiske relative klausul sætninger. Der er beskrevet to eksempel eksperimenter, som involverer auditiv behandling med intra-og extrasententiel interferens. Paradigmet giver en metode til at tackle karakteren af arbejdshukommelsen og dens virkninger på sætnings behandling.

Abstract

Arbejdshukommelsen (WM) spiller en central rolle i forståelsen af komplekse sætninger. Dens funktion i behandlingen af talte komplekse sætninger er især indlysende, fordi talte komplekse sætning behandling er hukommelseskrævende. Det dobbelte modale interferens paradigme er blevet brugt til at undersøge, hvordan WM-systemet er involveret i kompleks syntaktisk behandling. Denne artikel præsenterer to eksemplarisk eksperimenter, der involverer auditiv behandling med enten intra-eller extrasentential interferenser. I det første eksperiment, auditive stimuli [talte-kinesisk relative klausul (RC) sætninger med to syntaktiske typer: emne-Gapped (SRC) vs objekt-Gapped (ORC)] er forstyrret via en visuelt præsenteret leksikale beslutning opgave inden for en sætning og manipuleret ved hjælp af tre forskellige interferens tidspunkter. I det andet eksperiment, de samme auditive stimuli, præsenteret via en auditiv vindue bevægelige teknik, er forstyrret via en visuelt præsenteret digital tilbagekaldelse opgave ud over sætningen og manipuleret ved hjælp af tre digitale hukommelse belastninger. Ved at vurdere, hvordan den primære opgave at forstå de RC sætninger er påvirket af den sekundære opgave, kan vi tackle det kontroversielle spørgsmål om kinesisk RC behandling asymmetri. Vores resultater afslører forskellige mønstre af RC behandling i forhold til dem, der er rapporteret i tidligere undersøgelser. Eksperiment 1 manifesterer ingen klare RC-behandlingsfordele i enten SRC eller ORC; Men, en præference for ORC er observeret i enderne af sætninger, og en præference for SRC findes på de vigtigste verbum site. På samme måde præsenterer eksperiment 2 et dynamisk mønster. Under en no-cifret belastning, SRCs viser behandling fordele i RC markør regionen. Under interferens med en højere cifret belastning viser ORCs dog behandlingsfordele i samme region. Disse resultater fører til formodninger om, at der ikke er nogen åbenlys eller iboende behandling asymmetri i behandlingen af kinesiske RCs. ved hjælp af tilgangen til vurdering af specifik interferens under syntaktisk behandling viser disse eksperimenter fremtidig forskning programmer, der udforsker behandlings målingerne for talte sætninger, som involverer arbejdshukommelsen.

Introduction

Den rolle arbejdshukommelsen (WM) under talte sætning behandling er indlysende: på grund af den forbigående karakter af tale, skal lyttere bevare den komponent akustiske former i deres erindringer, indtil de er behandlet. Dette aspekt bliver endnu vigtigere under behandlingen af syntaktisk komplekse sætninger. Tildeling af syntaktiske relationer til ord i komplekse sætninger involverer udførelse af beregningsmæssige handlinger på elementer, der bevares i hukommelsen i korte perioder, hvilket resulterer i en højere hukommelses efterspørgsel. Men, hvordan WM-systemet er involveret i talte sætning behandling er kontroversiel.

Denne kontrovers involverer to store uoverensstemmelser: nogle forskere hævder, at et enkelt WM-system eksisterer, der bruges til alle verbale opgaver1,2-med andre ord, syntaktisk behandling er afhængig af den samme hukommelse ressourcer, der anvendes af mere generelle kognitive processer. Dette er modellen med en enkelt ressource. Andre har hævdet, at fastsættelsen af betydningen af en sætning baseret på dens syntaktiske struktur involverer en specialiseret WM-system adskilt fra den, der anvendes til andre verbal opgaver3,4. I denne ånd er syntaktisk behandling modulær. Dette er den særskilte-sætning-fortolkning ressource model.

I psycholinguistisk forskning, den dual-modal interferens paradigme er blevet brugt til at undersøge de to konkurrerende regnskaber. Baseret på den antagelse, at WM lagerkapacitet er begrænset til5,6, paradigme adresser spørgsmål ved at komplicere en primær opgave med en sekundær intervenerende opgave. Da den primære opgave konkurrerer om begrænsede ressourcer med den sekundære mellemliggende opgave, øges vanskeligheden, og den primære opgave udviser længere reaktionstider. I lyset af denne situation gør tilgangen med Dual modal interferens det muligt at vurdere behandlingsbelastningen og omfanget af WM 's involvering, når en deltager får en opgave, der kræver, at begge opgaver udføres samtidigt.

Sætninger, der indeholder RC-komponenter, som forårsager flere forståelsesvanskeligheder på grund af deres velkendte komplekse syntaktiske strukturer, anvendes i vid udstrækning til at undersøge, hvordan WM-systemet er involveret i behandling af komplekse sætninger. Men selv om behandling af komplekse sætninger placerer en højere efterspørgsel på WM-ressourcer i forbindelse med talebehandling, er det mindre klart, om WM, der menes at bidrage til omkostningerne ved syntaktiske bevægelser i sprog med hoved-indledende RC konstruktioner (såsom engelsk) afspejler den syntaktiske kompleksitet af sprog med hoved-Final RCs (såsom kinesisk). Ved hjælp af en dual-modal interferens paradigme, den nuværende undersøgelse kaster lys over dette spørgsmål.

De vanskeligheder, der er forbundet med at behandle to RC-strukturer, genstand-Gapped og relative klausuler (SRCs vs. ORCs), har været genstand for omfattende debat. Disse Kontroler er hovedsageligt observeret på tværs af typologisk forskellige sprog. I hoved-indledende sprog som engelsk, hvor en relativ klausul følger hovedet navneord det ændrer sig, den generelle konstatering er, at SRCs som i eksempel 1 (a) nedenfor behandles lettere end ORCs i eksempel 1 (b).

Equation 1

Som vist i eksempel (1), på engelsk, er overfladens placering forskellig fra minimalt mellem Src'er og Orc'er. Denne kløft er indekseret som e1, den tomme position efter hovedet navneord 'skuespiller' (kaldet fyldstof) tilbage ved sin fjernelse ud af RC. SRCs og Orc'er er imidlertid meget forskellige med hensyn til den grammatiske struktur og funktion af kløften i RC-domænet. Hukommelsen omkostninger for at integrere og løse den strukturelle afhængighed mellem fyldstof og kløften er en apt mål for eksperimentel undersøgelse og har været meget brugt til at få indsigt i rollen som WM i sprogbehandling og forståelse.

For eksempel, forstå og behandling disse postnominelle RCS kræver indeksering hoved navneord 'skuespiller' som enten et funktionelt emne eller genstanden for verbet 'kritiseret' i src og Orc og derefter opbevare hovedet navneord i WM, så det senere kan tildelt det grammatiske emne i verbet»optaget«i hoved klausulen.

I modsætning til den konsekvente konstatering med hoved-indledende sprog, at forstå srcs er lettere end forstå Orcs, blandede resultater er blevet rapporteret om RC behandling asymmetri for kinesisk, som er et hoved-endesprog, hvor en relativ -klausulen går forud for hoved navneord. Nogle har observeret en SRC behandling fordel, mens andre har rapporteret det modsatte mønster (dvs. en ORC forarbejdning fordel). De sidstnævnte linjer af forskning også foreslået, at RC behandling asymmetri kan moduleres af WM, som foreslået af resultater opnået fra undersøgelser af selv-tempo læsning ydeevne7,8,9.

Som nævnt ovenfor er der to konkurrerende modeller med hensyn til den rolle, som WM spiller i den (komplekse) syntaktiske behandling. Den ene er, at "syntaktisk behandling er modulær", og den anden er, at "syntaktisk behandling er generel". Komplekse sætninger med velkendte forskelle i forståelsen vanskeligheder, dvs SRCs vs. ORCs på engelsk, er ofte brugt i Dual-modal interferens (DMI) opgaver at undersøge disse to påstande med hensyn til spørgsmålet om modularitet, fordi involvering af WM hævdes at sideløbende med behandlingen asymmetri. Således, inducerende samtidige hukommelse belastning gennem forstyrrende opgaver demonstrerer WM effekter på syntaktisk behandling. Begrundelsen er, at hvorvidt en enkelt verbal WM-system eller separate modulære syntaktiske systemer eksisterer, engagere systemet med en forstyrrende opgave gør syntaktisk behandling mindre effektiv på grund af WM ressourcebegrænsninger. Den måde, hvorpå behandling syntaktisk mere komplekse sætninger (ORC, på engelsk) lider i DMI opgaver sammenlignes med behandling syntaktisk enklere sætninger (SRC, på engelsk) giver dokumentation for den specifikke virkning af WM og angiver, i hvilket omfang som WM er involveret i.

I modsætning til hoved-indledende sprog som engelsk, kinesiske RCs manifesterer en hoved-endelige dannelse og udviser en Gap-filler forhold. Det indekserede flyttede ud-element, kløften, går forud for hoved navneord, der knytter sig til det, som illustreret i 2 (a), SRC og 2 (b), ORC.

Equation 1

Den kontrovers, der stammer fra behandling af kinesiske RCs er, at Src'er ikke konsekvent rapporteres som lettere at behandle end ORCs, og denne uoverensstemmelse har udgjort en udfordring for teorier om sprogbehandling og forståelse. Fordi det prenominal indhold før relativizer ' de ' skal lagres i WM indtil efter kløften-den flyttede hoved navneord ' skuespiller ', er forbundet og hentet-forståelse denne proces stadig hjælper med at få indsigt i rollen som WM i sprogbehandling.

I den aktuelle undersøgelse undersøges den talte RC-sætnings behandling, fordi lytning er meget kompressiv under behandlingen og er nært beslægtet med WM. Den dobbelte modal interferens paradigme bruges, fordi interferens er en veletableret glemmer funktion i kortsigtede auditive hukommelse. Repræsentationer, der er lagret i hukommelsen, kan forringes og efterfølgende gå tabt, når forstyrrende hændelser indtræffer10. Distraktorer, der varierer langs forskellige aspekter (i det aktuelle tilfælde: intralinguistisk og extradigital, se nedenfor) til den kanoniske talte sætning giver os mulighed for at måle omkostningerne ved at integrere den inkrementelle input i forskellige faser af behandlingen og under forskellige interferens forhold.

Baseret på den holdning, at behandlingen af mere syntaktisk komplekse sætninger overbelastninger WM mere end gør behandling enklere sætninger, kan man hypotetisk, at manipulere den type indblanding i løbet af forståelsen bør have virkninger på behandling af sætninger. Indirekte vil behandling af syntaktisk mere komplekse sætninger kræve enten forholdsmæssigt større eller uforholdsmæssigt større lyttetider online og udvise dårligere resultater i vurderingen af postonline-sætnings forståelsen, end det vil bearbejdning af syntaktisk enklere konstruktioner. Den nuværende undersøgelse undersøger hypotesen om, at indblanding undersætning behandling kan indeksere WM involvering og stort set placerer sin værdi ud over spørgsmålet om syntaktisk modularitet: det foreslår den idé, at kontroversen over kinesisk RC behandling kan være belyst gennem efterforskningen af WM på grund af dens grundlæggende rolle i sprogforståelsen. Derfor er den betydning, der er knyttet til brugen af DMI opgaver i kinesisk RC behandling giver en vej til at løse den igangværende debat om kinesisk RC behandling asymmetri.

Denne artikel præsenterer to eksemplarisk eksperimenter, der involverer auditiv behandling ved hjælp af både intra-og extrasententiel interferens. Målet med disse to eksperimenter var at undersøge, i hvilket omfang WM er engageret i behandling af kinesisk RC under forskellige typer af interferens.

I det første eksperiment blev en visuelt præsenteret leksikalsk beslutnings opgave brugt som den intrasententielle interferens. Som en sekundær forstyrrende opgave blev ordet/nonword leksikale beslutnings opgave (LDT) introduceret på tre punkter under den auditive præsentation af målet relativ klausul sætning, hvilket gør det muligt at måle forarbejdnings vanskeligheder på disse punkter. Den største bekymring i dette eksperiment er, hvordan hullet i den relative klausul (RC) er forbundet med fyldstof i matrix klausul (MC), og om det påvirker behandlingen af efterfølgende MC. De tre prøvesteder, der skal måles, blev derfor fastsat efter MC-regionen. Et eksempel, replikeret fra (2), af de tre sondering sites angivet med pile og justeret med tilsvarende syntaktisk sammenkædning, er illustreret i eksempel 3, hvor 3 (a) viser src og 3 (b) viser Orc.

Equation 1

Figur 1 viser proceduren for at forstyrre den kontinuerlige AUDITIVE RC-præsentation af ldt på et af de tre prøvesteder. Timing design følger den konventionelle protokol af LDT opgave i en tidligere kinesisk forarbejdning undersøgelse11. For eksempel begynder hver Visual LDT-prøve med et kryds tegn "+", der angiver et fikserings punkt i midten af skærmen til 500 MS, efterfulgt af den visuelle LDT-stimulus, som vises på skærmen for 3.000 MS og forsvinder umiddelbart efter, at motivet gør den leksikalske beslutning. Et typisk emne afslutter eksperiment 1, herunder øvelsessessionen, inden for 30 – 35 minutter.

Figure 1
Figur 1: Intrasententiel interferens procedure med en leksikalsk beslutnings opgave.
Venligst klik her for at se en større version af dette tal.

De tre sondering sites sammen med ldt opgave:

1. position 1 (P1): post-SMC region

Den første position (P1), der skal måles, er umiddelbart efter emnet for MC i regionen efter RC grænse. Behandling belastning forventes at pådrage sig på dette websted. For én ting, før dette punkt (SMC), emne-Gap og objekt-Gap konstruktion inden RC domæne form contrastive verbum-Object (VO) og emne-verbum (SV) strukturer, hhv. For en anden, at integrere de vælgere i RC-regionen med hoved navneord i MC, skal lyttere identificere den grammatiske rolle af kløften og sammenkæde det med den kommende fyldstof hovednavn

2. position 2 (P2): post-VMC region

Den anden position (P2), der skal måles, er umiddelbart efter verbet i matrix klausulen (VMC). Dette websted antages også at inducere behandling belastning. Integrering af verbal information kræver, at lyttere henter navneord-argumenterne i sætningen og identificerer agenten for matrix verbet enten fra det foregående RC-domæne eller fra det hoved navneord, som RC ændrer.

3. position 3 (P3): Postsætnings region

Den tredje position (P3), der skal måles, er umiddelbart efter slutningen af sætningen. Tidligere undersøgelser om behandling foreslår, at der er en ende-of-punktum wrap-up effekt-et fænomen, hvor nonsyntaktiske oplysninger (f. eks diskurs og semantisk niveau) betragtes i slutningen af en sætning for at aktivere og fuldstændig forståelse12 ,13. Derfor bør behandling belastning stige mod slutningen af sætningen på grund af behovet for at integrere denne nonsyntaktiske oplysninger14,15. Position 3 antages at vise en forringelse i behandlingsbelastningen, fordi der er blevet forsøgt en sætnings opløsning omkring dette websted.

I det andet eksperiment blev en auditiv bevægende vindues opgave (AMW) vedtaget. AMW-teknikken anses for at være i stand til at indfange mønstre for ressourceallokering under online sproglig behandling og er blevet anvendt i vid udstrækning i forsøg på at skelne mellem de to konkurrerende WM-tilgange16,17. Det formodes, at ekstrasententiel interferens bør koste lyttere ekstra tid i løbet af behandlingen af den forbigående kommende talte sætning. Under AMW-paradigmet hørte deltagerne sætninger, der blev segmenteret i ord, og de trykkede på en tast på tastaturet for at starte afspilningen af det efterfølgende segment. Således afspejler varigheden af pauserne mellem tastetryk for at indlede det efterfølgende segment og kontrollere strømmen af indkommende oplysninger deltagernes respons på de pågældende sproglige kendetegn. For eksempel, hvis den ekstrasententielle interferens har visse virkninger på behandling sætninger af forskellig syntaktisk kompleksitet, vil deltagerne udviser tilsvarende længere pause varigheder, før du starter de efterfølgende segmenter. Procedurerne er skematiserede og præsenteret i figur 2.

Figure 2
Figur 2: Ekstrasententiel interferens procedure med en cifret tilbagekaldelses opgave.
Venligst klik her for at se en større version af dette tal.

Den følgende protokol viser, hvordan forskerne bruger en visuelt præsenteret leksikalsk beslutnings opgave som intrasententiel interferens og den samtidige aritmetiske interferens belastning som ekstrasententiel interferens for at undersøge WM involvering og behandlingen asymmetri i kinesiske RCs og udarbejde den bagvedliggende logik.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

Administrationen af disse eksperimenter fulgte alle forskningsetiske regler. Alle gav informeret mundtligt og skriftlige samtykke, før forsøgene blev administreret. Alle procedurer, samtykkeformularer og forsøgsprotokollen blev godkendt af Forskningsetiske Komiteen for det nationale Cheng Kung-Universitet i Taiwan.

1. eksperiment 1 — Dual-modal intrasententiel interferens opgave

  1. Rekruttere 97 studerende, 54 kvinder og 42 mænd, fra det nationale Tainan Institute of Nursing og national Tainan Secondary High School til at deltage i eksperiment 1.
    Bemærk: alle deltagere skal være flydende indfødte kinesiske højttalere med normal eller korrigeret-til-normal vision og ingen auditiv svækkelse af selv-rapport.
  2. Materiale forberedelse
    1. Vælg ord og ikke-ord for LDT. Medtag i alt 48 bisyllabic (to-tegn) kinesiske ord, hvoraf 24 var ord og 24 var nonwords.
      Bemærk: et kinesisk tegn repræsenterer en stavelse, som normalt er et Morfem (dvs. det mindste meningsfulde element). Målordene her er bisyllabiske sammensatte ord. I den supplerende fil kan du se en liste over de visuelle målord/ikke-ord, der bruges til ldt-opgaven.
      1. Vælg de 24 ord fra Sinica Corpus Technical Report18, og sørg for, at alle målordene er af medium frekvens. Søgeordene for den gennemsnitlige frekvens procent ca. 0,00030 og rækkefølgen ca. 4.000 i databasen.
        Bemærk: valg af ord med medium frekvens som målord er beregnet til at reducere frekvens effekten, hvilket resulterer i kortere responstider (RTs) for højfrekvente ord og længere RTs fra lavfrekvente ord.
      2. Opret de 24 nonwords ved hjælp af to monosyllabiske tegn, der er individuelt meningsfulde, men hvis kombination er semantisk unormal. For at forhindre potentielle aktiveringer, undgå bisyllabiske tegn ord med identiske radikaler (f. eks haiyang, hvilket betyder 'Ocean ', er repræsenteret i en kinesisk bisyllabisk karakter Charcter 1 ord som, hvor den Charcter 3 radikale komponent relateret til vand er delt i tegnene Charcter 2 og Charcter 4 ).
      3. Collocate manuelt de 24 nonwords i filler sætninger og de 24 ord i mål RC sætninger.
        Bemærk: Collokaliserings ord med RCs og nonwords med fyldstoffer var nødvendig, fordi kun RTs af LDT fra de 24 ord med RCs bør overvejes og medtages i de statistiske analyser.
    2. Auditive RC og filler sætninger
      Bemærk: Se venligst supplerende fil for eksempler på src, Orc, og filler sætninger.
      1. Komponere de auditive stimuli i 72 sætninger, der involverer tre typer af sætninger: 24 SRCs, 24 ORCs, og 24 filler sætninger.
      2. Opdel 48 RC sætninger jævnt i to grupper for at skabe en ufuldstændig-kontra balanceret design, der danner 48 forsøg (12 SRCs, 12 Orc'er og 24 fyldstoffer) i 2 (SRC, ORC) * 3 (probing site) * 2 (ord/nonword) betingelser.
  3. Opsætning af eksperimentel software
    1. Brug en standard eksperimentel software (dvs. E-Prime19) til at programmere eksperimentet i henhold til software protokollerne.
    2. Randomize alle stimuli ved hjælp af eksperimentel software.
    3. Konfigurer software systemet til at registrere følgende data: (1) svartid, (2) nøjagtigheds raten for deltagerens svar i LDT og (3) forståelsen af postsætnings graden baseret på deltagernes tastatur presser.
    4. Medtag feedback vedrørende deltagernes ukorrekte leksikale beslutning eller intet svar. Vis feedback på monitorskærmen umiddelbart efter deltagerens ukorrekte eller manglende respons. Der vises ingen feedback, når deltagerens svar var korrekt.
    5. Angiv en øvelses sektion, der involverer forsøg med feedback.
  4. Efter øvelsessessionen startes den dual-modal intrasentential LDT-interferens opgave. Under de eksperimentelle sessioner, giver deltagerne mulighed for at tage en pause mellem hver 24 forsøg.
    1. Har hver deltager udføre opgaven individuelt. Først give deltagerne instruktioner både i skriftlig form på computerskærmen og i verbalform af experimenter. Sæt deltagerne foran en computer og udstyre dem med hovedtelefoner.
    2. Instruer deltagerne til at lytte til de sætninger, der spilles gennem deres hovedtelefoner, mens samtidig, på et tidspunkt under lytteprocessen, til at udføre en leksikalsk beslutning opgave.
    3. Bed deltagerne om at afgøre, om den forstyrrende visuelle sonde, der vises på skærmen, er et ord eller et ikke-ord, og Instruer dem om at trykke på svar tasten ' Ja ' for et ord eller ' Nej ' for et ikke-ord så hurtigt og præcist som muligt.
    4. Underrette deltagerne om, at et forståelsesspørgsmål ville følge umiddelbart efter sætningen. Mind dem om at lytte opmærksomt til den auditive sætning, mens du samtidig udfører LDT-opgaven.

2. eksperiment 2-Dual-modal extrasentential interferens opgave

  1. Rekruttere 61 universitetsstuderende, 40 kvinder og 21 mænd, fra National Taipei University of Technology og national Tainan Junior College of Nursing som deltagere i eksperiment 2.
    Bemærk: alle deltagere skal være flydende indfødte kinesiske højttalere med normal eller korrigeret-til-normal synsskarphed og ingen auditiv svækkelse af selv-rapport.
  2. Materiale forberedelse
    1. Auditive RC og filler sætninger
      1. Komponere de auditive stimuli i tre typer sætninger: Src'er, Orc'er og fyld sætninger. Opdel 48 RC sætninger jævnt i to grupper for at skabe en ufuldstændig kontra balanceret design med 96 total forsøg (24 SRCs, 24 ORCs, og 48 fyldstoffer) for 2 (sætnings type: SRC, ORC) * 3 (ciffer belastning) betingelser.
        Bemærk: Se venligst den supplerende fil for Target auditive Trial eksempler på src, Orc, og filler sætninger.
    2. 0/3/5 cifre
      1. Konstruere i alt 96 digitale elementer, består af 0/3/5 ciffer kombinationer. Tildel hver 0, 3 eller 5-cifret belastning jævnt til alle sætnings forsøgene.
  3. Dual modal extrasentential digital interferens opgave med AMW paradigme
    1. Brug en standard eksperimentel software (dvs. E-Prime19) til at programmere eksperimentet i henhold til software protokollerne.
    2. Tildel tilfældigt deltagerne til en af de to stimuli sæt, der repræsenterer kombinationer af to inden-emne faktorer af sætnings typen (SRC vs. ORC) og hukommelse belastning (ingen belastning, 3-cifret-belastning, 5-cifret-belastning). Giv deltagerne med 1.500 MS visuel præsentation af cifrene før AMW opgaven.
  4. Start derefter AMW-opgaven.
    Bemærk: AMW Task20 er en selv-tempo lytteopgave.
    1. Instruer deltagerne i at beholde den foregående visuelle præsentation (cifre eller ingen cifre) i hukommelsen.
    2. Derefter instruere deltagerne til at lytte til sætningerne segmenteret i ord og spilles gennem deres hovedtelefoner. Bed dem om at sætte tempoet op så hurtigt som muligt ved at trykke på tastaturet for at starte afspilningen af det efterfølgende segmenterede ord.
    3. Instruer deltagerne i at besvare det ja/nej-forståelsesspørgsmål, der dukkede op på computerskærmen, efter at de har lyttet til hver enkelt prøve sætning. Underrette deltagerne om, at der forud for spørgsmålet er et spørgsmålstegn "?" på computerskærmen, og at spørgsmålet er relateret til de oplysninger, de har hørt i den foregående sætning.
    4. Der afspilles en kort "bip"-lyd, når deltagerne trykker på Ja/Nej-tasten for at besvare forståelses spørgsmålet. Efter bip, efter instruktion vises på skærmen, bede deltagerne om at gentage det ciffer, de har set, før du lytter til sætningen.
    5. Har eksperimententer til at registrere deltagernes ciffer-Recall svar på en score ark.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

Interferensen blev observeret i både Dual-modal intra-LDT og de extradigit belastnings opgaver. I betragtning af de tre Probe sites i eksperiment 1, RT resultaterne af intra-LDT opgave manifesterede et dynamisk mønster af RC behandling som en funktion af to RC typer. Som vist i figur 3udviser Orc-typen en forarbejdnings fordel ved positionen post matrix motivet (SMC) efter RC (P1) og i slutningen af sætningen (P3), hvorimod src-typen har en fordel ved positionen post matrix verbet (VMC ) efter RC (P2). Den simple hoved effekt af sætnings typen var signifikant ved P2 og P3, hvilket indikerer, at Src'erne havde en lavere forarbejdnings belastning med LDT-interfererende opgave ved matrix verberne (P2), mens Orc'erne havde en lavere forarbejdnings belastning i enderne af sætningerne (P3). Disse resultater var forskellige fra den konsekvente SRC præference rapporteret af RC undersøgelser i hoved-indledende sprog som engelsk og også varierede fra de konkurrerende SRC og ORC fordele rapporteret i tidligere kinesiske RC undersøgelser.

Figure 3
Figur 3: resultaterne af eksperiment 1, der viser den gennemsnitlige RTs (i MS) som en funktion af Sætningstyper og forstyrrende sonde sites.
* Den vigtigste virkning af sætnings typen blev fundet signifikant under P2 og P3. Venligst klik her for at se en større version af dette tal.

RT resultaterne af den eksptradigit-Recall opgave i lyset af de tre-cifrede belastningsforhold i eksperiment 2 manifesteret et dynamisk mønster af RC behandling som en funktion af to RC typer så godt. SRCs og ORCs viste ingen signifikant forskel på tværs af de tre ekstrasententielle ciffer-belastnings forstyrrelser. Omkring post-DE-regionerne (dvs. de samme regioner opdaget af eksperiment 1), har eksperiment 2 replikeret SRC-fordelen ved matrix verbum, T5 (v2 = VMC) under 0-cifret belastnings interferens. Men, RC fordel tilbøjelige til at favorisere ORCs under 3-og 5-cifrede belastning betingelser. Dette dynamiske mønster blev observeret i relativizer DE-region (T3), hvor SRCs viste en forarbejdnings fordel under en 0-cifret belastning, men en vendt ORC-fordel opstod, da belastnings interferensen steg til 5-cifre. Alle disse resultater giver negativt bevis mod enten SRC eller ORC forarbejdning fordele rapporteret i tidligere kinesiske RC undersøgelser.

Resultaterne af forskellig ciffer-Load interferens på kinesisk RC behandling i eksperiment 2 er vist i figur 4, figur 5 og figur 6, hhv.

Figure 4
Figur 4: resultaterne af eksperiment 2, der viser den gennemsnitlige RTs (i MS) som en funktion af Sætningstyper under en 0-cifret belastning. Venligst klik her for at se en større version af dette tal.

Under den 0-cifrede belastnings interferens viste deltagerne en fordel for Orc'erne ved den oprindelige behandling (T1) i RC-regionen, men SRCs havde en fordel ved relativizer DE (T3) og matrix verbet (T5)-regionerne.

Figure 5
Figur 5: resultaterne af eksperiment 2, der viser den gennemsnitlige RTs (i MS) som en funktion af Sætningstyper under en 3-cifret belastning. Venligst klik her for at se en større version af dette tal.

Under den 3-cifrede belastnings interferens sås ingen SRC/ORC-forskel omkring de præ-DE regioner (T1 og T2); deltagerne viste imidlertid en SRC-fordel ved relativizer DE (T3) og en ORC-fordel ved matrix verbet (T5)-regionen.

Figure 6
Figur 6: resultaterne af eksperiment 2, der viser den gennemsnitlige RTs (i MS) som en funktion af Sætningstyper under en 5-cifret belastning. Venligst klik her for at se en større version af dette tal.

Under den 5-cifrede belastnings interferens viste deltagerne en overordnet ORC-fordel i forhold til præ-DE-regionerne (T1 og T2) og post-DE-regionerne i matrix motivet (T4)-regionen.

Supplerende tabel 1. Venligst klik her for at downloade denne tabel.

Supplerende tabel 2. Venligst klik her for at downloade denne tabel.

Supplerende tabel 3. Venligst klik her for at downloade denne tabel.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Denne undersøgelse viser, at bruge DMI metoder med både intra-og extrasentential interferens opgaver kan bidrage til at belyse rollen som WM i talte sætning behandling og kaste lys over spørgsmålet om kinesisk RC behandling asymmetri. Som forventet, ved at måle, i hvilket omfang indblanding fra en sekundær opgave påvirkede lyttere ' forestillinger om primær sætning behandling, kan vi udlede de mønstre af kinesisk RC behandling og nå frem til en gennemførlig løsning på debatten om den kinesiske SRC/ ORC-behandlingsfordel.

Interferens effekten viser, at WM spiller en væsentlig rolle i behandlingen af talte sætninger – uanset kilden til interferensen. I vores tilfælde, for eksperimenter 1 og 2, den intrasentential indblanding er en leksikalsk beslutning opgave semantisk ikke relateret til sætningen, mens den ekstrasententielle indblanding er en ikke-sproglig aritmetisk opgave, der involverer stigende sværhedsgrader af ciffer-Indlæs tilbagekald. Denne fremgangsmåde bygger på den antagelse, at WM, der er involveret i de primære og sekundære opgaver, enten deler en fælles kognitiv ressource1,2,21 eller opererer gennem særskilte systemer3,4 . Beviser for generalitet af hukommelse belastning under den tidligere model stammer fra blot at finde, at deltagerne har begået flere fejl eller havde længere behandling/reaktionstider (RTs) i en sætning forståelse opgave under interferens betingelser, mens beviser for specificiteten af hukommelse belastning på sætning behandling under sidstnævnte model stammer fra konstateringen af, at behandling syntaktisk mere komplekse sætninger resulterer i uforholdsmæssigt dårligere ydeevne sammenlignet med behandling syntaktisk enklere sætninger under interferens forhold. Nemlig at undersøge, i hvilket omfang udførelsen af primær sætnings behandling påvirkes af tilstedeværelsen af interferens, vil fremlægge dokumentation for, om et generelt eller specifikt domæne af WM-systemet er involveret i begge opgaver.

Ikke desto mindre, Bemærk, at formålet med den nuværende undersøgelse, snarere end at behandle spørgsmålet om modularitet, fokuserer mere på, om vi kan anvende begrebet WM kapacitet grænser for sådanne kontroversielle spørgsmål som kinesisk RC behandling asymmetri, som blandede og forskellige resultater er blevet opnået i forhold til den konsekvente SRC behandling fordel observeret på engelsk. I denne undersøgelse, vi hypotese, at ved at måle, i hvilket omfang interferens fra WM-systemet påvirker primære talt-kinesisk RC sætning behandling, vi kan detektere behandling profil for både SRC og ORC og bestemme RC behandling asymmetri. Hvis nogen RC behandling præference findes på kinesisk, vi bør observere enten en SRC eller ORC fordel fra deltagernes præstationer under både intra-eller extrasentential DMI opgaver.

Dette er dog ikke tilfældet på kinesisk. Vores resultater viste, at kineserne ikke har den samme RC behandling asymmetri som det er blevet observeret for engelsk. Resultaterne af eksperiment 1 manifesterer sig i dynamiske snarere end konstante mønstre af deltagernes RC præferencer. En ORC fordel blev fundet omkring matrix emne regionen, mens en SRC fordel blev fundet omkring matrix verbum region. En mulig slutning er, at kinesisk RC, i betragtning af dens typologiske forskelle fra engelsk, ikke besidder en klar præference for SRC eller ORC.

Eksperiment 1 repræsenterer en typisk dobbelt modal procedure med intrasententiel interferens under behandling af sætninger. Selvom dette er en enkel måde at måle forståelses processer med talte sætninger på i realtid, skal der træffes forholdsregler ved konstruktionen af test stimuli, når de tre sondering-steder måles efter RC-markør de, og når prøvekøringsresultaterne justeres med LDT-opgave. Et kritisk skridt ved udformningen af protokollen var, at målet SRC og ORC sætninger skulle kombineres med ord, og at fyldstof sætninger skulle være colplaceret med nonwords kun. I betragtning af denne situation, kan behandlingstiderne (RTs) af RC sætninger måles og sammenlignes udelukkende ved deres indblanding i den virkelige ord dom. En anden kritisk bemærkning til at overveje, er den kontra afbalancerede stimuli design. Hver af de LDT visuelle ord kan kun forekomme én gang i opgaven, og hver af de RC stimuli kan probed på kun ét sted. Desuden, kombinationen af ordet/nonword LDTs og de tre sonde sites kombineret med de to RC Sætningstyper dannet 2 * 3 * 2 = 12 betingelser, men kun 48 forsøg blev konstrueret i den aktuelle undersøgelse. Selv om måling kun ét sted for hver sætning under den dobbelte-modal interferens opgave har den fordel at reducere interferens og gøre opgaven så lignende som muligt til normal lytning, det også pålægger begrænsningen, at en enkelt observation site vil kræve, at eksperimententer til at designe et stort antal stimuli, hvis han eller hun har til hensigt at måle alle regioner i sætningen forståelse proces og til at finde en komplet modvægt. Derfor, kun ved hjælp af 48 forsøg til at måle de tre sondering steder i eksperiment 1 opnår blot en ufuldstændig modvægt, som var begrundelsen for den efterfølgende eksperiment 2 at overvinde begrænsningen.

Eksperiment 2 viser fordelen ved at vedtage en dual-modal interferens opgave: det er alsidigt og kan ændres og tilpasses til at løse forskellige spørgsmål, der er relevante for hukommelse belastning og karakteren af WM. Desuden, Dual-modal interferens under AMW paradigme gør det muligt at måle alle regioner i løbet af strømmen af sætning behandling. Resultaterne af eksperiment 2 replikerede konstateringen i eksperiment 1 om, at kinesisk RC-behandling er dynamisk. Under den ingen digitale interferens situation, en ORC fordel blev fundet i den oprindelige region, mens en SRC fordel blev fundet omkring RC markør DE og matrix verbet. Men da den digitale interferens steg (de 3-og 5-cifrede belastninger), viste deltagerne en overordnet ORC-fordel omkring præ-DE-regionerne og post-DE-regionerne i matrix-motivet, hvilket viser, at faktorer, der involverer WM, kan ændre kinesisk RC-behandling Dynamics. Disse resultater giver solide negative beviser for null RC behandling asymmetri model på kinesisk. Med hensyn til påstanden om, at der ikke er nogen klar behandling præference for SRC eller ORC, supplerende støtte fra en EPR-undersøgelse er for nylig blevet rapporteret samt22.

Traditionelt, en meget anvendt forskning metode til RC behandling er at analysere opgaver baseret på den selv-tempo læsning paradigme, som anses for at være den enkleste måde at måle sprog forståelses processer i realtid og anses for at bestå af "opgaver så ens som muligt til normal læsning "23. Men på trods af at give et vindue ind i stort set automatisk parsing proces, den klassiske ord-for-ord selv-tempo læsning opgave, som ikke tillader emner at se tilbage, undlader at afspejle de frem og tilbage øjenbevægelser læsere gøre for integration og forståelse under den naturlige læse proces. At emnerne er begrænset i at gå tilbage til at behandle tidligere materialer er i virkeligheden meget tættere på naturlig lytteforståelse opgave.

I lyset af det faktum, at lytning er Fylogenetisk tæt forbundet med sprogbehandling og sprogudvikling, og at der er gennemført få undersøgelser for at undersøge online auditiv sætnings behandling, bidrager den nuværende undersøgelse ved at tilbyde en gennemførlig anvendelse af denne DMI-metode til behandling af talte sætninger.

Den betydelige nyskabelse i denne undersøgelse er, at det gælder søgen efter karakteren af WM og påstanden om, at komplekse syntaktiske konstruktioner stiller høje krav til WM ressourcer i forbindelse med talebehandling for at løse et langvarigt spørgsmål om RC behandling asymmetri på kinesisk. Resultaterne af denne undersøgelse viser, at kinesiske Src'er og Orc'er ikke udviser signifikante forskelle under enten intrasententielle eller ekstrasententielle interferens forhold. Disse resultater adskiller sig fra de tidligere blandede resultater vedrørende en SRC eller ORC fordel på kinesisk, hvilket fører til formodninger, at RC behandling asymmetri konsekvent fundet i hoved-indledende sprog som engelsk ikke eksisterer på kinesisk. Dette indebærer også, at kompleksiteten Metric mellem SRC og ORC på kinesisk kan afvige fra det på engelsk. På grund af de karakteristiske træk ved sine syntaktiske konstruktioner, bør kinesiske RCs behandles på en sprogspecifik måde.

Den dual-modal interferens paradigme kombineret med LDT Task og AMW teknik er en ny tilgang, der kan med held nå målet om at måle forløbet af behandlingen i realtid, og sådanne målinger kan bidrage til at kaste lys over spørgsmålet om behandling Kompleksitet. Bemærk, at der findes et kritisk trin i både eksperiment 1 og 2 vedrørende instruktionerne til deltagerne. Da den leksikalske beslutnings opgave i eksperiment 1 indebærer en forholdsvis mindre hukommelses byrde, men medfører et mere automatisk svar, skal deltagerne instrueres i at være meget opmærksomme, når de lytter til sætningen. I modsætning hertil skal deltagerne i eksperiment 2, fordi ciffer Recall inducerer mere hukommelsesbelastning, instrueres i at prioritere forsøget på at huske cifrene korrekt, mens de lytter til sætningen så hurtigt som muligt, men de skal stadig påmindes til undgå at lytte for hurtigt og undlade at fange betydningen af sætningen. Ved hjælp af denne fremgangsmåde kan afvejningen mellem at deltage i sætningen og den ciffer tilbagekaldelses opgave mindskes. For at forhindre deltagerne i at blive trætte, når de lytter til sætningerne, anbefaler vi desuden at give dem korte respitter; test tiden vil derfor sandsynligvis overskride 30 minutter.

Den betydelige konstatering i denne undersøgelse understreger nødvendigheden af fremtidige undersøgelser udforske behandling Metrics af RC sætning kompleksitet at overveje WM involvering. Den dobbelte modale interferens opgave – især den, der bruger AMW-teknikken – kan bruges til at løse dette problem, når den anvendes med enten intrasententiel eller extrasententiel interferens. Desuden bør denne procedure være af bred interesse og meget gældende for psycholinguists forsøger at fremme vores forståelse af karakteren af WM og dens associering med sætning behandling.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Forfatterne har intet at afsløre.

Acknowledgments

Denne undersøgelse blev støttet af tilskud fra ministeriet for videnskab og teknologi, Taiwan, R.O.C. [NSC-101-2410-H-439-001] til den første forfatter, Tuyuan Cheng. Forfatterne takker Lab medlemmer, Yang ya-Hui og Chen Pei-han, i NTIN, for deres hjælp til at forberede og gennemføre eksperimentet.

Materials

Name Company Catalog Number Comments
E-Prime Psychology Software Tools version Professional 2.0
Headphone Logitech
Praat Praat 5.3.43 The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/
Serial Response Box Psychology Software Tools
Standard PC ASUS K42Jv laptop

DOWNLOAD MATERIALS LIST

References

  1. Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
  2. King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
  3. Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
  4. Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
  5. Cowan, N. Working Memory Capacity. , Psychology Press. New York, NY. (2005).
  6. Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
  7. Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
  8. Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
  9. Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
  10. Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
  11. Wu, J. T., Chou, T. L., Liu, I. M. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. , Taipei. Taipei: National Taiwan University (in Chinese) 31-58 (1994).
  12. Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
  13. Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
  14. Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
  15. Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
  16. Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
  17. Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
  18. Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
  19. Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), https://doi.org/10.1007/s10936-018-9576-5 1035-1055 (2018).
  20. CKIP. Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , Institute of Information Science, Academia Sinica. Taipei. (1994).
  21. MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
  22. Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
  23. Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
  24. Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
  25. Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).

Tags

Funktionsmåde problem 151 opførsel sætnings behandling sætnings forståelse relative klausuler interferens opgave
Undersøgelse af online syntaktisk behandling af talte komplekse sætninger på kinesisk ved hjælp af Dual-modal interferens opgaver
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Cheng, T., Wu, J. T. Examining… More

Cheng, T., Wu, J. T. Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks. J. Vis. Exp. (151), e59660, doi:10.3791/59660 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter