Summary
Hier presenteren we een protocol met dubbele-modale interferentie taken om online verwerking van gesproken-Chinese relatieve clausule zinnen te onderzoeken. Twee voorbeeld-experimenten met auditieve verwerking met intra-en extraveroordeling tiële interferenties worden beschreven. Het paradigma biedt een methodologie voor het aanpakken van de aard van het werkgeheugen en de effecten ervan op de verwerking van zinnen.
Abstract
Werkgeheugen (WM) speelt een centrale rol bij het begrijpen van complexe zinnen. Zijn functie bij de verwerking van gesproken complexe zinnen is vooral duidelijk omdat gesproken complexe zin verwerking geheugenintensief is. Het Dual-modal interferentie paradigma is gebruikt om te onderzoeken hoe het WM-systeem betrokken is bij complexe syntactische verwerking. Dit artikel presenteert twee voorbeeld-experimenten met auditieve verwerking met intra-of extraveroordeling tiële interferenties. In het eerste experiment worden auditieve stimuli [gesproken-Chinese relatieve clausule (RC) zinnen met twee syntactische typen: onderwerp-gapped (SRC) versus object-gapped (ORC)] verstoord via een visueel gepresenteerde lexicale beslissings taak binnen een zin en gemanipuleerd met drie verschillende storings tijdpunten. In het tweede experiment worden dezelfde auditieve stimuli, gepresenteerd via een auditieve venster bewegende techniek, verstoord via een visueel gepresenteerde digitale terugroeptaak buiten de zin en gemanipuleerd met behulp van drie digitale geheugen ladingen. Door te beoordelen hoe de primaire taak van het begrijpen van de RC zinnen wordt beïnvloed door de secundaire taak, kunnen we het controversiële probleem met betrekking tot Chinese RC processing asymmetrie aanpakken. Onze resultaten onthullen verschillende patronen van RC verwerking in vergelijking met die gerapporteerd in eerdere studies. Experiment 1 manifesteert geen duidelijke RC-verwerkings voordelen in SRC of ORC; echter, een voorkeur voor ORC wordt waargenomen aan de uiteinden van zinnen, en een voorkeur voor SRC is gevonden op de hoofdwerkwoordsite. Evenzo, experiment 2 presenteert een dynamisch patroon. Onder een no-Digit belasting tonen Src's verwerkings voordelen in de RC marker regio. Bij interferentie met een hogere cijfer belasting vertonen Orc's echter verwerkings voordelen in dezelfde regio. Deze resultaten leiden tot het vermoeden dat er geen duidelijke of intrinsieke verwerkings asymmetrie bestaat bij de verwerking van Chinese RCs. met behulp van de aanpak van het beoordelen van specifieke interferentie tijdens syntactische verwerking, deze experimenten tonen toekomstig onderzoek toepassingen die de verwerking metrische gegevens van gesproken zinnen met betrekking tot werkgeheugen verkennen.
Introduction
De rol van werkgeheugen (WM) tijdens het verwerken van gesproken zinnen is vanzelfsprekend: als gevolg van de voorbijgaande aard van spraak, moeten Luister-ers de component akoestische formulieren in hun herinneringen bewaren totdat ze worden verwerkt. Dit aspect wordt nog belangrijker tijdens de verwerking van syntactisch complexe zinnen. Het toewijzen van syntactische relaties aan woorden in complexe zinnen omvat het uitvoeren van rekenkundige bewerkingen op items die gedurende korte tijd in het geheugen worden bewaard, wat resulteert in een hogere geheugen vraag. Hoe het WM-systeem echter betrokken is bij de verwerking van gesproken zinnen is controversieel.
Deze controverse gaat over twee grote meningsverschillen: sommige onderzoekers beweren dat een enkele WM systeem bestaat dat wordt gebruikt voor alle mondelinge taken1,2— metandere woorden, syntactische verwerking berust op dezelfde geheugenbronnen gebruikt door meer algemene cognitieve processen. Dit is het model met één resource. Anderen hebben beweerd dat het bepalen van de betekenis van een zin op basis van zijn syntactische structuur een gespecialiseerd WM-systeem inhoudt dat gescheiden is van dat voor andere mondelinge taken3,4. In deze ader is syntactische verwerking modulair. Dit is de afzonderlijke-zin-interpretatie resource model.
In het psycholingstingstisch onderzoek is het Dual-modal interferentie paradigma gebruikt om de twee concurrerende rekeningen te onderzoeken. Op basis van de veronderstelling dat WM opslagcapaciteit is beperkt6,5, hetparadigma lostproblemen op doorhet compliceren van een primaire taak met een secundaire tussenliggende taak. Gezien het feit dat de primaire taak concurreert voor beperkte middelen met de secundaire tussenliggende taak, de moeilijkheid toeneemt en de primaire taak vertoont langere reactietijden. Gezien deze situatie maakt de aanpak van dubbele modale interferentie het mogelijk om de verwerkingsbelasting en de omvang van de betrokkenheid van de WM te beoordelen wanneer een deelnemer een taak krijgt die beide taken tegelijkertijd moet vervullen.
Zinnen met RC componenten, die meer begrip moeilijkheden veroorzaken als gevolg van hun bekende complexe syntactische structuren, worden veel gebruikt om te onderzoeken hoe het WM-systeem betrokken is bij het verwerken van complexe zinnen. Hoewel het verwerken van complexe zinnen een hogere vraag plaatst op de WM-middelen die zijn gekoppeld aan spraakverwerking, is het echter minder duidelijk of de WM die wordt verondersteld om bij te dragen aan de kosten van syntactische bewegingen in talen met hoofd-initiële RC constructies (zoals Engels) weerspiegelt de syntactische complexiteit van talen met Head-Final RCs (zoals Chinees). Door het gebruik van een Dual-modaal interferentie paradigma werpt de huidige studie licht op deze kwestie.
De moeilijkheden in verband met de verwerking van twee RC-structuren, subject-gapped en object-gapped relatieve clausules (Src's vs. ORCs), zijn het onderwerp geweest van een uitgebreid debat. Deze controverses worden voornamelijk waargenomen in typologisch verschillende talen. In hoofd-initiële talen zoals het Engels, waarin een relatieve clausule het hoofd zelfstandig naamwoord volgt, verandert de algemene bevinding dat Src's zoals in voorbeeld 1 (a) hieronder gemakkelijker worden verwerkt dan ORCs in voorbeeld 1 (b).
Zoals getoond in voorbeeld (1), in het Engels, de oppervlakte locatie van de kloof verschilt minimaal tussen Src's en ORCs. Deze kloof wordt geïndexeerd als e1, de lege positie na het hoofd zelfstandig naamwoord 'actor' (genaamd filler) achtergelaten door de verwijdering uit de rc. Echter, Src's en Orks verschillen aanzienlijk in termen van de grammaticale structuur en functie van de kloof in het RC domein. De geheugen kosten voor het integreren en oplossen van de structurele afhankelijkheid tussen de filler en de Gap is een apt-doelwit voor experimentele studie en is op grote schaal gebruikt om inzicht te krijgen in de rol van WM in taalverwerking en-begrip.
Het begrijpen en verwerken van deze postnominale RCs vereist bijvoorbeeld het indexeren van het hoofd-zelfstandig naamwoord 'actor' als een functioneel onderwerp of het object van het werkwoord 'BEKRITISEERD' in src en Orc en vervolgens het hoofd zelfstandig naamwoord in WM opslaan, zodat het later kan worden toegewezen aan het grammaticale onderwerp van het werkwoord "toegegeven" in de hoofdzin.
In tegenstelling tot de consistente bevinding met hoofd-initiële talen dat het begrijpen van Src's gemakkelijker is dan het begrijpen van Orc's, zijn gemengde resultaten gemeld met betrekking tot de RC-verwerkings asymmetrie voor Chinees, wat een hoofd-eind taal is waarin een familielid clausule voorafgaat aan het hoofd zelfstandig naamwoord. Sommige hebben een SRC-verwerkings voordeel waargenomen, terwijl anderen het tegenovergestelde patroon hebben gerapporteerd (d.w.z. een ORC-verwerkings voordeel). De laatste lijnen van onderzoek ook voorgesteld dat RC-verwerkings asymmetrie kan worden gemoduleerd door WM, zoals voorgesteld door de resultaten die zijn verkregen uit studies van de zelf-tempo lezen prestaties7,8,9.
Zoals hierboven vermeld, zijn er twee concurrerende modellen met betrekking tot de rol die WM speelt in de (complexe) syntactische verwerking. Een daarvan is dat "syntactische verwerking is modulair", en de andere is dat "syntactische verwerking is algemeen". Complexe zinnen met bekende verschillen in begrijpend begrip, d.w.z. Src's versus Orc's in het Engels, worden vaak gebruikt in Dual-modale interferentie (DMI)-taken om deze twee beweringen met betrekking tot de kwestie van modulariteit te onderzoeken, omdat de de betrokkenheid van WM wordt geclaimd parallel aan de verwerkings asymmetrie. Dus inducerende gelijktijdige geheugenbelasting door storende taken toont WM-effecten op syntactische verwerking. De reden is dat of een enkel verbaal WM-systeem of afzonderlijke modulaire syntactische systemen bestaan, het systeem met een storende taak betrekken maakt syntactische verwerking minder efficiënt vanwege WM-resourcebeperkingen. De manier waarop het verwerken van syntactisch complexere zinnen (ORC, in het Engels) lijdt in DMI-taken vergeleken met het verwerken van syntactisch eenvoudigere zinnen (SRC, in het Engels) geeft bewijs over het specifieke effect van WM en geeft de mate aan welke WM erbij betrokken is.
In tegenstelling tot hoofd-initiële talen zoals Engels, Chinese RCs manifesteert een Head-Final formatie en vertoont een Gap-filler relatie. Het geïndexeerde element, de kloof, gaat vooraf aan het hoofd zelfstandig naamwoord, zoals geïllustreerd in 2 (a), SRC en 2 (b), ORC.
De controverse die voortkomt uit het verwerken van Chinese RCs is dat Src's niet consequent worden gerapporteerd als gemakkelijker te verwerken dan ORCs, en dit verschil heeft een uitdaging voor theorieën van taalverwerking en begrip. Omdat de prenominale inhoud voordat de relativizer ' DE ' moet worden opgeslagen in WM tot na de kloof-het verplaatste hoofdnaam woord ' actor ', is gekoppeld en opgehaald-het begrijpen van dit proces helpt nog steeds bij het verkrijgen van inzicht in de rol van WM in taalverwerking.
In de huidige studie, gesproken RC zin verwerking wordt onderzocht omdat het luisteren is zeer compressieve tijdens de verwerking en is nauw verwant aan de werking van WM. Het dubbele modale interferentie paradigma wordt gebruikt omdat interferentie een gevestigde vergeten functie is in kortstondig auditief geheugen. Representaties opgeslagen in het geheugen kunnen worden afgebroken en vervolgens verloren gaan wanneer storende gebeurtenissen optreden10. Afleiders die variëren langs verschillende aspecten (in het huidige geval: intra-en uitingstechnoïstisch en extradigital, zie hieronder) aan de canonieke gesproken zin stellen ons in staat om de kosten te meten van de integratie van de incrementele input tijdens verschillende verwerkingsfasen en onder verschillende storings condities.
Op basis van de positie die meer syntactisch complexe zinnen verwerken overbelasting van WM meer dan het verwerken van eenvoudigere zinnen, kan men veronderstellen dat het manipuleren van het type interferentie tijdens het verloop van het begrip effecten moet hebben op zin verwerking. Door implicatie vereisen het verwerken van syntactisch complexere zinnen proportioneel grotere of onevenredig grotere Luister tijden online en laten ze slechter presteren in de beoordeling van het begrip "postonline zin" dan zal het verwerken van syntactisch eenvoudigere constructies. De huidige studie onderzoekt de hypothese dat interferentie tijdens het verwerken van zinnen WM-betrokkenheid kan indexeren en vrijwel zijn waarde buiten de kwestie van syntactische modulariteit plaatst: het stelt het idee voor dat de controverse over Chinese RC-verwerking kan worden verhelderd door het onderzoek van WM vanwege zijn fundamentele rol in taalbegrip. Daarom, de betekenis verbonden aan het gebruik van DMI taken in Chinese RC verwerking biedt een pad naar het oplossen van de lopende discussie over Chinese RC verwerking asymmetrie.
Dit artikel presenteert twee voorbeeld-experimenten met auditieve verwerking met behulp van zowel intra-als extraveroordeling tiële interferentie. Het doel van deze twee experimenten was om te onderzoeken in hoeverre WM bezig is met het verwerken van Chinese RC onder verschillende soorten interferentie.
In het eerste experiment werd een visueel gepresenteerde lexicale beslissings taak gebruikt als de intra-veroordeel interferentie. Als secundaire storende taak werd het woord/nonword lexicale beslissings taak (LDT) op drie punten geïntroduceerd tijdens de auditieve presentatie van de zin van de doelrelatieve clausule, waardoor de verwerkings moeilijkheden op deze punten konden worden gemeten. De grootste zorg in dit experiment is hoe de kloof in de relatieve clausule (RC) wordt geassocieerd met de filler in de matrix clausule (MC) en of het de verwerking van daaropvolgende MC beïnvloedt. Daarom werden de drie te meten indringende sites na de MC-regio ingesteld. Een voorbeeld, gerepliceerd van (2), van de drie indringende sites aangegeven met pijlen en uitgelijnd met de bijbehorende syntactische aaneenvoeging, wordt geïllustreerd in voorbeeld 3, waarbij 3 (a) toont src en 3 (b) toont Orc.
Figuur 1 toont de procedure voor het verstoren van de continue auditieve RC-presentatie door de LDT op een van de drie indringende-sites. Het timing ontwerp volgt het conventionele Protocol van de LDT-taak in een eerdere Chinese verwerkings studie11. Bijvoorbeeld, elke Visual LDT trial begint met een kruisteken "+" dat duidt op een fixatie punt in het midden van de monitor voor 500 MS, gevolgd door de visuele LDT stimulus, die wordt weergegeven op het scherm voor 3.000 MS en verdwijnt onmiddellijk nadat het onderwerp maakt de lexicale beslissing. Een typisch onderwerp voltooit experiment 1, inclusief de oefensessie, binnen 30 – 35 minuten.
Figuur 1: Intraveroordeling-interferentie procedure met een lexicale beslissings taak.
Klik hier om een grotere versie van dit cijfer te bekijken.
De drie indringende sites samen met de LDT taak:
1. positie 1 (P1): post-SMC -regio
De eerste positie (P1) die moet worden gemeten, is onmiddellijk na het onderwerp van de MC in de regio na de RC-grens. De verwerkingsbelasting wordt naar verwachting op deze site gebracht. Voor één ding, voorafgaand aan dit punt (SMC), onderwerp-gap en object-gap constructie binnen het RC domein vorm contramse werkwoord-object (VO) en subject-verb (SV) structuren, respectievelijk. Voor een ander, om de bestanddelen in de RC-regio te integreren met het hoofd zelfstandig naamwoord in MC, moeten Luister-ers de grammaticale rol van de kloof identificeren en deze koppelen aan de aanstaande vulhoofd zelfstandig naamwoord
2. positie 2 (P2): post-VMC regio
De tweede positie (P2) die moet worden gemeten, bevindt zich onmiddellijk na het werkwoord in de matrix clausule (VMC). Deze site wordt ook verondersteld om de verwerkingsbelasting te induceren. De integratie van de mondelinge informatie vereist dat listeners de zelfstandig naamwoord argumenten in de zin op te halen en om de agent van de matrix werkwoord te identificeren hetzij uit het voorgaande RC domein of uit het hoofd zelfstandig naamwoord dat de RC wijzigt.
3. positie 3 (P3): gebied van de Postzin
De derde positie (P3) die moet worden gemeten, is onmiddellijk na het einde van de zin. Eerdere studies over de verwerking stellen voor dat er een einde-van-zin wrap-up effect is-een fenomeen waarbij niet-syntactische informatie (bijvoorbeeld discours en semantisch niveau) aan het einde van een zin wordt overwogen om het begrip te activeren en te voltooien12 ,13. Daarom moet de verwerkingsbelasting stijgen naar het einde van de zin vanwege de noodzaak om deze niet-syntactische informatie14,15te integreren. Positie 3 wordt verondersteld een degradatie in de verwerkingsbelasting te laten zien, omdat er een zin resolutie is uitgevoerd rond deze site.
In het tweede experiment werd een auditieve bewegende venster (AMW)-taak aangenomen. De AMW-techniek wordt geacht patronen van resourcetoewijzing te kunnen vastleggen tijdens online taalkundige verwerking en is op grote schaal gebruikt in pogingen om onderscheid te maken tussen de twee concurrerende WM benaderingen16,17. Er wordt verondersteld dat een buitengerechtelijke interferentie extra tijd moet kosten in de loop van de verwerking van de voorbijgaande gesproken zin. Onder het AMW-paradigma hoorden de deelnemers zinnen die werden gesegmenteerd in woorden, en ze drukten een toets op het toetsenbord om het afspelen van het daaropvolgende segment te initiëren. De duur van de pauzes tussen de toetsters om het daaropvolgende segment te initiëren en de stroom van binnenkomende informatie te regelen, weerspiegelt dus de responsiviteit van de deelnemers ten behoeve van de specifieke taalkundige kenmerken in kwestie. Als de buitengerechtelijke interferentie bijvoorbeeld bepaalde effecten heeft op het verwerken van zinnen met verschillende syntactische complexiteit, vertonen de deelnemers dienovereenkomstig langere pauzeduur voordat de volgende segmenten worden gestart. De procedures worden geschematiseerde en weergegeven in Figuur 2.
Figuur 2: buitengerechtelijke storings procedure met een cijfer Recall taak.
Klik hier om een grotere versie van dit cijfer te bekijken.
Het volgende protocol laat zien hoe onderzoekers een visueel gepresenteerde lexicale beslissings taak gebruiken als intra-veroordeling en de gelijktijdige rekenkundige interferentie belasting als extra veroordeling van de betrokkenheid van WM en de verwerking asymmetrie van Chinese RCs en het uitwerken van de onderliggende logica.
Subscription Required. Please recommend JoVE to your librarian.
Protocol
De administratie van deze experimenten volgde alle ethische regels voor onderzoek. Alle proefpersonen hebben op de hoogte gesteld van de mondelinge en schriftelijke toestemming voordat de experimenten werden toegediend. Alle procedures, toestemmingsformulieren en het experimentele protocol zijn goedgekeurd door het ethisch comité voor onderzoek van de nationale Cheng kung Universiteit in Taiwan.
1. experiment 1 ― dual-modale intraveroordeling-interferentie taak
- Rekruteer 97 studenten, 54 vrouwtjes en 42 mannetjes, van het National Tainan Institute of Nursing en de National Tainan Secondary high school om deel te nemen aan experiment 1.
Opmerking: alle deelnemers moeten vloeiend native Chinese speakers hebben met normaal of gecorrigeerd-naar-normaal zicht en geen gehoorverlies door zelf melding. - Voorbereiding van het materiaal
- Selecteer woorden en nonwords voor de LDT. Omvatten een totaal van 48 bisyllabic (twee-karakters) Chinese woorden, waarvan 24 waren woorden en 24 waren nonwords.
Opmerking: een Chinees karakter vertegenwoordigt een lettergreep, wat meestal een morfeem is (d.w.z. het kleinste betekenisvolle element). De doel woorden hier zijn bisyllabic samengestelde woorden. Raadpleeg het aanvullende bestand voor een lijst met de visuele doel woorden/nonwords die voor de taak LDT worden gebruikt.- Selecteer de 24 woorden uit het Sinica corpus technisch rapport18, en zorg ervoor dat alle doel woorden van gemiddelde frequentie zijn. Zoekwoorden van het gemiddelde frequentie percentage ongeveer 0,00030 en de rangschikkings volgorde ongeveer 4.000 in de database.
Opmerking: het kiezen van woorden van gemiddelde frequentie als de doel woorden is bedoeld om het frequentie-effect te verminderen, wat resulteert in kortere reactietijden (RTs) voor hoogfrequente woorden en langere RTs van lage-frequentie woorden. - Maak de 24 nonwords met behulp van twee monoletterlabische tekens die individueel betekenisvol zijn, maar waarvan de combinatie semantisch afwijkend is. Om mogelijke activeringen te voorkomen, Vermijd bisyllabic-karakter woorden met identieke radicalen (bijv. haiyang, wat 'Oceaan 'betekent, wordt weergegeven in een Chinees bisyllabisch
karakter woord als, waar 
de radicale component gerelateerd aan wateren wordt gedeeld in de personages 
en 
). - Collocate handmatig de 24 nonwords in vulzinnen en de 24 woorden in de doel-RC zinnen.
Opmerking: het zoeken naar woorden met RCs en nonwords met fillers was noodzakelijk omdat alleen de RTs van LDT van de 24 woorden met RCs moet worden overwogen en opgenomen in de statistische analyses.
- Selecteer de 24 woorden uit het Sinica corpus technisch rapport18, en zorg ervoor dat alle doel woorden van gemiddelde frequentie zijn. Zoekwoorden van het gemiddelde frequentie percentage ongeveer 0,00030 en de rangschikkings volgorde ongeveer 4.000 in de database.
- Auditieve RC en vulmiddel zinnen
Opmerking: Raadpleeg het aanvullende bestand voor voorbeelden van de zinnen src, Orc en Filler.- Stel de gehoor stimuli samen in 72 zinnen, waarbij drie soorten zinnen zijn betrokken: 24 Src's, 24 Orc's en 24 vulzinnen.
- Verdeel de 48 RC zinnen gelijkmatig in twee groepen om een onvolledig-contraevenwichtig ontwerp te maken, waarbij 48 proeven (12 Src's, 12 Orc's en 24 vullers) worden gevormd in de 2 (SRC, ORC) * 3 (probing site) * 2 (Word/nonword) voorwaarden.
- Selecteer woorden en nonwords voor de LDT. Omvatten een totaal van 48 bisyllabic (twee-karakters) Chinese woorden, waarvan 24 waren woorden en 24 waren nonwords.
- De experimentele software instellen
- Gebruik een standaard experimentele software (d.w.z. E-Prime19) om het experiment te programmeren volgens de softwareprotocollen.
- Randomiseren van alle stimuli met behulp van de experimentele software.
- Configureer het software systeem om de volgende gegevens op te nemen: (1) de responsietijd, (2) de nauwkeurigheidsgraad van de antwoorden van de deelnemer in de LDT, en (3) het begrip van de postzin op basis van de toetsenbord persen van de deelnemers.
- Neem feedback op over de onjuiste lexicale beslissing van de deelnemers of geen reactie. Geef feedback weer op het monitor scherm onmiddellijk nadat de deelnemer een onjuiste of ontbrekende reactie heeft ontvangen. Er wordt geen feedback weergegeven wanneer de reactie van de deelnemer correct was.
- Geef een Oefen sectie met betrekking tot proefversies met feedback.
- Start na de oefensessie de Dual-modal intraveroordeling LDT interferentie taak. Laat de deelnemers tijdens de experimentele sessies een pauze nemen tussen elke 24 proeven.
- Laat elke deelnemer de taak afzonderlijk uitvoeren. Geef eerst de deelnemers instructies in schriftelijke vorm op het computerscherm en in verbale vorm door de experimenteur. Plaats de deelnemers voor een computer en rust ze uit met een koptelefoon.
- Instrueer de deelnemers om te luisteren naar de zinnen die worden afgespeeld via hun hoofdtelefoon, terwijl ze tegelijkertijd, op een bepaald moment tijdens het Luister proces, een lexicale beslissings taak uitvoeren.
- Vraag de deelnemers om te beslissen of de storende visuele sonde die op het scherm wordt weergegeven, een woord of nonword was en geef aan dat de reactie toets ' ja ' voor een woord of ' nee ' voor een niet-woord zo snel en nauwkeurig mogelijk moet worden ingedrukt.
- Informeer de deelnemers dat een begrijpelijke vraag onmiddellijk na de veroordeling zou volgen. Herinner ze eraan om aandachtig naar de auditieve zin te luisteren en tegelijkertijd de LDT-taak uit te voeren.
karakter woord als, waar 
de radicale component gerelateerd aan wateren wordt gedeeld in de personages 
en 
).2. experiment 2 ― Dual-modale buitengerechtelijke interferentie taak
- Rekruteer 61 studenten, 40 vrouwtjes en 21 mannetjes, van de National Taipei University of Technology en het National Tainan Junior College of Nursing als deelnemers aan experiment 2.
Opmerking: alle deelnemers moeten vloeiend native Chinese speakers met normale of gecorrigeerde-naar-normale gezichtsscherpte en geen auditieve beperking door zelf-rapport. - Voorbereiding van het materiaal
- Auditieve RC en vulmiddel zinnen
- Stel de auditieve stimuli samen in drie soorten zinnen: Src's, Orc's en vulzinnen. Verdeel de 48 RC zinnen gelijkmatig in twee groepen om een onvolledig contraevenwichtig ontwerp te maken met 96 totaal proeven (24 Src's, 24 Orc's en 48 vullers) voor de 2 (zin type: SRC, ORC) * 3 (Digit Load) voorwaarden.
Opmerking: Raadpleeg het aanvullende bestand voor de doel auditieve trial voorbeelden van de src, Orc, en filler zinnen.
- Stel de auditieve stimuli samen in drie soorten zinnen: Src's, Orc's en vulzinnen. Verdeel de 48 RC zinnen gelijkmatig in twee groepen om een onvolledig contraevenwichtig ontwerp te maken met 96 totaal proeven (24 Src's, 24 Orc's en 48 vullers) voor de 2 (zin type: SRC, ORC) * 3 (Digit Load) voorwaarden.
- 0/3/5 cijfers
- Construeer een totaal van 96 digitale items, bestaande uit 0/3/5 cijfercombinaties. Wijs elke 0, 3 of 5 cijfer belasting gelijkmatig toe aan alle zinproeven.
- Auditieve RC en vulmiddel zinnen
- Dual modal extraveroordeling digitale interferentie taak met AMW paradigma
- Gebruik een standaard experimentele software (d.w.z. E-Prime19) om het experiment te programmeren volgens de softwareprotocollen.
- Wijs de deelnemers willekeurig toe aan een van de twee stimuli sets die combinaties van twee binnen-onderwerp factoren van zin type (SRC vs. ORC) en geheugenbelasting (geen belasting, 3-cijferige belasting, 5-cijferige belasting) vertegenwoordigen. Geef de deelnemers de visuele presentatie van de cijfers van de 1.500 MS voor de AMW-taak.
- Start vervolgens de taak AMW.
Opmerking: de AMW Task20 is een self-tempo luisteren taak.- Instrueer de deelnemers de voorgaande visuele presentatie (cijfers of geen cijfers) in het geheugen te houden.
- Instrueer de deelnemers vervolgens om naar de zinnen te luisteren die in woorden zijn gesegmenteerd en via hun hoofdtelefoon worden afgespeeld. Vertel ze om zichzelf zo snel mogelijk te laten bewegen door op het toetsenbord te drukken om het volgende gesegmenteerde woord te starten.
- Instrueer de deelnemers om de Ja/nee-vraag te beantwoorden die op het computerscherm verscheen nadat ze naar elke proef zin hebben geluisterd. Laat de deelnemers weten dat de vraag wordt voorafgegaan door een vraagteken "?" op het computerscherm en dat de vraag betrekking heeft op de informatie die ze in de vorige zin hebben gehoord.
- Er wordt een kort "piep" geluid afgespeeld wanneer de deelnemers op de Ja/Nee-toets drukken om de vraag over het begrip te beantwoorden. Na de pieptoon, na de instructie die op het scherm verschijnt, vraagt u de deelnemers om het cijfer te herhalen dat ze hebben gezien voordat ze naar de zin luisterde.
- Laat de experimenteerder de cijfers van de deelnemers intrekken op een score blad.
Subscription Required. Please recommend JoVE to your librarian.
Representative Results
Het interferentie-effect werd waargenomen in zowel de Dual-modal intra-LDT als de extradigit load taken. Gezien de drie testsites in experiment 1, de RT resultaten van de intra-LDT taak manifesteerde een dynamisch patroon van RC-verwerking als een functie van twee RC-typen. Zoals weergegeven in Figuur 3vertoont het Orc-type een verwerkings voordeel op de positie post de matrix subject (SMC) na de RC (P1) en aan het einde van de zin (P3), terwijl het src-type een voordeel heeft op de positie post het matrix werkwoord (VMC ) na de RC (P2). Het eenvoudige belangrijkste effect van het type zin was significant bij P2 en P3, wat aangeeft dat de Src's een lagere verwerkingsbelasting hadden met de LDT-storende taak bij de matrix werkwoorden (P2), terwijl de Orks een lagere verwerkingsbelasting hadden aan de uiteinden van de zinnen (P3). Deze resultaten waren verschillend van de consistente SRC voorkeur gerapporteerd door RC studies in hoofd-initiële talen zoals Engels en ook varieerden van de concurrerende SRC en ORC voordelen gerapporteerd in eerdere Chinese RC studies.
Figuur 3: de resultaten van experiment 1, met de gemiddelde RTs (in MS) als een functie van zinstypen en storende sonde plaatsen.
* Het belangrijkste effect van het type zin bleek significant te zijn onder P2 en P3. Klik hier om een grotere versie van dit cijfer te bekijken.
De RT resultaten van de extradigit-terugroepen taak in het licht van de drie-cijferige belasting voorwaarden in experiment 2 manifesteerde een dynamisch patroon van RC verwerking als een functie van twee RC soorten ook. De Src's en Orc's toonden geen significant verschil aan in de drie extra veroordeel-interferentie omstandigheden. Rond de post-DE regio's (d.w.z. dezelfde regio's gedetecteerd door experiment 1), experiment 2 gerepliceerd de SRC voordeel op de matrix werkplaats, T5 (v2 = VMC) onder 0-cijferige belasting storing. Echter, de RC voordeel geneigd om te gunst ORCs onder 3-en 5-cijferige belasting voorwaarden. Dit dynamische patroon werd waargenomen in de relativizer DE-Region (T3), waar Src's een verwerkings voordeel toonden onder een 0-cijferige belasting, maar een omgekeerd ORC-voordeel ontstond toen de last storing steeg tot 5-cijfers. Al deze resultaten bieden negatief bewijs tegen ofwel de SRC of ORC verwerking voordelen gerapporteerd in eerdere Chinese RC studies.
De resultaten van verschillende interferentie van de cijfer belasting op Chinese RC-verwerking in experiment 2 worden weergegeven in Figuur 4, Figuur 5 en Figuur 6.
Figuur 4: de resultaten van experiment 2, waarbij de gemiddelde RTS (in MS) wordt weergegeven als een functie van zinstypen onder een 0-cijferige belasting. Klik hier om een grotere versie van dit cijfer te bekijken.
Onder de 0-cijferige belasting storing toonden de deelnemers een voordeel voor ORCs bij de initiële verwerkings regio (T1) van RC, maar Src's hadden een voordeel bij de regio's relativizer DE (T3) en matrix verb (T5).
Figuur 5: de resultaten van experiment 2, waarbij de gemiddelde RTS (in MS) wordt weergegeven als een functie van zinstypen onder een 3-cijferige belasting. Klik hier om een grotere versie van dit cijfer te bekijken.
Onder de 3-cijferige belasting storing werd geen SRC/ORC verschil waargenomen rond de pre-DE regio's (T1 en T2); de deelnemers toonden echter een SRC-voordeel bij de relativizer DE (T3) en een ORC-voordeel bij de regio matrix verb (T5).
Figuur 6: de resultaten van experiment 2, met de gemiddelde RTS (in MS) als functie van zinstypen onder een 5-cijferige belasting. Klik hier om een grotere versie van dit cijfer te bekijken.
Onder de 5-cijferige belasting storing toonden de deelnemers een algeheel ORC-voordeel rond de pre-DE regio's (T1 en T2) en de post-DE regio's in de regio matrix subject (T4).
Aanvullende tabel 1. Klik hier om deze tabel te downloaden.
Aanvullende tabel 2. Klik hier om deze tabel te downloaden.
Aanvullende tabel 3. Klik hier om deze tabel te downloaden.
Subscription Required. Please recommend JoVE to your librarian.
Discussion
Deze studie toont aan dat het gebruik van DMI-methoden met zowel intra-als extraveroordeling tiële interferentie taken kan helpen om de rol van WM in gesproken zin verwerking te verhelden en licht te werpen op de kwestie van Chinese RC processing asymmetrie. Zoals verwacht, door het meten van de mate waarin interferentie van een secundaire taak van de prestaties van de luisteraar op primaire zin verwerking, kunnen we afleiden van de patronen van de Chinese RC verwerking en komen tot een haalbare oplossing voor het debat over de Chinese SRC/ ORC-verwerkings voordeel.
Het interferentie-effect toont aan dat WM een essentiële rol speelt bij het verwerken van gesproken zinnen, ongeacht de bron van de interferentie. In ons geval, voor experimenten 1 en 2, is de intra-veroordeel interferentie een lexicale beslissings taak die semantisch losstaat van de zin, terwijl de buitengerechtelijke inmenging een niet-linguïstische rekenkundige taak is met toenemende moeilijkheidsgraad van digit-load terugroepen. Deze aanpak berust op de veronderstelling dat de WM die betrokken is bij de primaire en secundaire taken ofwel een gemeenschappelijke cognitieve bron1,2,21 deelt of via afzonderlijke systemen werkt,3,4 . Bewijs voor de algemeenheid van geheugenbelasting onder het vroegere model komt voort uit het simpelweg vinden dat deelnemers meer fouten maakten of langere verwerkings-/reactietijden (RTs) hadden in een zin begrip taak onder storings omstandigheden, terwijl bewijs voor de specificiteit van de geheugenbelasting bij het verwerken van zinnen in het laatste model vloeit voort uit de bevinding dat het verwerken van syntactisch complexere straffen leidt tot onevenredig slechtere prestaties in vergelijking met het verwerken van syntactisch eenvoudigere zinnen onder storings condities. Namelijk, onderzoeken in hoeverre de uitvoering van de verwerking van primaire zinnen wordt beïnvloed door de aanwezigheid van interferentie zou aantonen of een algemeen of specifiek domein van het WM-systeem bij beide taken betrokken is.
Niettemin, merk op dat het doel van de huidige studie, in plaats van het aanpakken van de kwestie van modulariteit, zich meer richt op de vraag of we het begrip van WM-Capaciteitslimieten kunnen toepassen op dergelijke controversiële kwesties als Chinese RC-verwerkings asymmetrie, waarvoor gemengde en verschillende resultaten zijn bereikt in vergelijking met de consistente SRC verwerking voordeel waargenomen in het Engels. In deze studie veronderstellen we dat door het meten van de mate waarin interferentie van het WM-systeem van invloed is op de primaire gesproken-Chinese RC-straf verwerking, we het verwerkings profiel voor zowel SRC als ORC kunnen detecteren en de RC-verwerkings asymmetrie bepalen. Als er een RC-verwerkings voorkeur in het Chinees bestaat, moeten we ofwel een SRC-of ORC-voordeel van de prestaties van de deelnemers onder zowel intra-als extraveroordeling tiële DMI-taken observeren.
Dit is echter niet het geval in het Chinees. Onze resultaten toonden aan dat Chinezen niet dezelfde RC-verwerkings asymmetrie hebben zoals is waargenomen voor Engels. De resultaten van experiment 1 gemanifesteerd in dynamische in plaats van constante patronen van de deelnemers RC voorkeuren. Een ORC-voordeel werd gevonden rond de matrix subject regio, terwijl een SRC voordeel werd gevonden rond de matrix verb regio. Een mogelijke gevolgtrekking is dat Chinese RC, gezien de typologische verschillen uit het Engels, geen duidelijke voorkeur voor SRC of ORC bezit.
Experiment 1 vertegenwoordigt een typische Dual-modale procedure met intra-veroordeling interferentie tijdens de verwerking van de zin. Hoewel dit een eenvoudige manier om te meten gesproken zin begrip processen in real time, voorzorgsmaatregelen moeten worden genomen bij de bouw van de test stimuli, bij het meten van de drie indringende sites na de RC marker de, en bij het uitlijnen van de indringende resultaten met de LDT-taak. Een kritieke stap bij het ontwerpen van het protocol was dat de doel-SRC en de ORC-zinnen moesten worden gekoppeld met woorden en dat de vulzinnen moesten worden colgelegen met alleen nonwords. Gezien deze situatie kunnen de verwerkingstijden (RTs) van de RC-zinnen worden gemeten en alleen vergeleken met hun inmenging in het reëel-woord oordeel. Een andere kritische opmerking om te overwegen is het ontwerp van de tegengebalanceerde stimuli. Elk van de LDT visuele woorden kan verschijnen slechts eenmaal in de taak, en elk van de RC stimuli kunnen worden geprobed op slechts één site. Bovendien, de combinatie van het woord/nonword LDTs en de drie testsites in combinatie met de twee RC zin typen gevormd 2 * 3 * 2 = 12 voorwaarden, maar alleen 48 proeven werden gebouwd in de huidige studie. Hoewel het meten van slechts één site voor elke zin tijdens de Dual-modale interferentie taak het voordeel heeft om de interferentie te verminderen en de taak zo vergelijkbaar mogelijk te maken met normaal luisteren, legt het ook de beperking op dat een enkele observatie site zal de experimenteur een groot aantal stimuli moeten ontwerpen als hij of zij van plan is om alle regio's in het zinsdeel te meten en een compleet tegenwicht te vinden. Daarom, met behulp van alleen 48 proeven voor het meten van de drie testsites in experiment 1 bereikt slechts een onvolledige tegenwicht, dat was de motivatie voor de daaropvolgende experiment 2 om de beperking te overwinnen.
Experiment 2 toont het voordeel van het aannemen van een Dual-modale interferentie-taak: het is veelzijdig en kan worden aangepast om verschillende vragen te beantwoorden die relevant zijn voor de geheugenbelasting en de aard van WM. Bovendien maakt dubbele-modale interferentie onder het AMW-paradigma het mogelijk om alle regio's te meten tijdens de verwerking van de zinnen. De resultaten van experiment 2 gerepliceerd de bevinding in experiment 1 dat Chinese RC-verwerking dynamisch is. Onder de geen digitale interferentie situatie, een ORC voordeel werd gevonden in de eerste regio, terwijl een SRC voordeel werd gevonden rond de RC marker DE en de matrix werkwoord. Naarmate de digitale interferentie toenam (de 3-en 5-cijferige belasting), toonden de deelnemers echter een algeheel ORC-voordeel rond de pre-DE regio's en de post-DE regio's bij het matrix onderwerp, waaruit blijkt dat factoren die betrekking hebben op WM de Chinese RC-verwerking kunnen veranderen Dynamics. Deze bevindingen bieden robuuste negatieve bewijs voor de null RC processing asymmetrie model in het Chinees. Met betrekking tot de bewering dat er geen duidelijke verwerkings voorkeur is voor SRC of ORC, is de aanvullende ondersteuning van een EPR-studie onlangs ook gemeld22.
Traditioneel, een veelgebruikte onderzoeksmethode voor RC-verwerking is het analyseren van taken op basis van de Self-tempo lezing paradigma, die wordt beschouwd als de eenvoudigste manier om te meten taalbegrip processen in real time en wordt beschouwd als bestaan uit "taken die zo veel mogelijk gelijk zijn aan normaal lezen "23. Echter, ondanks het verstrekken van een venster in de grotendeels automatische parseren proces, de klassieke woord-voor-woord self-tempo lezen taak, die niet toestaat dat onderwerpen om terug te kijken, niet weerspiegelt de heen en weer oogbewegingen lezers maken voor integratie en begrip tijdens het natuurlijke leesproces. Dat de onderwerpen beperkt zijn in het teruggaan naar het proces van eerdere materialen is in feite veel dichter bij natuurlijk Luister begrip taak.
In het licht van het feit dat luisteren phylogenetisch nauw verwant is met taalverwerking en taalontwikkeling en dat er weinig studies zijn uitgevoerd om de online auditieve straf verwerking te onderzoeken, draagt de huidige studie bij aan het aanbieden van een haalbare toepassing van deze DMI-benadering voor de verwerking van gesproken zinnen.
De belangrijke innovatie van deze studie is dat het de zoektocht naar de aard van WM toepast en de bewering dat complexe syntactische constructies hoge eisen stellen aan WM-middelen die zijn gekoppeld aan spraakverwerking om een langdurig probleem van RC-verwerking aan te pakken asymmetrie in het Chinees. Uit de resultaten van deze studie blijkt dat Chinese Src's en Orc's geen significante verschillen vertonen in het kader van intraveroordeling of extraveroordeling van de storings voorwaarden. Deze bevindingen verschillen van de vorige gemengde resultaten met betrekking tot een SRC of ORC voordeel in het Chinees, dus leidt tot het vermoeden dat de RC-verwerkings asymmetrie consistent gevonden in hoofd-initiële talen zoals Engels niet bestaat in het Chinees. Dit impliceert ook dat de complexiteit metriek tussen SRC en ORC in het Chinees kan afwijken van die in het Engels. Vanwege de kenmerken van de syntactische constructies, moet Chinese RCs worden verwerkt in een taalspecifieke manier.
Het Dual-modale interferentie paradigma in combinatie met de LDT-taak en de AMW-techniek is een nieuwe aanpak die met succes het doel kan bereiken om het verloop van de verwerking in real-time te meten, en dergelijke metingen kunnen helpen om licht te werpen op de kwestie van de verwerking Complexiteit. Houd er rekening mee dat er een kritieke stap bestaat in beide experimenten 1 en 2 met betrekking tot de instructies voor de deelnemers. Omdat de lexicale beslissings taak in experiment 1 een relatief minder geheugen last inhoudt, maar een meer automatische respons induceert, moeten de deelnemers worden geïnstrueerd om aandachtig te letten bij het luisteren naar de zin. Daarentegen, in experiment 2, omdat Digit Recall meer geheugenbelasting induceert, moeten de deelnemers worden geïnstrueerd om prioriteit te geven aan pogingen om de cijfers correct te onthouden terwijl ze zo snel mogelijk naar de zin luisteren, maar ze moeten nog steeds worden herinnerd aan Vermijd te snel luisteren en niet de zin van de zin vast te leggen. Met behulp van deze benadering, de afwegingen tussen het bijwonen van de zin en de cijfer intrekken taak kan worden verminderd. Bovendien, om te voorkomen dat deelnemers vermoeid raken bij het luisteren naar de zinnen, adviseren wij hen korte respites te geven; de testtijd is dus waarschijnlijk meer dan 30 minuten.
De belangrijke bevinding in deze studie onderstreept de noodzaak voor toekomstige studies verkennen van de verwerking metrische gegevens van RC zin complexiteit om te overwegen WM betrokkenheid. De dubbele-modale interferentie-taak, in het bijzonder degene die de AMW-techniek gebruikt, kan dit probleem aanpakken wanneer het wordt gebruikt in combinatie met een intra-veroordeling of een extra veroordeling. Bovendien moet deze procedure van groot belang zijn en zeer toepasselijk zijn voor psycholingstaters die proberen ons begrip van de aard van WM en haar associatie met de verwerking van zinnen verder te begrijpen.
Subscription Required. Please recommend JoVE to your librarian.
Disclosures
De auteurs hebben niets te onthullen.
Acknowledgments
Deze studie werd gesteund door subsidies van het ministerie van wetenschap en technologie, Taiwan, R.O.C. [NSC-101-2410-H-439-001] aan de eerste auteur, Tuyuan Cheng. De auteurs bedanken Lab members, Yang ya-Hui en Chen Pei-Han, in NTIN, voor hun hulp bij het voorbereiden en uitvoeren van het experiment.
Materials
| Name | Company | Catalog Number | Comments |
| E-Prime | Psychology Software Tools | version Professional 2.0 | |
| Headphone | Logitech | ||
| Praat | Praat | 5.3.43 | The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/ |
| Serial Response Box | Psychology Software Tools | ||
| Standard PC | ASUS K42Jv laptop |
References
- Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
- King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
- Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
- Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
- Cowan, N. Working Memory Capacity. , Psychology Press. New York, NY. (2005).
- Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
- Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
- Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
- Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
- Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
- Wu, J. T., Chou, T. L., Liu, I. M. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. , Taipei. Taipei: National Taiwan University (in Chinese) 31-58 (1994).
- Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
- Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
- Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
- Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
- Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
- Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
- Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
- Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), https://doi.org/10.1007/s10936-018-9576-5 1035-1055 (2018).
- CKIP. Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , Institute of Information Science, Academia Sinica. Taipei. (1994).
- MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
- Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
- Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
- Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
- Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).
