Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Journal Behavior
Click here for the English version

Behavior

Esame dell'elaborazione sintattica online delle frasi complesse parlate in cinese utilizzando attività di interferenza dual-modale

Published: September 5, 2019 doi: 10.3791/59660
Automatic Translation
1, 2
1General Education Center, National Tainan Junior College of Nursing, 2Department of Psychology, National Taiwan University

Summary

Qui, presentiamo un protocollo che impiega attività di interferenza dual-modale per esaminare l'elaborazione online delle frasi di clausola relativa parlata-cinese. Sono descritti due esperimenti esemplari che coinvolgono l'elaborazione uditiva con interferenze intra ed extrasentenziali. Il paradigma fornisce una metodologia per affrontare la natura della memoria di lavoro e i suoi effetti sull'elaborazione delle frasi.

Abstract

La memoria di lavoro (WM) svolge un ruolo centrale nella comprensione di frasi complesse. La sua funzione nell'elaborazione di frasi complesse pronunciate è particolarmente evidente perché l'elaborazione delle frasi complesse parlate richiede un uso intensivo della memoria. Il paradigma di interferenza dual-modale è stato utilizzato per esaminare il modo in cui il sistema WM è coinvolto nell'elaborazione sintattica complessa. Questo articolo presenta due esperimenti esemplari che coinvolgono l'elaborazione uditiva con interferenze intra o extrasentinanti. Nel primo esperimento, gli stimoli uditivi [frase della relativa clausola parlata-cinese (RC) con due tipi sintattici: soggetto-gapped (SRC) e oggetto-gapped (ORC)] sono interferiti con tramite un compito di decisione lessicale visivamente presentato all'interno di una frase e manipolato utilizzando tre diversi orari di interferenza. Nel secondo esperimento, gli stessi stimoli uditivi, presentati tramite una tecnica uditiva di movimento delle finestre, vengono interferiti con un compito di richiamo digitale presentato visivamente oltre la frase e manipolati utilizzando tre carichi di memoria digitale. Valutando come il compito primario di comprendere le frasi RC è influenzato dal compito secondario, possiamo affrontare la controversa questione riguardante l'asimmetria di elaborazione RC cinese. I nostri risultati rivelano diversi modelli di elaborazione RC rispetto a quelli riportati in studi precedenti. L'esperimento 1 non presenta chiari vantaggi nell'elaborazione RC in SRC o ORC; tuttavia, una preferenza per ORC è osservata alla fine delle frasi, e una preferenza per SRC si trova nel sito di verbi principale. Allo stesso modo, Esperimento 2 presenta un modello dinamico. In un carico senza cifre, gli SRC mostrano vantaggi di elaborazione nella regione dei marcatori RC. Tuttavia, in caso di interferenze di carico di una cifra più alta, gli ORC mostrano vantaggi di elaborazione nella stessa regione. Questi risultati portano alla congettura che non esiste alcuna asimmetria di elaborazione evidente o intrinseca nell'elaborazione di RC cinesi. applicazioni che esplorano le metriche di elaborazione delle frasi pronunciate che coinvolgono la memoria di lavoro.

Introduction

Il ruolo della memoria di lavoro (WM) durante l'elaborazione della frase pronunciata è evidente: a causa della natura transitoria del discorso, gli ascoltatori devono mantenere le forme acustiche dei componenti nelle loro memorie fino a quando non vengono elaborati. Questo aspetto diventa ancora più importante durante l'elaborazione di frasi sintatticamente complesse. L'assegnazione di relazioni sintattiche a parole in frasi complesse comporta l'esecuzione di operazioni di calcolo su elementi conservati in memoria per brevi periodi di tempo, con conseguente maggiore richiesta di memoria. Tuttavia, il modo in cui il sistema WM è coinvolto nell'elaborazione delle frasi parlate è controverso.

Questa controversia comporta due grandi disaccordi: alcuni ricercatori sostengono che esiste un singolo sistema WM che viene utilizzato per tutte le attività verbali1,2- in altre parole, l'elaborazione sintattica si basa sulle stesse risorse di memoria utilizzate da più processi cognitivi generali. Questo è il modello a singola risorsa. Altri hanno sostenuto che determinare il significato di una frase in base alla sua struttura sintattica comporta un sistema WM specializzato separato da quello utilizzato per altri compiti verbali3,4. In questo senso, l'elaborazione sintattica è modulare. Questo è il modello di risorsa separato per l'interpretazione delle frasi.

Nella ricerca psicolinguistica, il paradigma di interferenza dual-modale è stato utilizzato per esaminare i due conti concorrenti. In base al presupposto che la capacità di archiviazione WM sia limitataa 5,6, il paradigma affronta i problemi complicando un'attività primaria con un'attività secondaria che interviene. Dato che il compito primario compete per risorse limitate con il compito secondario che interviene, la difficoltà aumenta e il compito primario presenta tempi di reazione più lunghi. Data questa situazione, l'approccio di interferenza dual-modale consente di valutare il carico di elaborazione e l'estensione del coinvolgimento del WM quando a un partecipante viene assegnato un compito che richiede l'adempimento simultaneo di entrambe le attività.

Le condanne contenenti componenti RC, che causano maggiori difficoltà di comprensione a causa delle loro ben note strutture sintattiche complesse, sono ampiamente utilizzate per indagare come il sistema WM è coinvolto nell'elaborazione di frasi complesse. Tuttavia, anche se l'elaborazione di frasi complesse pone una domanda più elevata sulle risorse WM associate all'elaborazione vocale, è meno chiaro se il WM che si pensa contribuisca ai costi dei movimenti sintattici nei linguaggi con RC head-initial costruzioni (come l'inglese) riflette la complessità sintattica delle lingue con RC-final (come il cinese). Attraverso l'uso di un paradigma di interferenza dual-modale, lo studio attuale fa luce su questo problema.

Le difficoltà associate all'elaborazione di due strutture RC, clausole relative soggette e oggetti (SRC contro ORC), sono state oggetto di un ampio dibattito. Queste controversie sono osservate principalmente in lingue tipologicamente diverse. Nelle lingue iniziali come l'inglese, in cui una clausola relativa segue il nome alla testa che modifica, la scoperta generale è che gli SRC come nell'esempio 1(a) riportato di seguito vengono elaborati più facilmente degli ORC nell'esempio 1(b).

Equation 1

Come mostrato nell'esempio (1), in inglese, la posizione della superficie del divario differisce minimamente tra SRC e ORC. Questo divario è indicizzato come e1, la posizione vuota dopo il sostantivo capo 'attore' (chiamato filler) lasciato dalla sua rimozione fuori dalla RC. Tuttavia, gli SRC e gli ORC differiscono sostanzialmente in termini di struttura grammaticale e funzione del divario nel dominio RC. Il costo della memoria per l'integrazione e la risoluzione della dipendenza strutturale tra il riempitivo e il divario è un obiettivo adatto per lo studio sperimentale ed è stato ampiamente utilizzato per ottenere informazioni sul ruolo della WM nell'elaborazione e nella comprensione del linguaggio.

Ad esempio, comprendere ed elaborare questi RC postnominali richiede l'indicizzazione del sostantivo capo 'attore' come soggetto funzionale o l'oggetto del verbo 'criticato' in SRC e ORC e quindi memorizzare il sostantivo capo in WM in modo che possa essere successivamente assegnato al soggetto grammaticale del verbo 'ammesso' nella clausola principale.

In contrasto con la constatazione coerente con le lingue iniziali che comprendere gli SRC è più facile che comprendere gli ORC, sono stati riportati risultati contrastanti per quanto riguarda l'asimmetria di elaborazione RC per il cinese, che è una lingua finale in cui un parente la clausola precede il sostantivi capo. Alcuni hanno osservato un vantaggio di elaborazione SRC, mentre altri hanno segnalato il modello opposto (cioè un vantaggio di elaborazione ORC). Quest'ultima linea di ricerca ha anche proposto che l'asimmetria di elaborazione RC può essere modulata da WM, come suggerito dai risultati ottenuti da studi di lettura autogestitaperformance 7,8,9.

Come accennato in precedenza, ci sono due modelli concorrenti per quanto riguarda il ruolo che WM svolge nell'elaborazione sintattica (complessa). Uno è che "l'elaborazione sintattica è modulare", e l'altra è che "l'elaborazione sintattica è generale". Frasi complesse con differenze ben note nella difficoltà di comprensione, vale a dire SRC contro ORC in inglese, sono spesso utilizzate in attività di interferenza dual-modale (DMI) per esaminare queste due asserzioni in merito alla questione della modularità, coinvolgimento di WM si dice che parallelamente l'asimmetria di elaborazione. Pertanto, l'induzione del carico di memoria simultanea tramite attività interferenti dimostra gli effetti WM sull'elaborazione sintattica. La logica è che se esiste un singolo sistema VERBALe WM o sistemi sintattici modulari separati, coinvolgere il sistema con un'attività interferente rende meno efficiente l'elaborazione sintattica a causa delle limitazioni delle risorse WM. Il modo in cui l'elaborazione di frasi sintatticamente più complesse (ORC, in inglese) soffre di compiti DMI confronta con l'elaborazione di frasi sintatticamente più semplici (SRC, in inglese) fornisce prove riguardanti l'effetto specifico di WM e indica la misura in cui di cui WM è coinvolto.

A differenza delle lingue iniziali come l'inglese, gli RC cinesi manifestano una formazione testa-finale e mostrano una relazione gap-filler. L'elemento spostato in uscita indicizzato, lo spazio, precede il sostantivo testa associato ad esso, come illustrato in 2(a), SRC e 2(b), ORC.

Equation 1

La controversia che deriva dall'elaborazione di RC cinesi è che gli SRC non sono costantemente segnalati come più facili da elaborare rispetto agli ORC, e questa discrepanza ha rappresentato una sfida per le teorie dell'elaborazione e della comprensione del linguaggio. Poiché il contenuto prenominale prima del relativore 'DE' deve essere archiviato in WM fino a dopo il divario, ovvero il sostantivo "attore" della testa spostata, è collegato e recuperato, la comprensione di questo processo consente comunque di ottenere informazioni sul ruolo del linguaggio WM.

Nello studio attuale, l'elaborazione delle frasi RC parlate viene esaminata perché l'ascolto è altamente compressivo durante l'elaborazione ed è strettamente correlato al funzionamento di WM. Il paradigma di doppia interferenza modale viene utilizzato perché l'interferenza è una funzione di dimenticanza ben consolidata nella memoria uditiva a breve termine. Le rappresentazioni memorizzate in memoria possono essere danneggiate e successivamente perse quando si verificano eventi interferenti10. I distrattori che variano lungo diversi aspetti (nel caso attuale: intralinguistico ed extradigitale, vedi sotto) alla frase parlata canonica ci permettono di misurare il costo dell'integrazione dell'input incrementale durante le diverse fasi di elaborazione e sotto diverse condizioni di interferenza.

Sulla base della posizione che l'elaborazione di frasi più sintatticamente complesse sovraccarica WM più che l'elaborazione di frasi più semplici, si può ipotizzare che la manipolazione del tipo di interferenza durante il corso della comprensione dovrebbe avere effetti su elaborazione delle frasi. Per implicazione, l'elaborazione di frasi sintatticamente più complesse richiederà tempi di ascolto online proporzionalmente maggiori o sproporzionatamente maggiori e mostrerà prestazioni peggiori nella valutazione della comprensione delle frasi post-online rispetto a trattamento di costruzioni sintatticamente più semplici. Lo studio attuale esamina l'ipotesi che l'interferenza durante l'elaborazione delle frasi possa indicizzare il coinvolgimento di WM e pone virtualmente il suo valore al di là della questione della modularità sintattica: propone l'idea che la controversia sull'elaborazione RC cinese possa essere chiarito attraverso l'indagine della WM a causa del suo ruolo fondamentale nella comprensione del linguaggio. Pertanto, il significato legato all'uso dei compiti DMI nell'elaborazione RC cinese fornisce un percorso per risolvere il dibattito in corso riguardante l'asimmetria di elaborazione RC cinese.

Questo articolo presenta due esperimenti esemplari che coinvolgono l'elaborazione uditiva utilizzando sia l'interferenza intra- che extrasenteenti. L'obiettivo di questi due esperimenti era quello di esplorare fino a che punto WM è impegnato nell'elaborazione RC cinese sotto diversi tipi di interferenza.

Nel primo esperimento, un compito di decisione lessicale presentato visivamente è stato utilizzato come interferenza intramessaggistica. Come compito secondario di interferenza, il compito di decisione lessicale parola/non parola (LDT) è stato introdotto in tre punti durante la presentazione uditiva della frase relativa di destinazione, consentendo così la difficoltà di elaborazione da misurare in questi punti. La preoccupazione principale in questo esperimento è come il divario nella clausola relativa (RC) sia associato al filler nella clausola matrix (MC) e se influisce sull'elaborazione del MC successivo. Pertanto, i tre siti di sondaggio da misurare sono stati impostati dopo la regione MC. Un esempio, replicato da (2), dei tre siti di sondaggio indicati con frecce e allineati con la corrispondente concatenazione sintattica, è illustrato nell'esempio 3, dove 3(a) mostra SRC e 3(b) mostra ORC.

Equation 1

Nella figura 1 viene illustrata la procedura per interferire con la presentazione RC uditiva continua da parte del LDT in uno dei tre siti di sondaggio. Il design della temporizzazione segue il protocollo convenzionale del compito LDT in un precedente studio di elaborazione cinese11. Ad esempio, ogni prova LDT visiva inizia con un segno croce "" che indica un punto di fissaggio al centro del monitor per 500 ms, seguito dallo stimolo LDT visivo, che viene visualizzato sullo schermo per 3.000 ms e scompare subito dopo che il soggetto decisione lessicale. Un soggetto tipico completa l'esperimento 1, inclusa la sessione di pratica, entro 30-35 minuti.

Figure 1
Figura 1: procedura di interferenza intrasenteriale con un compito di decisione lessicale.
Fare clic qui per visualizzare una versione più grande di questa figura.

I tre siti di sondaggio insieme al compito LDT:

1. Posizione 1 (P1): regione post-SMC

La prima posizione (P1) da misurare è immediatamente successiva al soggetto dell'MC nella regione dopo il confine RC. Il carico di elaborazione dovrebbe essere presente in questo sito. Per prima cosa, prima di questo punto (SMC), subject-gap e object-gap di costruzione all'interno del dominio RC formano strutture contrastive verb-object (VO) e subject-verb (SV), rispettivamente. Per un altro, per integrare i costituenti nella regione RC con il sostantivo capo in MC, gli ascoltatori devono identificare il ruolo grammaticale del gap e collegarlo con il prossimo sostantivo testa riempitore

2. Posizione 2 (P2): regione Post-VMC

La seconda posizione (P2) da misurare è immediatamente successiva al verbo nella clausola matrix (VMC). Si presume inoltre che questo sito induca il carico di elaborazione. L'integrazione delle informazioni verbali richiede agli ascoltatori di recuperare gli argomenti del sostantivo nella frase e di identificare l'agente del verbo di matrice dal dominio RC precedente o dal sostantivo capo modificato dall'RC.

3. Posizione 3 (P3): Regione postsentence

La terza posizione (P3) da misurare è immediatamente successiva alla fine della frase. Precedenti studi sull'elaborazione propongono che vi sia un effetto di wrap-up alla fine della frase, un fenomeno in cui le informazioni non sintattiche (ad esempio, il discorso e il livello semantico) sono considerate alla fine di una frase per attivare e completare la comprensione12 ,13. Pertanto, il carico di elaborazione dovrebbe aumentare verso la fine della frase a causa della necessità di integrare queste informazioni non sintattiche14,15. Si presuppone che la posizione 3 mostri una degradazione del carico di elaborazione perché è stata tentata la risoluzione della frase in questo sito.

Nel secondo esperimento è stata adottata un'attività di finestra di spostamento uditiva (AMW). La tecnica AMW è considerata in grado di acquisire modelli di allocazione delle risorse durante l'elaborazione linguistica online ed è stata ampiamente utilizzata nei tentativi di distinguere tra i due approcci WM concorrenti16,17. Si presume che l'interferenza extrasentenaria dovrebbe costare agli ascoltatori più tempo durante il corso dell'elaborazione della frase pronunciata imminente transitoria. Sotto il paradigma AMW, i partecipanti hanno sentito frasi che sono state segmentate in parole, e hanno premuto un tasto sulla tastiera per iniziare a giocare del segmento successivo. Così, le durate delle pause tra le pressioni dei tasti per avviare il segmento successivo e controllare il flusso di informazioni in arrivo riflettono la reattività dei partecipanti alle particolari caratteristiche linguistiche in questione. Ad esempio, se l'interferenza extrasenteenziale ha determinati effetti sull'elaborazione di frasi di diversa complessità sintattica, i partecipanti mostreranno periodi di pausa più lunghi corrispondenti prima di iniziare i segmenti successivi. Le procedure sono schematizzate e presentate nella figura 2.

Figure 2
Figura 2: procedura di interferenza extrasentesente con un'attività di richiamo numerico.
Fare clic qui per visualizzare una versione più grande di questa figura.

Il seguente protocollo mostra come i ricercatori utilizzano un compito di decisione lessicale visivamente presentato come interferenza intramessaggiziale e il carico di interferenze aritmetiche simultanee come interferenza extrasenteenziale per indagare sul coinvolgimento di WM e sull'elaborazione asimmetria degli RC cinesi ed elaborare la logica sottostante.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

L'amministrazione di questi esperimenti ha seguito tutti i regolamenti etici di ricerca. Tutti i soggetti hanno fornito il consenso verbale e scritto informato prima della somministrazione degli esperimenti. Tutte le procedure, i moduli di consenso e il protocollo sperimentale sono stati approvati dal Comitato Etico della Ricerca della National Cheng Kung University di Taiwan.

1. Esperimento 1 - attività di interferenza intrasenteziale dual-modale

  1. Recluta 97 studenti, 54 femmine e 42 maschi, del National Tainan Institute of Nursing e della National Tainan Secondary High School per partecipare all'Esperimento 1.
    NOTA: Tutti i partecipanti devono essere fluenti madrelingua cinesi con una visione normale o corretta-alla-normale e nessun appostamento uditivo da auto-relazione.
  2. Preparazione del materiale
    1. Selezionare parole e parole non parole per l'LDT. Includere un totale di 48 parole cinesi bisillabi (a due caratteri), di cui 24 parole e 24 non erano parole non.
      NOTA: un carattere cinese rappresenta una sillaba, che di solito è un morfema (cioè l'elemento significativo più piccolo). Le parole di destinazione qui sono parole composte bisillabiche. Vedere il file supplementare per un elenco delle parole/non parole di destinazione visiva utilizzate per l'attività LDT.
      1. Selezionare le 24 parole del Rapporto Tecnico Sinica Corpus18, assicurandosi che tutte le parole di destinazione siano di media frequenza. Cerca parole della percentuale di frequenza media di circa 0.00030 e l'ordine di classificazione di circa 4.000 nel database.
        NOTA: la scelta di parole di media frequenza come parole di destinazione ha lo scopo di ridurre l'effetto di frequenza, che si traduce in tempi di risposta più brevi (RT) per parole ad alta frequenza e RT più lunghi da parole a bassa frequenza.
      2. Creare le 24 parole non parole utilizzando due caratteri monosillabici che sono significativi singolarmente ma la cui combinazione è semanticamente anomala. Per evitare potenziali attivazioni, evitare le parole di carattere bisillabico con radicali identici (ad esempio, haiyang, Charcter 1 che significa " Charcter 3 oceano",è rappresentato in una parola di carattere bisillabica cinese come , dove la componente radicale relative alle acque è Charcter 2 condiviso Charcter 4 nei personaggi e ).
      3. Collocare manualmente le 24 parole non parola nelle frasi di riempimento e le 24 parole nelle frasi RC di destinazione.
        NOTA: Era necessario collocare le parole con RC e le parole non con riempitivi perché solo gli RT di LDT delle 24 parole con RC dovevano essere considerati e inclusi nelle analisi statistiche.
    2. UD e frasi di riempimento
      NOTA: Si prega di consultare il File supplementare per esempi delle frasi SRC, ORC e filler.
      1. Componi gli stimoli uditivi in 72 frasi, coinvolgendo tre tipi di frasi: 24 SRC, 24 ORC e 24 frasi di riempimento.
      2. Dividere le 48 frasi RC in modo uniforme in due gruppi per creare un design controbilanciato incompleto, formando 48 prove (12 SRC, 12 ORC e 24 riempitivi) nelle condizioni 2 (SRC, ORC) - 3 (sito di sondaggio) - 2 (parola/non parola).
  3. Configurazione del software sperimentale
    1. Utilizzare un software sperimentale standard (ad esempio, E-Prime19) per programmare l'esperimento in base ai protocolli software.
    2. Randomizzare tutti gli stimoli utilizzando il software sperimentale.
    3. Configurare il sistema software per registrare i seguenti dati: (1) il tempo di risposta, (2) il tasso di precisione delle risposte del partecipante nel LDT e (3) la comprensione della postsentence in base alle pressioni della tastiera dei partecipanti.
    4. Includere commenti e suggerimenti relativi alla decisione lessicale errata dei partecipanti o nessuna risposta. Visualizzare il feedback sullo schermo del monitor subito dopo la risposta errata o mancante del partecipante. Quando la risposta del partecipante è stata corretta, non viene visualizzato alcun feedback.
    5. Fornire una sezione di pratica che coinvolge le prove con feedback.
  4. Dopo la sessione di esercitazione, avviare l'attività di interferenza LDT intrassociale dual-modale. Durante le sessioni sperimentali, consentire ai partecipanti di fare una pausa tra ogni 24 prove.
    1. Chiedi a ogni partecipante di eseguire l'attività individualmente. In primo luogo, fornire ai partecipanti istruzioni sia in forma scritta sullo schermo del computer che in forma verbale dallo sperimentatore. Posizionare i partecipanti davanti a un computer e dotarli di cuffie.
    2. Istruire i partecipanti ad ascoltare le frasi rivolte attraverso le cuffie, mentre contemporaneamente, ad un certo punto durante il processo di ascolto, di eseguire un compito decisionale lessicale.
    3. Chiedere ai partecipanti di decidere se la sonda visiva interferente visualizzata sullo schermo è una parola o una parola non e istruire loro di premere il tasto di risposta "Sì" per una parola o "No" per una parola non parola nel modo più rapido e preciso possibile.
    4. Informare i partecipanti che una domanda di comprensione seguirà subito dopo la frase. Ricorda loro di ascoltare attentamente la frase uditiva mentre contemporaneamente eseguire il compito LDT.

2. Esperimento 2 - attività di interferenza extrasenteenziale dual-modale

  1. Recluta 61 studenti universitari, 40 femmine e 21 maschi, della National Taipei University of Technology e del National Tainan Junior College of Nursing come partecipanti all'Esperimento 2.
    NOTA: Tutti i partecipanti devono essere fluenti madrelingua cinesi con acuità visiva normale o corretta al normale e nessun danno uditivo da parte di auto-report.
  2. Preparazione del materiale
    1. UD e frasi di riempimento
      1. Comporre gli stimoli uditivi in tre tipi di frasi: SRC, ORC e frasi di riempimento. Dividere le 48 frasi RC in modo uniforme in due gruppi per creare un progetto controbilanciato incompleto con 96 prove totali (24 SRC, 24 ORC e 48 riempitivi) per le 2 (tipo di frase: SRC, ORC) - 3 (carico numerico) condizioni.
        NOTA: si prega di consultare il File supplementare per gli esempi di prova uditiva di destinazione delle frasi SRC, ORC e filler.
    2. 0/3/5 cifre
      1. Costruisci un totale di 96 oggetti digitali, composti da combinazioni di cifre 0/3/5. Assegnare ogni carico di 0, 3 o 5 cifre in modo uniforme a tutte le prove di condanna.
  3. Doppio compito di interferenza digitale extrasenteenziale modale con paradigma AMW
    1. Utilizzare un software sperimentale standard (ad esempio, E-Prime19) per programmare l'esperimento in base ai protocolli software.
    2. Assegnare casualmente i partecipanti a uno dei due set di stimoli che rappresentano combinazioni di due fattori all'interno dell'oggetto del tipo di frase (SRC contro ORC) e il carico di memoria (nessun carico, carico a 3 cifre, 5 pollici-carico). Fornire ai partecipanti la presentazione visiva di 1.500 ms delle cifre prima dell'attività AMW.
  4. Quindi, avviare l'attività AMW.
    NOTA: l'attività AMW20 è un'attività di ascolto autogestita.
    1. Indicare ai partecipanti di mantenere in memoria la presentazione visiva precedente (cifre o senza cifre).
    2. Quindi, istruisci i partecipanti ad ascoltare le frasi segmentate in parole e giocate attraverso le loro cuffie. Dite loro di andare al passo con il più velocemente possibile premendo la tastiera per iniziare a giocare della parola segmentata successiva.
    3. Istruisci i partecipanti a rispondere alla domanda di comprensione sì/no che è apparsa sullo schermo del computer dopo aver ascoltato ogni frase del processo. Informare i partecipanti che la domanda è preceduta da un punto interrogativo "?" sullo schermo del computer e che la domanda è correlata alle informazioni che hanno ascoltato nella frase precedente.
    4. Un breve suono "bip" viene riprodotto quando i partecipanti premono il tasto sì/no per rispondere alla domanda di comprensione. Dopo il beep, dopo l'istruzione che appare sullo schermo, chiedi ai partecipanti di ripetere la cifra che hanno visto prima di ascoltare la frase.
    5. Chiedi allo sperimentatore di registrare le risposte di richiamo delle cifre dei partecipanti su un foglio di valutazione.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

L'effetto di interferenza è stato osservato sia nelle attività dual-modali intra-LDT che nelle attività di carico extradigit. Considerando i tre siti di probe nell'esperimento 1, i risultati RT dell'attività intra-LDT manifestano un modello dinamico di elaborazione RC in funzione di due tipi RC. Come illustrato nella Figura 3, il tipo ORC presenta un vantaggio di elaborazione nella posizione dopo l'oggetto della matrice (SMC)dopo il RC (P1) e alla fine della frase (P3), mentre il tipo SRC presenta un vantaggio nella posizione dopo il verbo di matrice (VMC ) dopo il RC (P2). Il semplice effetto principale del tipo di frase era significativo a P2 e P3, indicando che gli SRC avevano un carico di elaborazione inferiore con il compito interferente LDT ai verbi di matrice (P2), mentre gli ORC avevano un carico di elaborazione inferiore alle estremità delle frasi (P3). Questi risultati sono stati diversi dalla costante preferenza SRC riportata dagli studi RC nelle lingue iniziali come l'inglese e variavano anche dai vantaggi concorrenti di SRC e ORC riportati in precedenti studi sulla RC cinese.

Figure 3
Figura 3: I risultati dell'esperimento 1, che mostrano gli RT medi (in ms) in funzione dei tipi di frase e dei siti di sonda interferenti.
L'effetto principale del tipo di frase è risultato essere significativo in P2 e P3. Fare clic qui per visualizzare una versione più grande di questa figura.

I risultati RT dell'attività extradigit-recall alla luce delle condizioni di caricamento a tre cifre in Experiment 2 manifestavano un modello dinamico di elaborazione RC in funzione di due tipi RC. Gli SRC e gli ORC non hanno mostrato alcuna differenza significativa tra le tre condizioni di interferenza del carico di cifre extraposte. Intorno alle regioni post-DE (cioè le stesse regioni rilevate dall'Esperimento 1), l'Esperimento 2 ha replicato il vantaggio SRC nel sito dei verbi di matrice, T5 (V2-VMC) in caso di interferenza di carico a 0 cifre. Tuttavia, il vantaggio RC incline a favorire gli ORC in condizioni di carico a 3 e 5 cifre. Questo modello dinamico è stato osservato nel relativante DE-region (T3), dove gli SRC mostravano un vantaggio di elaborazione sotto un carico a 0 cifre, ma è emerso un vantaggio ORC invertito quando l'interferenza di carico è aumentata a 5 cifre. Tutti questi risultati forniscono prove negative contro i vantaggi di elaborazione SRC o ORC riportati in precedenti studi RC cinesi.

I risultati delle diverse interferenze di caricamento delle cifre sull'elaborazione RC cinese nell'esperimento 2 sono illustrati rispettivamente nella Figura 4, Figura 5 e Figura 6.

Figure 4
Figura 4: I risultati dell'esperimento 2, che mostrano gli RT medi (in ms) in funzione dei tipi di frase sotto un carico a 0 cifre. Fare clic qui per visualizzare una versione più grande di questa figura.

In base all'interferenza di carico a 0 cifre, i partecipanti hanno mostrato un vantaggio per gli ORC nella regione di elaborazione iniziale (T1) di RC, ma gli SRC avevano un vantaggio nel relativizzatore DE (T3) e nelle regioni del verbo di matrice (T5).

Figure 5
Figura 5: I risultati dell'esperimento 2, che mostrano gli RT medi (in ms) in funzione dei tipi di frase sotto un carico di 3 cifre. Fare clic qui per visualizzare una versione più grande di questa figura.

In base all'interferenza di carico a 3 cifre, non è stata osservata alcuna differenza SRC/ORC intorno alle regioni pre-DE (T1 e T2); tuttavia, i partecipanti hanno mostrato un vantaggio SRC al relativante DE (T3) e un vantaggio ORC nell'area del verbo di matrice (T5).

Figure 6
Figura 6: I risultati dell'esperimento 2, che mostrano gli RT medi (in ms) in funzione dei tipi di frase in un carico di 5 cifre. Fare clic qui per visualizzare una versione più grande di questa figura.

In base all'interferenza di carico a 5 cifre, i partecipanti hanno mostrato un vantaggio ORC complessivo intorno alle regioni pre-DE (T1 e T2) e alle regioni post-DE nell'area dell'oggetto della matrice (T4).

Tabella supplementare 1. Fare clic qui per scaricare questa tabella.

Tabella supplementare 2. Fare clic qui per scaricare questa tabella.

Tabella supplementare 3. Fare clic qui per scaricare questa tabella.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Questo studio dimostra che l'utilizzo di metodi DMI con compiti di interferenza sia intra che extrasentenziale può aiutare a chiarire il ruolo delle WM nell'elaborazione delle frasi parlate e a far luce sulla questione dell'elaborazione RC cinese. Come previsto, misurando fino a che punto l'interferenza di un compito secondario ha influenzato le prestazioni degli ascoltatori sull'elaborazione delle condanne primarie, possiamo dedurre i modelli di elaborazione RC cinese e arrivare a una soluzione fattibile al dibattito sull'SRC/ cinese vantaggio di elaborazione ORC.

L'effetto di interferenza dimostra che WM svolge un ruolo essenziale nell'elaborazione delle frasi parlate, indipendentemente dalla fonte dell'interferenza. Nel nostro caso, per gli Esperimenti 1 e 2, l'interferenza intramessaggimentale è un compito decisionale lessicale semanticamente non correlato alla frase, mentre l'interferenza extrasenteenziale è un compito aritmetico non linguistico che comporta livelli di difficoltà crescenti di richiamo del carico di cifre. Questo approccio si basa sul presupposto che il WM coinvolto nelle attività primarie e secondarie condivida una risorsa cognitiva comune1,2,21 o operi attraverso sistemi separati3,4 . La prova per la generalità del carico di memoria sotto il modello precedente deriva dalla semplice individuazione che i partecipanti hanno commesso più errori o avevano tempi di elaborazione/reazione più lunghi (TR) in un compito di comprensione della frase in condizioni di interferenza, mentre le prove la specificità del carico di memoria sull'elaborazione delle frasi sotto quest'ultimo modello deriva dalla constatazione che l'elaborazione di frasi sintatticamente più complesse si traduce in prestazioni sproporzionatamente peggiori rispetto all'elaborazione di frasi sintatticamente più semplici in condizioni di interferenza. In particolare, studiare in che misura l'esecuzione dell'elaborazione delle frasi primarie è influenzata dalla presenza di interferenze fornirebbe la prova se un dominio generale o specifico del sistema WM è coinvolto in entrambi i compiti.

Tuttavia, si noti che l'obiettivo dell'attuale studio, piuttosto che affrontare la questione della modularità, si concentra più sulla possibilità di applicare la nozione di limiti di capacità WM a questioni controverse come l'asimmetria di elaborazione RC cinese, per le quali miste e diverse risultati sono stati raggiunti rispetto al costante vantaggio di elaborazione SRC osservato in inglese. In questo studio, abbiamo ipotizzato che misurando la misura in cui l'interferenza dal sistema WM influisce sull'elaborazione delle frasi RC parlate primarie, possiamo rilevare il profilo di elaborazione sia per SRC che per ORC e determinare l'asimmetria di elaborazione RC. Se esiste una preferenza di elaborazione RC in cinese, dobbiamo osservare un vantaggio SRC o ORC dalle prestazioni dei partecipanti in attività DMI sia intra- che extrasentenziali.

Tuttavia, questo non è il caso in cinese. I nostri risultati hanno mostrato che il cinese non ha la stessa asimmetria di elaborazione RC come è stato osservato per l'inglese. I risultati dell'esperimento 1 si manifestano in modelli dinamici piuttosto che costanti delle preferenze RC dei partecipanti. Un vantaggio ORC è stato trovato intorno all'area dell'argomento della matrice, mentre un vantaggio SRC è stato trovato intorno all'area verbale della matrice. Una possibile deduzione è che la RC cinese, date le sue differenze tipologiche rispetto all'inglese, non possiede una chiara preferenza per SRC o ORC.

L'esperimento 1 rappresenta una tipica procedura dual-modale con interferenza intrasenteentiale durante l'elaborazione della frase. Anche se questo è un modo semplice per misurare i processi di comprensione della frase parlata in tempo reale, è necessario prendere precauzioni quando si costruisce lo stimolo di prova, quando si misurano i tre siti di sondaggio dopo il marcatore RC DE e quando si allineano i risultati del sondaggio con il lDT. Un passo critico nella progettazione del protocollo era che le frasi SRC e ORC di destinazione dovevano essere abbinate alle parole e che le frasi di riempimento dovevano essere collocate solo con parole non frase. Data questa situazione, i tempi di elaborazione (RT) delle frasi RC possono essere misurati e confrontati esclusivamente dalla loro interferenza con il giudizio reale. Un'altra nota fondamentale da considerare è la progettazione di stimoli controbilanciati. Ognuna delle parole visive LDT può apparire una sola volta nell'attività, e ciascuno degli stimoli RC può essere sondato in un solo sito. Inoltre, la combinazione dei LDT parola/non parola e dei tre siti di sonda accoppiati con i due tipi di frase RC formava condizioni pari a 2, 3, 2 e 12, ma solo 48 prove sono state costruite nello studio corrente. Anche se misurare un solo sito per ogni frase durante l'operazione di interferenza dual-modale ha il vantaggio di ridurre l'interferenza e rendere il compito il più simile possibile al normale ascolto, impone anche la limitazione che un singolo sito di osservazione richiederà allo sperimentatore di progettare un gran numero di stimoli se intende misurare tutte le regioni nel processo di comprensione della frase e trovare un contrappeso completo. Pertanto, l'utilizzo di soli 48 studi per misurare i tre siti di sondaggio nell'Esperimento 1 consente di ottenere semplicemente un contrappeso incompleto, che è stato il motivo per il successivo Esperimento 2 per superare la limitazione.

L'esperimento 2 mostra il vantaggio di adottare un'operazione di interferenza dual-modale: è versatile e può essere modificata e adattata per affrontare varie domande rilevanti per il carico di memoria e la natura di WM. Inoltre, l'interferenza dual-modale nell'ambito del paradigma AMW consente di misurare tutte le regioni durante il flusso di elaborazione delle frasi. I risultati dell'Esperimento 2 hanno replicato la scoperta nell'Esperimento 1 secondo cui l'elaborazione RC cinese è dinamica. In base alla situazione di nessuna interferenza digitale, è stato riscontrato un vantaggio ORC nella regione iniziale, mentre un vantaggio SRC è stato trovato intorno al marcatore RC DE e al verbo di matrice. Tuttavia, con l'aumento dell'interferenza digitale (i carichi a 3 e 5 cifre), i partecipanti hanno mostrato un vantaggio ORC complessivo intorno alle regioni pre-DE e alle regioni post-DE in materia di matrice, dimostrando che i fattori che coinvolgono WM possono alterare l'elaborazione RC cinese Dinamiche. Questi risultati forniscono solide prove negative per il modello di asimmetria di elaborazione RC nullo in cinese. Per quanto riguarda l'affermazione secondo cui non esiste una chiara preferenza di trattamento per SRC o ORC, è stato recentemente segnalato anche il sostegno supplementare da uno studio ePER22.

Tradizionalmente, un metodo di ricerca ampiamente utilizzato per l'elaborazione RC consiste nell'analizzare le attività in base al paradigma di lettura autogestito, che è considerato il modo più semplice per misurare i processi di comprensione del linguaggio in tempo reale ed è considerato costituito da "attività che sono il più simili possibile alla lettura normale"23. Tuttavia, pur fornendo una finestra sul processo di analisi in gran parte automatico, il classico compito di lettura autogestita parola per parola, che non consente ai soggetti di guardare indietro, non riflette i movimenti oculari avanti e indietro i lettori fanno per l'integrazione e comprensione durante il processo di lettura naturale. Che i soggetti siano limitati a tornare ai materiali precedenti di processo è in realtà molto più vicino al compito di comprensione dell'ascolto naturale.

Alla luce del fatto che l'ascolto è filogeneticamente strettamente correlato all'elaborazione del linguaggio e allo sviluppo del linguaggio e che sono stati condotti pochi studi per studiare l'elaborazione delle frasi uditive online, l'attuale studio contribuisce offrendo un l'applicazione fattibile di questo approccio DMI per l'elaborazione delle frasi vocali.

L'innovazione significativa di questo studio è che applica la ricerca della natura di WM e l'affermazione che le costruzioni sintattiche complesse pongono elevate richieste alle risorse WM associate all'elaborazione vocale per affrontare una questione di lunga data dell'elaborazione RC asimmetria in cinese. I risultati di questo studio dimostrano che gli SRC cinesi e gli ORC non mostrano differenze significative in condizioni di interferenza intrasenteentiale o extrasente. Questi risultati differiscono dai precedenti risultati misti per quanto riguarda un vantaggio SRC o ORC in cinese, portando così alla congettura che l'asimmetria di elaborazione RC costantemente trovato nelle lingue testa-iniziali come l'inglese non esiste in cinese. Ciò implica anche che la metrica di complessità tra SRC e ORC in cinese potrebbe differire da quella in inglese. A causa delle caratteristiche delle sue costruzioni sintattiche, gli RC cinesi devono essere elaborati in modo specifico per la lingua.

Il paradigma di interferenza a doppio modale combinato con il compito LDT e la tecnica AMW è un nuovo approccio che può raggiungere con successo l'obiettivo di misurare il corso di elaborazione in tempo reale, e tali misurazioni possono aiutare a far luce sulla questione dell'elaborazione complessità. Si noti che in Esperimenti 1 e 2 esiste un passaggio critico per quanto riguarda le istruzioni per i partecipanti. Poiché il compito di decisione lessicale nell'Esperimento 1 comporta relativamente meno carico di memoria, ma induce una risposta più automatica, i partecipanti devono essere istruiti a prestare molta attenzione quando ascoltano la frase. Al contrario, nell'Esperimento 2, poiché il richiamo della cifra induce un maggiore carico di memoria, i partecipanti devono essere istruiti a dare la priorità al tentativo di ricordare correttamente le cifre durante l'ascolto della frase il più rapidamente possibile, ma devono ancora essere ricordati evitare di ascoltare troppo rapidamente e non riuscire a catturare il significato della frase. Utilizzando questo approccio, i compromessi tra la partecipazione alla frase e l'attività di richiamo della cifra possono essere diminuiti. Inoltre, per evitare che i partecipanti si affaticano quando ascoltano le frasi, consigliamo di dare loro brevi tregua; di conseguenza, il tempo di prova dovrebbe superare i 30 minuti.

La scoperta significativa in questo studio sottolinea la necessità di studi futuri che esplorino le metriche di elaborazione della complessità della frase RC per considerare il coinvolgimento di WM. Il compito di interferenza a doppio modale, in particolare quello che utilizza la tecnica AMW, può servire a risolvere questo problema se utilizzato con interferenze intramessaggistiche o extrasentenziali. Inoltre, questa procedura dovrebbe essere di ampio interesse e altamente applicabile agli psicolingi che tentano di approfondire la nostra comprensione della natura della WM e della sua associazione con l'elaborazione delle frasi.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Gli autori non hanno nulla da rivelare.

Acknowledgments

Questo studio è stato sostenuto da sovvenzioni dal Ministero della Scienza e della Tecnologia, Taiwan, R.O.C. [NSC-101-2410-H-439-001] al primo autore, Tuyuan Cheng. Gli autori ringraziano i membri del laboratorio, Yang Ya-Hui e Chen Pei-Han, a NTIN, per la loro assistenza nella preparazione e nello svolgimento dell'esperimento.

Materials

Name Company Catalog Number Comments
E-Prime Psychology Software Tools version Professional 2.0
Headphone Logitech
Praat Praat 5.3.43 The online software used to edit the sound files for listening; http://www.fon.hum.uva.nl/praat/
Serial Response Box Psychology Software Tools
Standard PC ASUS K42Jv laptop

DOWNLOAD MATERIALS LIST

References

  1. Just, M. A., Carpenter, P. A. A capacity theory of comprehension: Individual differences in working memory. Psychological Review. 99, 122-149 (1992).
  2. King, J., Just, M. A. Individual differences in syntactic processing: The role of working memory. Journal of Memory and Language. 30, 580-602 (1991).
  3. Caplan, D., Waters, G. S. Verbal working memory and sentence comprehension. Behavioral & Brain Sciences. 22, 77-94 (1999).
  4. Waters, G., Caplan, D., Yampolsky, S. On-line syntactic processing under concurrent memory load. Psychonomic Bulletin & Review. 10 (1), 88-95 (2003).
  5. Cowan, N. Working Memory Capacity. , Psychology Press. New York, NY. (2005).
  6. Miller, G. A. The magical number seven, plus or minus two: Some limits on our capacity for processing information. Psychological Review. 63, 81-97 (1956).
  7. Chen, B., Ning, A., Bi, H., Dunlap, S. Chinese subject-relative clauses are more difficult to process than the object-relative clauses. Acta Psychologica. 129, 61-65 (2008).
  8. Gibson, E., Wu, H. H. Processing Chinese relative clauses in context. Language and Cognitive Processes. 28, 125-155 (2013).
  9. Hsiao, F., Gibson, E. Processing relative clauses in Chinese. Cognition. 90, 3-27 (2003).
  10. Lewandowsky, S., Oberauer, K., Brown, G. D. A. No temporal decay in verbal short-term memory. Trends in Cognitive Science. 13, 120-126 (2009).
  11. Wu, J. T., Chou, T. L., Liu, I. M. The locus of the character/word frequency effect. Advances in the study of Chinese language processing. Chang, H. W., Huang, J. T., Hue, C. W., Tzeng, O. J. L. , Taipei. Taipei: National Taiwan University (in Chinese) 31-58 (1994).
  12. Fodor, J. D., Ni, W., Crain, S., Shankweiler, D. Tasks and timing in the perception of linguistic anomaly. Journal of Psycholinguistic Research. 25 (1), 25-57 (1996).
  13. Swinney, D., Zurif, E. Syntactic processing in aphasia. Brain and Language. 50 (2), 225-239 (1995).
  14. Balogh, J., Zurif, E., Prather, P., Swinney, D., Finkel, L. Gap-filling and end-of-sentence effects in real-time language processing: implications for modeling sentence comprehension in aphasia. Brain and Language. 61 (2), 169-182 (1998).
  15. Granier, J. P., Robin, D. A., Shapiro, L. P., Peach, R. K., Zimba, L. D. Measuring processing load during sentence comprehension: visuomotor tracking. Aphasiology. 14 (5-6), 501-513 (2000).
  16. Waters, G. S., Caplan, D. Age, working memory, and on-line syntactic processing in sentence comprehension. Psychology and Aging. 16, 128-144 (2001).
  17. Waters, G. S., Caplan, D. Working memory and online syntactic processing in Alzheimer’s disease: Studies with auditory moving window presentation. Journal of Gerontology: Psychological Sciences. 57B, 298-311 (2002).
  18. Cheng, T., Cheung, H., Wu, J. Spoken relative clause processing in Chinese: measure from an alternative task. Language and Linguistics. 12 (3), 669-705 (2011).
  19. Cheng, T., Wu, J., Huang, S. Use of Memory-Load Interference in Processing Spoken Chinese Relative Clauses. Journal of Psycholinguistic Research. 47 (5), https://doi.org/10.1007/s10936-018-9576-5 1035-1055 (2018).
  20. CKIP. Zhongwen shumianyu pinlü cidian [Dictionary of Chinese written word frequency], CKIP Technical Report, No. 94-01. , Institute of Information Science, Academia Sinica. Taipei. (1994).
  21. MacWhinney, B., James, J., Schunn, C., Li, P., Schneider, W. Step—A system for teaching experimental psychology using E-Prime. Behavior Research Methods, Instruments, and Computers. 33 (2), 287-296 (2001).
  22. Ferreira, F., Henderson, J., Anes, M., Weeks, P., McFarlane, D. Effects of lexical frequency and syntactic complexity in spoken language comprehension: Evidence from the auditory moving-window technique. Journal of Experimental Psychology: Learning, Memory, and Cognition. 22, 324-335 (1996).
  23. Daneman, M., Carpenter, P. A. Individual differences in working memory and reading. Journal of Verbal Learning and Verbal Behavior. 19, 450-466 (1980).
  24. Bulut, T., Cheng, S. K., Xu, K. Y., Hung, D. L., Wu, D. H. Is there a processing preference for object relative clauses in Chinese? Evidence from ERPs. Frontiers in Psychology. 9, 1-18 (2018).
  25. Mitchell, D. C., Green, D. W. The effects of context and content on immediate processing in reading. Quarterly Journal of Experimental Psychology. 30 (4), 609-636 (1978).

Tags

Comportamento problema 151 comportamento problema 110 elaborazione della frase comprensione della frase clausole relative attività di interferenza
Esame dell'elaborazione sintattica online delle frasi complesse parlate in cinese utilizzando attività di interferenza dual-modale
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Cheng, T., Wu, J. T. Examining… More

Cheng, T., Wu, J. T. Examining Online Syntactic Processing of Spoken Complex Sentences in Chinese Using Dual-Modal Interference Tasks. J. Vis. Exp. (151), e59660, doi:10.3791/59660 (2019).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter