Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
Click here for the English version

Behavior

Interaktion zwischen phonologischen und semantischen Prozessen in der visuellen Worterkennung mittels Elektrophysiologie

Published: June 29, 2021 doi: 10.3791/62673

Summary

Wir stellen ein Protokoll vor, um die relative Aktivierungssequenz von Phonologie und Semantik in der visuellen Worterkennung zu untersuchen. Die Ergebnisse zeigen, dass im Einklang mit interaktiven Konten semantische und phonologische Repräsentationen interaktiv verarbeitet werden können und linguistische Repräsentationen auf höherer Ebene die frühe Verarbeitung beeinflussen können.

Abstract

Kontroversen gab es schon immer in der Forschung im Zusammenhang mit Lesefähigkeiten; ob gedruckte Wörter auf der Grundlage orthographischer Informationen in einer Feedforward-Weise wahrgenommen werden, wonach andere Repräsentationen wie Phonologie und Semantik aktiviert werden, oder ob es sich um vollständig interaktive und semantische Informationen auf hoher Ebene handelt, die die frühe Verarbeitung beeinflussen. Ein Interferenzparadigma wurde in das vorgestellte Protokoll der phonologischen und semantischen Beurteilungsaufgaben implementiert, die die gleichen Precede-Target-Paare verwendeten, um die relative Ordnung der phonologischen und semantischen Aktivierung zu untersuchen. Den hoch- und niederfrequenten Zielwörtern gingen drei Bedingungen voraus: semantisch verwandt, phonologisch verwandt (Homophone) oder nicht verwandt. Die Ergebnisse zeigten, dass die induzierte P200-Komponente von niederfrequenten Wortpaaren sowohl bei den semantischen als auch bei den phonologischen Aufgaben signifikant größer war als bei hochfrequenten Wörtern. Darüber hinaus verursachten sowohl die Homophone in der semantischen Aufgabe als auch die semantisch verwandten Paare in der phonologischen Aufgabe eine Reduktion von N400 im Vergleich zur Kontrollbedingung, Wortfrequenz-unabhängig. Es ist erwähnenswert, dass für die niederfrequenten Paare in der phonologischen Beurteilungsaufgabe das P200, das von den semantisch verwandten Wortpaaren freigesetzt wurde, signifikant größer war als das in der Kontrollbedingung. Insgesamt wurden semantische Verarbeitung in phonologischen Aufgaben und phonologische Verarbeitung in semantischen Aufgaben sowohl in hoch- als auch in niederfrequenten Wörtern gefunden, was darauf hindeutet, dass die Interaktion zwischen Semantik und Phonologie aufgabenunabhängig funktionieren kann. Der spezifische Zeitpunkt, zu dem diese Interaktion auftrat, kann jedoch von der Aufgabe und der Häufigkeit beeinflusst worden sein.

Introduction

Das entscheidende Problem in jedem Worterkennungsmodell ist das Verständnis der Rolle der Phonologie im Prozess des semantischen Zugangs1. Für alphabetische Sprachen betrachten viele Studien die Phonologie konsequent als eine wichtige Rolle beim semantischen Zugang, einschließlich Englisch2,3,4, Hebräisch5, Französisch6und Spanisch7. Mit anderen Worten, die Erkennung geschriebener Wörter beinhaltet nicht nur orthographische, sondern auch phonologische und semantische Verarbeitung. Diese Beobachtung im interaktiven konnektionistischen Modell wird durch Erweiterungen erklärt, die im gesamten Netzwerk aktiviert werden, wobei die Orthographie durch gewichtete Verbindungen mit phonologischen und semantischen Repräsentationen assoziiert ist8. Diese Verbreitung der Aktivierung liefert den Kernmechanismus für das visuelle Worterkennungsmodell, das davon ausgeht, dass phonologische und semantische Repräsentationen automatisch als Reaktion auf orthographische Eingaben aktiviert werden9.

Aktuelle empirische Beweise, die die Hypothese der interaktiven Automatisierung stützen, bleiben jedoch umstritten. Einige Studien behaupten, dass die Aktivierung phonologischer und semantischer Repräsentationen durch Aufgabenanforderungen oder Aufmerksamkeit angepasst oder verhindert werden kann, was einen gewissen Top-Down-Einfluss auf die High-Level-Prozesse impliziert, die an der Wortwahrnehmung beteiligt sind10,11. Die oben genannte Beschreibung wurde jedoch durch viele Ergebnisse in Frage gestellt, die phonologische und semantische Effekte in der visuellen Worterkennung berichten, obwohl diese Darstellungen für die Aufgabe völlig irrelevant sind oder nicht direkt zugänglich sind12, wodurch die Ansicht unterstützt wird, dass auf Semantik und Phonologie während des Leseprozesses automatisch und gewaltsam zugegriffen werden kann13 . Daher besteht Unsicherheit darüber, ob die phonologische und semantische Aktivierung bei der visuellen Worterkennung von der konkreten Aufgabe abhängt oder ob sie zwangsweise und automatisch aufgabenunabhängig erfolgt.

Die Antwort auf die oben genannte Frage ist für chinesische Leser schwierig. Im Vergleich zum Englischen ist Chinesisch eine logografische Schrift, deren Zeichen Morpheme anstelle von Phonemendarstellen 14. Derzeit bleibt die Rolle der Phonologie für den semantischen Zugang zu chinesischen Wörtern umstritten. Einige Studien haben behauptet, dass die Phonologie eine wichtige Rolle beim semantischen Zugang zu chinesischen Wörternspielt 15,16,17. Andere haben jedoch die gegenteilige Ansichtvertreten 18,19. Nach der Auswertung der oben genannten Forschung für die chinesische phonologische Verarbeitung stellten wir fest, dass sich das experimentelle Paradigma und die spezifischen Forschungsmethoden unterscheiden. Im Großen und Ganzen wurde es hauptsächlich in zwei Paradigmen unterteilt: Wortpriming15,18,19 und Verletzungsparadigma im Satz17,20,21. Das Zielwort ist in der Regel am Ende des Satzes in das Verletzungsparadigma22eingebettet. In Bezug auf den Sprachmechanismus ist eine kurze Zwei-Wort-Phrase eine überschaubarere Einheit als ein vollständiger Satz, der schwer zu verarbeiten ist23. Darüber hinaus können Variablen, die in einem Satz schwer zu kontrollieren sind, wie Syntax, Kontext oder andere Faktoren, zu unterschiedlichen Schlussfolgerungen führen24. Das Wort-Priming-Paradigma ist eine Methode, die häufig verwendet wird, um Worterkennungsmodelle zu erforschen, sei es in alphabetischen Sprachen oder im Chinesischen. Die Aufgabe dieses Paradigmas besteht darin, zu beurteilen, ob das Zielwort, dem die Primzahlen vorangestellt sind, ein echtes Wort oder ein Pseudowort ist; das heißt, dieses Paradigma enthält normalerweise nur eine lexikalische Aufgabe. Eine einzelne lexikalische Entscheidungsaufgabe ist jedoch möglicherweise nicht die beste Wahl, um das Problem zu lösen, ob die Aktivierung von Phonologie und Semantik von der Aufgabe abhängt. Daher können zwei verschiedene Aufgaben besser geeignet sein, um diese Frage zu untersuchen.

Daher zielte diese Forschung darauf ab, die Rolle der Phonologie bei der chinesischen Worterkennung zu erforschen und gleichzeitig zu versuchen, festzustellen, ob die Aktivierung von Phonologie und Semantik aufgabenunabhängig ist. Unsere Forschung umfasst zwei Aufgaben, die das Interferenzparadigma verwenden: semantisches Urteilen und phonologisches Urteilsvermögen. Nach unserem besten Wissen ist dies die erste ereignisbezogene Potenzialstudie (ERP) zur chinesischen zweistelligen Zusammengesetzterkennung unter Verwendung dieses Interferenzparadigmas, und diese Methode erscheint selten in Studien zu alphabetischen Sprachen. Insbesondere müssen die Teilnehmer bei der semantischen Beurteilungsaufgabe beurteilen, ob das Zielwort und sein Präzedenzfall semantisch verwandt sind, während sie in der phonologischen Aufgabe beurteilen müssen, ob die gepaarten Wörter die gleiche Aussprache haben.

Ersteres ist eine semantische Matching-Aufgabe, die keine a priori phonologische Verarbeitung erfordert, und letztere ist eine phonologische Beurteilungsaufgabe, die keine a priori semantische Verarbeitung erfordert. Daher haben wir Homophonpaare und nicht verwandte Kontrollgruppen in der semantischen Beurteilungsaufgabe verglichen, um festzustellen, ob und wie die Phonologie die semantische Verarbeitung beeinflusst. In ähnlicher Weise verglichen wir semantisch verwandte Wortpaare mit nicht verwandten Kontrollbedingungen in der phonologischen Beurteilungsaufgabe, um zu zeigen, ob und wie die Semantik die phonologische Verarbeitung beeinflusst. Darüber hinaus wurde das oben genannte Problem in hoch- und niederfrequenten Wörtern verifiziert. Somit kann diese komplementäre semantische und phonologische Beurteilungsaufgabe nicht nur die Bedeutung der phonologischen Verarbeitung bei der chinesischen Worterkennung aufdecken, sondern auch aufdecken, ob und wie Phonologie und Semantik interagieren.

Wenn die phonologischen und semantischen Prozesse früh, automatisch und interaktiv sind, sollte der Effekt der phonologischen und semantischen Aktivierung in der Antwortzeit der beiden Aufgaben beobachtet werden. Für ERP lösen phonologische und semantische Prozesse zwei verschiedene elektrophysiologische Markeraus 2,7. Zudem sollten ihre Zeitverläufe und ihre räumlichen Verteilungen unterschiedlich sein. Eine frühe positive Komponente (P200) sollte die phonologische Verarbeitung widerspiegeln, und der typische semantische Verarbeitungsmarker N400 sollte ebenfalls identifiziert werden20,21. Wir nahmen an, dass sowohl die phonologisch verwandten Paare in der semantischen Aufgabe als auch die semantisch verwandten Paare in der phonologischen Aufgabe eine signifikante Abnahme von N400 verursachen würden, was darauf hingewiesen hätte, dass die phonologische Verarbeitung zu einem gewissen Grad an Aktivierung auf lexikalisch-semantischer Ebene führen kann. Darüber hinaus überwachten wir, ob der P200, der die phonologische Verarbeitung charakterisiert, in der semantischen Beurteilungsaufgabe oder der phonologischen Beurteilungsaufgabe auftauchte. In der phonologischen Beurteilungsaufgabe lösen semantische Bedingungen das P200 aus, was als Beweis für den frühen Einfluss der Semantik auf die phonologische Verarbeitung angesehen werden kann.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

Das für diese Studie verwendete Protokoll wurde vom Institutional Review Board der Tsinghua University genehmigt.

1. Stimuli Konstruktion und Präsentation

  1. Stimuli-Konstruktion
    1. Stimuli-Vorbereitung: Bereiten Sie Zielwörter vor, die etwa 140 chinesische zweistellige Verbindungen enthalten, von denen nieder- und hochfrequente Wörter die Hälfte ausmachen. Jedem Ziel stehen drei Analoga voran: ein phonologisch identisches Wort (homonymes Wort), ein Wort mit verwandter Bedeutung und ein irrelevantes Kontrollwort.
      1. Stellen Sie sicher, dass hochfrequenten Zielen immer hochfrequente Vorläufer vorausgehen und niederfrequenten Zielen immer niederfrequente Präzedenzfälle vorausgehen, sei es unter verwandten Bedingungen oder in unabhängigen Kontrollgruppen. Stellen Sie außerdem sicher, dass die Precede-Target-Paare in bezug auf die Anzahl der Striche und die Häufigkeit ähnlich sind.
        HINWEIS: Alle Wörter für diese Studie wurden aus dem Modern Chinese Frequency Dictionary (Xiandai Hanyu Pinlu Cidian) ausgewählt. Die Häufigkeit von niederfrequenten Wörtern betrug weniger als acht Mal pro Million, und die Häufigkeit von hochfrequenten Wörtern überschritt 800 Mal pro Million.
    2. Stimuli-Bewertung: Rekrutieren Sie eine separate Gruppe von etwa 30 Studenten, um den Grad der semantischen Relevanz zwischen Wortpaaren auf einer siebenstufigen Skala zu bewerten, wobei 1 die niedrigste Korrelation und 7 die höchste Korrelation widerspiegelt.
    3. Endgültige Stimulusbestimmung: Löschen Sie unangemessene Wortpaare, z. B. Wortpaare mit niedrigeren Werten in semantisch verwandten Bedingungen und Wortpaare mit höheren Werten in Homophonen und irrelevanten Zustandswerten.
      1. Berechnen Sie die jeweiligen Durchschnittswerte von hoch- und niederfrequenten semantischen Wortpaaren und stellen Sie sicher, dass kein signifikanter Unterschied zwischen den beiden vorhanden ist.
      2. Stellen Sie außerdem sicher, dass sich die Werte von Homophonpaaren und nicht verwandten Paaren sowohl bei hoher als auch bei niedriger Frequenz nicht signifikant unterscheiden. Bestimmen Sie abschließend das endgültige experimentelle Stimulusmaterial (siehe Tabelle Materialien).
        ANMERKUNG: Für die semantischen Werte der semantisch verwandten Paare in diesem Experiment betrugen die endgültigen Durchschnittswerte 5,62 bzw. 5,73 für hochfrequente bzw. niederfrequente Paare, und es gab keinen signifikanten Unterschied zwischen den beiden (p > 0,1). Darüber hinaus war die semantische Verwandtschaft zwischen den homophonen und nicht verwandten Paaren nicht signifikant unterschiedlich (p > .1).
  2. Stimuli-Präsentation
    1. Erstellen Sie ein Programm, um die Aufgabe den Probanden zu zeigen und füllen Sie die oben genannten Materialien aus (das Programm kann in E-Prime oder anderen Programmiersprachen geschrieben werden).
    2. Stellen Sie sicher, dass jede Kernstruktur des Programms mit einem Bildschirm beginnt, der ein " + " -Zeichen anzeigt, das 300 ms dauert, direkt danach muss das vorhergehende Wort für 140 ms erscheinen, ohne Intervall zwischen den beiden.
    3. Legen Sie danach einen leeren Bildschirm fest, der 360 ms lang ist, und legen Sie dann das Zielwort fest, das für 500 ms angezeigt wird. Setzen Sie abschließend ein Fragezeichen (?), das so lange angezeigt wird, bis sich der Teilnehmer für das gerade angezeigte Wortpaar entschieden und den Button so schnell und genau wie möglich gedrückt hat.
    4. Sagen Sie den Teilnehmern im Voraus, dass sie beurteilen müssen, ob das Wortpaar in der semantischen Beurteilungsaufgabe semantisch verwandt ist und ob die Phonologie in der phonologischen Beurteilungsaufgabe gleich ist.
    5. Einrichtung der Übungssitzung: Richten Sie zwei Übungsgruppen ein, die semantische Beurteilungs- bzw. phonologische Beurteilungsaufgaben mit nicht weniger als 10-Wort-Paaren für jede Aufgabe umfassen. Informieren Sie die Teilnehmer, dass sie die Übungen wiederholen können, um sicherzustellen, dass die Genauigkeit in der Übungssitzung mehr als 70% beträgt.
    6. Formaler Experimentaufbau: Teilen Sie das gesamte Experiment in 6 Blöcke auf, wobei die semantische Beurteilungsaufgabe und die phonologische Beurteilungsaufgabe jeweils die Hälfte ausmachen.
      1. Stellen Sie sicher, dass sich in jedem Block keine Zielwörter wiederholen und dass die Anzahl der Priming-Typen in jedem Block gleich ist. Richten Sie außerdem einige Füllerversuche ein, um die Antwortabweichung zu reduzieren, die durch die ungleiche Anzahl von Tests verursacht wird, die positive oder negative Reaktionen erfordern.
      2. Randomisieren Sie die Reihenfolge der Elemente in jedem Block und gleichen Sie die Blockreihenfolge zwischen den Subjekten aus.
        HINWEIS: Das gesamte Experiment kann auch in acht oder zehn oder mehr Blöcke unterteilt werden, je nach Anzahl der vorzubereitenden experimentellen Materialien, wodurch die Wiederholung von Zielwörtern in jedem Block minimiert wird.

2. Versuchsvorbereitung und elektrophysiologische Aufzeichnung

  1. Rekrutieren Sie rechtshändige chinesische Muttersprachler mit einer normalen Sehkraft, die möglicherweise zuvor korrigiert wurde.
    1. Schließen Sie Teilnehmer mit neurologischen oder psychiatrischen Erkrankungen aus.
    2. Stellen Sie sicher, dass es eine ausgewogene Anzahl von weiblichen und männlichen Teilnehmern in der gewünschten Altersgruppe (18-28 Jahre) gibt.
    3. Stellen Sie sicher, dass die Teilnehmer in den letzten zwei Monaten keine Dauerwellen oder Haare gefärbt haben.
    4. Informieren Sie die Teilnehmer, dass sie vor dem Experiment ausreichend Schlaf- und Ruhezeit benötigen25.
    5. Wenn Sie an dem Experiment teilnehmen, stellen Sie bitte sicher, dass sich die Teilnehmer zum Zeitpunkt der Durchführung des Experiments in einem gesunden Zustand befinden.
  2. Wenn ein Teilnehmer im Labor ankommt, stellen Sie die experimentelle Ausrüstung, Aufgaben und Zeitkosten vor. Erklären Sie die Anforderungen (z. B. nicht schläfrig sein, sich bewegen und blinzeln), um ihnen zu helfen, den gesamten Prozess zu verstehen und unnötige Sorgen zu vermeiden.
  3. Wenn der Teilnehmer keine weiteren Fragen zum Experiment hat, bitten Sie ihn, das Edinburgh Handedness Query Form auszufüllen, das verwendet wird, um zu bestätigen, dass alle Teilnehmer die gleichen Rechtshändergewohnheiten haben.
  4. Stellen Sie den Teilnehmern die Einverständniserklärung zur Verfügung und bitten Sie sie, sie sorgfältig zu lesen und zu unterschreiben. Wenn Teilnehmer Fragen zum Inhalt der Einwilligungserklärung haben, geben Sie ihnen die notwendigen Erklärungen.
  5. Weisen Sie den Teilnehmer an, seine Kopfhaut richtig zu reinigen und seine Haare im Labor zu trocknen. Während Sie auf die Teilnehmer warten, bereiten Sie bitte alle experimentellen Materialien vor.
    HINWEIS: Das Elektroenzephalogramm (EEG) Signal wird mit einem Verstärkersystem mit einem Bandpass von 0,01 bis 100 Hz verstärkt und kontinuierlich bei 500 Hz abgetastet.
  6. Laden Sie die Teilnehmer ein, bequem auf einem Stuhl in der Kammer zu sitzen, in der das Experiment durchgeführt wird. Wies sie an, den Stuhl nicht zu bewegen.
  7. Verwenden Sie Wattestäbchen und Gesichtspeelings, um die Haut unter dem linken Auge des Teilnehmers (für die vertikale elektro-okulographische Elektrode), in der Nähe des äußeren Canthus des rechten Auges (für die horizontale Elektro-Okulographie) und um den rechten und linken Mastoidknochen (für Tp9 und Tp10, die als neue Offline-Referenzen verwendet werden) zu reinigen.
    HINWEIS: Die Verteilung der Elektroden kann je nach verwendeten Kappen variieren.
  8. Legen Sie die elastische Kappe auf den Kopf des Teilnehmers und stellen Sie sicher, dass sich die Cz-Elektrode in der Mitte der Oberseite des Kopfes befindet. Befestigen Sie den Elektrodenkappenriemen vorsichtig unter dem Kinn, um sicherzustellen, dass er nicht zu fest oder zu locker ist.
  9. Stellen Sie sicher, dass die Kappe und der Verstärker an das Aufnahmesystem angeschlossen sind. Schalten Sie als Nächstes die Aufzeichnungssoftware auf die Impedanzüberwachungsschnittstelle um.
  10. Stellen Sie sicher, dass die Impedanz aller Elektroden 5 kΩ oder 10 kΩ nicht überschreitet, beginnend mit den Referenz- (Ref) und Masseelektroden (Gnd).
  11. Führen Sie die mit leitfähigem Gel gefüllte Spritze durch das kleine Loch einer Elektrode zur Kopfhaut und drücken Sie dann den Kolben, um eine kleine Menge leitfähiges Gel in die Kopfhaut zu injizieren, während Sie darauf achten, keinen Überlauf zu verursachen. Überwachen Sie gleichzeitig das Anzeigesystem, das die Impedanz in Echtzeit anzeigt, bis die Impedanz auf den Schwellenwert fällt.
  12. Nachdem die Ref- und Gnd-Elektroden vorbereitet wurden, reduzieren Sie die Impedanz der anderen Elektroden auf die gleiche Weise. Behandeln Sie die Impedanzreduktion der Augenelektrizität sorgfältig.
    1. Kleben Sie die kleinen Löcher auf einer Seite der beiden elektro-okulographischen Elektroden ab, um zu verhindern, dass das injizierte leitfähige Gel austritt. Befestigen Sie sie mit Klebeband an der Unterseite des linken Auges und am äußeren Canthus des rechten Auges.
  13. Nachdem alle Elektroden vorbereitet sind, weisen Sie die Teilnehmer an, für das Experiment bereit zu sein. Weisen Sie die Teilnehmer an, sich zu entspannen und übermäßiges Augenblinzeln und Körperbewegungen während des Experiments zu vermeiden.
  14. Präsentieren Sie den Stimulus über das Stimulus-Demonstrationsprogramm und lassen Sie die Teilnehmer im Praxisteil üben.
    HINWEIS: Nach der Übungssitzung können die Teilnehmer Fragen stellen, wenn sie Zweifel oder Fragen zum weiteren Vorgehen haben.
  15. Starten Sie das formale Experiment und zeichnen Sie die EEG-Informationen auf. Überwachen Sie das Aufzeichnungssystem während der Aufzeichnung. Wenn eine Elektrode locker ist oder der Widerstand den Schwellenwert überschreitet, füllen Sie die Elektrode nach, wenn der Teilnehmer ruht.
    HINWEIS: Die Teilnehmer können sich nach jedem Block 4-10 Minuten ausruhen.
  16. Speichern Sie nach Abschluss des Experiments das EEG-Signal und schalten Sie das Gerät wie das Aufzeichnungssystem und den Verstärker aus. Nehmen Sie dann die Kappe des Teilnehmers ab und weisen Sie den Teilnehmer an, das leitfähige Gel von Haar und Haut abzuwaschen. Belohnen Sie schließlich die Teilnehmer und danken Sie ihnen für ihre Zusammenarbeit.

3. EEG-Vorverarbeitung

  1. Nutzen Sie die halbautomatische Augenkorrektur mit unabhängiger Komponentenanalyse.
  2. Berechnen Sie die ERPs von 100 ms bis 600 ms nach dem Einsetzen des Zielworts (100 ms Pre-Target Baseline).
  3. Stellen Sie den EEG-Bandpass-gefiltert offline von 0,05 auf 30 Hz ein (Zero-Phase-Shift-Modus, 24 dB/Okt).
  4. Verwerfen Sie Epochen, die ±80 μV überschreiten, durch Artefaktabstoßung und eliminieren Sie die Versuche fehlerhafter Reaktionen.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

Dieses Protokoll wurde in einer kürzlich durchgeführten Studie verwendet, um die Rolle der Phonologie bei der chinesischen Zwei-Zeichen-Verbindungserkennung zu untersuchen und auf das Worterkennungsmodell26 zu schließen. Alle in dieser Studie verwendeten Reize wurden vollständig offenbart26. Drei Zeitfenster wurden auf der Grundlage der globalen Feldleistung (GFP) ausgewählt: bei 100-150 ms, 160-280 ms und 300-500 ms für N1-, P200- und N400-Komponenten, bzw.26. Die durchschnittlichen Amplituden der beiden oben genannten Zeitfenster wurden durch wiederholte Messungen analysiert, wobei Varianz (ANOVA) und Frequenz (niedrig und hoch), Beziehungstyp (phonologisch oder semantisch verwandt oder nicht verwandt) und laterale Bereiche (linke und rechte Hemisphäre × vordere, mittlere und hintere Regionen = insgesamt sechs Bereiche) oder Mittellinienelektroden (Fz, Cz, Pz) analysiert wurden, die die drei beteiligten Faktoren innerhalb der Teilnehmer waren. Detailliertere Ergebnisse und Grafiken finden sich in Wang et al. (2021)26.

ERP-Ergebnisse für die semantische Beurteilungsaufgabe
Die 100-150 ms Periode (N1)
Für die Mittellinienelektroden ergab die ANOVA einen Haupteffekt von Frequenz [F(1, 23) = 9,451, P = 0,005, ƞ2p = 0,291], was darauf hindeutet, dass Hochfrequenzpaare eine signifikant negativere Wellenform hervorriefen als niederfrequente Bedingungen. ). Ein ähnlich signifikanter Haupteffekt von Frequency wurde auch an den lateralen Stellen beobachtet. Darüber hinaus wurde für hochfrequente Paare auch ein signifikanter Haupteffekt des Beziehungstyps beobachtet [F(1, 23) = 8,826, P = 0,007, ƞ2p = 0,277], was zeigt, dass nicht verwandte Paare eine signifikant negativere Wellenform hervorriefen als homophone Bedingung. Ein ähnlicher signifikanter Haupteffekt des Beziehungstyps für hochfrequente Paare wurde auch auf der linken Hemisphäre beobachtet.

Der Zeitraum von 160-280 ms (P200)
Für die Mittellinienelektroden ergab die ANOVA einen Haupteffekt von Frequenz [F(1, 23) = 5,546, P = 0,027, ƞ2p = 0,194], was darauf hindeutet, dass niederfrequente Paare eine signifikant positivere Wellenform hervorriefen als hochfrequente Bedingungen. Es wurden keine anderen signifikanten Effekte oder Wechselwirkungen in den Mittellinienelektroden beobachtet. Darüber hinaus wurde der Haupteffekt von Frequency auch an lateralen Stellen gefunden.

Die 300-500 ms Periode (N400)
Im Zeitfenster von 300-500 ms ergab die ANOVA einen signifikanten Haupteffekt des Beziehungstyps [F(1, 23) = 27.783, P < .001, ƞ2p = .547] in den Mittellinienelektroden, was zeigt, dass ein von Homophonen grundiertes Target signifikant weniger negative Amplitude auslöste als die nicht verwandte Bedingung (siehe Abbildung 1). Ein ähnlich signifikanter Haupteffekt des Relation Type wurde an lateralen Stellen beobachtet.

Figure 1
Abbildung 1: Große mittlere ereignisbezogene Potentiale als Reaktion auf Zielwörter aus repräsentativen Elektroden (Fz, Cz, Pz) für homophone und Kontrollpaare in der semantischen Aufgabe. Diese Abbildung aus Wang et al. (2021)26zeigt, dass Homophonpaare bei der semantischen Beurteilungsaufgabe eine kleinere N400-Komponente freisetzen als irrelevante Bedingungen, unabhängig von hohen und niedrigen Frequenzen. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzuzeigen.

ERP-Ergebnisse für die Homophone Judgement Task
Die 100-150 ms Periode (N1)
Es wurde keine signifikante Wirkung oder Wechselwirkung in den Mittellinienelektroden oder lateralen Stellen gefunden.

Der Zeitraum von 160-280 ms (P200)
An den vorderen Frontalelektroden wurde kein signifikanter Haupteffekt für Beziehungstyp oder Frequenz (ps > .1) beobachtet. Es wurde jedoch ein signifikanter interaktiver Effekt zwischen Frequenz und Beziehungstyp gefunden [F(1, 23) = 7,951, P = 0,010, ƞ2p = 0,257]. Weitere Analysen ergaben, dass der Einfluss des Beziehungstyps nur unter niederfrequenten Bedingungen an den vorderen Frontalelektroden signifikant war (FPz: P =.055; FP1: P =.027; FP2: P =.004; AF3: P =.060; AF4: P =.021; AF8: P =.009), was darauf hinweist, dass das ERP-Signal im P200-Zeitfenster unter semantisch verwandten Bedingungen signifikant positiver war als unter nicht verwandten Bedingungen (siehe Abbildung 2).

Darüber hinaus zeigten die Analysen, dass der Effekt der Frequenz in zwei Regionen signifikant war (links zentral: F(1, 23) = 4,506, P = 0,045, ƞ2p = 0,164 und links posterior: F(1, 23) = 10,470, P = 0,004, ƞ2p = 0,313).

Figure 2
Abbildung 2: Grand mean event-related potentials in response to target words from six anterior frontal electrodes (Fpz, Fp1, Fp2, AF3, AF4, AF8) for the semantically related and control pairs of low-frequency in the homophone task. Diese Abbildung aus Wang et al. (2021)26zeigt, dass bei der phonologischen Beurteilungsaufgabe niederfrequente semantische Wörter eine positivere P200-Komponente freisetzen als nicht verwandte Wörter. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzuzeigen.

Die 300-500 ms Periode (N400)
Im N400-Zeitfenster wurde ein signifikanter Haupteffekt des Beziehungstyps [F(1, 23) = 9,082, P = 0,006, ƞ2p = 0,283] in den Mittellinienelektroden gefunden, was darauf hindeutet, dass das durch semantisch verwandte Wörter grundierte Ziel eine signifikant geringere negative Amplitude freisetzte als nicht verwandte Primzahlen (siehe Abbildung 3). Darüber hinaus wurde ein signifikanter Haupteffekt des Beziehungstyps an den lateralen Standorten beobachtet.

Figure 3
Abbildung 3: Große mittlere ereignisbezogene Potentiale als Reaktion auf Zielwörter aus repräsentativen Elektroden (Fz, Cz, Pz) für die semantisch verwandten und Kontrollpaare in der Homophonaufgabe. Diese Abbildung aus Wang et al. (2021)26zeigt, dass bei der phonologischen Beurteilungsaufgabe semantisch verwandte Paare unabhängig von hohen und niedrigen Frequenzen kleinere N400-Komponenten als irrelevante Bedingungen freisetzen. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzuzeigen.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Experimentelle Ergebnisse und Signifikanz:
Der Zweck dieses Protokolls war es, Folgendes abzuleiten: 1) ob das Worterkennungsmodell ein Feedforward-Modell oder ein interaktives Modell ist und 2) die Interaktion zwischen den phonologischen und semantischen Mustern in der chinesischen Zwei-Zeichen-Verbindungserkennung von hoher und niedriger Frequenz unter verschiedenen Aufgaben. Ein Interferenzparadigma der phonologischen und semantischen Matching-Aufgabe unter Verwendung der ERP-Technik wurde übernommen. Die ERP-Antworten, denen Homophone und nicht verwandte Wörter zu Zielen vorausgingen, wurden in semantischen Beurteilungsaufgaben verglichen, die keine a priori phonologische Verarbeitung erforderten, um zu zeigen, wann und ob die Phonologie die semantische Verarbeitung beeinflusst. In ähnlicher Weise wurden für phonologische Beurteilungsaufgaben, die keine a priori semantische Verarbeitung erforderten, die ERP-Antworten von Zielwörtern, die durch semantische und nicht verwandte Wörter ausgelöst wurden, verglichen, um zu zeigen, ob und Semantik die phonologische Verarbeitung stört. Als nächstes wurde entsprechend der Latenz der relevanten ERP-Komponenten der relative Zeitverlauf der semantischen und phonologischen Verarbeitung verglichen und der Einfluss der Worthäufigkeit auf solche Verarbeitungsmuster überprüft.

Unsere Ergebnisse zeigten, dass das Ziel, das durch semantisch verwandte Präzedenzfälle in der phonologischen Aufgabe vorbereitet wurde, und die durch Homophone in der semantischen Beurteilungsaufgabe präparierten Ziele beide eine signifikant weniger negative N400-Komponente auslösten als die nicht verwandten Vorgänger, unabhängig von der Worthäufigkeit. Daher deuteten die Daten für hochfrequente Wörter darauf hin, dass die semantische Aktivierung früher oder zumindest nicht später als die phonologische Verarbeitung während der Erkennung chinesischer Zwei-Zeichen-Verbindungen in verschiedenen Aufgaben erfolgt. Darüber hinaus war die induzierte P200-Komponente von niederfrequenten Wortpaaren sowohl bei semantischen als auch bei phonologischen Aufgaben signifikant positiver als die von hochfrequenten Wortpaaren. Andere Studien haben auch ergeben, dass frühe ERP-Komponenten empfindlich auf die Worthäufigkeit27,28reagieren können. Die frühesten N1- und P200-Effekte können auch zumindest teilweise auf die semantische Verarbeitung des vorherigen Wortes zurückzuführen sein. Für niederfrequente Wörter in der phonologischen Beurteilungsaufgabe wurde jedoch festgestellt, dass die semantisch verwandten Paare ein signifikant größeres P200 als die Kontrollbedingung freisetzen. Im Gegensatz dazu wurde festgestellt, dass P200, ausgelöst durch niederfrequente semantisch verwandte Wortpaare, bei phonologischen Beurteilungsaufgaben signifikant positiver war als niederfrequente Kontrollbedingungen. Dieses Ergebnis scheint für niederfrequente Wörter nicht schwer zu erklären zu sein, da bei phonologischen Beurteilungsaufgaben eine phonologische Aktivierung erwartet wird, aber die offensichtliche P200-Komponente wurde durch semantische Präzedenzfälle ausgelöst, was die Hypothese erneut verstärkte, dass die semantische Verarbeitung nicht später als die phonologische Verarbeitung erfolgen darf.

Die obige Interaktion zwischen Semantik und Phonologie bestätigte das Interaktionsmodell der Worterkennung, das vorschlug, dass das System vollständig interaktiv sein könnte, wobei Low-Level-Informationen von unten nach oben zu den gesamten lexikalischen Informationen fließen und High-Level-Informationen von oben nach unten fließen, um eine frühe visuelle Textverarbeitung zu bilden1. Darüber hinaus bestätigte das durch Frequenzeffekte in den beiden Aufgaben verursachte P200 auch die Spekulation, dass übergeordnete linguistische Informationen ihren Einfluss bereits bei der frühen Verarbeitung ausüben könnten. Beachten Sie, dass die in den beiden Aufgaben gefundenen Wechselwirkungen, unabhängig von den hoch- und niederfrequenten Bedingungen, den automatischen und möglicherweise obligatorischen Zugriff auf Phonologie und Bedeutung während des Lesens unterstützten. Der spezifische Zeitpunkt, zu dem diese Interaktion aufgetreten ist, kann jedoch von der Aufgabe und der Häufigkeit beeinflusst worden sein. Zum Beispiel wurde für niederfrequente Wörter festgestellt, dass die Interaktion im P200-Zeitfenster in der phonologischen Aufgabe während im N400-Zeitfenster in der semantischen Beurteilungsaufgabe stattfand. Dennoch wurde für hochfrequente Wörter die Interaktion im N400-Zeitfenster sowohl für semantische als auch für phonologische Aufgaben beobachtet. Zusammenfassend lässt sich sagen, dass die aktuellen Ergebnisse auf eine automatische Interaktion von Semantik und Phonologie in einer aufgabenunabhängigen Weise hindeuten, wobei zu berücksichtigen ist, dass die interaktive Zeit und der interaktive Modus durch Aufgaben, Frequenz usw. beeinflusst werden können.

Wirksamkeit der Methode
Im Allgemeinen kann dieses Interferenzparadigma die Interaktionsmodi der phonologischen und semantischen Verarbeitung umfassender erforschen. Unsere Experimente umfassten phonologische Matching-Aufgaben, die keine priori semantische Verarbeitung erfordern, und semantische Matching-Aufgaben, die keine priori phonologische Verarbeitung erfordern. Auf diese Weise kann der Einfluss der Semantik auf die phonologische Verarbeitung oder der Einfluss der Phonologie auf die semantische Verarbeitung deutlicher beobachtet werden. Da in beiden Aufgaben die Phonologie oder Semantik der Präzedenzfälle und das Zielwort verglichen werden müssen, wird die Phonologie oder Semantik in den beiden Aufgaben zwangsweise aktiviert. Wenn also ein Interferenzeffekt auftritt, ist er offensichtlicher. Die gängige Methode zur Erforschung der Worterkennung ist eine lexikalische Entscheidungsaufgabe, die Grundierungsbedingungen beinhaltet. Insbesondere muss nur beurteilt werden, ob das Zielwort ein echtes Wort oder ein Pseudowort ist. Erstens ist die semantische Aktivierung lexikalischer Entscheidungsaufgaben möglicherweise nicht stark genug, und zweitens kann eine einzelne Beurteilungsaufgabe den Interaktionsmodus unter verschiedenen Aufgaben nicht untersuchen. Daher ist das Interferenzparadigma der beiden Aufgaben möglicherweise besser geeignet, um das Worterkennungsmodell zu untersuchen. Für die beiden unterschiedlichen Aufgaben des Interferenzparadigmas muss man die semantische Verarbeitung stark aktivieren, und die andere muss die phonologische Verarbeitung stark aktivieren, was förderlicher ist, um zu untersuchen, ob die Interaktion zwischen Phonologie und Semantik aufgabenunabhängig ist und wie man unter verschiedenen Aufgaben interagiert.

Zukünftige Anwendungen der Technik
Das vorliegende Protokoll war das erste, das das Interferenzparadigma verwendete, um den semantischen Zugang zur chinesischen Zwei-Zeichen-Verbindung von Hoch- und Niederfrequenz zu erforschen. Derzeit taucht das Zwei-Aufgaben-Interferenzparadigma selten in den Studien zur Worterkennung in alphabetischen Sprachen auf. Daher kann diese Methode eine neue Möglichkeit für verschiedene Sprachen bieten, die durch unterschiedliche Beziehungen zwischen Orthographie, Phonologie und Semantik charakterisiert werden, um Worterkennungsmodelle zu erforschen.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Es gibt keine konkurrierenden finanziellen Interessen.

Acknowledgments

Diese Arbeit wurde vom Major Program der National Natural Science Foundation of China (62036001) unterstützt.

Materials

Name Company Catalog Number Comments
BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

DOWNLOAD MATERIALS LIST

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -Q., Liu, Y., Han, Y. -C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -K., Wu, Y., Chen, H. -C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).

Tags

Verhalten Ausgabe 172
Interaktion zwischen phonologischen und semantischen Prozessen in der visuellen Worterkennung mittels Elektrophysiologie
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Wang, Y., Jiang, M., Xu, X., Huang,More

Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter