Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
Click here for the English version

Behavior

Interaction entre les processus phonologiques et sémantiques dans la reconnaissance visuelle des mots à l’aide de l’électrophysiologie

Published: June 29, 2021 doi: 10.3791/62673

Summary

Nous présentons un protocole pour explorer la séquence d’activation relative de la phonologie et de la sémantique dans la reconnaissance visuelle des mots. Les résultats montrent que, conformément aux comptes interactifs, les représentations sémantiques et phonologiques peuvent être traitées de manière interactive, et les représentations linguistiques de niveau supérieur peuvent affecter le traitement précoce.

Abstract

Les controverses ont toujours existé dans la recherche liée aux capacités de lecture; sur la question de savoir si les mots imprimés sont perçus de manière prospective sur la base d’informations orthographiques, après quoi d’autres représentations, telles que la phonologie et la sémantique, sont activées, ou s’il s’agit d’informations entièrement interactives et sémantiques de haut niveau affecte le traitement précoce. Un paradigme d’interférence a été mis en œuvre dans le protocole présenté de tâches de jugement phonologique et sémantique qui utilisaient les mêmes paires précédé-cible pour explorer l’ordre relatif de l’activation phonologique et sémantique. Les mots cibles à haute et basse fréquence ont été précédés de trois conditions : sémantiquement liées, phonologiques (homophones) ou non apparentées. Les résultats ont montré que la composante P200 induite des paires de mots à basse fréquence était significativement supérieure à celle des mots à haute fréquence dans les tâches sémantiques et phonologiques. En outre, les homophones dans la tâche sémantique et les paires sémantiquement liées dans la tâche phonologique ont entraîné une réduction de N400 par rapport à la condition de contrôle, mot fréquence indépendamment. Il convient de noter que pour les paires de basses fréquences dans la tâche de jugement phonologique, le P200 libéré par les paires de mots sémantiquement liés était significativement plus grand que celui de la condition de contrôle. Dans l’ensemble, le traitement sémantique dans les tâches phonologiques et le traitement phonologique dans les tâches sémantiques ont été trouvés dans les mots à haute et basse fréquence, ce qui suggère que l’interaction entre la sémantique et la phonologie peut fonctionner de manière indépendante de la tâche. Cependant, le moment précis où cette interaction s’est produite peut avoir été affecté par la tâche et la fréquence.

Introduction

La question critique dans tout modèle de reconnaissance de mots est de comprendre le rôle de la phonologie dans le processus d’accès sémantique1. Pour les langues alphabétiques, de nombreuses études considèrent systématiquement la phonologie comme jouant un rôle important dans l’accès sémantique, notammentl’anglais2,3,4,l’hébreu5,le Français6et l’espagnol7. En d’autres termes, la reconnaissance écrite des mots implique non seulement un traitement orthographique, mais aussi phonologique et sémantique. Cette observation dans le modèle connexionniste interactif s’explique par des extensions activées dans tout le réseau, où l’orthographe est associée à des représentations phonologiques et sémantiques à travers des connexions pondérées8. Cette prolifération de l’activation fournit le mécanisme de base du modèle de reconnaissance visuelle des mots, qui suppose que les représentations phonologiques et sémantiques sont automatiquement activées en réponse à l’entrée orthographique9.

Cependant, les preuves empiriques actuelles à l’appui de l’hypothèse de l’automatisation interactive restent controversées. Certaines études affirment que l’activation des représentations phonologiques et sémantiques peut être ajustée ou empêchée par des exigences de tâches ou d’attention, ce qui implique une certaine influence descendante sur les processus de haut niveau impliqués dans la perception desmots 10,11. Cependant, la description susmentionnée a été remise en question par de nombreuses découvertes qui rapportent des effets phonologiques et sémantiques dans la reconnaissance visuelle des mots, même si ces représentations ne sont absolument pas pertinentes pour la tâche ou ne sont pas directement accessibles12, soutenant ainsi l’idée que la sémantique et la phonologie peuvent être consultées automatiquement et de force pendant le processus de lecture13 . Par conséquent, il existe une incertitude quant à savoir si l’activation phonologique et sémantique dans la reconnaissance visuelle des mots dépend de la tâche spécifique ou si elle se produit de force et automatiquement d’une manière indépendante de la tâche.

La réponse à la question susmentionnée est difficile pour les lecteurs chinois. Par rapport à l’anglais, le chinois est une écriture logographique dont les caractères représentent des morphèmes au lieu de phonèmes14. À l’heure actuelle, le rôle de la phonologie dans l’accès sémantique aux mots chinois reste controversé. Certaines études ont affirmé que la phonologie joue un rôle important dans l’accès sémantique aux mots chinois15,16,17. D’autres, cependant, ont eu le point de vue opposé18,19. Après avoir évalué la recherche susmentionnée pour le traitement phonologique chinois, nous avons constaté que le paradigme expérimental et les méthodes de recherche spécifiques diffèrent. Dans l’ensemble, il a été principalement divisé en deux paradigmes: mot amorçage15,18,19 et paradigme de violation dans la phrase17,20,21. Le mot cible est généralement incorporé à la fin de la phrase dans le paradigme de violation22. En termes de mécanisme linguistique, une phrase courte de deux mots est une unité plus gérable qu’une phrase complète difficile à traiter23. De plus, les variables difficiles à contrôler dans une phrase, telles que la syntaxe, le contexte ou d’autres facteurs, peuvent conduire à des conclusions différentes24. Le paradigme d’amorçage des mots est une méthode couramment utilisée pour explorer les modèles de reconnaissance de mots, que ce soit dans les langues alphabétiques ou en chinois. La tâche de ce paradigme est de juger si le mot cible précédé des nombres premiers est un mot réel ou un pseudo-mot; c’est-à-dire que ce paradigme ne contient généralement qu’une seule tâche lexicale. Cependant, une seule tâche de décision lexicale peut ne pas être le meilleur choix pour résoudre le problème de savoir si l’activation de la phonologie et de la sémantique dépend de la tâche. Par conséquent, deux tâches différentes peuvent être plus appropriées pour explorer cette question.

Par conséquent, cette recherche visait à explorer le rôle de la phonologie dans la reconnaissance des mots chinois et à tenter simultanément de déterminer si l’activation de la phonologie et de la sémantique est indépendante de la tâche. Notre recherche comprend deux tâches utilisant le paradigme de l’interférence : le jugement sémantique et le jugement phonologique. À notre connaissance, il s’agit de la première étude de potentiel lié à l’événement (ERP) de la reconnaissance composée chinoise à deux caractères utilisant ce paradigme d’interférence, et cette méthode apparaît rarement dans les études des langues alphabétiques. Plus précisément, dans la tâche de jugement sémantique, les participants doivent juger si le mot cible et son précédent sont sémantiquement liés, tandis que dans la tâche phonologique, ils doivent juger si les mots appariés ont la même prononciation.

La première est une tâche d’appariement sémantique qui ne nécessite pas de traitement phonologique a priori, et la seconde est une tâche de jugement phonologique qui ne nécessite pas de traitement sémantique a priori. Par conséquent, nous avons comparé les paires homophones et les groupes témoins non apparentés dans la tâche de jugement sémantique pour révéler si et comment la phonologie affecte le traitement sémantique. De même, nous avons comparé des paires de mots sémantiquement liées avec des conditions de contrôle non liées dans la tâche de jugement phonologique pour révéler si et comment la sémantique affecte le traitement phonologique. En outre, le problème susmentionné a été vérifié dans les mots à haute et basse fréquence. Ainsi, cette tâche de jugement sémantique et phonologique complémentaire peut non seulement révéler l’importance du traitement phonologique dans la reconnaissance des mots chinois, mais aussi révéler si et comment la phonologie et la sémantique interagissent.

Si la phonologie et les processus sémantiques sont précoces, automatiques et interactifs, l’effet de l’activation phonologique et sémantique doit être observé dans le temps de réponse des deux tâches. Pour l’ERP, les processus phonologiques et sémantiques déclenchent deux marqueurs électrophysiologiques différents2,7. De plus, leurs trajectoires temporelles et leurs distributions spatiales devraient être différentes. Une composante positive précoce (P200) devrait refléter le traitement phonologique, et le marqueur de traitement sémantique typique N400 devrait également être identifié20,21. Nous avons supposé que les paires phonologiquement liées dans la tâche sémantique et les paires liées à la sémantique dans la tâche phonologique entraîneraient une diminution significative de N400, ce qui aurait indiqué que le traitement phonologique peut conduire à un certain degré d’activation aux niveaux lexical-sémantique. En outre, nous avons vérifié si le P200, qui caractérise le traitement phonologique, apparaissait dans la tâche de jugement sémantique ou la tâche de jugement phonologique. Dans la tâche de jugement phonologique, les conditions liées à la sémantique déclenchent le P200, ce qui peut être considéré comme une preuve de l’influence précoce de la sémantique sur le traitement phonologique.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

Le protocole utilisé pour cette étude a été approuvé par le Comité d’examen institutionnel de l’Université Tsinghua.

1. Construction et présentation des stimuli

  1. Construction de stimuli
    1. Préparation des stimuli : Préparez des mots cibles contenant environ 140 composés chinois à deux caractères, dont les mots à basse et haute fréquence représentent la moitié. Faites précéder chaque cible de trois analogues : un mot phonologiquement identique (mot homonyme), un mot ayant un sens connexe et un mot de contrôle non pertinent.
      1. S’assurer que les cibles à haute fréquence sont toujours précédées d’antécédents à haute fréquence et que les cibles à basse fréquence sont toujours précédées de précédents à basse fréquence, que ce soit dans des conditions connexes ou dans des groupes témoins non liés. De plus, assurez-vous que les paires précédé-cible sont similaires en nombre de coups et en fréquence.
        NOTE: Tous les mots de cette étude ont été sélectionnés dans le dictionnaire de fréquence chinois moderne (Xiandai Hanyu Pinlu Cidian). La fréquence des mots à basse fréquence était inférieure à huit fois par million, et la fréquence des mots à haute fréquence dépassait 800 fois par million.
    2. Évaluation des stimuli : Recrutez un groupe distinct d’environ 30 étudiants pour évaluer le degré de pertinence sémantique entre les paires de mots sur une échelle de sept points, dans laquelle 1 reflète la corrélation la plus faible et 7 reflète la corrélation la plus élevée.
    3. Détermination finale du stimulus : Supprimez les paires de mots inappropriées, telles que les paires de mots avec des scores plus faibles dans des conditions sémantiquement liées et les paires de mots avec des scores plus élevés dans les scores homophones et non pertinents.
      1. Calculez les scores moyens respectifs des paires de mots sémantiques à haute et basse fréquence et assurez-vous qu’aucune différence significative n’est présente entre les deux.
      2. En outre, assurez-vous que les scores des paires homophones et des paires non apparentées ne sont pas significativement différents à la fois à haute et basse fréquence. Enfin, déterminez le matériau de stimulation expérimental final (voir Tableau Matériaux).
        NOTE: Pour les valeurs sémantiques des paires sémantiques dans cette expérience, les valeurs moyennes finales étaient de 5,62 et 5,73 pour les paires haute fréquence et basse fréquence, respectivement, et il n’y avait pas de différence significative entre les deux(p > .1). De plus, la parenté sémantique entre les paires homophoniques et non apparentées n’était pas significativement différente(p > .1).
  2. Présentation des stimuli
    1. Construisez un programme pour montrer la tâche aux sujets et remplissez les documents susmentionnés (le programme peut être écrit en E-prime ou dans d’autres langages de programmation).
    2. Assurez-vous que chaque structure de base du programme commence par un écran affichant un signe " + " qui dure 300 ms, directement après quoi le mot précédent doit apparaître pendant 140 ms, sans intervalle entre les deux.
    3. Après cela, définissez un écran vide d’une durée de 360 ms, puis définissez le mot cible, qui apparaîtra pendant 500 ms. Enfin, définissez un point d’interrogation (?) qui continuera à s’afficher jusqu’à ce que le participant ait choisi la paire de mots qui vient d’être affichée et qu’il ait appuyé sur le bouton aussi rapidement et précisément que possible.
    4. Dites aux participants à l’avance qu’ils doivent juger si la paire de mots est sémantiquement liée dans la tâche de jugement sémantique et si la phonologie est la même dans la tâche de jugement phonologique.
    5. Configuration de la séance d’entraînement : Configurez deux groupes de pratique pour inclure des tâches de jugement sémantique et de jugement phonologique, respectivement, avec pas moins de 10 paires de mots pour chaque tâche. Informez les participants qu’ils peuvent répéter les exercices pour s’assurer que la précision de la séance d’entraînement est supérieure à 70%.
    6. Configuration de l’expérience formelle: Divisez l’ensemble de l’expérience en 6 blocs, la tâche de jugement sémantique et la tâche de jugement phonologique représentant chacune la moitié.
      1. Assurez-vous qu’il n’y a pas de mots cibles répétés dans chaque bloc et que le nombre de types d’amorçage dans chaque bloc est le même. En outre, mettre en place quelques essais de remplissage pour réduire l’écart de réponse causé par le nombre inégal de tests nécessitant des réactions positives ou négatives.
      2. Randomisez l’ordre des éléments dans chaque bloc et contrebalancez l’ordre des blocs entre les sujets.
        REMARQUE: L’expérience entière peut également être divisée en huit ou dix blocs ou plus en fonction du nombre de matériel expérimental à préparer, ce qui minimise la répétition des mots cibles dans chaque bloc.

2. Préparation de l’expérience et enregistrement électrophysiologique

  1. Recrutez des locuteurs natifs chinois droitiers avec une vision normale qui a peut-être été corrigée précédemment.
    1. Exclure les participants atteints de maladies neurologiques ou psychiatriques.
    2. S’assurer qu’il y a un nombre équilibré de participants féminins et masculins dans la tranche d’âge souhaitée (18-28 ans).
    3. Assurez-vous que les participants n’ont pas d’antécédents de perméabilité ou de teinture de leurs cheveux au cours des deux derniers mois.
    4. Informez les participants qu’ils devront avoir suffisamment de temps de sommeil et de repos avant l’expérience25.
    5. Lorsque vous participez à l’expérience, veuillez vous assurer que les participants sont dans un état sain au moment de mener l’expérience.
  2. Lorsqu’un participant arrive au laboratoire, présentez l’équipement expérimental, les tâches et les coûts de temps. Expliquez les exigences (comme ne pas avoir sommeil, bouger et cligner des yeux) pour les aider à comprendre l’ensemble du processus et éliminer les soucis inutiles.
  3. Si le participant n’a pas d’autres questions sur l’expérience, demandez-lui de remplir le formulaire de requête Edinburgh Handedness, qui est utilisé pour confirmer que tous les participants ont les mêmes habitudes de droitier.
  4. Fournissez le formulaire de consentement éclairé aux participants et demandez-leur de lire et de signer attentivement. Si les participants ont des questions sur le contenu du formulaire de consentement, fournissez-leur les explications nécessaires.
  5. Demandez au participant de nettoyer correctement son cuir chevelu et de sécher ses cheveux en laboratoire. En attendant les participants, veuillez préparer tout le matériel expérimental.
    REMARQUE: Le signal d’électroencéphalogramme (EEG) est amplifié à l’aide d’un système d’amplification avec une passe de bande de 0,01 à 100 Hz et échantillonne en continu à 500 Hz.
  6. Invitez les participants à s’asseoir confortablement sur une chaise dans la salle où l’expérience sera menée. Leur a demandé de ne pas déplacer la chaise.
  7. Utilisez des cotons-tiges et des gommages faciaux pour nettoyer la peau sous l’œil gauche du participant (pour l’électrode électro-oculographique verticale), près du canthus externe de l’œil droit (pour l’électro-oculographique horizontal) et autour des os mastoïdiens droit et gauche (pour Tp9 et Tp10, qui seront utilisés comme nouvelles références hors ligne).
    REMARQUE: La distribution des électrodes peut varier en fonction des bouchons utilisés.
  8. Placez le capuchon élastique sur la tête du participant et assurez-vous que l’électrode Cz est au centre du haut de la tête. Fixez la sangle du capuchon de l’électrode sous le menton avec soin pour vous assurer qu’elle n’est pas trop serrée ou trop lâche.
  9. Assurez-vous que le capuchon et l’amplificateur sont connectés au système d’enregistrement. Ensuite, basculez le logiciel d’enregistrement sur l’interface de surveillance de l’impédance.
  10. Assurez-vous que l’impédance de toutes les électrodes ne dépasse pas 5 kΩ ou 10 kΩ, en commençant par les électrodes de référence (Ref) et de masse (Gnd).
  11. Passez la seringue remplie de gel conducteur à travers le petit trou d’une électrode jusqu’au cuir chevelu, puis poussez le piston pour injecter une petite quantité de gel conducteur dans le cuir chevelu tout en veillant à ne pas provoquer de débordement. Dans le même temps, surveillez le système d’affichage qui affiche l’impédance en temps réel jusqu’à ce que l’impédance tombe au seuil.
  12. Une fois les électrodes Ref et Gnd préparées, réduisez l’impédance des autres électrodes de la même manière. Traiter soigneusement la réduction d’impédance de l’électricité oculaire.
    1. Collez les petits trous d’un côté des deux électrodes électro-oculographiques pour empêcher le gel conducteur injecté de fuir. Fixez-les au bas de l’œil gauche et au canthus externe de l’œil droit avec du ruban adhésif.
  13. Une fois toutes les électrodes préparées, demandez aux participants d’être prêts pour l’expérience. Demandez aux participants de se détendre et d’éviter les clignements excessifs des yeux et les mouvements du corps pendant l’expérience.
  14. Présentez le stimulus via le programme de démonstration du stimulus et laissez les participants s’entraîner dans la section de pratique.
    REMARQUE: Après la séance d’entraînement, les participants peuvent poser des questions s’ils ont des doutes ou des questions sur la façon de procéder.
  15. Démarrez l’expérience formelle et enregistrez les informations EEG. Surveillez le système d’enregistrement pendant l’enregistrement. Si une électrode est desserrée ou si la résistance dépasse le seuil, rechargez l’électrode lorsque le participant est au repos.
    REMARQUE: Les participants peuvent se reposer pendant 4 à 10 minutes après chaque bloc.
  16. Une fois l’expérience terminée, enregistrez le signal EEG et éteignez l’équipement, tel que le système d’enregistrement et l’amplificateur. Ensuite, enlevez la casquette du participant et demandez-lui de laver le gel conducteur des cheveux et de la peau. Enfin, récompensez les participants et remerciez-les pour leur coopération.

3. Prétraitement EEG

  1. Utilisez la correction oculaire semi-automatique avec analyse indépendante des composants.
  2. Calculer les ERP de 100 ms à 600 ms après le début du mot cible (ligne de base pré-cible de 100 ms).
  3. Réglez le filtre passe-bande EEG hors ligne de 0,05 à 30 Hz (mode de déphasage zéro, 24 dB/oct).
  4. Rejeter les époques supérieures à ±80 μV par rejet d’artefacts et éliminer les essais de réponses erronées.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

Ce protocole a été utilisé dans une étude récente pour étudier le rôle de la phonologie dans la reconnaissance composée chinoise à deux caractères et pour déduire le modèle de reconnaissance de mots26. Tous les stimuli utilisés dans cette étude ont été entièrement divulgués26. Trois fenêtres temporelles ont été sélectionnées sur la base de la puissance globale de champ (GFP): à 100-150 ms, 160-280 ms et 300-500 ms pour les composants N1, P200 et N400, respectivement26. Les amplitudes moyennes des deux fenêtres temporelles ci-dessus ont été analysées par des mesures répétées d’analyse de la variance (ANOVA) et de la fréquence (basse et haute), du type de relation (phonologiquement ou sémantiquement lié, ou non lié) et des zones latérales (hémisphères gauche et droit × régions avant, moyenne et postérieure = six zones au total) ou des électrodes médianes (Fz, Cz, Pz), qui étaient les trois facteurs internes impliqués. Des résultats et des graphiques plus détaillés peuvent être trouvés dans Wang et al. (2021)26.

Résultats ERP pour la tâche de jugement sémantique
La période 100-150 ms (N1)
Pour les électrodes médianes, l’ANOVA a produit un effet principal de Fréquence [F(1, 23) = 9,451, P = 0,005, ƞ2p = 0,291], indiquant que les paires à haute fréquence ont provoqué une forme d’onde significativement plus négative que la condition basse fréquence. ). Un effet principal significatif similaire de la fréquence a également été observé sur les sites latéraux. En outre, pour les paires à haute fréquence, un effet principal significatif du type de relation a également été observé [F(1, 23) = 8,826, P = 0,007, ƞ 2p = 0,277], montrant que les paires non apparentées provoquaient une forme d’onde significativement plus négative que la condition homophone. Un effet principal significatif similaire du type de relation pour les paires à haute fréquence a également été observé dans l’hémisphère gauche.

La période de 160à280 ms (P200)
Pour les électrodes médianes, l’ANOVA a produit un effet principal de Fréquence [F(1, 23) = 5,546, P = 0,027, ƞ 2p = 0,194], indiquant que les paires basse fréquence ont provoqué une forme d’onde significativement plus positive que la condition de haute fréquence. Aucun autre effet ou interaction significatif n’a été observé dans les électrodes de la ligne médiane. De plus, l’effet principal de la fréquence a également été trouvé sur les sites latéraux.

La période 300-500 ms (N400)
Dans la fenêtre de temps de 300 à 500 ms, l’ANOVA a produit un effet principal significatif de type de relation [F(1, 23) = 27,783, P < 0,001, ƞ2p = 0,547] dans les électrodes de la ligne médiane, montrant qu’une cible amorcée par des homophones provoquait une amplitude significativement moins négative que la condition non liée (voir figure 1). Un effet principal significatif similaire du type de relation a été observé sur les sites latéraux.

Figure 1
Figure 1: Grands potentiels moyens liés à des événements en réponse à des mots cibles, à partir d’électrodes représentatives (Fz, Cz, Pz), pour les paires homophoniques et de contrôle dans la tâche sémantique. Cette figure, tirée de Wang et al. (2021)26, montre que dans la tâche de jugement sémantique, les paires homophones ont libéré des composants N400 plus petits que les conditions non pertinentes indépendamment des hautes et basses fréquences. Veuillez cliquer ici pour voir une version agrandie de cette figure.

Résultats ERP pour la tâche de jugement homophone
La période 100-150 ms (N1)
Aucun effet ou interaction significatif n’a été trouvé dans les électrodes de la ligne médiane ou les sites latéraux.

La période de 160à280 ms (P200)
Aucun effet principal significatif pour le type de relation ou la fréquence(ps > .1) n’a été observé au niveau des électrodes frontales antérieures. Cependant, un effet interactif significatif entre la fréquence et le type de relation a été trouvé [F(1, 23) = 7,951, P = 0,010, ƞ2p = 0,257]. Une analyse plus approfondie a révélé que l’influence du type de relation n’était significative que dans des conditions de basse fréquence au niveau des électrodes frontales antérieures (FPz: P = 0,055; 1er PC: P = 0,027; 2e PC: P = 0,004; AF3 : P = 0,060 ; AF4 : P = 0,021; AF8 : P = 0,009), indiquant que dans la fenêtre temporelle P200, le signal ERP était significativement plus positif dans des conditions sémantiquement liées que dans des conditions non liées (voir Figure 2).

De plus, les analyses ont montré que l’effet de la fréquence était significatif dans deux régions (centre gauche : F(1, 23) = 4,506, P = 0,045, ƞ2p = 0,164 et postérieur gauche : F(1, 23) = 10,470, P = 0,004, ƞ2p = 0,313).

Figure 2
Figure 2: Potentiels liés à un événement de grande moyenne en réponse aux mots cibles de six électrodes frontales antérieures (Fpz, Fp1, Fp2, AF3, AF4, AF8) pour les paires sémantiquement liées et de contrôle des basses fréquences dans la tâche homophone. Cette figure, tirée de Wang et al. (2021)26, montre que dans la tâche de jugement phonologique, les mots sémantiques à basse fréquence ont libéré une composante P200 plus positive que les mots non liés. Veuillez cliquer ici pour voir une version agrandie de cette figure.

La période 300-500 ms (N400)
Dans la fenêtre temporelle N400, un effet principal significatif du type de relation a été trouvé [F(1, 23) = 9,082, P = 0,006, ƞ2p = 0,283] dans les électrodes de la ligne médiane, indiquant que la cible amorcée par des mots sémantiquement apparentés a libéré une amplitude significativement moins négative que les nombres premiers non liés (voir figure 3). De plus, un effet principal significatif du type de relation a été observé sur les sites latéraux.

Figure 3
Figure 3: Grands potentiels moyens liés à des événements en réponse à des mots cibles, à partir d’électrodes représentatives (Fz, Cz, Pz), pour les paires sémantiquement liées et de contrôle dans la tâche homophone. Cette figure, tirée de Wang et al. (2021)26, montre que dans la tâche de jugement phonologique, les paires sémantiquement liées ont libéré un N400 composants plus petit que les conditions non pertinentes indépendamment des fréquences hautes et basses. Veuillez cliquer ici pour voir une version agrandie de cette figure.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Résultats expérimentaux et signification :
Le but de ce protocole était de déduire ce qui suit: 1) si le modèle de reconnaissance de mots est un modèle feedforward ou un modèle interactif et 2) l’interaction entre les modèles phonologiques et sémantiques dans la reconnaissance composée à deux caractères chinois de haute et basse fréquence sous différentes tâches. Un paradigme d’interférence de tâche de correspondance phonologique et sémantique utilisant la technique ERP a été adopté. Les réponses ERP précédées d’homophones et de mots non liés aux cibles ont été comparées dans des tâches de jugement sémantique qui ne nécessitaient pas de traitement phonologique a priori pour révéler quand et si la phonologie affecte le traitement sémantique. De même, pour les tâches de jugement phonologique qui ne nécessitaient pas de traitement sémantique a priori, les réponses ERP des mots cibles déclenchés par des mots sémantiques et non apparentés ont été comparées pour révéler si et la sémantique interfère avec le traitement phonologique. Ensuite, en fonction de la latence des composants ERP pertinents, le cours temporel relatif du traitement sémantique et phonologique a été comparé et l’influence de la fréquence des mots sur ces modèles de traitement a été vérifiée.

Nos résultats ont montré que la cible amorcée par des précédents sémantiquement liés dans la tâche phonologique et les cibles amorcées par les homophones dans la tâche de jugement sémantique ont toutes deux déclenché une composante N400 significativement moins négative que les précédentes non liées, quelle que soit la fréquence des mots. Par conséquent, pour les mots à haute fréquence, les données suggèrent que l’activation sémantique se produit plus tôt ou du moins pas plus tard que le traitement phonologique lors de la reconnaissance de composés chinois à deux caractères dans différentes tâches. En outre, la composante P200 induite des paires de mots à basse fréquence était significativement plus positive que celle des paires de mots à haute fréquence dans les tâches sémantiques et phonologiques. D’autres études ont également conclu que les premiers composants ERP peuvent être sensibles à la fréquence desmots 27,28. Les premiers effets N1 et P200 peuvent également être, au moins en partie, dus au traitement sémantique du mot précédent. Cependant, pour les mots à basse fréquence dans la tâche de jugement phonologique, il a été constaté que les paires sémantiquement liées libéraient un P200 significativement plus grand que la condition de contrôle. En revanche, il a été constaté que P200 déclenché par des paires de mots sémantiquement liées à basse fréquence était significativement plus positif que les conditions de contrôle à basse fréquence dans les tâches de jugement phonologique. Ce résultat ne semble pas difficile à expliquer pour les mots de basse fréquence, car l’activation phonologique est attendue dans les tâches de jugement phonologique, mais la composante P200 évidente a été déclenchée par des précédents sémantiques, ce qui a encore renforcé l’hypothèse selon laquelle le traitement sémantique ne peut pas se produire plus tard que le traitement phonologique.

L’interaction ci-dessus entre la sémantique et la phonologie a confirmé le modèle d’interaction de la reconnaissance des mots qui proposait que le système puisse être entièrement interactif, avec des informations de bas niveau circulant de bas en haut vers l’ensemble de l’information lexicale et des informations de haut niveau circulant de haut en bas pour former un traitement de texte visuel précoce1. En outre, le P200 causé par des effets de fréquence dans les deux tâches a également confirmé la spéculation selon laquelle des informations linguistiques de niveau supérieur pourraient déjà exercer leur influence au début du traitement. Notez que les interactions trouvées dans les deux tâches, quelles que soient les conditions de haute et basse fréquence, ont soutenu l’accès automatique et éventuellement obligatoire à la phonologie et au sens pendant la lecture. Cependant, le moment précis auquel cette interaction s’est produite peut avoir été affecté par la tâche et la fréquence. Par exemple, pour les mots à basse fréquence, il a été constaté que l’interaction se produisait dans la fenêtre de temps P200 dans la tâche phonologique tandis que dans la fenêtre de temps N400 dans la tâche de jugement sémantique. Néanmoins, pour les mots à haute fréquence, l’interaction a été observée dans la fenêtre temporelle N400 pour des tâches sémantiques ou phonologiques. En conclusion, les résultats actuels suggèrent l’interaction automatique de la sémantique et de la phonologie d’une manière indépendante de la tâche tout en considérant que le temps et le mode interactifs peuvent être affectés par les tâches, la fréquence, etc.

Efficacité de la méthode
En général, ce paradigme d’interférence peut explorer de manière plus complète les modes d’interaction du traitement phonologique et sémantique. Nos expériences comprenaient des tâches d’appariement phonologique qui ne nécessitent pas de traitement sémantique priori et des tâches d’appariement sémantique qui ne nécessitent pas de traitement phonologique priori. De cette façon, l’influence de la sémantique sur le traitement phonologique ou l’influence de la phonologie sur le traitement sémantique peut être observée plus clairement. En outre, comme la phonologie ou la sémantique des précédents et le mot cible doivent être comparés dans les deux tâches, la phonologie ou la sémantique sont activées de force dans les deux tâches. Par conséquent, si un effet d’interférence se produit, il sera plus évident. La méthode courante d’exploration de la reconnaissance des mots est une tâche de décision lexicale qui comprend des conditions d’amorçage. Plus précisément, il suffit de juger si le mot cible est un mot réel ou un pseudo-mot. Premièrement, l’activation sémantique des tâches de décision lexicale peut ne pas être assez forte, et deuxièmement, une seule tâche de jugement ne peut pas explorer le mode d’interaction sous différentes tâches. Par conséquent, le paradigme d’interférence des deux tâches peut être plus approprié pour explorer le modèle de reconnaissance des mots. Pour les deux tâches distinctes du paradigme d’interférence, l’une doit activer fortement le traitement sémantique, et l’autre doit activer fortement le traitement phonologique, ce qui est plus propice à l’exploration de la question de savoir si l’interaction entre la phonologie et la sémantique est indépendante de la tâche et comment interagir sous différentes tâches.

Applications futures de la technique
Le protocole actuel a été le premier à utiliser le paradigme de l’interférence pour explorer l’accès sémantique au composé chinois à deux caractères de haute et basse fréquence. Actuellement, le paradigme de l’interférence à deux tâches apparaît rarement dans les études sur la reconnaissance des mots dans les langues alphabétiques. Par conséquent, cette méthode peut offrir une nouvelle opportunité pour différentes langues caractérisées par des relations différentes entre l’orthographe, la phonologie et la sémantique d’explorer les modèles de reconnaissance des mots.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Il n’y a pas d’intérêts financiers concurrents.

Acknowledgments

Ce travail a été soutenu par le programme majeur de la Fondation nationale des sciences naturelles de Chine (62036001).

Materials

Name Company Catalog Number Comments
BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

DOWNLOAD MATERIALS LIST

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -Q., Liu, Y., Han, Y. -C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -K., Wu, Y., Chen, H. -C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).

Tags

Comportement numéro 172
Interaction entre les processus phonologiques et sémantiques dans la reconnaissance visuelle des mots à l’aide de l’électrophysiologie
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Wang, Y., Jiang, M., Xu, X., Huang,More

Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter