Summary

Interaction entre les processus phonologiques et sémantiques dans la reconnaissance visuelle des mots à l’aide de l’électrophysiologie

Published: June 29, 2021
doi:

Summary

Nous présentons un protocole pour explorer la séquence d’activation relative de la phonologie et de la sémantique dans la reconnaissance visuelle des mots. Les résultats montrent que, conformément aux comptes interactifs, les représentations sémantiques et phonologiques peuvent être traitées de manière interactive, et les représentations linguistiques de niveau supérieur peuvent affecter le traitement précoce.

Abstract

Les controverses ont toujours existé dans la recherche liée aux capacités de lecture; sur la question de savoir si les mots imprimés sont perçus de manière prospective sur la base d’informations orthographiques, après quoi d’autres représentations, telles que la phonologie et la sémantique, sont activées, ou s’il s’agit d’informations entièrement interactives et sémantiques de haut niveau affecte le traitement précoce. Un paradigme d’interférence a été mis en œuvre dans le protocole présenté de tâches de jugement phonologique et sémantique qui utilisaient les mêmes paires précédé-cible pour explorer l’ordre relatif de l’activation phonologique et sémantique. Les mots cibles à haute et basse fréquence ont été précédés de trois conditions : sémantiquement liées, phonologiques (homophones) ou non apparentées. Les résultats ont montré que la composante P200 induite des paires de mots à basse fréquence était significativement supérieure à celle des mots à haute fréquence dans les tâches sémantiques et phonologiques. En outre, les homophones dans la tâche sémantique et les paires sémantiquement liées dans la tâche phonologique ont entraîné une réduction de N400 par rapport à la condition de contrôle, mot fréquence indépendamment. Il convient de noter que pour les paires de basses fréquences dans la tâche de jugement phonologique, le P200 libéré par les paires de mots sémantiquement liés était significativement plus grand que celui de la condition de contrôle. Dans l’ensemble, le traitement sémantique dans les tâches phonologiques et le traitement phonologique dans les tâches sémantiques ont été trouvés dans les mots à haute et basse fréquence, ce qui suggère que l’interaction entre la sémantique et la phonologie peut fonctionner de manière indépendante de la tâche. Cependant, le moment précis où cette interaction s’est produite peut avoir été affecté par la tâche et la fréquence.

Introduction

La question critique dans tout modèle de reconnaissance de mots est de comprendre le rôle de la phonologie dans le processus d’accès sémantique1. Pour les langues alphabétiques, de nombreuses études considèrent systématiquement la phonologie comme jouant un rôle important dans l’accès sémantique, notammentl’anglais2,3,4,l’hébreu5,le Français6et l’espagnol7. En d’autres termes, la reconnaissance écrite des mots implique non seulement un traitement orthographique, mais aussi phonologique et sémantique. Cette observation dans le modèle connexionniste interactif s’explique par des extensions activées dans tout le réseau, où l’orthographe est associée à des représentations phonologiques et sémantiques à travers des connexions pondérées8. Cette prolifération de l’activation fournit le mécanisme de base du modèle de reconnaissance visuelle des mots, qui suppose que les représentations phonologiques et sémantiques sont automatiquement activées en réponse à l’entrée orthographique9.

Cependant, les preuves empiriques actuelles à l’appui de l’hypothèse de l’automatisation interactive restent controversées. Certaines études affirment que l’activation des représentations phonologiques et sémantiques peut être ajustée ou empêchée par des exigences de tâches ou d’attention, ce qui implique une certaine influence descendante sur les processus de haut niveau impliqués dans la perception desmots 10,11. Cependant, la description susmentionnée a été remise en question par de nombreuses découvertes qui rapportent des effets phonologiques et sémantiques dans la reconnaissance visuelle des mots, même si ces représentations ne sont absolument pas pertinentes pour la tâche ou ne sont pas directement accessibles12, soutenant ainsi l’idée que la sémantique et la phonologie peuvent être consultées automatiquement et de force pendant le processus de lecture13 . Par conséquent, il existe une incertitude quant à savoir si l’activation phonologique et sémantique dans la reconnaissance visuelle des mots dépend de la tâche spécifique ou si elle se produit de force et automatiquement d’une manière indépendante de la tâche.

La réponse à la question susmentionnée est difficile pour les lecteurs chinois. Par rapport à l’anglais, le chinois est une écriture logographique dont les caractères représentent des morphèmes au lieu de phonèmes14. À l’heure actuelle, le rôle de la phonologie dans l’accès sémantique aux mots chinois reste controversé. Certaines études ont affirmé que la phonologie joue un rôle important dans l’accès sémantique aux mots chinois15,16,17. D’autres, cependant, ont eu le point de vue opposé18,19. Après avoir évalué la recherche susmentionnée pour le traitement phonologique chinois, nous avons constaté que le paradigme expérimental et les méthodes de recherche spécifiques diffèrent. Dans l’ensemble, il a été principalement divisé en deux paradigmes: mot amorçage15,18,19 et paradigme de violation dans la phrase17,20,21. Le mot cible est généralement incorporé à la fin de la phrase dans le paradigme de violation22. En termes de mécanisme linguistique, une phrase courte de deux mots est une unité plus gérable qu’une phrase complète difficile à traiter23. De plus, les variables difficiles à contrôler dans une phrase, telles que la syntaxe, le contexte ou d’autres facteurs, peuvent conduire à des conclusions différentes24. Le paradigme d’amorçage des mots est une méthode couramment utilisée pour explorer les modèles de reconnaissance de mots, que ce soit dans les langues alphabétiques ou en chinois. La tâche de ce paradigme est de juger si le mot cible précédé des nombres premiers est un mot réel ou un pseudo-mot; c’est-à-dire que ce paradigme ne contient généralement qu’une seule tâche lexicale. Cependant, une seule tâche de décision lexicale peut ne pas être le meilleur choix pour résoudre le problème de savoir si l’activation de la phonologie et de la sémantique dépend de la tâche. Par conséquent, deux tâches différentes peuvent être plus appropriées pour explorer cette question.

Par conséquent, cette recherche visait à explorer le rôle de la phonologie dans la reconnaissance des mots chinois et à tenter simultanément de déterminer si l’activation de la phonologie et de la sémantique est indépendante de la tâche. Notre recherche comprend deux tâches utilisant le paradigme de l’interférence : le jugement sémantique et le jugement phonologique. À notre connaissance, il s’agit de la première étude de potentiel lié à l’événement (ERP) de la reconnaissance composée chinoise à deux caractères utilisant ce paradigme d’interférence, et cette méthode apparaît rarement dans les études des langues alphabétiques. Plus précisément, dans la tâche de jugement sémantique, les participants doivent juger si le mot cible et son précédent sont sémantiquement liés, tandis que dans la tâche phonologique, ils doivent juger si les mots appariés ont la même prononciation.

La première est une tâche d’appariement sémantique qui ne nécessite pas de traitement phonologique a priori, et la seconde est une tâche de jugement phonologique qui ne nécessite pas de traitement sémantique a priori. Par conséquent, nous avons comparé les paires homophones et les groupes témoins non apparentés dans la tâche de jugement sémantique pour révéler si et comment la phonologie affecte le traitement sémantique. De même, nous avons comparé des paires de mots sémantiquement liées avec des conditions de contrôle non liées dans la tâche de jugement phonologique pour révéler si et comment la sémantique affecte le traitement phonologique. En outre, le problème susmentionné a été vérifié dans les mots à haute et basse fréquence. Ainsi, cette tâche de jugement sémantique et phonologique complémentaire peut non seulement révéler l’importance du traitement phonologique dans la reconnaissance des mots chinois, mais aussi révéler si et comment la phonologie et la sémantique interagissent.

Si la phonologie et les processus sémantiques sont précoces, automatiques et interactifs, l’effet de l’activation phonologique et sémantique doit être observé dans le temps de réponse des deux tâches. Pour l’ERP, les processus phonologiques et sémantiques déclenchent deux marqueurs électrophysiologiques différents2,7. De plus, leurs trajectoires temporelles et leurs distributions spatiales devraient être différentes. Une composante positive précoce (P200) devrait refléter le traitement phonologique, et le marqueur de traitement sémantique typique N400 devrait également être identifié20,21. Nous avons supposé que les paires phonologiquement liées dans la tâche sémantique et les paires liées à la sémantique dans la tâche phonologique entraîneraient une diminution significative de N400, ce qui aurait indiqué que le traitement phonologique peut conduire à un certain degré d’activation aux niveaux lexical-sémantique. En outre, nous avons vérifié si le P200, qui caractérise le traitement phonologique, apparaissait dans la tâche de jugement sémantique ou la tâche de jugement phonologique. Dans la tâche de jugement phonologique, les conditions liées à la sémantique déclenchent le P200, ce qui peut être considéré comme une preuve de l’influence précoce de la sémantique sur le traitement phonologique.

Protocol

Le protocole utilisé pour cette étude a été approuvé par le Comité d’examen institutionnel de l’Université Tsinghua. 1. Construction et présentation des stimuli Construction de stimuli Préparation des stimuli : Préparez des mots cibles contenant environ 140 composés chinois à deux caractères, dont les mots à basse et haute fréquence représentent la moitié. Faites précéder chaque cible de trois analogues : un mot phonologiquement identique (mot homonyme)…

Representative Results

Ce protocole a été utilisé dans une étude récente pour étudier le rôle de la phonologie dans la reconnaissance composée chinoise à deux caractères et pour déduire le modèle de reconnaissance de mots26. Tous les stimuli utilisés dans cette étude ont été entièrement divulgués26. Trois fenêtres temporelles ont été sélectionnées sur la base de la puissance globale de champ (GFP): à 100-150 ms, 160-280 ms et 300-500 ms pour les composants N1, P200 et N400…

Discussion

Résultats expérimentaux et signification :
Le but de ce protocole était de déduire ce qui suit: 1) si le modèle de reconnaissance de mots est un modèle feedforward ou un modèle interactif et 2) l’interaction entre les modèles phonologiques et sémantiques dans la reconnaissance composée à deux caractères chinois de haute et basse fréquence sous différentes tâches. Un paradigme d’interférence de tâche de correspondance phonologique et sémantique utilisant la technique ERP a été a…

Disclosures

The authors have nothing to disclose.

Acknowledgements

Ce travail a été soutenu par le programme majeur de la Fondation nationale des sciences naturelles de Chine (62036001).

Materials

BrainAmp DC amplifier system (Brain Products GmbH) Brain Products, Gilching, Germany BrainAmp S/N AMP13061964DC Input 5.6DC=150mA Operation 7mA Standby
Easycap (Brain Products GmbH) Brain Products, Gilching, Germany 62 Ag/AgCl electrodes with a configuration of the international 10–20 system of electrode

References

  1. Carreiras, M., Armstrong, B. C., Perea, M., Frost, R. The what, when, where, and how of visual word recognition. Trends in Cognitive Sciences. 18 (2), 90-98 (2014).
  2. Grainger, J., Kiyonaga, K., Holcomb, P. J. The time course of orthographic and phonological code activation. Psychological Science. 17 (12), 1021-1026 (2006).
  3. Ashby, J. Phonology is fundamental in skilled reading: Evidence from ERPs. Psychonomic Bulletin Review. 17 (1), 95-100 (2010).
  4. Wilson, L. B., Tregellas, J. R., Slason, E., Pasko, B. E., Rojas, D. C. Implicit phonological priming during visual word recognition. Neuroimage. 55 (2), 724-731 (2011).
  5. Frost, R., Ahissar, M., Gotesman, R., Tayeb, S. Are phonological effects fragile? The effect of luminance and exposure duration on form priming and phonological priming. Journal of Memory and Language. 48 (2), 346-378 (2003).
  6. Ferrand, L., Grainger, J. Effects of orthography are independent of phonology in masked form priming. The Quarterly Journal of Experimental Psychology. 47 (2), 365-382 (1994).
  7. Carreiras, M., Perea, M., Vergara, M., Pollatsek, A. The time course of orthography and phonology: ERP correlates of masked priming effects in Spanish. Psychophysiology. 46 (5), 1113-1122 (2009).
  8. Pattamadilok, C., et al. Automaticity of phonological and semantic processing during visual word recognition. Neuroimage. 149, 244-255 (2017).
  9. Harm, M. W., Seidenberg, M. S. Computing the meanings of words in reading: Cooperative division of labor between visual and phonological processes. Psychological Review. 111 (3), 662-720 (2004).
  10. Brown, M. S., Roberts, M. A., Besner, D. Semantic processing in visual word recognition: Activation blocking and domain specificity. Psychonomic Bulletin & Review. 8 (4), 778-784 (2001).
  11. Devlin, J. T., Matthews, P. M., Rushworth, M. F. S. Semantic processing in the left inferior prefrontal cortex: A combined functional magnetic resonance imaging and transcranial magnetic stimulation study. Journal of Cognitive Neuroscience. 15 (1), 71-84 (2003).
  12. Rodd, J. M. When do leotards get their spots? Semantic activation of lexical neighbors in visual word recognition. Psychonomic Bulletin & Review. 11 (3), 434-439 (2004).
  13. Frost, R. Toward a strong phonological theory of visual word recognition: True issues and false trails. Psychological Bulletin. 123 (1), 71-99 (1998).
  14. Yu, L., Reichle, E. D. Chinese versus English: Insights on cognition during reading. Trends in Cognitive Sciences. 21 (10), 721-724 (2017).
  15. Tan, L. H., Perfetti, C. A. Phonological activation in visual identification of Chinese two-character words. Journal of Experimental Psychology: Learning, Memory, and Cognition. 25 (2), 382 (1999).
  16. Liu, Y., Perfetti, C. A., Hart, L. ERP evidence for the time course of graphic, phonological, and semantic information in Chinese meaning and pronunciation decisions. Journal of Experimental Psychology: Learning, Memory, and Cognition. 29 (6), 1231 (2003).
  17. Ren, G. -. Q., Liu, Y., Han, Y. -. C. Phonological activation in chinese reading: an event-related potential study using low-resolution electromagnetic tomography. Neuroscience. 164 (4), 1623-1631 (2009).
  18. Wang, K., Mecklinger, A., Hofmann, J., Weng, X. From orthography to meaning: an electrophysiological investigation of the role of phonology in accessing meaning of Chinese single-character words. Neuroscience. 165 (1), 101-106 (2010).
  19. Wong, A. -. K., Wu, Y., Chen, H. -. C. Limited role of phonology in reading Chinese two-character compounds: Evidence from an ERP study. Neuroscience. 256, 342-351 (2014).
  20. Meng, X., Jian, J., Shu, H., Tian, X., Zhou, X. ERP correlates of the development of orthographical and phonological processing during Chinese sentence reading. Brain research. 1219, 91-102 (2008).
  21. Liu, B., Jin, Z., Qing, Z., Wang, Z. The processing of phonological, orthographical, and lexical information of Chinese characters in sentence contexts: an ERP study. Brain research. 1372, 81-91 (2011).
  22. Leminen, A., Smolka, E., Dunabeitia, J. A., Pliatsikas, C. Morphological processing in the brain: The good (inflection), the bad (derivation) and the ugly (compounding). Cortex. 116, 4-44 (2019).
  23. Pylkkänen, L. The neural basis of combinatory syntax and semantics. Science. 366 (6461), 62-66 (2019).
  24. Halgren, E., et al. N400-like magnetoencephalography responses modulated by semantic context, word frequency, and lexical class in sentences. Neuroimage. 17 (3), 1101-1116 (2002).
  25. Huang, Y., Jiang, M., Guo, Q., Wang, Y., Yang, F. -. P. G. Dissociation of the confounding influences of expectancy and integrative difficulty residing in anomalous sentences in event-related potential studies. Journal of Visualized Experiments. (147), e59436 (2019).
  26. Wang, Y., Jiang, M., Huang, Y., Qiu, P. An ERP study on the role of phonological processing in reading two-character compound chinese words of high and low frequency. Frontiers in Psychology. 12, 637238 (2021).
  27. Carreiras, M., Vergara, M., Barber, H. Early event-related potential effects of syllabic processing during visual word recognition. Journal of Cognitive Neuroscience. 17 (11), 1803-1817 (2005).
  28. Hauk, O., Davis, M. H., Ford, M., Pulvermuller, F., Marslen-Wilson, W. D. The time course of visual word recognition as revealed by linear regression analysis of ERP data. Neuroimage. 30 (4), 1383-1400 (2006).
check_url/62673?article_type=t

Play Video

Cite This Article
Wang, Y., Jiang, M., Xu, X., Huang, Y. Interaction between Phonological and Semantic Processes in Visual Word Recognition using Electrophysiology. J. Vis. Exp. (172), e62673, doi:10.3791/62673 (2021).

View Video