L'effetto McGurk

JoVE Educazione Scientific
Sensation and Perception
È necessario avere un abbonamento a JoVE per visualizzare questo.  Accedi o inizia la tua prova gratuita.
JoVE Educazione Scientific Sensation and Perception
The McGurk Effect

15,830 Views

08:13 min
April 30, 2023

Panoramica

Fonte: Laboratorio di Jonathan Flombaum—Johns Hopkins University

La lingua parlata, una singolare conquista umana, si basa fortemente su meccanismi percettivi specializzati. Una caratteristica importante dei meccanismi di percezione del linguaggio è che si basano contemporaneamente su informazioni uditive e visive. Questo ha senso, perché fino ai tempi moderni, una persona poteva aspettarsi che la maggior parte della lingua sarebbe stata ascoltata nelle interazioni faccia a faccia. E poiché la produzione di suoni vocali specifici richiede un’articolazione precisa, la bocca può fornire buone informazioni visive su ciò che qualcuno sta dicendo. Infatti, con una visione ravvicinata e senza ostacoli del viso di qualcuno, la bocca può spesso fornire segnali visivi migliori rispetto ai segnali uditivi che forniscono segnali uditivi. Il risultato è che il cervello umano favorisce l’input visivo e lo usa per disambiguare l’ambiguità intrinseca nel linguaggio parlato.

Questa dipendenza dall’input visivo per interpretare il suono è stata descritta da Harry McGurk e John Macdonald in un articolo del 1976 intitolato Hearing lips and seeing voices. 1 In quel documento, essi descrivevano un’illusione che sorge a seguito di una mancata corrispondenza tra una registrazione sonora e una registrazione video. Questa illusione è diventata nota come effetto McGurk. Questo video dimostrerà come produrre e interpretare l’effetto McGurk.

Procedura

1. Stimoli Per rendere gli stimoli dell’effetto McGurk avrai bisogno di una videocamera, del tipo su uno smartphone va bene. Avrai anche bisogno di un computer per controllare la presentazione dei video a un soggetto ingenuo. Punta la fotocamera verso te stesso, in modo che la testa riempia il display. Fai quattro registrazioni. Ognuno dovrebbe essere lungo 10 s. In ciascuna delle quattro registrazioni, ripeterai una parola 10 volte, circa 1/s. Ecco le parole: bane, gain, pan, can. Prova a pronunciare le parole in ogni video a un ritmo simile. 2. Indurre l’illusione Per indurre l’illusione, potresti unire insieme il suono di un video e l’immagine di un altro. Ma non è davvero necessario. È più facile farlo semplicemente usando il telefono e un computer contemporaneamente. Ecco come. Sul desktop del tuo computer apri il video in cui stai dicendo guadagno. Disattiva l’audio e riproduci il video. Sul tuo telefono apri il video in cui stai dicendo bane. Metti il telefono dietro lo schermo del computer in modo che il suono possa essere ascoltato, ma il video non può essere visto. Riproduci il video. Chiedi a un osservatore di guardare lo schermo del computer durante l’ascolto e, quando il video ha finito di riprodurlo, chiedi loro cosa hanno sentito. Fai lo stesso per i video pan/can: riproduci il flusso di immagini di te che dici di puoi mentre il tuo telefono riproduce il flusso audio dal video pan. Chiedi al partecipante cosa ha sentito.

Risultati

Ricorda, i suoni riprodotti al tuo osservatore sono le parole bane o pan. Ma nei video di accompagnamento, le parole articolate sono rispettivamente guadagno e possono. Quindi quali parole sentiranno effettivamente le persone? La risposta è il più delle volte nessuna di queste quattro. Invece, il risultato tipico è che gli osservatori nella condizione di bane / guadagno sentiranno la parola danese. E gli osservatori nella condizione pan/can sentiranno la parola abbronzatura. <p cla…

Applications and Summary

Un posto in cui l’effetto McGurk è stato importante è capire come i bambini molto piccoli imparano la lingua parlata. Uno studio del 1997 è stato in grado di dimostrare che anche i bambini di 5 mesi percepiscono l’effetto McGurk. 2 Questo è importante perché suggerisce che le informazioni visive possono essere utilizzate dai neonati per risolvere una grande sfida all’apprendimento della lingua: analizzare un flusso audio continuo nelle sue unità. Pensa a come una lingua straniera parlata alla sua velocit…

Riferimenti

  1. McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264, 746-748.
  2. Rosenblum, L. D., Schmuckler, M. A., & Johnson, J. A. (1997). The McGurk effect in infants. Perception & Psychophysics, 59(3), 347-357.

Trascrizione

1. Stimoli Per rendere gli stimoli dell’effetto McGurk avrai bisogno di una videocamera, del tipo su uno smartphone va bene. Avrai anche bisogno di un computer per controllare la presentazione dei video a un soggetto ingenuo. Punta la fotocamera verso te stesso, in modo che la testa riempia il display. Fai quattro registrazioni. Ognuno dovrebbe essere lungo 10 s. In ciascuna delle quattro registrazioni, ripeterai una parola 10 volte, circa 1/s. Ecco le parole: bane, gain, pan, can. Prova a pronunciare le parole in ogni video a un ritmo simile. 2. Indurre l’illusione Per indurre l’illusione, potresti unire insieme il suono di un video e l’immagine di un altro. Ma non è davvero necessario. È più facile farlo semplicemente usando il telefono e un computer contemporaneamente. Ecco come. Sul desktop del tuo computer apri il video in cui stai dicendo guadagno. Disattiva l’audio e riproduci il video. Sul tuo telefono apri il video in cui stai dicendo bane. Metti il telefono dietro lo schermo del computer in modo che il suono possa essere ascoltato, ma il video non può essere visto. Riproduci il video. Chiedi a un osservatore di guardare lo schermo del computer durante l’ascolto e, quando il video ha finito di riprodurlo, chiedi loro cosa hanno sentito. Fai lo stesso per i video pan/can: riproduci il flusso di immagini di te che dici di puoi mentre il tuo telefono riproduce il flusso audio dal video pan. Chiedi al partecipante cosa ha sentito.