6.12: El efecto McGurk

1. estímulos

1. Para hacer McGurk estímulos efecto necesita un cámara de vídeo, el tipo en un smartphone está muy bien.
2. Usted también necesitará un ordenador para controlar la presentación de los videos a un sujeto ingenuo.
3. La cámara sí mismo, hasta que punto de la cabeza llena la pantalla.
4. Hacer cuatro grabaciones. Cada uno debe ser 10 s largo. En cada una de las cuatro grabaciones, te repites una palabra 10 veces, aproximadamente 1/s.. Aquí están las palabras: bane, gain, pan, puede. Trate de decir las palabras en cada video a un ritmo similar.

2. inducir la ilusión

1. Para inducir la ilusión, usted podría empalmar el sonido de un vídeo y la imagen del otro. Pero eso no es realmente necesario. Es más fácil hacerlo sólo mediante el uso de su teléfono y un ordenador al mismo tiempo. Aquí es cómo.
2. En el escritorio de su computadora Abra el video en el que dices tener. Apagar el sonido y reproducir el vídeo.
3. En su teléfono abre el video en el que usted está diciendo bane. Poner el teléfono detrás de la pantalla del ordenador para que el sonido puede ser escuchado, pero no se puede ver el video. Reproducir el vídeo.
4. Pedir un observador para ver la pantalla del ordenador mientras se escucha, y cuando el video se hace jugando, preguntarles lo que habían oído.
5. Lo mismo para el pan/can videos: reproducir la secuencia de la imagen de puede decir mientras el teléfono reproduce el flujo de audio de los vídeos de pan. Pedir que el participante lo que oyó.

La percepción del lenguaje, en forma hablada, se beneficia de las interacciones cara a cara, ya que la boca proporciona buena información visual para articular sonidos específicos.

Por ejemplo, en una situación cercana y sin obstáculos, una persona puede ver a su amigo mencionar que va a la playa. En este caso, utilizan la información visual, observando el movimiento alrededor de los labios y la lengua, para comprender claramente lo que se dijo.

Sin embargo, si el amigo continúa hablando fuera de la vista en otra habitación, podría sentirse tentado a ver la televisión silenciada y, por lo tanto, debe confiar únicamente en la voz obstruida para dar sentido al mensaje.

En este caso, lo que realmente se dijo al final de la cola, pick, interfirió con la patada silenciosa y se malinterpretó como tic. Este es un ejemplo del efecto McGurk, una ilusión perceptiva que surge a través de un desajuste entre el sonido y las señales visuales.

Este video muestra cómo construir los estímulos audiovisuales para probar el fenómeno descubierto originalmente por McGurk y Macdonald. También investiga cómo la visión interactúa con la producción de sonido para comprender cómo las personas aprenden el lenguaje a una edad muy temprana.

En este experimento, se les pide a los participantes que vean videos silenciados, en los que se pronuncia una palabra como ganancia, mientras que un sonido como bane se reproduce simultáneamente en el fondo. Después, se les pide que compartan lo que escucharon.

Para entender el resultado, cómo se produce la ilusión, analicemos primero cómo se articulan los fonemas, las unidades mínimas de los sonidos del habla.

Por ejemplo, bane y gain comparten los mismos elementos en todas las posiciones excepto en la primera, que son los sonidos /b/ y /g/.

Aunque las palabras con estos fonemas iniciales pueden sonar similares, cuando se muestra /g/ y se reproduce /b/, se espera que los individuos escuchen un tercer sonido completamente diferente?/d/?en su lugar.

La razón por la que se escucha /d/ se debe al hecho de que los tres se producen básicamente de la misma manera, con solo una pequeña diferencia en el lugar donde el hablante coloca una obstrucción en el flujo de aire, llamados puntos de articulación o POA.

Por ejemplo, cuando se produce un sonido /b/, los labios proporcionan la obstrucción, lo que resulta en un POA labial, mientras que para /g/, se denomina palatal en la parte posterior de la boca. En cuanto a /d/, el POA es dental, consecuencia de que la lengua toque los dientes superiores.

Cuando el cerebro integra la conflictiva /g/ visual y la /b/ auditiva, concluye que el sonido final debe estar en algún lugar en el medio de los POAs, por lo que escucha la /d/ y reporta la palabra danés.

En preparación para la demostración, obtenga una computadora para presentar videos y un teléfono inteligente con una cámara de video.

Primero coloque la cámara de modo que su cabeza llene la pantalla. Ahora, grabe cuatro clips de 10 segundos, cada uno con diferentes palabras que deben repetirse 10 veces a una velocidad de 1 palabra/s. Asegúrese de transferir la ganancia y los videos de lata a la computadora para la reproducción visual.

Para llevar a cabo el experimento, siente a un participante frente a la computadora. Abra el archivo de video para la palabra ganancia y apague el audio.

En el teléfono, abre el video de bane. Colóquelo detrás de la computadora de modo que su pantalla quede oculta y solo se pueda escuchar claramente el sonido.

Indique al participante que mire el monitor de la computadora y escuche. Luego, reproduzca ambos videos simultáneamente.

Cuando terminen los clips, pregúntele al participante qué escuchó. [El participante dice: "Dane"]. Repita el procedimiento reproduciendo el video de la palabra lata en la computadora y presentando el audio para panorámica en el teléfono. Una vez más, pregúntele al participante qué escuchó. [El participante dice: "bronceado"].

Aquí, las palabras bane y pan se reproducían en voz alta mientras el participante observaba cómo se le decía a gain y can. Por lo general, cuando un término con el fonema /g/ se muestra visualmente y se empareja con el sonido /b/, las personas escucharán /d/.

Del mismo modo, cuando una palabra que comienza con /k/ se empareja con el sonido /p/, las personas escucharán /t/.

La razón detrás de dicha percepción auditiva se debe a la forma en que se producen los sonidos. El cerebro trata de resolver la información contradictoria de los ojos, viendo los movimientos labiales?/b/ y /p/?mientras que los oídos escuchan las unidades palatales?/g/ y /k/. Como resultado, se concluye que los sonidos deben estar en el medio, lo que resulta en la percepción de los fonemas dentales ?/d/ y /t/.

Ahora que está familiarizado con cómo producir el efecto McGurk, veamos algunas otras formas en que los investigadores utilizan este fenómeno perceptual para investigar el desarrollo del lenguaje y los casos en los que se altera el efecto.

Los bebés pueden incluso ser evaluados sobre el efecto McGurk a partir de los cinco meses de edad, cuando son prelingüísticos, utilizando un paradigma de habituación del tiempo de mirada.

En este procedimiento, Rosenblum y sus colegas presentaron repetidamente a los bebés una sílaba particular, como va, tanto en el dominio auditivo como en el visual antes de introducir fonemas no coincidentes en una fase de prueba.

Los lactantes mostraron signos de habituación a los tiempos de mirada reducidos y deshabituación, que se notó como un aumento de la mirada, cuando se percibía algo distinto de va. Por lo tanto, incluso antes de que los bebés puedan hablar, muestran resultados similares a los de los adultos, en los que confían en el uso de información visual para la discriminación del lenguaje.

Sin embargo, los niños con autismo tienen mayores dificultades para exhibir el efecto McGurk tan fácilmente como los controles debido a su capacidad deteriorada para comprender y prestar atención a los componentes faciales visuales. Esto indica diferencias fundamentales en el procesamiento del habla audiovisual, lo que puede contribuir a su dificultad con el lenguaje y la comunicación.

Por último, los pacientes con lesiones en el hemisferio izquierdo, el lado típicamente predominante para la comprensión y el aprendizaje del lenguaje, a menudo usan rasgos faciales visuales para ayudar durante la terapia del habla. Curiosamente, cuando se les evaluó el efecto McGurk, informaron con mayor frecuencia que escuchaban sonidos dentales en comparación con los controles. Es probable que estas percepciones se deban a su mayor enfoque en la información visual.

Acabas de ver el vídeo de JoVE sobre el efecto McGurk. Ahora debes saber cómo llevar a cabo esta ilusión audiovisual y relacionar los fonemas con la producción sonora. Además, también debe tener una mejor comprensión de las interacciones entre la visión y la audición, y cómo pueden verse afectadas durante el desarrollo y la edad adulta.

¡Gracias por mirar!