Overview
Fuente: Laboratorio de Jonathan Flombaum, Johns Hopkins University
Lengua hablada, un logro humano singular, depende en gran medida de mecanismos perceptivos especializados. Una característica importante de los mecanismos de percepción del lenguaje es que al mismo tiempo confiar en información auditiva y visual. Esto tiene sentido, porque hasta los tiempos modernos, una persona podría esperar que se oirían más lengua en las interacciones cara a cara. Y porque la producción de sonidos específicos requiere de articulación precisa, la boca puede suministrar buena información visual sobre lo que alguien está diciendo. De hecho, con una vista íntima y sin obstrucciones de la cara de alguien, la boca puede a menudo proveer mejores las señales visuales de discurso suministra señales auditivas. El resultado es que el cerebro humano favorece la entrada visual y lo utiliza para eliminar la ambigüedad inherente ambigüedad en el lenguaje oral.
Esta dependencia de entrada visual para interpretar el sonido fue descrito por Harry McGurk y John Macdonald en un documento en 1976 llamado escuchar labios y viendo voces. 1 en ese documento, describe una ilusión que surge por un desajuste entre un sonido y una grabación de vídeo. Esa ilusión se ha conocido como el efecto McGurk. Este video muestra cómo producir e interpretar el efecto McGurk.
Procedure
1. estímulos
- Para hacer McGurk estímulos efecto necesita un cámara de vídeo, el tipo en un smartphone está muy bien.
- Usted también necesitará un ordenador para controlar la presentación de los videos a un sujeto ingenuo.
- La cámara sí mismo, hasta que punto de la cabeza llena la pantalla.
- Hacer cuatro grabaciones. Cada uno debe ser 10 s largo. En cada una de las cuatro grabaciones, te repites una palabra 10 veces, aproximadamente 1/s.. Aquí están las palabras: bane, gain, pan, puede. Trate de decir las palabras en cada video a un ritmo similar.
2. inducir la ilusión
- Para inducir la ilusión, usted podría empalmar el sonido de un vídeo y la imagen del otro. Pero eso no es realmente necesario. Es más fácil hacerlo sólo mediante el uso de su teléfono y un ordenador al mismo tiempo. Aquí es cómo.
- En el escritorio de su computadora Abra el video en el que dices tener. Apagar el sonido y reproducir el vídeo.
- En su teléfono abre el video en el que usted está diciendo bane. Poner el teléfono detrás de la pantalla del ordenador para que el sonido puede ser escuchado, pero no se puede ver el video. Reproducir el vídeo.
- Pedir un observador para ver la pantalla del ordenador mientras se escucha, y cuando el video se hace jugando, preguntarles lo que habían oído.
- Lo mismo para el pan/can videos: reproducir la secuencia de la imagen de puede decir mientras el teléfono reproduce el flujo de audio de los vídeos de pan. Pedir que el participante lo que oyó.
Percepción del lenguaje, en una forma hablada, se beneficia de las interacciones cara a cara, como la boca provee buena información visual para articular sonidos específicos.
Por ejemplo, en una situación íntima y sin obstáculos, un individuo puede ver su amigo mencionar ir a la playa. En este caso, usa entrada visual, observando el movimiento alrededor de los labios y la lengua — a comprender claramente lo que decía.
Sin embargo, si el amigo continúa a hablar fuera de la vista en otra habitación, puede estar tentados a ver la televisión apagada y por lo tanto debe confiar únicamente en la voz obstruida al sentido del mensaje.
En este caso, qué decía realmente el final de la cola, recoger, interfirió con la patada silenciosa y fue malinterpretado como garrapata. Este es un ejemplo del efecto McGurk, una ilusión perceptiva que surge por un desajuste entre señales sonora y visuales.
Este vídeo muestra cómo construir los estímulos audiovisuales para probar el fenómeno originalmente descubierto por McGurk y Macdonald. También investiga cómo visión interactúa con la producción de sonido para entender cómo los individuos aprenden a una edad muy temprana.
En este experimento, se piden a los participantes a ver videos de silencio, en el que una palabra como ganancia es con la boca, mientras que un sonido como bane es jugado simultáneamente en el fondo. Luego, se les pide que compartan lo que escucharon.
Para entender el resultado, cómo se produce la ilusión de, vamos a discutir primero como fonemas, las unidades mínimas de sonidos del lenguaje, se articulan.
Por ejemplo, bane y ganancia comparten los mismos elementos en todas las posiciones excepto la primera, que son los sonidos/b / y/g.
Aunque palabras con estos fonemas iniciales pueden sonar similar, cuando se muestra/g/ y/b / se reproducen, individuos esperan oír un sonido tercera totalmente diferente — / d, en lugar de otro.
La razón/d/ se escucha se llama debido a que los tres se producen básicamente de la misma manera, con sólo una pequeña diferencia en donde el altavoz coloca una obstrucción en el flujo de aire, los puntos de articulación, o POA.
Por ejemplo, cuando se hace un sonido / b /, labios proporcionan la obstrucción, dando por resultado un POA labial, mientras que para/g /, se refiere a como Palatina, en la parte posterior de la boca. En cuanto a/d /, el POA es dental, una consecuencia de la lengua tocando los dientes superiores.
Cuando el cerebro integra el conflicto/g/ visual y auditiva/b /, se concluye que el sonido final debe estar en algún lugar en el centro de POAs, así oír/d/ e informes la palabra Dane.
En preparación para la demostración, obtener un equipo para presentar videos en y un smartphone con una cámara de vídeo.
Primero coloque la cámara para que tu cabeza llena la pantalla. Ahora, grabamos cuatro clips de 10-s, cada una con diferentes palabras que deben repetir 10 veces a un ritmo de 1 palabra/s. Asegúrese de que el aumento de la transferencia y vídeos al ordenador para la reproducción visual.
Para realizar el experimento, se sientan a un participante frente a la computadora. Abra el archivo de vídeo para el aumento de la palabra y apagar el audio.
En el teléfono, abrir el video de bane. Colocar detrás de la computadora para que su pantalla está oculta y sólo el sonido puede oírse claramente.
Instruir a los participantes a ver a la pantalla del ordenador y escuchar. Entonces, jugar ambos videos al mismo tiempo.
Cuando los clips, pedir al participante lo que escucharon. [Participante dice: "Dane"]. Repita el procedimiento de reproducir el vídeo de la palabra puede en la computadora y que presenta el audio de pan en el teléfono. Una vez más, la pregunta al participante en cuanto a lo que escucharon. [Participante dice: "tan"].
Aquí, las palabras bane y pan fueron jugados en voz alta mientras los participantes veían ganancia y puede ser de boca. Por lo general, cuando un término con el fonema/g/ se muestra visualmente y emparejado con el sonido/b /, individuos oirán/d /.
Asimismo, cuando se empareja una palabra comenzando con/k / con el sonido/p /, individuos oirán/t /.
La razón detrás de esta percepción auditiva es debido a la forma en que se producen sonidos. El cerebro intenta resolver información contradictoria proveniente de los ojos ver movimientos labiales — / b/y/p /, mientras que los oídos escuchan palatales unidades — / g/ y/k /. Como resultado, se concluye que el sonido debe estar en el medio, dando lugar a la percepción de fonemas dentales: / d/y/t/.
Ahora que usted está familiarizado con cómo producir el efecto McGurk, echemos un vistazo a algunas otras formas que los investigadores utilizan este fenómeno perceptivo para investigar casos en que se altera el efecto y desarrollo del lenguaje.
Los niños incluso pueden ser probados en el efecto de McGurk ya cinco meses de edad, cuando son la lingüísticas, utilizando un paradigma de habituación de busca-tiempo.
En este procedimiento, Rosenblum y colegas repetidamente presentan niños con una determinada sílaba, como va, en los dominios de audio y visuales antes de introducir los fonemas no coincidentes en una fase de prueba.
Niños demostraron muestras de la habituación a va — reducido buscando tiempos — y dishabituation, señaló como mayor buscando, cuando se percibe algo que no va. Así, incluso antes de que los niños pueden hablar, muestran resultados similares que los adultos, en el que se basan en el uso de la información visual para la discriminación de la lengua.
Sin embargo, los niños con autismo tienen mayores dificultades para exponer tan fácilmente como los controles debido a su capacidad para entender y atender a los componentes faciales visuales el efecto McGurk. Esto indica diferencias fundamentales en el proceso de expresión audiovisual, que puede contribuir a su dificultad con el lenguaje y la comunicación.
Por último, los pacientes con lesiones en su hemisferio izquierdo, el lado típicamente predominante para la comprensión y aprendizaje de lengua — suelen ser rasgos visuales para ayudar durante terapia del habla. Curiosamente, al ensayarse el efecto McGurk, más a menudo informaron escuchar sonidos dentales comparados a los controles. Tales percepciones son probablemente debido a su mayor enfoque en la información visual.
Sólo has visto video de Zeus sobre el efecto McGurk. Ahora debe saber cómo llevar a cabo esta ilusión audiovisual y relacionar fonemas de sonido. Además, también tendrá una mejor comprensión de las interacciones entre la visión y audición, y cómo pueden ser afectados durante el desarrollo y la edad adulta.
¡Gracias por ver!
Subscription Required. Please recommend JoVE to your librarian.
Results
Recuerde, los sonidos a su observador el bane de palabras o el pan. Pero en los videos adjuntos, las palabras se articulan son ganancia y pueden respectivamente. ¿Así las palabras que la gente realmente escuchará? La respuesta suele ser ninguno de esos cuatro. En cambio, el resultado típico es que los observadores en la condición de aumento de bane escuchará la palabra Dane. Y observadores en la condición de pan/can oirá el bronceado de la palabra.
Para entender por qué tenemos que entender un poco acerca de cómo se producen los fonemas. Un fonema es una unidad mínima de sonido del discurso. Las palabras bane y ganancia tienen los mismos fonemas en todas las posiciones pero la primera. En la maldición de la palabra el primer fonema es un b sonido, denota/b /. En el aumento de la palabra es el sonido/g/. Los restantes sonidos están el mismo que es por eso la rima de palabras. Figura 1 analiza el efecto de McGurk en cuanto a los fonemas iniciales en estos ejemplos. Cuando se muestra/b / y/g/ se reproducen, las personas escuchan/d /. La palabra Dane en otras palabras también rima con bane y ganancia, con una diferencia de un fonema desde el principio.
Figura 1: Efecto de McGurk el ocurre cuando hay un desajuste entre un fonema que se articula en una presentación visual y diferentes fonemas se juega simultáneamente a través de altavoces. Con fonemas que comparten ciertas propiedades de la articulación, el resultado oído puede no coincidir con cualquiera de los estímulos une mal. En el desajuste provoca un tercer sonido para ser escuchado. Específicamente, una/g/ visual con una/b / auditiva causa el fonema/d/ a ser escuchado. Por esta razón un aumento visual con un bane auditiva resulta en danés se escuchan. Igualmente, una/k / visual con un auditivo/p / conduce el sonido/t/ a ser escuchado. Es por qué puede pan tan produce el efecto McGurk.
¿Por qué conflicto/b / y/g/ producen una/d/ específicamente? Bien, / b /, / g/ y/d/ son realmente no tan diferentes uno del otro, especialmente en términos de cómo se producen. Las tres implican básicamente mover la misma cantidad de aire de la laringe de una persona a través de su boca, con sólo una diferencia en donde el orador pone una pequeña obstrucción. Cuando alguien hace una/b /, utilizan sus labios para obstruir el aire; Esto se conoce como punto de articulación labial. Para un sonido, que el punto de articulación es palatal-it / g/ es ahora en la parte posterior de la boca. Y para un sonido / d/, el punto de articulación se denomina dental porque personas obstruyen el flujo de aire a través de la boca tocando la lengua a los dientes superiores. La figura 2 muestra los puntos relativos de la articulación de los fonemas de seis en el efecto McGurk.
Figura 2: Los seres humanos producen sonidos moviendo el aire a través de la garganta y boca. Se trata de las vibraciones de la laringe. Un conjunto determinado de vibraciones producidas en la laringe puede producir varios fonemas diferentes al obstruir el flujo de aire. El lugar donde se coloca un obstáculo para crear un sonido se llama el punto de articulación. Tres puntos importantes de la articulación se denominan labiales, refiriéndose a los labios; dental, refiriéndose a los dientes; y palatal, refiriéndose a la boca, o la cubierta trasera de la boca. La figura muestra cómo los fonemas producidos y escuchados en el efecto de McGurk difieren en cuanto a sus puntos de articulación.
Ahora que conoces un poco sobre cómo estos sonidos se producen, la lógica del efecto McGurk debe ser más evidente. Funciona así: tu cerebro sabe que algunos fonemas son realmente muy similares a uno otro. En el efecto de McGurk la maldición de la palabra se juega al observador, led apagado por un sonido / b /. Pero la cara en el video está moviendo la boca como si fuera para hacer un sonido / g/ y la palabra ganar. Por lo tanto, el cerebro recibe entradas conflictivas de los ojos y oídos. Para resolver el conflicto, el cerebro llega a la conclusión que la verdad es probablemente un lugar en el medio. Puesto que/d/ es el sonido entre la/b / y/g / - en términos de producción - que es lo que la gente oye. La misma explicación se aplica para dar vuelta el conflicto entre el pan y puede en tan. / p / es un sonido labial, y/k / es un sonido palatal. Dental en el medio es t /.
Subscription Required. Please recommend JoVE to your librarian.
Applications and Summary
Es un lugar que el efecto de McGurk haya sido importante en la comprensión de cómo muy los niños pequeños aprenden lengua hablada. Un estudio en 1997 fue capaz de mostrar que incluso 5 meses los bebés perciben el efecto McGurk. 2 esto es importante porque sugiere que información visual puede utilizarse por los niños para resolver un desafío importante para aprender idioma-análisis de un flujo continuo de audio en sus unidades. Piense en cómo puede parecer un idioma extranjero a su velocidad normal como tal revoltijo que usted podría no saben dónde están los límites de la palabra. Bueno, si todos los idiomas son de origen extranjeros a los niños, entonces ¿cómo calcular donde las palabras son? El efecto McGurk sugiere que puede confiar en los patrones de articulación facial.
Subscription Required. Please recommend JoVE to your librarian.
References
- McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264, 746-748.
- Rosenblum, L. D., Schmuckler, M. A., & Johnson, J. A. (1997). The McGurk effect in infants. Perception & Psychophysics, 59(3), 347-357.
