Der McGurk-Effekt

JoVE Science Education
Sensation and Perception
Zum Anzeigen dieser Inhalte ist ein JoVE-Abonnement erforderlich.  Melden Sie sich an oder starten Sie Ihre kostenlose Testversion.
JoVE Science Education Sensation and Perception
The McGurk Effect

15,829 Views

08:13 min
April 30, 2023

Übersicht

Quelle: Labor von Jonathan Flombaum, Johns Hopkins University

Gesprochener Sprache, eine einzigartige menschliche Errungenschaft stützt sich stark auf spezialisierte perzeptuellen Mechanismen. Ein wichtiges Merkmal der Sprache Wahrnehmung Mechanismen ist, dass sie gleichzeitig auf die auditiven und visuellen Informationen stützen. Dies ist sinnvoll, weil eine Person bis zur Neuzeit, erwarten könnte, dass die meisten Sprache im persönlichen Umgang gehört zu werden. Und weil bestimmte Sprachlaute präzise Artikulation erfordert, der Mund liefern gute visuelle Informationen, was jemand sagt. In der Tat, mit einem aus nächster Nähe und unverbaubaren Blick auf das Gesicht von jemandem liefern der Mund oft bessere visuelle Signale als Rede auditive Signale liefert. Das Ergebnis ist, dass das menschliche Gehirn visuelle Eingang begünstigt, und sie, verwendet um die inhärenten Mehrdeutigkeit in der gesprochenen Sprache eindeutig zu machen.

Diese Abhängigkeit von visuellen Input Sound interpretieren wurde von Harry McGurk und John Macdonald in ein Papier in 1976 genannt Lippen zu hören und zu sehen, stimmenbeschrieben. 1 in diesem Papier beschrieben sie eine Illusion, die durch ein Missverhältnis zwischen einer Tonaufnahme und eine video-Aufnahme entsteht. Diese Illusion ist als der McGurk-Effekt bekannt geworden. Dieses Video demonstriert, wie zu produzieren und interpretieren den McGurk-Effekt.

Verfahren

(1) Reize Um McGurk Effekt Reize, die Sie benötigen, eine Video-Kamera-die Art auf einem Smartphone ist fein. Sie benötigen auch einen Computer zur Steuerung der Präsentation von Videos zu einem naiven Thema. Richten Sie die Kamera auf sich selbst, so dass Ihr Kopf das Display ausfüllt. Vier Aufnahmen zu machen. Jeder sollte 10 s lang. In jedem der vier Aufnahmen müssen Sie ein Wort 10mal, etwa 1/s wiederholen. Hier sind die Worte: Bane, gewinnen, schwenken, kann. Versuchen Sie, die Worte in jedem Video in einem ähnlichen Tempo. (2) induzieren die Illusion Um die Illusion zu induzieren, könnten Sie gemeinsam den Ton von einem Video und Bild aus einer anderen Spleißen. Aber das ist nicht wirklich notwendig. Es ist einfacher, tun Sie es einfach mit Ihrem Telefon und einem Computer gleichzeitig. Hier ist wie. Auf Ihrem Desktop öffnen Sie das Video, in dem du sagst, zu gewinnen. Schalten Sie den Ton, und starten Sie das Video. Auf Ihrem Handy öffnen Sie das Video, in dem Sie Bane sagen. Setzen Sie das Telefon hinter dem Computer-Bildschirm, so dass der Ton zu hören, aber das Video nicht zu sehen. Das Video abzuspielen. Fragen eines Beobachters auf den Computer-Bildschirm sehen Sie beim hören, und wenn das Video fertig spielen, Fragen sie, was sie zu hören. Machen Sie dasselbe für die Pfanne/Videos können: die Bild-Stream von Ihnen sagen kann zu spielen, während Ihr Telefon den Audiostream aus dem Pan-Video spielt. Bitten Sie die Teilnehmer, was sie hören.

Ergebnisse

Remember, the sounds played to your observer are either the words bane or pan. But in the accompanying videos, the words being articulated are gain and can respectively. So which words will people actually hear? The answer is most often none of those four. Instead, the typical result is that observers in the bane/gain condition will hear the word Dane. And observers in the pan/can condition will hear the word tan. To understand …

Applications and Summary

Ein Ort, dass der McGurk-Effekt wichtig wurde ist verstehen, wie sehr junge Säuglinge gesprochene Sprache lernen. Eine Studie im Jahr 1997 war in der Lage zu zeigen, dass sogar 5 Monate alte Säuglinge den McGurk-Effekt wahrnehmen. 2 Dies ist wichtig, denn es suggeriert, dass visuelle Informationen von Säuglingen verwendet werden können, um eine große Herausforderung, lernen Sprache analysieren einen kontinuierliche Audiostream in ihren Einheiten zu lösen. Denken Sie an wie eine Fremdsprache mit der norma…

Referenzen

  1. McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264, 746-748.
  2. Rosenblum, L. D., Schmuckler, M. A., & Johnson, J. A. (1997). The McGurk effect in infants. Perception & Psychophysics, 59(3), 347-357.

Transkript

(1) Reize Um McGurk Effekt Reize, die Sie benötigen, eine Video-Kamera-die Art auf einem Smartphone ist fein. Sie benötigen auch einen Computer zur Steuerung der Präsentation von Videos zu einem naiven Thema. Richten Sie die Kamera auf sich selbst, so dass Ihr Kopf das Display ausfüllt. Vier Aufnahmen zu machen. Jeder sollte 10 s lang. In jedem der vier Aufnahmen müssen Sie ein Wort 10mal, etwa 1/s wiederholen. Hier sind die Worte: Bane, gewinnen, schwenken, kann. Versuchen Sie, die Worte in jedem Video in einem ähnlichen Tempo. (2) induzieren die Illusion Um die Illusion zu induzieren, könnten Sie gemeinsam den Ton von einem Video und Bild aus einer anderen Spleißen. Aber das ist nicht wirklich notwendig. Es ist einfacher, tun Sie es einfach mit Ihrem Telefon und einem Computer gleichzeitig. Hier ist wie. Auf Ihrem Desktop öffnen Sie das Video, in dem du sagst, zu gewinnen. Schalten Sie den Ton, und starten Sie das Video. Auf Ihrem Handy öffnen Sie das Video, in dem Sie Bane sagen. Setzen Sie das Telefon hinter dem Computer-Bildschirm, so dass der Ton zu hören, aber das Video nicht zu sehen. Das Video abzuspielen. Fragen eines Beobachters auf den Computer-Bildschirm sehen Sie beim hören, und wenn das Video fertig spielen, Fragen sie, was sie zu hören. Machen Sie dasselbe für die Pfanne/Videos können: die Bild-Stream von Ihnen sagen kann zu spielen, während Ihr Telefon den Audiostream aus dem Pan-Video spielt. Bitten Sie die Teilnehmer, was sie hören.