맥거크 효과

JoVE 과학 교육
Sensation and Perception
JoVE 비디오를 활용하시려면 도서관을 통한 기관 구독이 필요합니다.  전체 비디오를 보시려면 로그인하거나 무료 트라이얼을 시작하세요.
JoVE 과학 교육 Sensation and Perception
The McGurk Effect

15,830 Views

08:13 min
April 30, 2023

개요

출처: 조나단 플롬바움 연구소 -존스 홉킨스 대학

인간의 단수 적인 성취인 말하는 언어는 전문적인 지각 메커니즘에 크게 의존합니다. 언어 지각 메커니즘의 한 가지 중요한 특징은 청각 및 시각적 정보에 동시에 의존한다는 것입니다. 현대까지, 사람이 대부분의 언어가 대면 상호 작용에서 들릴 것이라고 기대할 수 있기 때문에 이것은 의미가 있습니다. 그리고 특정 음성 소리를 생성하려면 정확한 관절이 필요하기 때문에 입은 누군가가 말하는 것에 대한 좋은 시각적 정보를 제공 할 수 있습니다. 사실, 누군가의 얼굴을 가까이서 방해받지 않는 시야를 가진 입은 종종 음성공급보다 더 나은 시각적 신호를 제공 할 수 있습니다 청각 신호. 그 결과 인간의 뇌는 시각적 입력을 선호하고, 음성 언어로 내재된 모호성을 모호하게 하는 데 사용합니다.

사운드를 해석하기 위한 시각적 입력에 대한 이러한 의존은 해리 맥거크와 존 맥도널드가 1976년 입술을 듣고 목소리를 보는논문에서 설명되었습니다. 1 이 논문에서 그들은 음원과 비디오 녹화 사이의 불일치를 통해 발생하는 환상을 설명했다. 그 환상은 맥거크 효과로 알려지게되었다. 이 비디오는 McGurk 효과를 제작하고 해석하는 방법을 보여줍니다.

Procedure

1화 자극 McGurk 효과 자극을 만들기 위해 당신은 비디오 카메라가 필요합니다 – 스마트 폰에 종류는 괜찮습니다. 또한 순진한 주제에 대한 비디오 프레젠테이션을 제어하려면 컴퓨터가 필요합니다. 머리가 디스플레이를 채울 수 있도록 카메라를 직접 가리킵니다. 네 개의 녹음을 합니다. 각각 10s 길이여야 합니다. 네 개의 레코딩 각각에서 1/s 정도의 단어를 10번 반복합니다. 베인, 게인, 팬, 캔 : 여기에 단어가 있습니다. 각 동영상의 단어를 비슷한 속도로 말하려고 합니다. 2. 환상을 유도 환상을 유도하기 위해, 당신은 한 비디오에서 소리와 다른 사진에서 함께 스플라이스 수 있습니다. 그러나 그것은 정말로 필요하지 않습니다. 휴대 전화와 컴퓨터를 동시에 사용하여 수행하는 것이 더 쉽습니다. 방법은 다음과 같습니다. 컴퓨터 데스크톱에서 게인을 말하는 비디오를 엽니다. 사운드를 끄고 비디오를 재생합니다. 휴대 전화에 당신이 베인을 말하는 비디오를 엽니 다. 소리가 들릴 수 있도록 컴퓨터 화면 뒤에 전화를 넣어,하지만 비디오를 볼 수 없습니다. 비디오를 재생합니다. 관찰자에게 청취 하는 동안 컴퓨터 화면을 보고, 비디오 재생이 완료되면, 그들이 들었던 것을 물어보십시오. 팬 / 캔 비디오에 대해 동일한 작업을 수행 : 휴대 전화가 팬 비디오에서 오디오 스트림을 재생하는 동안 할 수 말하는 당신의 사진 스트림을 재생합니다. 참가자에게 그녀가 들은 것을 물어본다.

Results

관찰자에게 재생된 소리는 베인이나 팬이라는 단어입니다. 그러나 첨부 된 비디오에서, 관절되는 단어는 이득과 각각 할 수 있습니다. 그렇다면 사람들은 실제로 어떤 단어를 들을 수 있을까요? 대답은 가장 자주 그 네 가지 중 하나입니다. 대신, 일반적인 결과는 베인 / 게인 조건의 관찰자가 데인이라는 단어를들을 수 있다는 것입니다. 그리고 팬 /캔 조건의 관찰자는 황?…

Applications and Summary

McGurk 효과가 중요한 한 곳은 아주 어린 유아가 말하는 언어를 배우는 방법을 이해하는 것입니다. 1997년의 한 연구에서는 5개월 된 유아조차도 맥거크 효과를 인식하는 것을 보여줄 수 있었습니다. 2 이는 영유아가 언어 구문 분석에 대한 주요 과제를 해결하기 위해 시각적 정보를 사용할 수 있음을 시사하기 때문에 중요하다. 외국어가 정상 속도로 사용되는 것은 경계라는 단어가 어디에 ?…

References

  1. McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264, 746-748.
  2. Rosenblum, L. D., Schmuckler, M. A., & Johnson, J. A. (1997). The McGurk effect in infants. Perception & Psychophysics, 59(3), 347-357.

내레이션 대본

1화 자극 McGurk 효과 자극을 만들기 위해 당신은 비디오 카메라가 필요합니다 – 스마트 폰에 종류는 괜찮습니다. 또한 순진한 주제에 대한 비디오 프레젠테이션을 제어하려면 컴퓨터가 필요합니다. 머리가 디스플레이를 채울 수 있도록 카메라를 직접 가리킵니다. 네 개의 녹음을 합니다. 각각 10s 길이여야 합니다. 네 개의 레코딩 각각에서 1/s 정도의 단어를 10번 반복합니다. 베인, 게인, 팬, 캔 : 여기에 단어가 있습니다. 각 동영상의 단어를 비슷한 속도로 말하려고 합니다. 2. 환상을 유도 환상을 유도하기 위해, 당신은 한 비디오에서 소리와 다른 사진에서 함께 스플라이스 수 있습니다. 그러나 그것은 정말로 필요하지 않습니다. 휴대 전화와 컴퓨터를 동시에 사용하여 수행하는 것이 더 쉽습니다. 방법은 다음과 같습니다. 컴퓨터 데스크톱에서 게인을 말하는 비디오를 엽니다. 사운드를 끄고 비디오를 재생합니다. 휴대 전화에 당신이 베인을 말하는 비디오를 엽니 다. 소리가 들릴 수 있도록 컴퓨터 화면 뒤에 전화를 넣어,하지만 비디오를 볼 수 없습니다. 비디오를 재생합니다. 관찰자에게 청취 하는 동안 컴퓨터 화면을 보고, 비디오 재생이 완료되면, 그들이 들었던 것을 물어보십시오. 팬 / 캔 비디오에 대해 동일한 작업을 수행 : 휴대 전화가 팬 비디오에서 오디오 스트림을 재생하는 동안 할 수 말하는 당신의 사진 스트림을 재생합니다. 참가자에게 그녀가 들은 것을 물어본다.