Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
JoVE Science Education
Sensation and Perception

You have full access to this content through Seoul National University of Education

Japanese
 

Transcript

Please note that all translations are automatically generated.

Click here for the English version.

言語認識-音声形式で-口供給する特定のサウンドを咬合の良い視覚情報として対面の相互作用からの利点します。

例えば、間近と遮るもののない状況で個人は彼らの友人を見ることができるビーチに行く言及。この場合、彼らは視覚入力を使用-唇と舌の前後の動きを観察すること-明確に言われたことを理解します。

しかし、見えない別の部屋で話をする友人が引き続き発生する場合彼らはテレビをミュートしたくなるかもしれません、したがってメッセージの意味をなさないに閉塞の声に頼る必要がありますのみ。

この場合、何実際に最後尾のピックアップ、サイレントのキックに干渉し、いってダニとして誤解されました。これは、マガーク効果の例-サウンドと視覚的特徴の間の不一致によって生じる錯覚。

このビデオは、もともとマガークとマクドナルドによって発見された現象をテストする視聴覚刺激を構築する方法を示します。また、ビジョンが個人が非常に若い年齢で言語を学ぶ方法を理解する健全な生産と対話する方法を調査します。

この実験では、参加者は、ゲインのような単語は口、音中など悩みの種は、バック グラウンドで同時に再生、ミュートのビデオを視聴する求められます。その後、彼らが聞いたことを共有するように求めています。

結果を理解するどのような錯覚が生成、まずについてどのように音素-音声の最小単位-明確にされます。

たとえば、悩みの種とゲインは、音/b/および g/である、最初の以外のすべてのポジションで同じ要素を共有します。

個人が完全に異なる 3 番目の音を聞くこと期待されるこれらの初期の音素の単語は、現在の/g を表示および/b/が再生されるときと同様に、聞こえるかもしれませんが、-d/— 代わりに。

/D/の聞いた理由は、明瞭度、または POA のポイントをすべての 3 つは、基本的には、スピーカーが空気の流れの閉塞を場所の差が小さいで同じ方法で作られていますという事実のために呼び出されます。

たとえば、/b/音が作られると、唇、唇 POA で g/のために、口蓋というに対し、その結果閉塞-口の奥に。/D/、POA は歯、上の歯に触れる舌の結果。

競合している現在の visual/g と聴覚/b/脳を統合し場合、は、最後の音がポアス、こうして聞いて/d/と単語デーンをレポートの途中でどこかにある必要がありますを終了します。

デモの準備で、ビデオカメラの動画とスマート フォンを提示するコンピューターを取得します。

あなたの頭全体に表示最初カメラを位置します。今、レコードの 4 つの 10 のクリップ各 1 ワード/秒のレートで 10 倍を繰り返す必要があります別の単語が含まれているを確認するゲインし、視覚の再生には、コンピューターにビデオをすることができます。

実験を行うためには、コンピューターの前に参加者を座っています。単語利得のビデオ ファイルを開くし、音声をオフします。

電話で悩みの種のためのビデオを開きます。その画面を非表示し、音だけをはっきり聞くことができるようにコンピューターの背後に配置します。

コンピューターのモニターを見ると耳を傾ける参加者に指示します。その後、両方の動画を同時に再生します。

クリップが終了すると、彼らが聞いたことを参加者に求めます。[参加者は言う:「デーン」]。コンピューターと電話でパン用のオーディオを提示ことができます単語のビデオを再生することにより手順を繰り返します。もう一度、彼らが聞いたことについて参加者に質問します。[参加者は言う:「タン」]。

ここでは、言葉の悩みの種とパン演奏された声を出して参加者を見てゲインと口することができます。通常、現在の/g 音素と用語は視覚的に示すし、サウンド/b/と共に、個人を聞く/d/。

同様に、/k/で始まる単語を音/p/と組み合わせれば、個人を聞く/t/。

このような聴覚の知覚の背後にある理由は、音が生成される方法が原因です。脳が唇の動きを見て目から情報が錯綜を解決しよう-/b/と/p/-耳聞く口蓋ユニット間-/g/そして/k/。結果として、それは歯科の音素の認識の結果として、途中で音する必要がありますうそ結論-/d/と/t/。

今、あなたは、マガーク効果を生成する方法に精通しているが、研究者がこの知覚現象を使用して言語の開発と効果が変更される場合を調査するいくつかの他の方法を見てみましょう。

幼児は、マガーク効果もテストできるとき前言語的、生後 5 カ月には早くも慣れの探して時間パラダイムを使用します。

この手順では、ローゼンブラムらテスト段階で一致しない音素を導入する前にオーディオとビジュアルの両方のドメインで、va のような特定の音節が繰り返し幼児を掲載しています。

幼児が va に慣れの兆し-削減時間を探して — と馴化、増加を探して、va 以外の何かが感知されたときは指摘しました。したがって、乳幼児は話すことができます、前にも、彼らは言語識別のための視覚情報の利用に依存している大人として同様の結果を表示します。

しかし、自閉症児はコントロール障害能力を理解し、顔のビジュアルコンポーネントに出席するために容易にマガーク効果を示す大きい難しさにあります。これは、言語とコミュニケーションの難しさに貢献するかもしれない視聴覚音声処理の根本的な違いを示します。

最後に、左半球の病変を有する患者-理解し、言語を学ぶのため通常優勢な側-しばしば視覚顔機能を使用して音声治療中に役立ちます。興味深いことに、マガーク効果をテストしたとき彼らはより多くのコントロールと比較して歯の音を聞くして報告しました。このような知覚は、視覚情報の彼らの高い焦点のため可能性があります。

マガーク効果でゼウスのビデオを見てきただけ。今この映像のイリュー ジョンを実施し、音素を発音に関連する方法を知っておくべき。さらに、視覚、聴覚、および開発と成人期の間の影響間の相互作用の理解を深める必要があります。

見てくれてありがとう!

Read Article

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
simple hit counter