ソース: ジョナス ・ t. カプラン サラ I. ギンベル所-南カリフォルニア大学
鳴っている鐘の音を想像します。私たちは「心の耳」ですか? このような音を想起させるとき脳で起きていること脳が想像力の認識で使用するのと同じメカニズムを使用して成長している証拠があります。1視覚的なイメージを想像して…
1. 参加者募集
2. 事前スキャン手順
3 参加者の指示を提供します。
4. スキャナーの参加者を置きます。
5. データの収集
6. データの分析

図 1: 関心トレースの領域。平 temporale の表面は、この参加者の高解像度の解剖学的画像にトレースされているし、青色で示します。緑色で、前頭極のコントロール マスクです。これらの画素は、MVPA 分析のため使用されます。
聴覚イメージは、外部の聴覚刺激が存在しない場合でも、音を聞く経験を生み出すプロセスです。
たとえば、携帯電話が鳴る音を聞くことを考えてみてください。記憶内の情報がこの想像上の出来事の根底にある一方で、証拠は、個人の脳が実際の知覚に関与するものと同じメカニズムを想像力に使用していることを示唆しています。
リンギングを想像しただけで、聴覚野内の領域が活性化します。しかし、これは音響刺激全体に当てはまるとはいえ、ドアベルのチャイムとラジオで流れる曲を区別するなど、異なる音の詳細な処理を可能にするために音がどのように符号化されるかは重要な問題です。
Meyer氏らによる以前の研究に基づいて、このビデオでは、機能的磁気共鳴画像法(fMRI)とさまざまな無音ビデオのプレゼンテーションを組み合わせて、脳が聴覚画像にどのように反応するかを調査する方法を示します。
また、マルチボクセルパターン解析と呼ばれる方法の使用方法についても説明します。MVPAとは、fMRIセッション中に得られた活性化パターンを分析することにより、被験者が何を想像したかを予測することです。
この実験では、参加者はfMRIスキャナーに横たわり、一連の無音のビデオが表示されます。雄鶏の鳴き声、木を切り裂くチェーンソー、ピアノを弾く人の声など、それぞれが独特で鮮やかな聴覚イメージを呼び起こし、プレゼンテーションのたびに音を想像するように求められます。
画像取得手順は、スパーステンポラルサンプリングに依存しており、各刺激が提示されてから4〜5秒後に単一のfMRIボリュームが取得されます。このようなタイミングにより、血行動態応答のピークが捕捉され、信号がスキャナーノイズによってマスクされる可能性が低くなります。
想像されるそれぞれの音は、特に聴覚皮質において、微妙でありながら特徴的な神経活動のパターンを誘発することが期待されます。ここで、パターンがキーワードです:これらのデータを分析する古典的な方法は、単変量アプローチを使用し、個々のボクセル(ある程度の活性化を表す)を単一の平均に折りたたむというものです。
これらの値はサウンド間で比較され、アクティベーションレベルに大きな違いが生じない場合があります。
代わりに、多変量解析を使用して、サウンドごとに複数のボクセルを配置し、すべてのボクセルでアクティベーションレベルをまとめて比較できるため、想像されたサウンドごとに一意の全体パターンが生まれます。
このマルチボクセルパターン解析(MVPA)アプローチでは、パターンが実際に特定のコンテンツに敏感であれば、元の刺激を予測するために使用できる可能性があります。そうなんですか?MVPAはよく読心術と呼ばれます!
この予測の側面を達成するためには、参加者を収集した後に、より集中的な処理を実行する必要がありますか?トレーニング セットとテスト セットに分割されるデータ。
トレーニング セットのラベル付けされたデータは、最初に機械学習計算 (具体的には、サポート ベクター マシン アルゴリズム) の対象となります。このプロセスは、3種類の音を互いに区別する可能性のある神経パターンの特徴を認識することにより、データを正確に分類するために使用されます。
分類器がタイプを正確に識別するための特徴を学習した後、テストセットからラベル付けされていないデータが表示され、その推測が正しい刺激ラベルと比較されます。
この場合、分類性能は従属変数として機能し、分類器の精度として記録され、前頭極などの脳内の別の場所で誘発されるボクセルとも比較されます。
この分類器は、聴覚画像の識別を予測することが期待されており、聴覚皮質内のコンテンツ特異的な活動を検出する上でのMVPAの重要性を明らかにしています。
実験および安全性の懸念に従って、すべての参加者が右利きであり、視力が正常または正常に矯正されており、神経障害や閉所恐怖症の病歴がなく、体内に金属がないことを確認してください。また、必要な同意書に記入していることを確認してください。
先に進む前に、スキャナーにいくつかの短い無音のビデオが表示され、心に音が聞こえる可能性があることを説明してください。想像上の音に集中し、できる限り「聞く」ように頼み、タスクの間はじっとしているように頼みます。
次に、参加者がスキャナーに入る準備をします。これらの手順を詳しく見るには、このコレクションで制作された別のfMRIビデオを参照してください。
準備が完了したら、参加者を位置合わせし、ボア内に送ります。隣接する部屋で、最初に高解像度の解剖学的スキャンを収集します。
スパースな時間サンプリングを実現するには、MRIボリュームの取り込み時間を2秒に設定し、その間に9秒の遅延を挟みます。
重要なのは、各 5 秒のビデオ クリップの開始を、前の MRI 取得の開始から 4 秒後に開始するように調整して、ムービーの中央に対応する血行動態活動をキャプチャすることです。
各ビデオをランダムな順序で10回表示し、5.5分間のスキャンセッションを1回生成します。この機能取得シーケンスをさらに3回繰り返します。
4 つの機能スキャンが実行されたら、参加者をスキャナーから引き出し、研究を完了するために報告します。
関心のある領域を定義するには、各参加者の高解像度解剖学的スキャンを使用し、側頭葉の表面で、側頭平とも呼ばれる初期の聴覚皮質に対応するボクセルをトレースします。さらに、前頭葉にボクセルを含むマスクを作成し、これを制御領域として使用します。
次に、モーション補正を実行して移動アーティファクトを減らし、時間フィルタリングを実行して信号ドリフトを除去して、データを前処理します。
次に、データをトレーニングとテストの 2 つのセットに分割します。1つのデータセットで、分類器(サポートベクターマシンアルゴリズム)をトレーニングし、2つの脳領域からのデータを被験者ごとに分離するようにします。
もう一方のセットでは、分類器が学習した内容、つまりラベル付けされていないデータの ID を正しく推測する能力を評価し、実行全体でアルゴリズムの精度を記録します。この手順を合計 4 回実行し、毎回 1 つの機能スキャンをテスト データとして省略します (クロス検証と呼ばれるプロセス)。
データを視覚化するには、各参加者の 4 つの交差検証フォールド全体で平均化された分類器の精度をグラフ化します。
これらの平均を、主要な関心領域である平面的時間領域と対照領域である前頭極の両方についてプロットし、分類器の焦点特異性、聴覚皮質などの特定の領域が聴覚想像力に関与すると選択的に予測される程度を比較します。
この場合、ノンパラメトリック統計量であるWilcoxon Signed-Rank検定を実行して、偶然に対するパフォーマンス(33%)をテストします。聴覚皮質の平均分類器精度は59%であり、これはチャンスレベルとは大きく異なることに注意してください。
対照的に、前頭極マスクの平均性能は33%であり、偶然と有意差はありません。
さらに、分類子のパフォーマンスは個人によって異なることに注意してください。順列検定を使用して 42% の新しい統計的しきい値を計算した後、20 人の被験者のうち 19 人が、平面テンポラーレのボクセルを使用してこのレベルよりも有意に高い精度値を持っていたのに対し、前頭極のボクセルを使用した場合、偶然よりも優れたパフォーマンスを発揮した被験者はいなかったことがわかります。
全体として、これらの結果は、MVPA技術が、参加者が神経活動のパターンに基づいて3つの音のうちどれを想像しているかを正確に予測したことを示唆しています。このような予測は聴覚野内でのみ行われ、音響内容が脳全体で全体的に表現されていないことを示唆しています。
マルチボクセルパターン解析を聴覚イメージの研究に応用する方法を理解したところで、神経心理学者が多変量技術を使用して、他の領域で心を読むこと、つまり精神状態の解読という未来的なアプローチをどのように進めるかを見てみましょう。
腹側頭皮質から得られたfMRIデータでは、参加者が見た物体の種類を予測するために、例えば家と顔を区別するために、分類器が使用されています。
これをさらに一歩進めて、個人がその家を買うか、その人を楽しいと感じるかどうかを予測することさえ可能です。不気味に聞こえるかもしれませんが、これらのニューロマーケティングへの影響は大げさなものではありません。
同じアプローチは、番組を見た後の感情状態(怖い映画が本当に恐ろしいと認識する)や映画のジャンルを検出するためにも使用できます。例えば、この恐ろしい映画は、前頭前野を確実に関与させる瞑想的な映画よりも、より予想通り扁桃体を巻き込むかもしれません。
さらに、ブレイン・コンピュータ・インターフェースは、精神状態を信号に変換し、言語療法を受けている個人の場合や、手足の切断に苦しんでいる人々の運動の場合には、コミュニケーションを強化することができます。
JoVEのビデオ「マルチボクセルパターン解析を使用した聴覚イメージの理解」をご覧になりました。これで、機能的神経イメージングと組み合わせた聴覚イメージ実験の設計方法と実施方法、そして最後に脳活動の特定のパターンを分析および解釈する方法について十分に理解できたはずです。
ご覧いただきありがとうございます!
View the full transcript and gain access to JoVE Science Education videos
Q1: What is auditory imagery and how does it activate the brain?
Auditory imagery is the experience of hearing sounds without external auditory stimuli present. When you imagine a sound like a ringing phone, your brain activates the same regions involved in actual sound perception. Specifically, the auditory cortex becomes engaged during auditory imagery, demonstrating that imagination and perception share similar neural mechanisms.
Q2: Why is multivoxel pattern analysis better than traditional univariate fMRI analysis?
Univariate analysis collapses individual voxels into a single average, often failing to detect significant differences across sounds. Multivoxel pattern analysis examines activation patterns across multiple voxels collectively, revealing unique overall patterns for each imagined sound. This multivariate approach is sensitive to content-specific activity that univariate methods miss, enabling studying brain activation and motor maps using fMRI principles across sensory domains.
Q3: How does sparse temporal sampling improve fMRI data collection during auditory imagery tasks?
Sparse temporal sampling acquires a single fMRI volume 4-5 seconds after each stimulus, capturing the peak of the hemodynamic response. This timing reduces signal masking by scanner noise, which is critical for auditory imagery studies where external sounds must not interfere with imagined auditory content. The approach allows cleaner detection of neural activity patterns.
Q4: What role does the Support Vector Machine algorithm play in predicting imagined sounds?
The Support Vector Machine is a machine-learning classifier trained on labeled fMRI data to recognize neural features distinguishing different sounds. After learning these features from training data, it predicts unlabeled test data by identifying which sound pattern matches the neural activity. Classification accuracy reveals whether the auditory cortex encodes sound-specific information.
Q5: Why is the planum temporale used as the region of interest in auditory imagery studies?
The planum temporale, located on the temporal lobe surface, is the early auditory cortex where sound processing occurs. Researchers trace voxels in this region to measure neural patterns during auditory imagery. The frontal pole serves as a control region to demonstrate that classifier accuracy is specific to auditory cortex rather than global brain activity.
Q6: What does cross-validation accomplish in MVPA analysis of auditory imagery data?
Cross-validation tests classifier performance by leaving out one functional scan as testing data while training on the remaining scans, repeated four times. This procedure prevents overfitting and provides robust accuracy estimates across different data subsets. The averaged accuracies across folds reveal whether the classifier reliably predicts imagined sounds based on auditory cortex patterns.
Q7: How can MVPA techniques extend beyond auditory imagery to other neuroscience applications?
MVPA classifiers have decoded visual objects from ventral temporal cortex, predicted consumer preferences, and identified emotional states from brain activity patterns. Brain-computer interfaces could convert mental states into signals for speech therapy or prosthetic control. These applications demonstrate that multivariate pattern analysis reveals information content across sensory and cognitive domains.