What is auditory imagery and how does it activate the brain?

Auditory imagery is the experience of hearing sounds without external auditory stimuli present. When you imagine a sound like a ringing phone, your brain activates the same regions involved in actual sound perception. Specifically, the auditory cortex becomes engaged during auditory imagery, demonstrating that imagination and perception share similar neural mechanisms.

Why is multivoxel pattern analysis better than traditional univariate fMRI analysis?

Univariate analysis collapses individual voxels into a single average, often failing to detect significant differences across sounds. Multivoxel pattern analysis examines activation patterns across multiple voxels collectively, revealing unique overall patterns for each imagined sound. This multivariate approach is sensitive to content-specific activity that univariate methods miss, enabling studying brain activation and motor maps using fMRI principles across sensory domains.

How does sparse temporal sampling improve fMRI data collection during auditory imagery tasks?

Sparse temporal sampling acquires a single fMRI volume 4-5 seconds after each stimulus, capturing the peak of the hemodynamic response. This timing reduces signal masking by scanner noise, which is critical for auditory imagery studies where external sounds must not interfere with imagined auditory content. The approach allows cleaner detection of neural activity patterns.

What role does the Support Vector Machine algorithm play in predicting imagined sounds?

The Support Vector Machine is a machine-learning classifier trained on labeled fMRI data to recognize neural features distinguishing different sounds. After learning these features from training data, it predicts unlabeled test data by identifying which sound pattern matches the neural activity. Classification accuracy reveals whether the auditory cortex encodes sound-specific information.

Why is the planum temporale used as the region of interest in auditory imagery studies?

The planum temporale, located on the temporal lobe surface, is the early auditory cortex where sound processing occurs. Researchers trace voxels in this region to measure neural patterns during auditory imagery. The frontal pole serves as a control region to demonstrate that classifier accuracy is specific to auditory cortex rather than global brain activity.

What does cross-validation accomplish in MVPA analysis of auditory imagery data?

Cross-validation tests classifier performance by leaving out one functional scan as testing data while training on the remaining scans, repeated four times. This procedure prevents overfitting and provides robust accuracy estimates across different data subsets. The averaged accuracies across folds reveal whether the classifier reliably predicts imagined sounds based on auditory cortex patterns.

How can MVPA techniques extend beyond auditory imagery to other neuroscience applications?

MVPA classifiers have decoded visual objects from ventral temporal cortex, predicted consumer preferences, and identified emotional states from brain activity patterns. Brain-computer interfaces could convert mental states into signals for speech therapy or prosthetic control. These applications demonstrate that multivariate pattern analysis reveals information content across sensory and cognitive domains.

Декодирование слуховых образов с помощью анализа многовоксельных образов

0 просмотров11:46 мин

1. Набор участников

Наберите 20 участников.
1. Участники должны быть правшами и не иметь в анамнезе неврологических или психологических расстройств.
2. Участники должны иметь нормальное или скорректированное до нормального зрение, чтобы убедиться, что они смогут правильно видеть визуальные сигналы.
3. Участники не должны иметь в своем теле металла. Это важное требование безопасности из-за высокого магнитного поля, задействованного в фМРТ.
4. Участники не должны страдать клаустрофобией, так как для проведения фМРТ необходимо лежать в небольшом пространстве отверстия сканера.

2. Процедуры предварительного сканирования

Заполните документы перед сканированием.
Когда участники приходят на сканирование с помощью фМРТ, проинструктируйте их сначала заполнить форму металлического экрана, чтобы убедиться, что у них нет противопоказаний к проведению МРТ, форму случайных результатов, дающую согласие на то, чтобы их сканирование было рассмотрено радиологом, и форму согласия с подробным описанием рисков и преимуществ исследования.
Подготовьте участников к работе со сканером, удалив с их тела весь металл, включая ремни, кошельки, телефоны, заколки для волос, монеты и все украшения.

3. Предоставьте инструкции для участника.

Скажите участникам, что они увидят серию из нескольких коротких видеороликов внутри сканера. Эти видео будут беззвучными, но они могут вызвать звук в их «мысленном ухе». Попросите участника сосредоточиться на этом слуховом образе и поощрять его, чтобы попытаться «услышать» звук как можно лучше.
Подчеркните для участника важность того, чтобы его голова оставалась неподвижной на протяжении всего сканирования.

4. Поместите участника в сканер.

Дайте участнику беруши, чтобы защитить их уши от шума сканера, и наушники, чтобы они могли слышать экспериментатора во время сканирования, и попросите их лечь на кровать, укутав голову в катушку.
Дайте участнику мяч для экстренного сжатия и попросите его сжать его в случае чрезвычайной ситуации во время сканирования.
Используйте поролоновые прокладки для фиксации головы участника в катушке, чтобы избежать лишних движений во время сканирования, и напомните участнику, что очень важно оставаться как можно более неподвижным во время сканирования, так как даже самые незначительные движения размывают изображение.

5. Сбор данных

Соберите анатомическое сканирование с высоким разрешением.
Начните функциональное сканирование.
1. Синхронизируйте начало предъявления стимула с началом работы сканера.
2. Чтобы получить разреженную временную выборку, установите время регистрации объема МРТ равным 2 с с задержкой в 9 секунд между регистрациями объема.
3. Демонстрируйте беззвучные видеоролики с помощью ноутбука, подключенного к проектору. У участника над глазами находится зеркало, отражающее экран в задней части отверстия сканера.
4. Синхронизируйте начало каждого 5-секундного видеоклипа с началом через 4 секунды после начала предыдущего сбора данных МРТ. Это позволит гарантировать, что следующий объем МРТ будет получен через 7 с после начала видеоклипа, чтобы зафиксировать гемодинамическую активность, которая соответствует середине фильма.
5. Представьте три разных немых видеоролика, которые вызывают яркие слуховые образы: колокольчик, раскачивающийся взад и вперед, бензопила, рассекающая дерево, и человек, играющий на скрипке.
6. В каждом функциональном сканировании предъявите каждое видео 10 раз, в случайном порядке. При длительности каждого испытания 11 секунд сканирование будет длиться 330 секунд (5,5 минут).
7. Выполните 4 функциональных сканирования.

6. Анализ данных

Определите область интереса (ROI).
1. Используйте анатомическое сканирование с высоким разрешением каждого участника, чтобы проследить вокселы, соответствующие ранней слуховой коре (Рисунок 1). Это соответствует поверхности височной доли, называемой planum temporale. Используйте анатомические особенности мозга каждого человека, чтобы создать маску, специфичную для его слуховой коры.

Рисунок 1: Трассировка области интереса. Поверхность planum temporale была прослежена на анатомическом изображении этого участника с высоким разрешением и показана здесь синим цветом. Зеленым цветом выделена маска управления лобовой стойки. Эти воксели будут использоваться для анализа MVPA.

Предварительная обработка данных.
1. Выполните коррекцию движения для уменьшения артефактов движения.
2. Выполните временную фильтрацию для удаления дрейфа сигнала.
Обучите и протестируйте алгоритм классификатора.
1. Разделите данные на обучающий и тестовый наборы. Обучающие данные будут использоваться для обучения классификатора, а пропущенные тестовые данные будут использоваться для оценки того, что он узнал. Чтобы обеспечить максимальную независимость данных обучения и тестирования, в качестве тестового набора не используются данные одного функционального сканирования.
2. Обучите алгоритм метода опорных векторов на помеченных обучающих данных из слуховой коры у каждого испытуемого. Проверьте способность классификатора правильно угадывать идентичность неразмеченного тестового набора и запишите точность классификатора.
3. Повторите эту процедуру 4 раза, каждый раз не указывая каждое сканирование в качестве тестовых данных. Этот тип процедуры, при котором каждый раздел данных пропускается один раз, называется перекрестной проверкой.
4. Объедините точности классификатора по 4 сверткам перекрестной проверки путем усреднения.
Статистическое тестирование
1. Чтобы определить, работает ли классификатор лучше, чем случайность (33%), мы можем сравнить результаты на уровне группы со случайностью. Для этого соберите точные данные для каждого предмета и проверьте, отличается ли распределение от случайного, используя непараметрический критерий Вилкоксона со знаком.
2. Мы также можем задаться вопросом, работает ли классификатор лучше, чем случайность, для каждого человека. Чтобы определить вероятность заданного уровня точности случайных данных, создайте нулевое распределение путем обучения и тестирования алгоритма MVPA на данных, метки которых были случайным образом перемешаны. Переставьте метки 10 000 раз, чтобы создать нулевое распределение значений точности, а затем сравните фактическое значение точности с этим распределением.
3. Чтобы продемонстрировать специфичность информации в слуховой коре, мы можем обучить и протестировать классификатор на вокселях из другого места в мозге. Здесь мы будем использовать маску лобного полюса, взятую из вероятностного атласа и искривленную в соответствии с индивидуальным мозгом каждого субъекта.