1. Recrutamento de participantes
2. Procedimentos de pré-digitalização
3. Forneça instruções para o participante.
4. Coloque o participante no scanner.
5. Coleta de dados
6. Análise de dados

Figura 1: Região de rastreamento de interesse. A superfície do planum temporale foi traçada na imagem anatômica de alta resolução deste participante, e é mostrada aqui em azul. Em verde está a máscara de controle do polo frontal. Estes voxels serão usados para análise de MVPA.
Fonte: Laboratórios de Jonas T. Kaplan e Sarah I. Gimbel - Universidade do Sul da Califórnia
Imagine o som de um sino tocando. O que está acontecendo…
1. Recrutamento de participantes
2. Procedimentos de pré-digitalização
3. Forneça instruções para o participante.
4. Coloque o participante no scanner.
5. Coleta de dados
6. Análise de dados

Figura 1: Região de rastreamento de interesse. A superfície do planum temporale foi traçada na imagem anatômica de alta resolução deste participante, e é mostrada aqui em azul. Em verde está a máscara de controle do polo frontal. Estes voxels serão usados para análise de MVPA.
A imagem auditiva é um processo que dá origem à experiência de ouvir sons, mesmo quando não há estímulos auditivos externos presentes.
Por exemplo, pense em ouvir o som de um telefone celular tocando. Embora a informação dentro da memória esteja subjacente a esse evento imaginário, as evidências sugerem que o cérebro de um indivíduo usa os mesmos mecanismos de imaginação que aqueles que estão envolvidos na percepção real.
Ao imaginar o zumbido, regiões dentro do córtex auditivo são ativadas. No entanto, embora isso seja verdade em todos os estímulos acústicos, como os sons são codificados para permitir o processamento detalhado de sons distintos - como distinguir entre um toque de campainha e uma música tocando no rádio - é uma questão importante.
Com base em trabalhos anteriores de Meyer e colegas, este vídeo demonstra como combinar imagens de ressonância magnética funcional com apresentações de diferentes vídeos silenciosos para investigar como o cérebro responde a imagens auditivas.
Também descreveremos como usar um método chamado análise de padrão multi-voxel? MVPA para abreviar - para prever o que os sujeitos imaginaram, analisando os padrões de ativação obtidos durante as sessões de fMRI.
Neste experimento, os participantes se deitam em um scanner de ressonância magnética funcional e veem uma série de vídeos silenciosos. Cada um - seja um galo cantando, uma motosserra cortando uma árvore ou uma pessoa tocando piano - evoca imagens auditivas distintas e vívidas, e eles são solicitados a imaginar os sons durante cada apresentação.
O procedimento de aquisição de imagens depende de amostragem temporal esparsa, em que um único volume de fMRI é adquirido 4 a 5 s após a apresentação de cada estímulo. Esse tempo captura o pico da resposta hemodinâmica e reduz a probabilidade de que os sinais sejam mascarados pelo ruído do scanner.
Espera-se que cada som imaginado induza padrões sutis, mas distintos, de atividade neural, especificamente no córtex auditivo. Aqui, padrão é a palavra-chave: a maneira clássica de analisar esses dados usa uma abordagem univariada, onde os voxels individuais - representando algum nível de ativação - são colapsados em uma única média.
Esses valores são então comparados entre os sons e podem não produzir diferenças significativas nos níveis de ativação.
Em vez disso, usando uma análise multivariada, vários voxels são dispostos para cada som e os níveis de ativação podem ser comparados coletivamente, em todos os voxels - contribuindo para um padrão geral único para cada som imaginado.
Com essa abordagem de análise de padrões multivoxel, ou MVPA, se os padrões forem realmente sensíveis a um conteúdo específico, é possível que eles possam ser usados para prever o estímulo original. Isso mesmo? MVPA é frequentemente referido como uma técnica de leitura da mente!
Para alcançar esse aspecto de previsão, um processamento mais intensivo deve ser realizado após a coleta dos participantes? dados, que são divididos em conjuntos de treinamento e teste.
Os dados rotulados do conjunto de treinamento são primeiro submetidos a cálculos de aprendizado de máquina, especificamente, um algoritmo de Máquina de Vetor de Suporte. Esse processo é usado para classificar dados com precisão, reconhecendo características nos padrões neurais que podem distinguir os três tipos de sons uns dos outros.
Depois que o classificador aprendeu recursos para identificar com precisão os tipos, ele é apresentado com dados não rotulados do conjunto de teste e suas suposições são comparadas com os rótulos de estímulos corretos.
Nesse caso, o desempenho da classificação serve como variável dependente – registrada como precisão do classificador – que também é comparada aos voxels evocados em um local diferente do cérebro, como o polo frontal.
Espera-se que o classificador preveja a identificação de imagens auditivas, revelando a importância da AFMV na detecção de atividade específica de conteúdo no córtex auditivo.
Por questões experimentais e de segurança, verifique se todos os participantes são destros, têm visão normal ou corrigida para normal, sem histórico de distúrbios neurológicos ou claustrofobia e não possuem nenhum metal em seu corpo. Além disso, certifique-se de que eles preencham os formulários de consentimento necessários.
Antes de prosseguir, explique que eles verão vários vídeos curtos e silenciosos no scanner que podem evocar um som em sua mente. Peça-lhes que se concentrem nos sons imaginados, "ouçam-nos" da melhor maneira possível e permaneçam quietos durante a tarefa.
Agora, prepare o participante para entrar no scanner. Para ver essas etapas em detalhes, consulte outro vídeo de fMRI produzido nesta coleção.
Após a preparação, alinhe o participante e envie-o para dentro do furo. Na sala adjacente, primeiro colete uma varredura anatômica de alta resolução. Em seguida, sincronize o início da apresentação de vídeo silenciosa com o início da varredura funcional.
Para obter uma amostragem temporal esparsa, defina o tempo de aquisição de um volume de ressonância magnética para 2 s, com um atraso de 9 s entre eles.
É importante ressaltar que coordene o início de cada videoclipe de 5 s para começar 4 s após o início da aquisição de ressonância magnética anterior para capturar a atividade hemodinâmica que corresponde ao meio do filme.
Apresente cada vídeo 10 vezes, em ordem aleatória, gerando uma sessão de varredura que dura 5,5 min. Repita esta sequência de aquisição funcional mais três vezes.
Após a realização das quatro varreduras funcionais, retire o participante do scanner e interrogue-o para concluir o estudo.
Para definir as regiões de interesse, use as varreduras anatômicas de alta resolução de cada participante e trace voxels na superfície do lobo temporal que correspondem ao córtex auditivo inicial, também conhecido como plano temporal. Além disso, crie uma máscara contendo voxels no lobo frontal, que será usada como região de controle.
Em seguida, pré-processe os dados executando a correção de movimento para reduzir artefatos de movimento e filtragem temporal para remover desvios de sinal.
Em seguida, divida os dados em dois conjuntos: treinamento e teste. Em um conjunto de dados, treine um classificador - um algoritmo de máquina de vetor de suporte - certificando-se de manter os dados das duas regiões do cérebro separados para cada sujeito.
No outro conjunto, avalie o que o classificador aprendeu - sua capacidade de adivinhar corretamente a identidade de dados não rotulados - e registrar a precisão do algoritmo nas execuções. Execute este procedimento um total de quatro vezes, deixando de fora uma varredura funcional como dados de teste de cada vez - um processo chamado validação cruzada.
Para visualizar os dados, represente graficamente as precisões médias do classificador nas quatro dobras de validação cruzada para cada participante.
Plote essas médias para a região primária de interesse - o planum temporale - e a área de controle - o pólo frontal - para comparar a especificidade focal do classificador, até que ponto uma área específica, como o córtex auditivo, é seletivamente prevista para estar envolvida na imaginação auditiva.
Nesse caso, execute uma estatística não paramétrica, o teste Wilcoxon Signed-Rank, para testar o desempenho em relação ao acaso, que é de 33%. Observa-se que a acurácia média do classificador no córtex auditivo foi de 59%, o que é significativamente diferente do nível de chance.
Em contraste, o desempenho médio na máscara do pólo frontal foi de 33%, o que não é significativamente diferente do acaso.
Além disso, observe que o desempenho do classificador variou entre os indivíduos. Depois de usar um teste de permutação para calcular um novo limite estatístico de 42%, veja que 19 dos 20 indivíduos tiveram valores de precisão significativamente maiores do que esse nível usando voxels do planum temporale, enquanto nenhum teve desempenho maior que o acaso usando voxels do pólo frontal.
No geral, esses resultados implicam que as técnicas de MVPA previram com precisão qual dos três sons os participantes estavam imaginando com base em padrões de atividade neural. Tais previsões foram feitas apenas dentro do córtex auditivo, sugerindo que o conteúdo acústico não é representado globalmente em todo o cérebro.
Agora que você está familiarizado com a aplicação da análise de padrões multi-voxel para estudar imagens auditivas, vamos ver como os neuropsicólogos usam técnicas multivariadas para avançar uma abordagem futurista para a leitura da mente - a decodificação de estados mentais - em outros domínios.
Os classificadores têm sido usados em dados de fMRI obtidos do córtex temporal ventral para prever os tipos de objetos que os participantes visualizaram, distinguindo entre casas e rostos, por exemplo.
Dando um passo adiante, é até possível prever se o indivíduo compraria aquela casa ou acharia a pessoa agradável. Por mais assustador que pareça, essas implicações de neuromarketing não são exageradas!
A mesma abordagem também pode ser usada para detectar estados emocionais depois de assistir a um programa - reconhecendo que um filme de terror é realmente aterrorizante - ou mesmo o gênero do filme; Por exemplo, o movimento assustador pode envolver a amígdala de forma mais previsível do que um contemplativo que envolveria de forma confiável o córtex pré-frontal.
Além disso, as interfaces cérebro-computador poderiam converter estados mentais em sinais que melhorariam a comunicação, no caso de indivíduos submetidos à terapia da fala, ou movimentos, para aqueles que sofreram amputação de um membro.
Você acabou de assistir ao vídeo de JoVE sobre como entender imagens auditivas usando análise de padrões multivoxel. Agora você deve ter uma boa compreensão de como projetar e conduzir o experimento de imagens auditivas em conjunto com a neuroimagem funcional e, finalmente, como analisar e interpretar padrões específicos de atividade cerebral.
Obrigado por assistir!
View the full transcript and gain access to JoVE Science Education videos
Q1: What is auditory imagery and how does it activate the brain?
Auditory imagery is the experience of hearing sounds without external auditory stimuli present. When you imagine a sound like a ringing phone, your brain activates the same regions involved in actual sound perception. Specifically, the auditory cortex becomes engaged during auditory imagery, demonstrating that imagination and perception share similar neural mechanisms.
Q2: Why is multivoxel pattern analysis better than traditional univariate fMRI analysis?
Univariate analysis collapses individual voxels into a single average, often failing to detect significant differences across sounds. Multivoxel pattern analysis examines activation patterns across multiple voxels collectively, revealing unique overall patterns for each imagined sound. This multivariate approach is sensitive to content-specific activity that univariate methods miss, enabling studying brain activation and motor maps using fMRI principles across sensory domains.
Q3: How does sparse temporal sampling improve fMRI data collection during auditory imagery tasks?
Sparse temporal sampling acquires a single fMRI volume 4-5 seconds after each stimulus, capturing the peak of the hemodynamic response. This timing reduces signal masking by scanner noise, which is critical for auditory imagery studies where external sounds must not interfere with imagined auditory content. The approach allows cleaner detection of neural activity patterns.
Q4: What role does the Support Vector Machine algorithm play in predicting imagined sounds?
The Support Vector Machine is a machine-learning classifier trained on labeled fMRI data to recognize neural features distinguishing different sounds. After learning these features from training data, it predicts unlabeled test data by identifying which sound pattern matches the neural activity. Classification accuracy reveals whether the auditory cortex encodes sound-specific information.
Q5: Why is the planum temporale used as the region of interest in auditory imagery studies?
The planum temporale, located on the temporal lobe surface, is the early auditory cortex where sound processing occurs. Researchers trace voxels in this region to measure neural patterns during auditory imagery. The frontal pole serves as a control region to demonstrate that classifier accuracy is specific to auditory cortex rather than global brain activity.
Q6: What does cross-validation accomplish in MVPA analysis of auditory imagery data?
Cross-validation tests classifier performance by leaving out one functional scan as testing data while training on the remaining scans, repeated four times. This procedure prevents overfitting and provides robust accuracy estimates across different data subsets. The averaged accuracies across folds reveal whether the classifier reliably predicts imagined sounds based on auditory cortex patterns.
Q7: How can MVPA techniques extend beyond auditory imagery to other neuroscience applications?
MVPA classifiers have decoded visual objects from ventral temporal cortex, predicted consumer preferences, and identified emotional states from brain activity patterns. Brain-computer interfaces could convert mental states into signals for speech therapy or prosthetic control. These applications demonstrate that multivariate pattern analysis reveals information content across sensory and cognitive domains.
Chapters in this video
0:00
Overview
1:30
Experimental Design
4:40
Running the Experiment
6:37
Data Analysis
7:54
Representative Results
9:50
Applications
11:14
Summary
Videos from this collection: