Descodificación de imágenes auditivas con análisis Multivoxel

Las imágenes auditivas son un proceso que da lugar a la experiencia de escuchar sonidos, incluso cuando no hay estímulos auditivos externos presentes.

Por ejemplo, piense en escuchar el sonido de un teléfono celular sonando. Si bien la información dentro de la memoria subyace a este evento imaginario, la evidencia sugiere que el cerebro de un individuo utiliza los mismos mecanismos para la imaginación que los que están involucrados en la percepción real.

Con solo imaginar el zumbido, se activan regiones dentro de la corteza auditiva. Sin embargo, a pesar de que esto es cierto en todos los estímulos acústicos, la forma en que se codifican los sonidos para permitir el procesamiento detallado de sonidos distintos, como distinguir entre el timbre de una puerta y una canción que suena en la radio, es una pregunta importante.

Basado en el trabajo previo de Meyer y sus colegas, este video demuestra cómo combinar imágenes de resonancia magnética funcional (fMRI) con presentaciones de diferentes videos silenciosos para investigar cómo responde el cerebro a las imágenes auditivas.

También describiremos cómo utilizar un método llamado análisis de patrones multi-vóxeles. MVPA para predecir lo que los sujetos han imaginado mediante el análisis de los patrones de activación obtenidos durante las sesiones de fMRI.

En este experimento, los participantes se acuestan en un escáner de resonancia magnética funcional y se les muestra una serie de videos silenciosos. Cada uno de ellos, ya sea el canto de un gallo, una motosierra cortando un árbol o una persona tocando un piano, evoca imágenes auditivas distintivas y vívidas, y se les pide que imaginen los sonidos durante cada presentación.

El procedimiento de adquisición de imágenes se basa en un muestreo temporal disperso, mediante el cual se adquiere un solo volumen de fMRI de 4 a 5 s después de que se presenta cada estímulo. Dicha sincronización captura el pico de la respuesta hemodinámica y reduce la probabilidad de que las señales queden enmascaradas por el ruido del escáner.

Se espera que cada sonido imaginado induzca patrones sutiles pero distintivos de actividad neuronal, específicamente en la corteza auditiva. Aquí, el patrón es la palabra clave: la forma clásica de analizar estos datos utiliza un enfoque univariante, donde los vóxeles individuales, que representan algún nivel de activación, se colapsan en un solo promedio.

Estos valores se comparan entre sonidos y es posible que no produzcan diferencias significativas en los niveles de activación.

En su lugar, mediante un análisis multivariante, se disponen varios vóxeles para cada sonido y los niveles de activación se pueden comparar colectivamente, en todos los vóxeles, lo que contribuye a un patrón general único para cada sonido imaginado.

Con este enfoque de análisis de patrones de vóxeles múltiples, o MVPA, si los patrones son realmente sensibles a un contenido específico, entonces es posible que se puedan usar para predecir el estímulo original. ¿Así es? ¡MVPA a menudo se conoce como una técnica de lectura de la mente!

Para lograr este aspecto de predicción, se debe realizar un procesamiento más intensivo después de recopilar a los participantes. datos, que se dividen en conjuntos de entrenamiento y prueba.

Los datos etiquetados del conjunto de entrenamiento se someten primero a cálculos de aprendizaje automático, en concreto, a un algoritmo de máquina de vectores de soporte. Este proceso se utiliza para clasificar con precisión los datos mediante el reconocimiento de características en los patrones neuronales que pueden distinguir los tres tipos de sonidos entre sí.

Una vez que el clasificador ha aprendido las características para identificar con precisión los tipos, se le presentan datos sin etiquetar del conjunto de pruebas y sus conjeturas se comparan con las etiquetas de estímulos correctas.

En este caso, el rendimiento de la clasificación sirve como variable dependiente, registrada como la precisión del clasificador, que también se compara con los vóxeles evocados en una ubicación diferente en el cerebro, como el polo frontal.

Se espera que el clasificador prediga la identificación de imágenes auditivas, revelando la importancia de MVPA en la detección de actividad específica de contenido dentro de la corteza auditiva.

Por motivos experimentales y de seguridad, verifique que todos los participantes sean diestros, tengan una visión normal o corregida a normal, no tengan antecedentes de trastornos neurológicos o claustrofobia y no posean ningún metal en su cuerpo. Además, asegúrese de que completen los formularios de consentimiento necesarios.

Antes de continuar, explique que verán varios videos cortos y silenciosos en el escáner que pueden evocar un sonido en su mente. Pídales que se concentren en los sonidos imaginados, que los "escuchen" lo mejor que puedan y que permanezcan quietos durante la duración de la tarea.

Ahora, prepare al participante para entrar en el escáner. Para ver estos pasos en detalle, consulte otro video de fMRI producido en esta colección.

Después de la preparación, alinee al participante y envíelo dentro del orificio. En la habitación adyacente, primero recoja una exploración anatómica de alta resolución. A continuación, sincronice el inicio de la presentación de vídeo silenciosa con el inicio de la exploración funcional.

Para lograr un muestreo temporal disperso, ajuste el tiempo de adquisición de un volumen de resonancia magnética a 2 s, con un retraso de 9 s en el medio.

Es importante destacar que coordine el inicio de cada videoclip de 5 segundos para que comience 4 segundos después de que comience la adquisición de la resonancia magnética anterior para capturar la actividad hemodinámica que corresponde a la mitad de la película.

Presente cada video 10 veces, en orden aleatorio, generando una sesión de escaneo que dure 5,5 minutos. Repita esta secuencia de adquisición funcional tres veces más.

Después de que se hayan realizado las cuatro exploraciones funcionales, saque al participante del escáner e informe para concluir el estudio.

Para definir las regiones de interés, utilice los escaneos anatómicos de alta resolución de cada participante y trace vóxeles en la superficie del lóbulo temporal que correspondan a la corteza auditiva temprana, también conocida como plano temporal. Además, cree una máscara que contenga vóxeles en el lóbulo frontal, que se utilizará como región de control.

A continuación, preprocese los datos realizando la corrección de movimiento para reducir los artefactos de movimiento y el filtrado temporal para eliminar las derivas de la señal.

A continuación, divida los datos en dos conjuntos: entrenamiento y prueba. En un conjunto de datos, entrene un clasificador, un algoritmo de máquina de vectores de soporte, asegurándose de mantener los datos de las dos regiones del cerebro separados para cada sujeto.

En el otro conjunto, evalúe lo que el clasificador ha aprendido, su capacidad para adivinar correctamente la identidad de los datos sin etiquetar, y registre la precisión del algoritmo a lo largo de las ejecuciones. Realice este procedimiento un total de cuatro veces, dejando fuera un escaneo funcional como datos de prueba cada vez, un proceso llamado validación cruzada.

Para visualizar los datos, grafique las precisiones promediadas del clasificador en los cuatro pliegues de validación cruzada para cada participante.

Traza estos promedios tanto para la región primaria de interés, el plano temporal, como para el área de control, el polo frontal, para comparar la especificidad focal del clasificador, el grado en que se predice selectivamente que un área particular, como la corteza auditiva, está involucrada en la imaginación auditiva.

En este caso, ejecute un estadístico no paramétrico, la prueba de rango con signo de Wilcoxon, para probar el rendimiento frente al azar, que es del 33%. Tenga en cuenta que la precisión promedio del clasificador en la corteza auditiva fue del 59%, lo que es significativamente diferente del nivel de azar.

Por el contrario, el rendimiento medio en la máscara de poste frontal fue del 33%, lo que no difiere significativamente del azar.

Además, observe que el rendimiento del clasificador varió de un individuo a otro. Después de usar una prueba de permutación para calcular un nuevo umbral estadístico del 42%, se observó que 19 de 20 sujetos tenían valores de precisión significativamente mayores que este nivel usando vóxeles del plano temporal, mientras que ninguno tenía un rendimiento mayor que el azar usando vóxeles del polo frontal.

En general, estos resultados implican que las técnicas de MVPA predijeron con precisión cuál de los tres sonidos que los participantes estaban imaginando en función de los patrones de actividad neuronal. Tales predicciones solo se hicieron dentro de la corteza auditiva, lo que sugiere que el contenido acústico no está representado globalmente en todo el cerebro.

Ahora que está familiarizado con cómo aplicar el análisis de patrones de múltiples vóxeles para estudiar las imágenes auditivas, veamos cómo los neuropsicólogos utilizan técnicas multivariadas para avanzar en un enfoque futurista de la lectura de la mente, la decodificación de los estados mentales, en otros dominios.

Se han utilizado clasificadores en datos de resonancia magnética funcional obtenidos de la corteza temporal ventral para predecir los tipos de objetos que los participantes vieron, distinguiendo entre casas y rostros, por ejemplo.

Llevando esto un paso más allá, incluso es posible predecir si el individuo compraría esa casa o encontraría a la persona agradable. Por espeluznante que suene, estas implicaciones del neuromarketing no son descabelladas.

El mismo enfoque también podría usarse para detectar estados emocionales después de ver un programa, reconociendo que una película de miedo es realmente aterradora, o incluso el género cinematográfico; Por ejemplo, la película aterradora podría involucrar a la amígdala de manera más predecible que una contemplativa que involucraría de manera confiable a la corteza prefrontal.

Además, las interfaces cerebro-computadora podrían convertir los estados mentales en señales que mejorarían la comunicación, en el caso de las personas que se someten a terapia del habla, o los movimientos, para aquellos que han sufrido la amputación de una extremidad.

Acabas de ver el video de JoVE sobre la comprensión de las imágenes auditivas mediante el análisis de patrones de múltiples vóxeles. Ahora debe tener una buena comprensión de cómo diseñar y llevar a cabo el experimento de imágenes auditivas junto con la neuroimagen funcional y, finalmente, cómo analizar e interpretar patrones específicos de actividad cerebral.

¡Gracias por mirar!