$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
El reconocimiento emocional es importante en la interacción y la comunicación humana. Para establecer conexiones interpersonales exitosas, es necesario ser capaz de percibir y comprender las emociones, lo que tiene implicaciones de gran alcance en ámbitos tan diversos como la psicología, la neurología y la interacciónhumano-ordenador 1. En los últimos años, la BCI (Interfaz Cerebro-Computadora) basada en electroencefalograma (EEG) ha sido una herramienta de mérito en la que los investigadores se han centrado para detectar emociones. Aunque la BCI basada en EEG ofrece una ventana directa a la actividad eléctrica del cerebro humano y una herramienta de investigación adecuada para explorar estados emocionales. La clasificación automática y precisa de estados emocionales ha transformado fundamentalmente el área del reconocimiento emocional mediante técnicas de aprendizaje automático yBCI 2 basada en EEG.
En el trabajo anterior se introdujo el reconocimiento emocional y su importancia en diversos campos, incluyendo la salud, la interacción humano-computadora y laneurociencia 3. A pesar de los avances sustanciales, persiste una clara brecha en la investigación en los estudios actuales de reconocimiento emocional basados en EEG. En primer lugar, los enfoques introducidos en la literatura utilizan la extracción de características de dominio único (por ejemplo, características espectrales o de frecuencia temporal) o descriptores singulares no lineales disponibles y aislables, que no ofrecen suficiente para modelar trabajando solo con una representación parcial de señales EEG inherentemente complejas y no estacionarias. Segundo, aunque se ha reportado que una variedad de características no lineales tienen un poder discriminativo superior, normalmente se utilizan por separado y aíslan las relaciones entre estas características entre dominios. Esta limitación les hace menos capaces de modelar la dinámica multiescala y a nivel de fuente implicada con la activación cerebral emocional. En tercer lugar, la mayoría de los métodos de aprendizaje profundo están diseñados para optimizar el rendimiento en la clasificación, pero sin considerar la interpretabilidad de características, la reducción de redundancia y la robustez en presencia de desequilibrio de clases. En consecuencia, la generalización entre conjuntos de datos sigue siendo un problema abierto entre investigaciones con diferentes configuraciones de electrodos, tasa de muestreo (128–256 Hz) y duración de registro (30–60 s). Las principales dimensiones de la inteligencia emocional se presentan en la Figura 1.
Para superar tales inconvenientes, en este artículo introducimos un marco de Concatenación Combinada de Características Ponderadas (CWFC) que agrega características no lineales multidominio en una sola arquitectura. En lugar de tratar la ACI, la DWT y la FFT como métodos de extracción independientes como los enfoques convencionales, modelamos la descomposición a nivel de fuente (ACI), la dinámica temporal multirresolución (DWT) y las representaciones de potencia espectral (FFT) mediante una correlación ponderada. Esta estructura puede ayudar al modelo a utilizar información neuronal complementaria y reducir la redundancia para aumentar la capacidad discriminativa. Además, se emplean tanto la clasificación de importancia de características como la aumentación basada en GAN para lograr la robustez en el menor número posible de muestras de EEG desequilibradas. Integrando relaciones de características multimodales y dependencias temporales mediante la clasificación LSTM, el modelo combinado mejora la generalización entre diversas condiciones de adquisición del EEG. Así, la principal contribución de este trabajo es superar la falta de integración entre representaciones EEG no lineales y la insuficiente generalización en los métodos existentes, e introdujo un marco sistemático, reproducible y estable de reconocimiento emocional en aplicaciones BCI reales.

Figura 1: Fases de la inteligencia emocional. Las fases de la inteligencia emocional representan cómo se puede extraer el reconocimiento emocional a partir de señales EEG, y luego su uso en el diagnóstico y seguimiento de problemas emocionales en evaluaciones de salud mental. Por favor, haz clic aquí para ver una versión ampliada de esta figura.
Las características de EEG no lineales para la investigación en reconocimiento emocional ofrecen una comprensión más profunda de los procesos neuronales implicados en el procesamiento afectivo. Siendo una técnica no invasiva de alta resolución temporal y sensible a dinámicas neuronales rápidas, el EEG se ha utilizado ampliamente para el estudio de la actividad cerebral relacionada con estados emocionales. Los métodos no lineales son especialmente apropiados para el estudio de señales EEG, debido a su naturaleza no estacionaria y compleja, que constituye un mejor modelo tanto de su actividad evocada como inducida en procesos emocionales. En cualquier número de modelos computacionales, la emoción se representa con referencia a modelos teóricos existentes como el Modelo Básico deEmoción 4 (BEM) y el Modelo Circunplex 5,6. Dos concepciones estructuralmente y funcionalmente distintas de la emoción son el modelo de Emoción Básica, que asume que existe un conjunto de emociones fundamentales fundamentalesbasadas biológicamente 7,8 (especialmente el amor), y el Modelo Circunplex que organiza la emoción según dos dimensiones subyacentes: valencia9 (positiva–negativa) y excitación10,11 (baja–alta). El marco valencia-activación mostrado en la Figura 2 es prevalente en estudios de reconocimiento emocional basados en EEG, principalmente por su alineación con los conjuntos de datos estándar y su aplicabilidad para modelar estados emocionales continuos. Esta representación basada en dimensiones ofrece un medio sistemático y cuantificable para mapear la actividad neuronal en categorías emocionales y, por tanto, puede facilitar la clasificación basada en aprendizaje automático.

Figura 2: Representación de la emoción valencia-excitación. Diagrama de dos ejes que muestra estados emocionales, con la valencia indicando sentimientos positivos o negativos y la excitación reflejando una intensidad emocional baja a alta. Por favor, haz clic aquí para ver una versión ampliada de esta figura.
La excitación es la intensidad emocional, la valencia es positiva o negativa. El análisis emocional se ha centrado recientemente en el EEG para sondear los correlatos neuronales de las emociones. La extracción de características es muy importante, ya que mapea el EEG en cantidades en el dominio tiempo, frecuencia y tiempo-frecuencia. Algunas de las características no lineales más comunes son la Entropía deWavelet 12, Dimensión de Correlación13, y este estudio propuesto utiliza un enfoque ponderado combinado que es una fusión de DWT, ICA y FFT13. Los conjuntos de datos estándar DEAP14 y SEED15 están disponibles para su evaluación reproducible. Las características lineales tradicionales a menudo ya no son adecuadas, lo que requiere el diseño de enfoques nolineales 16. Los patrones emocionales basados en bandas de frecuencia se muestran en la Figura 2, y los pesos de las contribuciones de las bandas EEG se enumeran en la Tabla 1.
| Banda de frecuencia diferente | Rango de bandas de frecuencia en Hz | Funciones de la banda de frecuencia en el reconocimiento de emociones |
| Gamma | Más de 30 Hz | La integración de datos emocionales y la sincronización de varias regiones cerebrales durante el procesamiento emocional podrían reflejarse en la actividad gamma. |
| Beta | Entre 13 y 30 Hz | Las variaciones en la potencia beta pueden ser un signo de excitación emocional y de las reacciones motoras asociadas a las manifestaciones emocionales. |
| Alfa | Entre 8 y 13 Hz | Los estados emocionales y las variaciones en el poder alfa, especialmente la asimetría alfa, están relacionados. Cuando se excita emocionalmente y se presta más atención a las estímulas emocionales, se observa con frecuencia una disminución del poder alfa. |
| Theta | Entre 4 y 8 Hz | Las experiencias emocionales pueden asociarse con un aumento del poder theta, lo que puede ayudar en la codificación y recuperación de recuerdos emocionales. |
| Delta | 0,5-4 Hz | Un aumento en la actividad delta en el contexto de la detección emocional podría indicar un estado emocional relajado o en reposo. |
Tabla 1: Funciones de la banda de frecuencia EEG en el reconocimiento de emociones junto con diferentes rangos. Esta tabla describe las bandas de frecuencia EEG comúnmente reconocidas, especifica sus respectivos rangos de frecuencia y describe su importancia funcional en la investigación en reconocimiento emocional. Destaca cómo cada banda está asociada con diferentes procesos cognitivos y afectivos, proporcionando una base para interpretar las señales EEG en la clasificación del estado emocional.
El desarrollo reciente del reconocimiento emocional basado en EEG se ve estimulado por los avances en aprendizaje profundo y procesamiento no lineal de señales. Los modelos basados en CNN lograron un alto rendimiento usando selección de electrodos y sintonización de hiperparámetros17, mientras que el modelo CNN independiente del sujeto usando entropía diferencial dinámica mejoró la portabilidad y redujola complejidad 18. Pero los modelos para este problema normalmente no pueden generalizarse entre temas. Para modelar dependencias de secuencias, se propusieron arquitecturas LSTM basadas en atención con mecanismos de adaptaciónde dominios 19,20 que requieren un gran cálculo y carecen de interpretabilidad. Más allá del ámbito de las redes profundas, los métodos no lineales y topológicos también han recibido un interés considerable. Mediante el uso de análisis persistente basado en homología basada en el espacio de fases, se obtuvo una mayor discriminación para estados emocionalessutiles 21,22. Se sabe que los métodos de conjunto combinando resultados de entropía y fractales con diversas selecciones de características son predictores mejorados. Los modelos híbridos CNN–LSTM 23 superaron la clasificación directa valencia–activación en DEAP24 y los CNN multicolumna explotaron efectivamente la distribución espacialde los electrodos en 25. Se evaluaron los Topographic FeatureMaps 26,27 (TOPO-FM) y las representaciones basadas en Holographic Feature Maps (HOLO-FM) en varios conjuntos de datos públicos 28,29,30. A pesar de que estos resultados muestran avances sustanciales en la precisión de la clasificación, aún persisten desafíos respecto a la generalización y interpretabilidad entre sujetos del modelo y la robustez sobre la heterogeneidad de las condiciones de adquisición del EEG. El autor31 ofrece una amplia visión sobre los principales desafíos, enfoques y nuevas direcciones en esta área, centrándose en la calidad de la señal, la extracción de características y la escalabilidad en Computación Soft Aplicada. En un trabajorelacionado 32, la medida avanzada de conectividad funcional corrigió la correlación de la envolvente de amplitud a través de diferentes bandas de frecuencia EEG para identificar condiciones adversas de conducción, destacando la fortaleza de la conectividad multibanda para la monitorización conductual en momento real.
En una relación más amplia deneuroimagen 33,36, una visión general sólida de métodos de aprendizaje multimodales que combinan diferentes señales como EEG y expresiones faciales o datos fisiológicos para una detección emocional más fiable, con referencia a demostrar el potencial de integración de modalidades que eleva considerablemente el rendimiento en sistemas de IA. Además de DEAP y SEED, el conjunto de datos DREAMER es también una incorporación reciente a los referentes representativos en estudios de reconocimiento emocional basados en EEG. DREAMER fue propuesto por Katsigiannis y Ramzan37 y contiene señales de EEG y ECG obtenidas de sujetos que observan los estímulos emocionales audiovisuales con un dispositivo inalámbrico económico. El contenido del conjunto de datos es aplicable para la modelización dimensional de emociones con jerarquías de valencia, excitación y dominancia en línea con el modelo circunplexo del afecto. Gracias a su paradigma experimental bien pensado, los conjuntos de datos DREAMER se han utilizado ampliamente para la evaluación de modelos de aprendizaje profundo y reconocimiento emocional independientes del sujeto. Sus aplicaciones permiten compararse con otras bases de datos de representación dimensional de emociones, y también han demostrado que es una alternativa valiosa como complemento a los conjuntos de datos cirrus dance, DEAP y SEED. Estos conjuntos de datos se utilizan ampliamente en estudios de computación afectiva e incluyen registros EEG adquiridos bajo condiciones experimentales controladas con estímulos emocionales estandarizados. Este conjunto de datos consiste en señales EEG de 32 canales de 32 sujetos que recibieron clips de vídeo emocionales. Los datos están anotados sobre valencia y activación. SEED: grabaciones EEG de varias sesiones de sujetos durante experimentos de elicitación emocional basados en películas con etiquetas categóricas de emociones. DREAMER es un conjunto de datos de EEG y ECG registrado durante la inducción emocional mediante una presentación audiovisual de estímulos. Todos los conjuntos de datos se recopilaron originalmente utilizando protocolos estandarizados, configuraciones de hardware y validación de procedimientos de etiquetado según se informó en sus publicaciones originales. Aquí, en este estudio se analizaron señales EEG solo de estos conjuntos de datos.