Conception et caractérisation d’une peau électronique flexible multimodale avec acquisition de données basée sur CPLD pour l’intensité tactile et la reconnaissance gestuelle

Résumé

Ce protocole décrit la fabrication et le fonctionnement d’un système électronique polyvalent et multimodal pour la peau. Il utilise un backend basé sur CPLD pour obtenir une acquisition synchronisée et hybride de données à fréquence à partir de 36 canaux capteurs, permettant l’analyse quantitative de gestes tactiles complexes pour une perception robotique avancée et une interaction homme-robot.

Résumé

Ce travail présente la conception et la caractérisation d’une plateforme électronique polymodale flexible (e-skin) qui supporte la détection tactile haute résolution et la reconnaissance gestuelle via un système d’acquisition de données basé sur CPLD. Le système intègre une architecture d’échantillonnage hybride de fréquence 36 canaux et 14 bits (2 kHz, 1 kHz, 100 Hz), avec un support matériel pour la pression, l’accélération, la lumière, la température et les signaux environnementaux. Un substrat FPC flexible permet une intégration conforme sur des surfaces robotiques courbes tout en maintenant la stabilité mécanique. Pour démontrer la capacité de perception tactile, cette étude se concentre sur le canal de détection de pression, qui sert de principale modalité pour l’estimation de la force de contact et la dynamique des gestes. Quatre interactions humaines représentatives : toucher doux, tapotement, pincement léger et pincement fort, ont été analysées. Deux métriques sans dimension, l’asietrie équivalente de la forme d’onde et la charge équivalente, ont été introduites pour distinguer les catégories d’intensité de force et de gestes. Les résultats expérimentaux montrent que le système obtient une séparation claire des gestes et une réponse viscoélastique semblable à la peau, avec un temps moyen de déchargement de 0,4 s ± 0,2 s. La transmission de données sans fil en temps réel à 1,5 Mbps est prise en charge, et la conception modulaire offre une base évolutive pour l’intégration future de modalités supplémentaires. Ce travail établit un cadre matériel pour l’interaction tactile homme-robot basée sur la force et le geste, avec une capacité extensible pour les systèmes perceptifs multimodaux.

Introduction

La détection tactile a été largement étudiée pour la perception^{robotique 1,2}, cependant, la plupart des systèmes électroniques de peau (e-skin) reposent encore sur des configurations monomodales et à faible densité, ce qui peut limiter l’interprétation du toucher humain complexe. Malgré des avancées significatives dans les matériaux tactiles flexibles et les architectures^{de dispositifs 3}, l’intégration au niveau du système de la détection tactile multimodale et multicanale avec une acquisition en temps réel de haute précision présente des défis techniques^{persistants 4}. Par conséquent, des questions clés telles que la synchronisation du signal, la coordination temporelle et l’optimisation du débit des données nécessitent une prise en charge systématique dans les systèmes tactiles à grande échelle ou à fort nombre de^{canaux 5}. Pour répondre à ces exigences, une architecture front-end à haute bande passante capable de gérer des flux de données multicanaux synchronisés, de préserver l’intégrité du signal et de soutenir la caractérisation quantitative des gestes et des forces est^{nécessaire 6,7,8}.

Les systèmes multimodaux de peau électronique sont apparus comme une avancée majeure permettant aux plateformes robotiques d’émuler les capacités complexes de détection tactile de la peau humaine. Les capteurs monomodals traditionnels, qui ne détectent que la pression ou la température normales, ne capturent pas forcément la nature complexe et dynamique des interactions tactiles réelles. En revanche, les systèmes multimodaux inspirés par l’humain sont conçus pour détecter en temps réel plusieurs types de stimuli tactiles, notamment la force de cisaillement, les vibrations et les indices thermiques. Par exemple, Lee et al. ont développé un système de perception tactile bioinspirée capable de détecter en temps réel sur quatre canaux sensoriels distincts, ce qui a amélioré la reconnaissance des états de texture, de mode contact et d’interaction^{avec les objets 9}.

Les avancées récentes en électronique flexible ont encore élargi les horizons de ces systèmes multimodaux, notamment grâce au développement d’une peau électronique sophistiquée (e-skin) qui imite la conformité mécanique et la haute sensibilité des tissus biologiques. Par exemple, l’exploration de matériaux actifs innovants et de conceptions structurelles hiérarchiques a conduit à des plateformes e-skin de nouvelle génération avec une sensibilité tactile sans précédent et une multifonctionnalité¹⁰. Au-delà de l’innovation matérielle, la transition vers une application à grande échelle nécessite des techniques de fabrication robustes et évolutives. L’électronique imprimée est devenue une solution pivot, permettant l’intégration précise et économique de réseaux de capteurs à haute densité sur divers substrats élastomériques tout en maintenant la performance du^{dispositif 11}.

Pour garantir la fiabilité de ces systèmes dans des scénarios pratiques, les chercheurs se concentrent de plus en plus sur l’optimisation des propriétés électromécaniques et des mécanismes de détection des capteurs flexibles afin de réduire la diaphonie du signal et les interférences^{environnementales 12}. En fin de compte, le paradigme actuel dans le domaine évolue des composants de détection isolés vers des plateformes entièrement intégrées, intelligentes et flexibles, qui synergisent les matériaux avancés avec des cadres de traitement du signal^{à haute efficacité 13}.

Cependant, l’intégration de multiples modalités de détection dans un réseau unifié présente des défis importants en matière de couplage du signal, de synchronisation et d’interprétation des données. Kong et al. ont souligné la nécessité de stratégies robustes d’intégration et de découplage dans les réseaux de capteurs multimodaux à haute densité afin d’assurer une isolation précise du signal et de minimiser la^{diaphonie 14}. De plus, le comportement mécanique du substrat de détection moue influence significativement la fidélité du signal. Mu et al. ont démontré que la nature viscoélastique des composites polymères conducteurs pouvait induire la dérive du signal et l’hystérésis, mettant en avant le rôle de la modélisation des matériaux et des stratégies de compensation au niveau du système dans les plateformes de détection ^{multimodales 15}. Collectivement, ces résultats suggèrent que développer des systèmes e-skin multimodaux à haute largeur de bande, conscients de la viscoélasticité et découplés est essentiel pour faire progresser la perception tactile intelligente en robotique et interfaces^{homme-machine 16} .

Pour garantir l’acquisition en temps réel de signaux tactiles multicanaux avec une latence minimale et une grande intégrité du signal, un cadre d’acquisition basé sur un dispositif logique programmable complexe (CPLD) a été adopté. Des études antérieures ont démontré que les CPLD sont adaptés à la gestion de pipelines de données à haute vitesse et des flux de signaux critiques pour le timing dans les systèmes^{de capteurs 17,18}.

Comparée aux architectures traditionnelles d’acquisition de données, cette approche hybride synchronisée basée sur le CPLD présente plusieurs avantages distincts. Bien que les systèmes basés sur des unités de microcontrôleurs (MCU) reposent souvent sur la synchronisation logicielle ou le polling séquentiel, ils sont sujets à des jittes temporisés non déterministes et à une latence d’interruption, ce qui peut compromettre l’alignement de phase du signal sur des décomptes de canaux^{élevés 19}. En revanche, l’architecture basée sur la logique matérielle d’un CPLD assure une exécution strictement parallèle et un timing déterministe au niveau nanoseconde pour les 36 canaux. De plus, alors que les réseaux de portes programmables sur le terrain (FPGA) offrent une puissance de calcul plus élevée, les CPLD offrent une solution plus économique et économe en énergie pour la profondeur logique requise dans les machines à état hybrides à fréquence, facilitant ainsi une stabilité à long terme dans les applications e-skin portables. De plus, contrairement aux méthodes de multiplexage à bas canal qui sacrifient la bande passante d’échantillonnage effective par canal, l’architecture synchronisée proposée maintient un débit constant de 2 kHz pour les modalités tactiles, surmontant les goulots d’étranglement de la fusion de données hétérogène identifiés dans la littérature^{récente 19}.

Cette étude présente une peau électronique multimodale flexible intégrée à un système d’acquisition basé sur le CPLD. Le système prend en compte 36 canaux d’échantillonnage hybride en fréquence 14 bits, fonctionnant à 2 kHz pour les canaux tactiles dynamiques et à 100 Hz pour les modalités auxiliaires, incluant les capteurs d’accélération, de température, d’humidité, d’éclairage et sonores (Figure 1). Le système intègre ces capteurs hétérogènes sur un substrat flexible de circuit imprimé (FPC), garantissant à la fois une adaptabilité mécanique et une stabilité électrique. Une couche d’encapsulation viscoélastique^{conforme 15}, segmentée en petites unités rectangulaires, a été adoptée pour améliorer l’adaptabilité locale à la déformation et la stabilité du contact lors des interactions tactiles.

En ce qui concerne la pertinence pratique, l’architecture d’échantillonnage parallèle à haute vitesse est optimisée pour capturer des événements tactiles rapides et impulsifs tels que le tapotement ou le glissement de textures dans un environnement de laboratoire contrôlé. Cependant, les contraintes de fonctionnement incluent la dégradation potentielle de la fidélité du signal due à la dérive viscoélastique et à l’hystérésis du substrat mou, ce qui nécessite une calibration périodique ou une compensation logicielle. De plus, bien que le système soit évolutif à un nombre plus élevé de canaux, l’implémentation actuelle est limitée par la bande passante de transmission sans fil pour la visualisation en temps réel.

Le CPLD gère l’acquisition multicanal synchronisée et la transmission de données sans fil, garantissant une performance stable en temps réel. Cette approche permet la collecte multimodale de signaux à haute densité et fournit une base matérielle évolutive pour la perception tactile robotique. Pour évaluer la discrimination tactile, quatre gestes représentatifs — toucher doux, tapotement, pincement léger et pincement fort — ont été analysés expérimentalement.

Ce travail vise à démontrer la faisabilité et l’intégrité du signal de l’architecture multimodale e-skin à haute bande passante. La détection de pression est réalisée à l’aide d’un mécanisme piézorésistif basé sur un matériau de détection viscoélastique, un composite polymère conducteur caractérisé par une résistivité volumique de <500 Ωcm. Dans cette configuration, la pression mécanique modifie la résistance de contact à l’intérieur du matériau, qui est ensuite captée par le système d’acquisition. Des canaux de pression ont été sélectionnés comme modalité représentative pour valider l’acquisition en temps réel et la qualité des données. Bien que le système prenne en chargement des modalités supplémentaires telles que l’accélération et la température, leur mise en œuvre et leur analyse sont réservées aux études spécifiques à de futures applications.

Pour relever les défis de l’acquisition de données tactiles à haute densité, ce travail utilise une architecture matérielle basée sur le CPLD intégrée à un module Wi-Fi 6. Comme montré à la Figure 2, le système est conçu pour gérer 36 canaux avec une résolution de 14 bits à un taux d’échantillonnage rapide de 2 kHz, générant un débit brut d’environ 1,01 Mbps. En tirant parti du protocole 802.11ax, la plateforme atteint un débit de transmission stable et efficace de 1,5 Mbps, maintenant un taux de perte de paquets inférieur à 0,2 % dans des environnements de laboratoire typiques. Cette approche basée sur la logique matérielle élimine le jitter temporel non déterministe et la latence d’interruption courants dans les architectures traditionnelles basées sur MCU, tout en offrant une alternative plus économe en énergie et économique aux solutions basées sur FPGA. Un tel pipeline de données robuste assure la synchronisation en temps réel précise et l’intégrité du signal nécessaires à la reconnaissance de gestes complexes et à la détection tactile multimodale.

Deux indicateurs sans dimension ont été définis : l’asymétrie équivalente de la forme d’onde (EWS) et la charge équivalente (EL). L’EWS quantifie l’asymétrie temporelle de la forme d’onde de la réponse tactile, tandis que l’EL représente l’intensité globale de la force intégrée sur la durée du contact. L’analyse de ces indicateurs a révélé des signatures mécaniques distinctes pour chaque geste, avec un temps moyen de déchargement de 0,4 s ± 0,2 s, suggérant que la réponse viscoélastique du substrat contribue aux caractéristiques temporelles capturées par le système.

Ces résultats démontrent la faisabilité d’une intensité tactile précise et d’une reconnaissance gestuelle grâce à une acquisition synchronisée et multimodale. Le système proposé offre ainsi une plateforme opérationnelle pour l’analyse tactile quantitative et établit une base pour les développements futurs dans l’interaction affective ou émotionnelle entre l’homme et le robot.

Protocole

Toutes les procédures expérimentales décrites ici étaient non invasives et n’impliquaient pas de sujets cliniques animaux ou humains ; par conséquent, aucune approbation éthique n’était requise pour cette étude. Les réactifs et l’équipement utilisés sont listés dans le tableau des matériaux.

1. Fabrication de capteurs

1. Préparation et intégration du capteur viscoélastique
   1. Marquez les dimensions cibles [par exemple, 5 mm x 5 mm] sur le matériau de détection viscoélastique à l’aide d’une règle de précision et d’un marqueur permanent à pointe fine pour garantir la précision dimensionnelle. Coupez le matériau le long des lignes marquées à l’aide de ciseaux à pointe fine et tranchante. Effectuez les découpes en un seul mouvement continu lorsque possible afin d’assurer des bords propres et de minimiser la déformation ou l’effilochage mécanique aux limites.
   2. Nettoyez les tampons montés en surface du circuit imprimé flexible (FPC) à l’aide [par exemple, de l’alcool isopropylique et d’une lingette sans peluche] pour éliminer les contaminants et assurer une adhérence optimale (Figure 1).
   3. Collez les pièces de matériau viscoélastiques sur les coussinets de montage en surface du FPC à l’aide d’un adhésif conducteur.
   4. Appliquez une fine couche de résine polyvalente UV autour de la base du matériau de détection pour encapsuler le joint adhésif. Durcir la résine à l’aide d’une source de lumière UV à 365 nm de longueur d’onde avec une intensité de 100 mW/cm² pendant 5 minutes.
   5. Vérifiez la continuité électrique du capteur assemblé à l’aide d’un multimètre numérique.
      REMARQUE : Les valeurs de résistance doivent se situer dans la plage de 5 kΩ à 20 kΩ en conditions de charge nulle.
   6. Appliquez une pression externe et mesurez la variation correspondante de résistance pour caractériser les propriétés sensibles à la pression de l’appareil assemblé.

2. Mise en œuvre du conseil d’acquisition de données

1. Configuration du système d’acquisition de données multi-débit
   1. Intégrez les circuits analogiques front-end et de conversion de données sur un seul substrat FPC flexible (Figure 3).
   2. Utilisez cinq commutateurs analogiques à 8 canaux (Figure 4A) pour la sélection des canaux des capteurs. Interfacer ces derniers avec trois convertisseurs analogiques-numériques (ADC) parallèles de 14 bits (Figure 4B) pour la numérisation du signal.
   3. Connectez le réseau ADC et commutateur à un dispositif logique programmable complexe (CPLD) pour gérer l’adressage du canal, le contrôle du timing et la synchronisation.
   4. Fixez solidement le FPC capteur à la carte d’acquisition à l’aide d’un connecteur FPC à 40 broches. Assurez-vous que le mécanisme de verrouillage est complètement engagé pour éviter l’instabilité du signal.
2. Contrôle système basé sur le CPLD et gestion des données
   1. Programmer la logique CPLD pour piloter tous les ADC de manière synchrone en générant des signaux de synchronisation précis selon les intervalles d’échantillonnage requis.
   2. Configurez les portes logiques internes du CPLD pour coordonner la commutation de canal à haute vitesse et fusionnez les flux de données parallèles des trois ADC en un paquet de données unifié.
   3. Transmettez les données fusionnées via une interface série à un débit de 1,5 Mbps vers un module Wi-Fi pour une communication sans fil en temps réel avec un ordinateur hôte.
3. Interfaçage ADC pour l’échantillonnage hybride en fréquence
   1. Contrôlez chacun des trois ADC SAR indépendants 14 bits via une interface série dédiée à 3 fils composée de lignes Chip Select (CS#), Serial Clock (SCLK) et Serial Data (SDATA) gérées par le CPLD.
   2. Implémentez des diviseurs d’horloge spécifiques à chaque canal dans l’architecture CPLD pour générer les taux d’échantillonnage distincts requis pour les modalités 2 kHz, 1 kHz et 100 Hz (Figure 5).
   3. Stockez chaque trame échantillonnée dans un tampon temporaire par rapport à une référence de base temporelle commune. Asservez un drapeau one-shot de validité des données dans la logique pour signaler que les données sont prêtes à être transmises en aval.
4. Implémentation de la synchronisation d’échantillonnage basée sur une tranche de temps
   1. Définissez une trame d’échantillonnage globale de 10 ms dans le CPLD comme la période de planification de base et divisez-la en dix tranches de temps uniformes de 1 ms.
   2. Attribuez un ou plusieurs créneaux temporels fixes dans cette trame de 10 ms à chacun des 36 canaux capteurs en fonction de sa fréquence d’échantillonnage désignée.
   3. Surveillez le schéma d’ordonnancement déterministe afin de maintenir un alignement strict de phase entre tous les groupes et trames ADC, assurant ainsi l’acquisition synchrone de données hybrides en fréquence.

Résultats

Ce protocole permet la caractérisation quantitative et la différenciation de gestes tactiles distincts appliqués à la peau électronique (e-skin). Fixez l’échantillon d’e-peau sur la plateforme de test. Un seul opérateur effectue alors quatre actions tactiles définies : toucher doux, tapotement, pincement léger et pincement fort, selon les paramètres listés dans le Tableau 1. Le geste du « toucher doux » consistait à poser à plusieurs reprises un doigt légèrement sur une seule unité e-skin pendant environ...

Discussion

Le mécanisme de détection de la peau électronique est fondamentalement enraciné dans les propriétés viscoélastiques de son polymère^{constitutif 6,15}. Ce matériau présente à la fois une déformation élastique et un écoulement visqueux lorsqu’il est soumis à une force externe. La composante visqueuse introduit une latence caractéristique dans la récupération du matériau ; c’est-à-dire qu’elle ne revient pas instantanément à son état initial lors de la suppression de ...

Matériaux

Liste des matériaux utilisés dans cet article

Nom	Entreprise	Numéro de catalogue	Commentaires
Circuit imprimé flexible	JLCPCB	n’importe lequel	Utilisé pour obtenir des données de pression
Commutateurs analogiques   ;	TI	TMUX1108PWR  ;	Utilisé pour sélectionner différents canaux
Convertisseur analogique vers numérique	Dispositifs analogiques	AD7940BRMZ-ROULE-7	Convertir les signaux analogiques en signaux numériques
CPLD	Intel	MAX 10M02	Unité de traitement des données
Oscilloscope	Tektronix	TBS2000	Cet oscilloscope est utilisé pour mesurer les formes d’onde des signaux.
Quartus II	Intel	n’importe lequel	IDE de programmation pour CPLD
Matériau de détection viscoélastique	n’importe lequel	n’importe lequel	Ce matériau est utilisé pour générer des signaux de pression.
Wi-Fi 6 module  ;	AI-THINKER	AD-M62-CBS	Module de transmission de données