$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Przegląd architektur elektronicznej powłoki
E-skin można uznać za hierarchiczny, miękki system elektroniczny, który integruje warstwy detekcji, pozyskiwania, przetwarzania i komunikacji w jednolitą strukturę. Każda warstwa odgrywa odrębną rolę w przekształcaniu zewnętrznych bodźców fizycznych w istotne informacje cyfrowe, które mogą być interpretowane przez maszyny lub ludzi. Rysunek 1 przedstawia schemat koncepcyjny tej czterowarstwowej architektury oraz odpowiadającego mu przepływu sygnału.
Na warstwie detekcyjnej elastyczne i rozciągliwe matryce czujników wykrywają bodźce mechaniczne lub termiczne, takie jak ciśnienie, naprężenie czy temperatura. Pierwiastki te są wytwarzane na podłożach elastomerowych i często wykorzystują mikrostrukturalne geometrie w celu poprawy czułości i liniowości odpowiedzi. Polimery przewodzące i nanokompozyty zapewniają wysoką elastyczność i stabilną wydajność elektryczną przy dużych odkształceniach 3,5. W systemach wielomodalnych E-skin wiele bodźców fizycznych – takich jak ciśnienie, naprężenie i temperatura – można wykryć poprzez integrację różnych jednostek sensorycznych lub zastosowanie mikrostrukturalnych architektur urządzeń, które rozdzielają te bodźce w obrębie jednego sensora4.
Warstwa akwizycji pełni rolę elektrycznego mostu między czujnikami a elektroniką. Główne funkcje obejmują wzmacnianie, filtrowanie oraz konwersję z analogu na cyfrowe. We współczesnych E-skin elastyczne układy drukowane lub matryce tranzystorowe cienkowarstwowe są szeroko stosowane do realizacji aktywnego adresowania macierzowego i multipleksowanego odczytu. Takie podejścia zmniejszają złożoność okablowania, jednocześnie zachowując wysoką rozdzielczość przestrzenną i niskie zużycie energii. Projekt tej warstwy określa poziom szumów systemu, częstotliwość próbkowania oraz ogólną wierność danych.
Następnie warstwa przetwarzania danych zarządza interpretacją informacji dotykowych w czasie rzeczywistym. Wbudowane mikrokontrolery lub procesory oparte na polowych programowalnych macierzach bramkowych (FPGA) wykonują lokalne filtrowanie, ekstrakcję cech oraz wstępną klasyfikację zdarzeń dotykowych. Ta rozproszona architektura obliczeń minimalizuje opóźnienia i umożliwia adaptacyjną kontrolę sprzężenia zwrotnego. Integracja z modułami bezprzewodowymi lub edge-AI dodatkowo wspiera autonomiczną pracę robotów oraz zastosowania noszone.
Na koniec, interfejs lub warstwa aplikacji łączy platformę E-skin z zewnętrznymi systemami, takimi jak manipulatory robotyczne, protezy kończyn czy monitory medyczne. Przetworzone dane dotykowe są przekształcane w polecenia sterujące, wizualne wyjścia lub wskaźniki diagnostyczne. W robotyce ta warstwa zapewnia sprzężenie zwrotne i siłę chwytu oraz rozpoznawanie tekstur; Do zastosowań biomedycznych wspiera ciągłe monitorowanie fizjologiczne oraz zdalną transmisję danych.
Razem te cztery warstwy tworzą pełną ścieżkę, która przekształca bodźce mechaniczne lub termiczne w informacje nadające się do zastosowania. Hierarchiczna i modułowa konstrukcja pozwala na niezależną optymalizację każdego bloku funkcjonalnego, przy jednoczesnym zachowaniu ogólnej elastyczności mechanicznej. Ten przegląd ustanawia ramy strukturalne dla kolejnych sekcji, w których mechanizmy detekcji, metody pozyskiwania sygnałów oraz inteligentne strategie percepcji systemów E-skin zostaną szczegółowo przeanalizowane.
Mechanizmy detekcji i zasady transdukcji
E-skin przekształca bodźce mechaniczne i termiczne w sygnały elektryczne za pomocą kilku mechanizmów transdukcji. Najczęściej stosowane są piezorezystancyjne, pojemnościowe, samonapędzane mechanizmy piezoelektryczne oraz optyczne (Rysunek 2). Każde podejście oferuje unikalne zalety w zakresie czułości, zakresu dynamicznego i zużycia energii.
Czujniki piezorezystancyjne i pojemnościowe: Czujniki piezorezystancyjne (Rysunek 2A) zmieniają swój opór, gdy deformacja zmienia przewodzącą sieć warstwy detekcyjnej. Są proste w wykonaniu, bardzo kompatybilne z elastycznymi podłożami i zapewniają szeroki zakres pomiarów. Typowe materiały to kompozyty węglowe oraz polimery przewodzące. Czujniki pojemnościowe natomiast opierają się na zmianach pojemności C=εA/d spowodowanych mechaniczną deformacją warstwy dielektrycznej. Charakteryzują się wysoką stabilnością i niskim szumem, a także doskonale nadają się do obrazowania dotykowego. Jeon i in.8 wykazali multimodalną E-skin łączącą elementy piezorezystancyjne i pojemnościowe, umożliwiającą jednoczesne wykrywanie ciśnienia i temperatury przy minimalnych zakłóceniach.
Mechanizmy samonapędzające: Przetworniki tryboelektryczne (Rysunek 2B) i piezoelektryczne (Rysunek 2C) generują sygnały elektryczne bezpośrednio z ruchu mechanicznego. Warstwy piezoelektryczne powodują separację ładunku pod wpływem naprężeń, natomiast warstwy triboelektryczne generują różnice potencjałów poprzez elektryfikację kontaktową. Te mechanizmy samonapędzane są skuteczne dla bodźców dynamicznych, takich jak drgania i poślizgi. Wang i in.10 opracowali robotyczny system dotykowy oparty na interfejsie tryboelektrycznym, zdolnym do postrzegania interakcji płynów z wysoką rozdzielczością czasową. Chociaż mniej odpowiednie dla ciśnień statycznych z powodu wycieku ładunku, połączenie ich z warstwami piezorezystancyjnymi lub pojemnościowymi umożliwia komplementarne wykrywanie multimodalne.
Mechanizmy optyczne i inne nowe mechanizmy: Detekcja optyczna (Rysunek 2D) przekształca deformację mechaniczną w zmiany natężenia światła lub interferencji w falowodach lub mikrojamach. Oferuje ultrawysoką czułość i odporność na zakłócenia elektromagnetyczne, ale wymaga precyzyjnego ustawienia16. Inne podejścia – w tym metodymagnetyczne 17,termoelektryczne 18 oraz oparte na impedancji19 – również są badane w celu poszerzenia funkcjonalności E-skin.
W kierunku integracji multimodalnej: Nowoczesne systemy E-skin coraz częściej łączą wiele mechanizmów wykrywania i rozróżniania różnych bodźców. Lee i in.9 uzyskali wykrywanie ciśnienia, temperatury i poślizgu w czasie rzeczywistym dzięki zintegrowanym matrycom czujników i wbudowanym układom przetwarzającym. Takie hybrydowe architektury przesuwają E-skin od pasywnego wykrywania do percepcji aktywnej, tworząc fundament dla integracji na poziomie systemu, o której mowa w następnej sekcji.
Integracja systemu i pozyskiwanie sygnału
Wydajność systemu E-skin zależy nie tylko od właściwości jego elementów wykrywających, ale także od sposobu pozyskiwania, przetwarzania i przesyłania sygnałów z tych czujników. Integracja na poziomie systemu łączy warstwę detekcyjną z wbudowaną elektroniką, tworząc jednolitą platformę percepcji dotykowej, zdolną do reagowania w czasie rzeczywistym. Rysunek 3 ilustruje reprezentatywną architekturę systemową, która obejmuje matryce sensorów, elektronikę odczytu, akwizycję danych oraz moduły komunikacyjne.
Architektura i projektowanie sprzętowe: Nowoczesne architektury E-skin są zazwyczaj organizowane w modułowej strukturze składającej się z trzech podsystemów sprzętowych: matrycy sensorów, układów odczytu i multipleksowania oraz wbudowanego kontrolera lub jednostki przetwarzającej. Ta hierarchiczna konfiguracja równoważy rozdzielczość przestrzenną ze skalowalnością systemu. W większości implementacji matryce czujników o dużym obszarze są ułożone w formacie macierzowym, gdzie każdy węzeł odpowiada pojedynczemu elementowi detekcyjnemu. Aby zmniejszyć złożoność okablowania i przesłuch, stosuje się metody multipleksowania czasowego (TDM) lub skanowania wierszowego kolumn. Obwód odczytu obejmuje dopasowanie impedancji, wzmocnienie o niskim poziomie szumów, filtrowanie oraz konwersję analogowo-cyfrową (ADC). Takei i in.14 podkreślili, że integracja materiałów czujnikowych z niskomocowymi układami CMOS do odczytu jest kluczowa dla realizacji kompaktowych i wydajnych platform E-skin. Wbudowane mikrokontrolery (MCU) lub FPGA zarządzają następnie wyborem kanałów, buforowaniem danych oraz wstępnym przetwarzaniem. Aby zachować elastyczność, sztywne układy krzemowe często montuje się na miękkich interpozerach lub elastycznych płytkach drukowanych (FPC). Moduły komunikacji bezprzewodowej – takie jak Bluetooth Low Energy (BLE) czy Wi-Fi – są często integrowane w zastosowaniach noszonych, podczas gdy platformy robotyczne często stosują przewodową komunikację szeregową do sterowania w czasie rzeczywistym.
Strategie akwizycji sygnału: Akwizycja sygnału w systemach E-skin musi obsługiwać wysoką gęstość kanałów, niską amplitudę sygnału oraz szeroki zakres dynamiczny. Sygnały dotykowe z każdego czujnika zazwyczaj mieszczą się w zakresie milivoltów do mikrowoltów, co wymaga wzmacniaczy różnicowych o wysokim wzmocnieniu oraz układów tłumienia szumów. Typowe podejścia obejmują skorelowane podwójne próbkowanie (CDS), wzmacniacze stabilizowane przez choppera20,21 oraz synchroniczne metody detekcji22, aby zminimalizować dryf i szum 1/f. Viteczkova i in.23 analizowali ramy akwizycji danych dla noszonych systemów dotykowych i podkreślali kompromis między szybkością próbkowania a efektywnością energetyczną. Wielokanałowe ADC ze skanowaniem sekwencyjnym są szeroko stosowane, ale wprowadzają opóźnienie próbkowania w całej macierzy. Równoległe próbkowanie, choć szybsze, zwiększa zapotrzebowanie na energię i przepustowość danych. Dlatego rozwiązania hybrydowe łączące sekwencyjne i równoległe pozyskiwanie zyskały zainteresowanie systemami skalowalnymi24.
Fuzja danych i inteligentna percepcja: Po pozyskaniu sygnały dotykowe z systemów E-skin muszą zostać przetworzone, aby wydobyć istotne cechy i wspierać inteligentną percepcję. Przetwarzanie sygnału stanowi pomost między surowym wyjściem sensora a zrozumieniem fizycznym, umożliwiając tłumienie szumów, ekstrakcję cech oraz wielomodalną fuzję danych (Rysunek 4).
Wstępne przetwarzanie i ekstrakcja cech: Surowe sygnały często są zniekształcane przez dryf, przesunięcia lub zakłócenia elektromagnetyczne. Korekcja bazowa, adaptacyjne lub dolnoprzepustowe filtrowanie oraz różnicowe wzmocnienie są powszechnie stosowane w celu poprawy stosunku sygnału do szumu. Kolejne wyodrębnianie cech przekształca dane w dziedzinie czasu w zwarte deskryptory – takie jak amplituda, czas trwania i tempo zmiany – podczas gdy filtry przestrzenne rekonstruują mapy dotykowe na matrycach sensorów. Analiza w dziedzinie częstotliwości z użyciem transformacji Fouriera lub falek dodatkowo ujawnia informacje o drganiach i teksturze.
Fuzja multimodalna i interpretacja: W systemach multimodalnych E-skin sygnały z czujników ciśnienia, odkształcenia, temperatury lub drgań są łączone, tworząc jednolite reprezentacje dotykowe. Fuzja na poziomie danych i cech zwiększa odporność, podczas gdy fuzja na poziomie decyzyjnym integruje wyniki wielu klasyfikatorów. Najnowsze badania wykazały, że algorytmy uczenia maszynowego – w tym analiza głównych komponentów i konwolucyjne sieci neuronowe – mogą poprawić rozpoznawanie zdarzeń dotykowych25. Ponadto badane są ramy fuzji multimodalnej łączące dane dotykowe i proprioceptywne w celu poprawy dokładnościklasyfikacji 26.
W kierunku inteligentnej percepcji: Na wyższych poziomach abstrakcji dane E-skin są interpretowane w celu wnioskowania o właściwościach obiektu, stanach kontaktu oraz intencji interakcji. Modele rozpoznawania wzorców i regresji klasyfikują zdarzenia dotykowe, takie jak chwyt, przesunięcie czy faktura, podczas gdy klasteryzacja i analiza czasoprzestrzenna ujawniają ukryte zależności między rozproszonymi sygnałami27. Integracja rozumowania opartego na sztucznej inteligencji umożliwia percepcję kontekstową i informację zwrotną w czasie rzeczywistym dla robotyki i noszonej opieki zdrowotnej.
Podsumowując, przetwarzanie sygnałów i interpretacja danych przekształcają surowe informacje dotykowe w praktyczne wnioski. Postępy w adaptacyjnym filtrowaniu, fuzji multimodalnej oraz modelowaniu opartym na danych napędzają systemy E-skin w kierunku wyższej dokładności percepcyjnej i autonomii.
Zastosowania i demonstracje
Elastyczne systemy dotykowe znalazły zastosowanie w różnych dziedzinach, od manipulacji robotycznej po noszone urządzenia medyczne i interakcję człowiek-maszyna. Technologie te pokazują, jak multimodalne wykrywanie, materiały podatne i elektronika wbudowana mogą się łączyć, tworząc inteligentne interfejsy zdolne do sprzężenia zwrotnego w czasie rzeczywistym i sterowania adaptacyjnego (Rysunek 5).
Manipulacja robotyczna i chwytanie: W dziedzinie robotyki elastyczne systemy dotykowe zapewniają niezbędne sprzężenie zwrotne dla bezpiecznej i zręcznej manipulacji. Dzięki integracji detekcji pojemnościowej, termicznej i drgań, systemy te umożliwiają adaptacyjne chwytanie i modulację siły w czasie rzeczywistym podczas obsługi delikatnych obiektów. Taka dotykowa informacja zwrotna ułatwia także wykrywanie krawędzi, szacowanie pozycji oraz kontrolę zgodności, znacząco poprawiając współpracę człowiek-robot28.
Monitorowanie urządzeń noszonych i opieki zdrowotnej: W zastosowaniach zdrowotnych w nosidle, elastyczne plastry sensorowe umożliwiają ciągłe monitorowanie fizjologiczne podczas codziennych czynności. Ostatnie postępy w zakresie elastycznych i noszonych biosensorów znacznie poszerzyły zakres ciągłego monitorowania zdrowia. Song i in.29podsumowali postępy w miękkich, konformnych platformach do wykrywania miękkich, konformnych ze skórą, zdolnych do wykrywania sygnałów fizjologicznych w czasie rzeczywistym z płynów ustrojowych i parametrów życiowych. Takie biosensory łączą wysoką elastyczność, niskie zużycie energii oraz biokompatybilność, zapewniając niezawodną, długoterminową pracę w medycynie spersonalizowanej i profilaktycznej opiece zdrowotnej. Podobne systemy były badane do analizy chodu, monitorowania aktywacji mięśni oraz informacji zwrotnej rehabilitacyjnej 30,31.
Interakcja człowiek-maszyna i systemy wspomagające: Miękka, inspirowana skórą elektronika dotykowa jest coraz częściej wykorzystywana, aby umożliwić intuicyjną komunikację między ludźmi a maszynami. Poprzez przekładanie sygnałów mechanicznych lub fizjologicznych na interpretowalne odpowiedzi elektryczne, te elastyczne systemy zapewniają naturalne interfejsy dla technologii sterowania robotycznego i wspomagającego. Liu i in.32 opracowali bezprzewodową platformę elektroniczno-skórową, która działa jako dwukierunkowy interfejs człowiek-maszyna, umożliwiając sterowanie urządzeniami robotycznymi za pomocą gestów oraz przekazywanie informacji zwrotnej użytkownikowi za pomocą zintegrowanych czujników i siłowników. Uzupełniające postępy w noszonej e-skórze do monitorowania zdrowia rozszerzyły jego rolę wspomagającą dla pacjentów i osób starszych. Sun i in.33 podsumowali, jak konformowalne sieci biosensoryczne oraz adaptacyjna interpretacja danych przyczyniają się do ciągłego wsparcia zdrowia i informacji zwrotnej dotyczącej rehabilitacji. Razem te badania pokazują, jak elektronika dotykowa poprawia percepcję, komunikację i wsparcie w systemach interaktywnych nowej generacji.
Demonstracja z użyciem zintegrowanej 36-kanałowej platformy akwizycji dotykowej: Aby zilustrować praktyczną integrację systemów, przedstawiono 36-kanałową platformę akwizycji dotykowej opracowaną przez autorów jako reprezentatywną demonstrację34. Platforma integruje elastyczną matrycę czujnikową z niestandardową płytką akwizycyjną zawierającą wzmacniacze o niskim poziomie szumów, multipleksery analogowe oraz 14-bitowy ADC. Mikrokontroler zarządza synchronizacją danych i komunikacją przez USB lub Bluetooth Low Energy, natomiast wbudowany CPLD kontroluje czas i buforowanie. Zamiast jednej stałej częstotliwości, system wykonuje trzy synchroniczne strumienie próbkowania – 2 kHz dla sygnałów akustycznych, 1 kHz dla przyspieszenia i sygnałów dotykowych oraz 100 Hz dla temperatury i światła – tak aby każda metoda detekcji była próbkowana z odpowiednią częstotliwością, poprawiając efektywność pasma bez utraty wydajności percepcyjnej. Dane w czasie rzeczywistym są wizualizowane i analizowane na komputerze hosta, co demonstruje skalowalną percepcję dotykową odpowiednią zarówno dla platform robotycznych, jak i ubieralnych.
Podsumowując, cztery dziedziny zastosowań pokazują, jak elastyczna elektronika dotykowa przekształca sensory w percepcję. Od manipulacji robotyczną po noszone systemy zdrowotne i interaktywne – integracja czujników multimodalnych, adaptacyjnej akwizycji i inteligentnego przetwarzania umożliwia responsywne i efektywne interfejsy dotykowe, torując drogę autonomicznym i adaptacyjnym platformom e-skin.