$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Dokunsal algılama, robotik algı 1,2 için kapsamlı şekilde araştırılmıştır, ancak çoğu elektronik cilt (e-deri) sistemi hâlâ karmaşık insan dokunuşunun yorumlanmasını sınırlayabilen tek modalite, düşük yoğunluklu konfigürasyonlara dayanır. Esnek dokunsal malzemeler ve cihaz mimarisindeki önemliilerlemelere rağmen, çok modlu ve çok kanallı dokunsal algılamanın yüksek hassasiyetli, gerçek zamanlı edinimle sistem düzeyinde entegrasyonu devam eden teknik zorluklaryaratmaktadır 4. Sonuç olarak, sinyal senkronizasyonu, zamanlama koordinasyonu ve veri veri akışı optimizasyonu gibi temel konular, büyük ölçekli veya yüksek kanal sayısına sahip dokunsal sistemlerde sistematik adresleme gerektirir5. Bu gereksinimleri karşılamak için, senkronize çok kanallı veri akışlarını yönetebilen, sinyal bütünlüğünü koruyabilen ve nicel jest ile kuvvet karakterizasyonunu destekleyen yüksek bant genişliğine sahip ön uç mimarisi gereklidir 6,7,8.
Çok modlu e-skin sistemleri, robotik platformların insan derisinin karmaşık dokunsal algılama yeteneklerini taklit etmesini sağlayan önemli bir gelişme olarak ortaya çıkmıştır. Sadece normal basınç veya sıcaklık algılayan geleneksel tek mod sensörleri, gerçek dünyadaki dokunsal etkileşimlerin karmaşık ve dinamik doğasını tam olarak yakalayamayabilir. Buna karşılık, insan kaynaklı multimodal sistemler, kesme kuvveti, titreşim ve termal işaretler dahil olmak üzere gerçek zamanlı olarak birden fazla dokunsal uyaran türünü tespit etmek için tasarlanmıştır. Örneğin, Lee ve ark. dört farklı duyusal kanal üzerinden gerçek zamanlı algılayabilen biyoeshamlı dokunsal algı sistemi geliştirmiştir; bu da doku, temas modu ve nesne etkileşim durumlarının tanınmasınıgeliştirmiştir9.
Esnek elektroniklerdeki son gelişmeler, özellikle biyolojik dokunun mekanik uyumunu ve yüksek hassasiyetini taklit eden gelişmiş elektronik deri (e-skin) geliştirilmesiyle, bu çok modlu sistemlerin ufklarını daha da genişletmiştir. Örneğin, yeni aktif malzemelerin ve hiyerarşik yapısal tasarımların keşfi, eşi benzeri görülmemiş dokunsal hassasiyete ve çok işlevli yeni nesil e-skin platformlarına yolaçmıştır 10. Malzeme yeniliğinin ötesinde, büyük ölçekli uygulamalara geçiş sağlam ve ölçeklenebilir üretim tekniklerini gerektirir. Basılı elektronik, yüksek yoğunluklu sensör dizilerinin çeşitli elastomerik substratlara hassas ve maliyet etkin entegrasyonunu sağlarken cihaz performansınıkorurken kritik bir çözüm olarak ortaya çıkmıştır 11.
Bu sistemlerin pratik senaryolarda güvenilirliğini sağlamak için, araştırmacılar giderek daha fazla esnek sensörlerin elektromekanik özelliklerini ve algılama mekanizmalarını optimize ederek sinyal çapraz konuşmasını ve çevresel parazitiazaltmaya odaklanmaktadır 12. Sonuç olarak, sahadaki mevcut paradigma, izole algılama bileşenlerinden, gelişmiş malzemeleri yüksek verimli sinyal işleme çerçeveleriyle sinerjik eden tam entegre, akıllı ve esnek platformlaradoğru kaymaktadır 13.
Ancak, birden fazla algılama modalitesini birleşik bir diziye entegre etmek, sinyal bağlanması, senkronizasyon ve veri yorumlamada önemli zorluklar yaratır. Kong ve ark., doğru sinyal izolasyonunu sağlamak ve çapraz konuşmayı en aza indirmek için yüksek yoğunluklu multimodal sensör dizilerinde sağlam entegrasyon ve decoupling stratejilerinin gerekliliğinivurguladı. Ayrıca, yumuşak algılama altının mekanik davranışı sinyal doğruluğunu önemli ölçüde etkiler. Mu ve ark., iletken polimer kompozitlerin viskoelastik doğasının sinyal kayması ve histerezisi indükleyebileceğini göstererek, çok modlu algılama platformlarında malzeme modellemesi ve sistem düzeyinde telafi stratejilerinin rolünü vurguladılar 15. Bu bulgular topluca, yüksek bant genişliğine, viskoelastikliğe duyarlı ve ayrılmış multimodal e-skin sistemlerinin geliştirilmesinin, robotik ve insan-makine arayüzlerinde zeki dokunsal algıyı ilerletmek için hayati olduğunugöstermektedir.
Çok kanallı dokunsal sinyallerin gerçek zamanlı olarak minimum gecikme ve yüksek sinyal bütünlüğüyle elde edilmesini sağlamak için, karmaşık programlanabilir mantık cihazı (CPLD) tabanlı bir edinim çerçevesi benimsendi. Önceki çalışmalar, CPLD'lerin sensör sistemlerinde yüksek hızlı veri boru hatlarını ve zamanlama açısından kritik sinyal akışlarını yönetmek için uygun olduğunugöstermiştir 17,18.
Geleneksel veri toplama mimarilerine kıyasla, bu CPLD tabanlı senkronize hibrit frekans yaklaşımı birkaç belirgin avantaj sunar. Mikrodenetleyici ünitesi (MCU) tabanlı sistemler genellikle yazılım düzeyinde senkronizasyon veya ardışık ankete dayanırken, yüksek kanal sayılarında sinyal fazı hizasını tehlikeye atabilecek belirsiz zamanlama titremesine ve kesinti gecikmesine yatkındırlar19. Buna karşılık, bir CPLD'nin donanım-mantık tabanlı mimarisi, tüm 36 kanal için tamamen paralel çalıştırma ve nanosaniye seviyesinde deterministik zamanlama sağlar. Ayrıca, alan programlanabilir kapı dizileri (FPGA'lar) daha yüksek hesaplama gücü sağlarken, CPLD'ler hibrit frekanslı durum makinelerinde gereken mantık derinliği için daha maliyet etkin ve güç verimli bir çözüm sunar ve giyilebilir e-skin uygulamalarında uzun vadeli stabiliteyi kolaylaştırır. Ayrıca, kanal başına etkili örnekleme bant genişliğinden ödün veren düşük kanallı çoklama yöntemlerinin aksine, önerilen senkronize mimari, dokunsal modaliteler için tutarlı 2 kHz hızını korur ve son literatürde tespit edilen heterojen veri birleşiminin darboğazlarınıaşmaktadır 19.
Bu çalışma, CPLD tabanlı bir satın alma sistemiyle entegre edilmiş çok modlu esnek elektronik bir kaplama sunmaktadır. Sistem, dinamik dokunsal kanallar için 2 kHz ve ivme, sıcaklık, nem, aydınlatma ve ses sensörleri dahil yardımcı modaliteler için 100 Hz'de çalışan 36 adet 14-bit hibrit frekans örnekleme kanalını destekler (Şekil 1). Sistem, bu heterojen sensörleri esnek bir basılı devre (FPC) alt tabakası üzerine entegre ederek hem mekanik uyum hem de elektriksel kararlılık sağlar. Dokunsal etkileşimler sırasında yerel deformasyon uyum sağlar ve temas kararlılığını artırmak için küçük dikdörtgen birimlere ayrılmış uyumlu viskoelastik kapsüllemekatmanı 15 benimsenmiştir.
Pratik uygunluk açısından, yüksek hızlı paralel örnekleme mimarisi, kontrollü laboratuvar ortamında tıklama veya doku kaydırma gibi hızlı, dürtüsel dokunsal olayları yakalamak için optimize edilmiştir. Ancak, çalışma kısıtlamaları arasında viskoelastik sapma ve yumuşak substratın histerezisi nedeniyle potansiyel sinyal sadakatinin bozulması yer alır; bu da periyodik kalibrasyon veya yazılım tabanlı telafi gerektirir. Ayrıca, sistem daha yüksek kanal sayılarına ölçeklenebilir olsa da, mevcut uygulama gerçek zamanlı görselleştirme için kablosuz iletim bant genişliği ile sınırlandırılmıştır.
CPLD, senkronize çok kanallı alım ve kablosuz veri iletimi ile istikrarlı gerçek zamanlı performans sağlar. Bu yaklaşım, yüksek yoğunluklu çok modlu sinyal toplamayı mümkün kılar ve robotik dokunsal algı için ölçeklenebilir bir donanım temeli sağlar. Dokunsal ayrımcılığı değerlendirmek için dört temsil hareketi — nazik dokunuş, dokunma, hafif sıkma ve güçlü sıkışma — deneysel olarak analiz edildi.
Bu çalışma, yüksek bant genişliğine sahip çok modlu e-skin mimarisinin fizibilitesini ve sinyal bütünlüğünü göstermeye odaklanmaktadır. Basınç algılama, <500 Ωcm hacim direncine sahip iletken polimer kompozit olan viskoelastik algılama malzemesine dayalı piezorezistif bir mekanizma kullanılarak uygulanır. Bu konfigürasyonda, mekanik basınç malzeme içindeki temas direncini değiştirir ve bu direnç sonrasında alım sistemi tarafından yakalanır. Basınç kanalları, gerçek zamanlı alım ve veri kalitesini doğrulamak için temsil yöntem olarak seçildi. Sistem, ivme ve sıcaklık gibi ek modaliteleri desteklese de, bunların uygulanması ve analizi gelecekteki uygulamaya özel çalışmalar için ayrılmıştır.
Yüksek yoğunluklu dokunsal veri ediniminin zorluklarını ele almak için, bu çalışma Wi-Fi 6 modülüyle entegre edilmiş CPLD tabanlı donanım mimarisi kullanmaktadır. Şekil 2'de gösterildiği gibi, sistem 14 bit çözünürlükle 36 kanalı 2 kHz yüksek hızlı örnekleme hızında yönetecek şekilde tasarlanmıştır ve yaklaşık 1.01 Mbps ham veri aktarım sağlar. 802.11ax protokolünü kullanarak platform, tipik laboratuvar ortamlarında %0,2'nin altında paket kaybı oranını koruyarak istikrarlı ve etkili bir iletim hızı olan 1,5 Mbps'ye ulaşır. Bu donanım mantığı temelli yaklaşım, geleneksel MCU tabanlı mimarilerde yaygın olan belirsizlik dışı zamanlama titremesini ve kesinti gecikmesini ortadan kaldırırken, FPGA tabanlı çözümlere daha güç verimli ve maliyet etkin bir alternatif sunar. Böylesine sağlam bir veri hattı, karmaşık jest tanıma ve çoklu modal dokunsal algılama için gerekli olan hassas gerçek zamanlı senkronizasyon ve sinyal bütünlüğünü sağlar.
İki boyutsuz gösterge tanımlandı: eşdeğer dalga formu eğriliği (EWS) ve eşdeğer yük (EL). EWS, dokunsal yanıt dalga formunun zamansal asimetrisini nicelikle ifade ederken, EL temas süresi boyunca entegre edilen toplam kuvvet yoğunluğunu temsil eder. Bu göstergelerin analizi, her hareket için belirgin mekanik imzalar ortaya koymuştur; ortalama boşalma süresi 0,4 saniye ± 0,2 saniyedir; bu da substratın viskoelastik yanıtının sistemin yakaladığı zamansal özelliklere katkıda bulunduğunu göstermektedir.
Bu sonuçlar, senkronize ve çok modlu edinim kullanılarak doğru dokunsal yoğunluk ve jest tanıma mümkün olduğunu göstermektedir. Önerilen sistem, böylece nicel dokunsal analiz için işlevsel bir ön uç platform sağlar ve duygusal veya duyguya bağlı insan-robot etkileşiminde gelecekteki gelişmeler için temel oluşturur.