Parametry zainteresowania
Z trajektorii biofizycznych sygnałów cyfrowych generowanych przez układ nerwowy człowieka można wyodrębnić wiele parametrów ruchu. W niniejszym opracowaniu skupiamy się na przebiegach EEG elektroencefalograficznych (reprezentujących sygnały wyjściowe ośrodkowego układu nerwowego, CNS), ruchach ciała (reprezentujących sygnały wyjściowe obwodowego układu nerwowego, PNS) oraz sygnałach serca (reprezentujących sygnały wyjściowe autonomicznego układu nerwowego, ANS).
W przypadku sygnałów związanych z OUN i AUN wykorzystujemy fluktuacje amplitudy szczytowej przebiegów EEG i EKG (µV), przeliczone na bezwymiarowe (zestandaryzowane) mikroruchy impulsowe (MMS) (patrz poniżej). Dla sygnałów związanych z Obwodowym Układem Nerwowym (PNS) wykorzystujemy trajektorie środka masy (COM) oraz szeregi czasowe profilu ich prędkości (m/s), aby wyprowadzić odpowiadające im bezwymiarowe wartości MMS. Po zgromadzeniu MMS możemy zintegrować je w ważonym grafie nieskierowanym, opierając się na zestawie parowej analityki sygnałów pomiędzy czujnikami i poziomami funkcjonowania układów nerwowych. Krok ten umożliwia zastosowanie analizy łączności sieciowej dla połączonych sygnałów. Następnie generujemy interpretowalne grafy14,15 przedstawiające zmiany w samoorganizującej się topologii sieci. W szczególności, porównując te grafy w trzech zadaniach wskazywania i/lub chodzenia, możemy zaobserwować, jak sygnały biofizyczne reagują na zewnętrzny rytm w sposób pasywny (tzn. gdy uderzenia metronomu spontanicznie synchronizują biorytm) oraz w sposób aktywny (tzn. gdy uczestnik świadomie stara się dostosować tempo wskazywania dłonią lub ruchów podczas chodzenia do uderzeń metronomu). Możemy również badać wzorce przesyłania informacji między węzłami sieci reprezentującymi poziomy funkcjonowania OUN, PNS i AUN.
Analizy stochastyczne MMS z wielofunkcyjnych warstw sygnałów biofizycznych
Sygnały biofizyczne pozyskiwane z noszonej siatki czujników rozmieszczonych na ciele generują szeregi czasowe szczytów i dolin, które różnią się amplitudą i czasem wystąpienia. MMS tych sygnałów biofizycznych16 to fluktuacje amplitudy i czasu występowania szczytów, przy czym amplitudy są normalizowane do bezwymiarowej wartości z przedziału rzeczywistego [0,1], co umożliwia integrację i porównywanie sygnałów z różnych warstw funkcjonalnych układów nerwowych: OUN, Obwodowego Układu Nerwowego i Autonomicznego Układu Nerwowego. Te rozbieżne warstwy funkcjonalne wymagają różnych poziomów kontroli neuromotorycznej i wykazują różne zakresy amplitud u poszczególnych osób. Charakteryzują się one również różnym czasem odstępów między szczytami. Chociaż normalizacja MMS zachowuje czas wystąpienia oryginalnych szczytów, rejestruje ona również zmienność amplitudy. Taką normalizację uzyskuje się poprzez podzielenie amplitudy każdego lokalnego szczytu przez sumę amplitudy szczytu oraz średniej z sygnałów próbkowanych w dwóch sąsiednich lokalnych minimach otaczających szczyt:

Te ciągłe impulsy w przedziale liczb rzeczywistych [0,1] zachowują informacje o czasie wystąpienia i fluktuacjach amplitudy, umożliwiając nam jednocześnie traktowanie szeregu czasowego jako procesu losowego. Następnie przyjmujemy proces Gamma w ramach ogólnej kategorii losowych procesów Poissona, powszechnie stosowanych w neurobiologii obliczeniowej do analizy impulsów binarnych.
Te metody analityczne zostały szczegółowo opisane w innych publikacjach3,14,17,18; w celu zapoznania się z wyjaśnieniem potoku analitycznego oraz proponowaną wizualizacją wspomagającą interpretację kliniczną należy zapoznać się z Rysunkiem 6. Tutaj wykorzystujemy płaszczyznę parametrów Gamma rozpiętą przez parametry kształtu i skali rozkładów Gamma (PDF), które szacujemy empirycznie z przebiegów fal MMS. Wykreślamy również punkty odpowiadających im momentów rozkładu Gamma na wykresie czterowymiarowym, w którym średnia, wariancja i skośność stanowią trzy z wymiarów, a kurtoza jest reprezentowana przez rozmiar znacznika używanego do oznaczenia stochastycznych sygnatur danej osoby.
Dla każdego zadania dane dotyczące szczytów MMS pochodzące z biofizycznych serii czasowych są gromadzone i dopasowywane do rozkładu Gamma (Gamma PDF) przy użyciu metody największej wiarygodności (MLE) z 95% przedziałami ufności dla każdego parametru rozkładu Gamma: kształtu, określającego formę rozkładu, oraz skali, określającej dyspersję (stosunek szumu do sygnału). W ten sposób z wysoką pewnością szacujemy optymalną ciągłą rodzinę rozkładów PDF, która oddaje fluktuacje biorytmów układów nerwowych danej osoby na różnych poziomach funkcjonalności wymaganych przez te zadania. Warstwy funkcjonalne te obejmują zakres od wysokopoziomowych abstrakcyjnych umiejętności poznawczych i zdolności pamięciowych, po dobrowolną kontrolę neuromotoryczną i spontaniczne ruchy wynikowe pochodzące z zadań ukierunkowanych na cel. Badamy również ruchy automatyczne oraz zdolność systemu do fizycznej synchronizacji z tempem metronomu (uderzenia na minutę).

Rysunek 6: Statystyczny schemat analityczny dla rozwoju dynamicznych cyfrowych biomarkerów i zastosowania w tworzeniu przyszłych aplikacji (APP). (A) Trójwymiarowa trajektoria pozycyjna środka masy (COM) podczas chodzenia osoby wokół. (B) Fluktuacje prędkości COM z zaznaczonymi czerwonymi kropkami szczytami amplitudy. (C) Standaryzowany MMS z fluktuacji szczytów prędkości COM (czerwone kropki) w przedziale wartości rzeczywistych [0,1]. (D) Histogramy częstotliwości szczytów MMS (czerwone kropki w MMS). (E) Funkcje gęstości prawdopodobieństwa (PDF) dopasowane do histogramu częstotliwości, ewoluujące w czasie od bezpamięciowego, najbardziej losowego rozkładu wykładniczego (czerwony), przez pewien przejściowy rozkład skośny (niebieski), aż do rozkładu Gaussa (predykcyjnego) o niskiej dyspersji (CEL, zielone koło). Ten idealny rozkład (zielony) występuje u młodych sportowców i wyznacza cel dla przypadków predykcyjnych o wysokim stosunku sygnału do szumu. (F) Metoda największej wiarygodności (MLE) użyta do dopasowania najlepszej PDF (z 95% pewnością) do danych empirycznych. Wynikowe wartości parametrów lokalizują na płaszczyźnie parametrów Gamma ewoluujące sygnatury stochastyczne (proces Gamma) z fluktuacji prędkości COM: „log shape” reprezentuje kształt rozkładu, zmieniający się od wykładniczego, przez skośny, aż do symetrycznego (idealny rozkład Gaussa); „log scale” to stosunek szumu do sygnału (dyspersja), co sugeruje rodzaj sprzężenia zwrotnego kinestetycznego, które (najprawdopodobniej) otrzymuje mózg22,23. Kolory reprezentują stany stochastyczne w miarę ich dynamicznej ewolucji w czasie. (G) Odległość prawdopodobieństwa (odległość w metryce Wassersteina7) od idealnego CELU o niskim stosunku szumu do sygnału (niska dyspersja) i wysokiej przewidywalności (rozkład symetryczny) występującego u osób neurotypowych; z dala od słabego sprzężenia zwrotnego (losowy szum) występującego w zaawansowanej chorobie Parkinsona (PD), u pacjentów deaferentowanych24,25,26,27, osób z schizofrenią28 oraz osób z autyzmem3,18,22,29. (H) Uproszczona wizualizacja reprezentująca te stany stochastyczne ewoluujące w czasie, oparta na zależności potęgowej między parametrami kształtu (shape) i skali (scale). Takie wizualizacje w przyszłych aplikacjach mogą zapewniać w czasie rzeczywistym łatwe do zrozumienia sprzężenie zwrotne kliniczne dla osób z chorobą Parkinsona (PWP) oraz zespołu opieki zdrowotnej w celu poprawy precyzji w ocenie i planowaniu leczenia. Prosimy kliknąć tutaj, aby wyświetlić większą wersję tego rysunku.
Wyniki z różnych trybów danych
Na potrzeby niniejszej pracy przeanalizowano dane trzech osób z chorobą Parkinsona (PWP) oraz trzech zdrowych uczestników, których dane demograficzne przedstawiono w Tabeli 1. Trzej uczestnicy z PWP zostali wybrani spośród 10 zarejestrowanych osób z PWP, aby reprezentować przypadek łagodnej postaci PD (wynik w zunifikowanej skali oceny choroby Parkinsona [UPDRS] wynoszący 16), przypadek umiarkowany (wynik UPDRS wynoszący 25) oraz przypadek ciężki (wynik UPDRS wynoszący 44). Dwóch zdrowych uczestników wybrano spośród 15 zarejestrowanych osób zdrowych, ponieważ najdokładniej odpowiadali oni uczestnikom z PWP pod względem wieku i płci; jeden zdrowy uczestnik został wybrany z młodszej grupy wiekowej, aby stanowić idealny zdrowy punkt odniesienia do porównania.
| Uczestnik | Zaburzenie | Płeć | Wiek | UPDRSa |
| 1 | PWP | F | 64 | 44 |
| 2 | PWP | M | 65 | 25 |
| 3 | PWP | M | 64 | 16 |
| 4 | brak | M | 26 | n/d |
| 5 | brak | F | 65 | n/d |
| 6 | brak | M | 67 | n/d |
| aMaksymalna punktacja 108. | | | |
Tabela 1: Demografia uczestników.
W teście poznawczym i pamięciowym (ruch długopisu) zarejestrowano trajektorie pozycyjne ruchów długopisu, a następnie wyekstrahowano prędkość liniową, aby uzyskać szeregi czasowe amplitudy prędkości. Następnie dla każdego zadania rysunkowego na podstawie fluktuacji amplitudy prędkości wyznaczono MMS. Pacjentów pogrupowano zgodnie z medianą wyników w skali Movement Disorder Society−UPDRS (MDS-UPDRS), gdzie najwyższy stopień zaawansowania choroby PD wskazywała najwyższa ranga wyników powyżej wartości mediany kohorty. Do przedstawienia wyników w odniesieniu do trzech reprezentatywnych kontroli wykorzystano trzech reprezentatywnych uczestników z każdego klastra wyznaczonego przez medianę rang wyników. Jedną osobą kontrolną jest młody mężczyzna (26 lat), reprezentujący idealny stan kontroli neuromotorycznej w okresie młodości. Pozostałe dwie osoby kontrolne to zdrowi seniorzy: kobieta w wieku 65 lat oraz mężczyzna w wieku 67 lat. Rysunek 7 przedstawia trajektorie COM, a Rysunek 8 przedstawia odpowiadające im procesy Gamma wynikające z MMS wyznaczonego z profilów prędkości trajektorii.

Rysunek 7: Przykładowe trajektorie COM podsumowujące trajektorie 17 punktów ciała podczas wykonywania wybranych testów rysowania poznawczego wraz z rzeczywistymi zdigitalizowanymi śladami. Przykładowe wyniki podczas testu złożonej figury Bensona (zadania 1 i 7) oraz testów łączenia (zadania 2−5). (A) Złożona figura Bensona użyta w tym protokole. (B) Test łączenia z cyframi i literami, w którym celem jest połączenie ich w określonej kolejności poprzez rysowanie linii wzdłuż uporządkowanej ścieżki (zadanie 4 — Trail B). (C) Przykładowe ślady rysika figury Bensona i trajektoria 3D COM u 65-letniej kobiety z grupy kontrolnej (kolor niebieski) oraz osoby z PD z wynikiem MDS-UPDRS wynoszącym 44 (kolor czerwony). Lewa strona przedstawia wyniki, gdy uczestnik natychmiast skopiował figurę (zadanie 1), a prawa strona obrazuje przypominanie sobie figury po 10 minutach przerwy (zadanie 7). W obu przypadkach rejestrowano ciągłe rysowanie wraz z odryванием rysika, aby ukazać wahania i inne zmienne. (D) Wyniki grupy kontrolnej w porównaniu z grupą z PD w zadaniach Trail A (zadanie 3) i Trail B (zadanie 5). Zwróć uwagę na zmiany w trajektoriach COM i rzeczywistych rysunkach. Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.
Rysunek 8 przedstawia wyniki najlepiej dopasowanego rozkładu Gamma-PDF metodą MLE z 95% przedziałem ufności dla zdrowych uczestników oraz pacjentów. W każdym zadaniu rysunkowym pacjenci wykazali odrębność względem grupy kontrolnej. Ponadto wykazali zróżnicowanie wewnątrz własnej grupy, różnicując się zgodnie z medianowymi rangami wyników w skali MDS-UPDRS. Każdy pacjent jest reprezentowany przez momenty empirycznie oszacowanego PDF na górnych panelach, podczas gdy dolne panele przedstawiają krzywe PDF dla każdego uczestnika. Analizując poszczególne panele, można dostrzec rodzinę rozkładów PDF reprezentowanych przez każdą osobę w różnych zadaniach. Podejście to kontrastuje z (zakładanymi) modelami parametrycznymi o uniwersalnym zastosowaniu. Rysunek 8D przedstawia ciągłe rysowanie tarczy zegara (zadanie 6) zarejestrowane za pomocą końcówki długopisu (łącznie z jego odryванием od papieru).

Rycina 8: Skoki mikroruchów (MMS) stratyfikują kohorty i pozwalają tworzyć interpretowalne, spersonalizowane dynamiczne biomarkery cyfrowe dla zadań poznawczych. Fluktuacje moment do momentu (bezwymiarowe MMS) pochodne trójwymiarowych trajektorii COM podczas testów poznawczych jednoznacznie lokalizują każdego uczestnika na mapie stochastycznej. COM podsumowuje 17 trajektorii pozycji w obrębie ciała, koregistrując ruchy podczas wykonywania przez osobę zadań poznawczych i rysowania na tablecie cyfrowym. (A) Momenty Gamma zostały oszacowane empirycznie podczas testu Trail B (zadanie 5) polegającego na łączeniu liter i cyfr (średnia – oś x; odchylenie standardowe – oś y; skośność – oś z i kurtoza – rozmiar markera) na podstawie estymacji największej wiarygodności z 95% poziomem ufności na górnym panelu. Każdy marker reprezentuje unikalną lokalizację danej osoby w przestrzeni prawdopodobieństwa. Każdy punkt oznacza unikalną, rozdzielną PDF pokazaną na dolnym panelu, co pozwala na stratyfikację mediany wyników w skali UPDRS dla PWP (legenda). (B) Zadanie kopiowania złożonej figury Bensona (zadanie 1). (C) Zadanie rysowania zegara (zadanie 6). (D) Rzeczywiste rysunki zegarów zarejestrowane przez cyfrowy rysik, ukazujące ciągły ślad (wliczając odrywanie rysika). Cała kinematyka rysika i całego ciała w ruchu jest rejestrowana synchronicznie z EEG-EKG (nie pokazano), aby empirycznie wyprowadzić wielowarstwowe (poznawcze, dobrowolne, spontaniczne, automatyczne, autonomiczne) sygnatury stochastyczne. To spersonalizowane podejście (proces Gamma) kontrastuje z „modelem uniwersalnym”, który zakłada teoretyczną PDF i poprzez średnie ogólne wygładza jako „szum” istotne fluktuacje amplitudy i czasu przebiegu fal. Skoki mikroruchów (MMS) oraz podejście oparte na procesie Gamma stratyfikują kohorty i pozwalają tworzyć interpretowalne, spersonalizowane biomarkery cyfrowe dla zadań poznawczych. Kliknij tutaj, aby zobaczyć powiększoną wersję tej ryciny.
Następnie prezentujemy wyniki dotyczące ruchów ciała (dobrowolne wskazywanie vs. automatyczne chodzenie). Ruchy rysowania nie wymagają takiego samego poziomu ukierunkowania na cel, jak zadanie wskazywania celu (tj. zadania 10–12). Aby móc ocenić stopień kontroli wolitywnej, wykorzystujemy następnie zadanie wskazywania celu przestrzennego. Podobnie jak wcześniej, wykorzystujemy trajektorie z COM, podsumowujące ruchy kinematyczne 17 pozycji czujników (Rycina 9). Najpierw pobieramy szeregi czasowe amplitudy prędkości, a następnie wyznaczamy MMS z fluktuacji amplitudy w czasie rzeczywistym. Lewy panel na Rycini 10 przedstawia wyniki analiz stochastycznych podczas zadania wskazywania w stanie wyjściowym (zadanie 10). Środkowy panel na Rycini 10 przedstawia wyniki zadania wskazywania, gdy metronom został ustawiony na 35 bpm, bez informowania uczestnika o jego obecności (zadanie 11). Prawy panel na Rycini 10 przedstawia wyniki dla przypadku, w którym uczestnicy otrzymali instrukcję, aby dostosować tempo ruchów wskazywania do rytmu metronomu (zadanie 12).

Rysunek 9: Trójwymiarowe trajektorie COM podczas zadań wskazywania w trzech różnych kontekstach: zwykłego wskazywania w celu wykonania pomiaru bazowego (zadanie 10), wskazywania przy rytmicznym uderzeniu metronomu w tle z częstotliwością 35 bpm bez informowania uczestnika o obecności metronomu (zadanie 11) oraz wskazywania przy obecności tego samego uderzenia metronomu, ale po poinstruowaniu uczestnika, aby dostosował ruchy do rytmu metronomu (zadanie 12). (A) Wyniki uczestnika z grupy kontrolnej. (B) Wyniki osoby z chorobą Parkinsona (PWP) w grupie z najniższą oceną nasilenia objawów według mediany rankingowej wyników MDS-UPDRS dla całej kohorty. (C) PWP w grupie o średnim stopniu nasilenia objawów. (D) PWP w grupie o najwyższym stopniu nasilenia objawów. Zwróć uwagę na pogorszenie trajektorii COM wraz ze wzrostem wyników MDS-UPDRS. Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.
Wyniki procesu Gamma przedstawiono na Rysunku 10, gdzie możliwe jest rozróżnienie każdego podtypu PWP oraz śledzenie zmian w sygnaturach stochastycznych w zależności od kontekstu.
Zadanie wskazywania ujawniło wrażliwość tych analiz na sytuacje kontekstowe. W przypadku tego samego zadania wskazywania zmiany w warunkach zastosowania metronomu wywołały różne sygnatury stochastyczne między warunkami. W szczególności można zaobserwować zmianę biorytmów COM, gdy uczestnicy spontanicznie (bez instrukcji) synchronizowali się z taktem metronomu, w przeciwieństwie do warunków, w których uczestnik otrzymał polecenie świadomego dostosowania tempa ruchów wskazywania do taktu metronomu. Zadanie to wykazało, że w stanie spoczynku ruchów górnej części ciała poziomy kontroli dobrowolnej różnią się u osób z PWP w zależności od różnych wyników w skali MSD-UPDRS. Konkretnie, im niższy wynik, tym niższy stosunek szumu do sygnału (wartość parametru skali) na płaszczyźnie parametru Gamma (Rysunek 10A), a kształt PDF jest bardziej symetryczny. Ta uporządkowana zależność między wynikami UPDRS o średnim rankingu a danymi cyfrowymi uległa zmianie w obecności metronomu i została dodatkowo zróżnicowana pomiędzy warunkami spontanicznego (bezinstrukcyjnego) a świadomego (instruowanego) wskazywania.

Rycina 10: Dynamiczna cyfrowa ocena trzech specyficznych zadań wskazywania. Wynik procesu Gamma z MMS, wyprowadzony z fluktuacji w szeregach czasowych prędkości COM, różnicuje uczestników wewnątrz i pomiędzy grupami PWP a grupą kontrolną podczas trzech zadań wskazywania (zadania 10−12). (A) Płaszczyzna parametrów Gamma pokazuje różnice pomiędzy osobami z PWP a grupą kontrolną. (B) Dla każdego warunku wskazywania momenty Gamma oszacowane empirycznie z procesu Gamma odróżniają osoby z PWP od grupy kontrolnej, a w obrębie każdej grupy sygnatury stochastyczne warstwują uczestników na poszczególne punkty. Każdy kontekst zadania zmienia położenie punktu na mapie. (C) Rodzina rozkładów PDF również odróżnia każdego uczestnika oraz każdą grupę i ujawnia statystyczne zróżnicowanie w różnych kontekstach zadań dla wskazywania celowanego. Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.
Następnie zbadaliśmy, czy wpływ różnych warunków na dobrowolne zachowanie wskazywania przeniesie się na automatyczne ruchy chodu. W tym celu przeprowadzono ten sam protokół co powyżej, tj. z wykorzystaniem metronomu, podczas gdy uczestnik chodził po pomieszczeniu. Tętno metronomu ustawiono w tym przypadku na 12 bpm. Rysunek 11 przedstawia trajektorie COM dla grupy kontrolnej oraz pacjentów z PWP uszeregowanych medianowo według wyników MDS-UPDRS. Wyniki stochastycznej analizy zadania chodu przedstawiono na Rysunku 12.

Rysunek 11: Dynamiczna cyfrowa ocena trzech specyficznych zadań związanych z chodzeniem. Zadanie polegające na chodzeniu w celu ustalenia stosunku szumu do sygnału fluktuacji amplitudy prędkości, wyprowadzone z trajektorii 3D COM z 17 lokalizacji w całym ciele. (A) Trajektorie 3D COM u uczestnika z grupy kontrolnej podczas chodzenia tam i z powrotem w sposób naturalny (zadanie 13); chodzenia w obecności metronomu bez instrukcji, w celu pomiaru spontanicznej synchronizacji z uderzeniami metronomu (zadanie 14); oraz chodzenia przy jednoczesnym świadomym dostosowaniu częstotliwości oddechów do uderzeń metronomu, zgodnie z instrukcją (zadanie 15). (B) PWP z niższą punktacją w skali UPDRS. (C) PWP z wyższą punktacją UPDRS wykazuje pogorszenie trajektorii 3D COM. (D) PWP z najwyższą punktacją UPDRS wykazuje bardzo zaburzone trajektorie COM. Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.

Rycina 12: Zdolność do spontanicznego i instruowanego entrainmentu fizycznego podczas chodzenia. Cyfrowy biomarker zadania chodzenia oparty na skali MDS-UPDRS. (A) Stratyfikacja osób z chorobą Parkinsona (PWP) podczas naturalnego chodzenia zgodnie z medianą wyników. (B) Metronom spontanicznie zmienia sygnatury stochastyczne. (C) Instruowany chód w rytmie metronomu ponownie zmienia sygnatury. (D-F) Płaszczyzna parametrów log-log gamma lokalizuje grupy wzdłuż różnych kształtów i skali (stosunku szumu do sygnału) funkcji gęstości prawdopodobieństwa (PDF), z bardziej szumiącymi i losowymi fluktuacjami u PWP. (G-I) Empirycznie oszacowane PDF przedstawione w panelach D-F powyżej obejmują rodzinę, która zmienia się wraz z kontekstem w sposób unikalny dla każdej osoby. Proszę kliknąć tutaj, aby zobaczyć powiększoną wersję tej ryciny.
Ponieważ wszystkie zadania poznawcze i pamięciowe mogą być wykonywane podczas nagrywania twarzy za pomocą kamerki internetowej komputera, możliwe jest wykorzystanie OpenPose — oprogramowania do uczenia maszynowego o otwartym kodzie źródłowym, dostępnego dla badaczy35 — w celu wyekstrahowania informacji o twarzy, które mogą posłużyć do wnioskowania na temat nastroju lub treści emocjonalnej. W chorobie Parkinsona (PD) często dochodzi do zmniejszenia ekspresji twarzy, gdyż niedobór dopaminy może w konsekwencji prowadzić do niskiego napięcia mięśniowego. W tym przypadku można również zastosować Proces Gamma w celu ustalenia obszarów twarzy, które są najaktywniejsze podczas danego zadania, lub do badania treści emocjonalnych poprzez analizę przejść między obszarami w zależności od emocji. Rysunek 13 przedstawia przykład takich analiz z wykorzystaniem nagrania wideo twarzy uczestnika podczas zadań 16 i 17. 70 punktów służących do rejestracji mikroruchów twarzy zostało rozmieszczonych zgodnie z obszarami unerwienia nerwu trójdzielnego V1 (29), V2 (14), V3 (27)8 (Rysunek 13A), aby ocenić, na przykład w tym przypadku, który obszar zmienia się najbardziej podczas przejścia z twarzy neutralnej do uśmiechu. Tego rodzaju analiza może być systematycznie wykorzystywana do badania innych niemotorycznych aspektów PD, w tym depresji oraz ogólnej komunikacji społecznej.
Aby skompensować niepewny zoom kamery, naturalny ruch człowieka oraz rzeczywistą wielkość twarzy, normalizujemy twarz w następujący sposób: Zakładając, że kamera jest stacjonarna, odwzorowujemy każdą twarz na „twarz jednostkową” z x̄’, ȳ’ = 0 i wariancją jednostkową. Dla każdej klatki w wideo normalizujemy każdy punkt x’ = x- x̄, y’ = y- ȳ i skalujemy każdą współrzędną przez wariancję całej maski dla danej klatki, aby uzyskać wariancję jednostkową dla każdej maski. Następnie traktujemy każdy punkt w serii czasowej twarzy jako odchylenia od poprzedniej maski, zakładając, że twarz nie ulega plastycznej deformacji podczas nagrywania. Wynikiem jest 70-kanałowa seria czasowa współrzędnych pozycji (Rysunek 13B). Fluktuacje amplitudy prędkości wyekstrahowane z przepływów pozycyjnych i prędkości, które generują te serie czasowe, są konwertowane na MMS i wprowadzane do procesu Gamma, co pozwala ujawnić PDF oraz ich przesunięcia podczas przejść emocjonalnych (Rysunek 13C). Na przykład przejście z wyrazu neutralnego do uśmiechu wydaje się niezauważalne na Rysunku 13B, jednak stochastyczne przesunięcia wskazują strefę V2 jako najbardziej czułą, maksymalnie zmieniającą PDF.

Rycina 13: Analizy sentymentu z danych wideo zarejestrowanych za pomocą OpenPose. (A) Obszary twarzy zgodnie z nerwem trójdzielnym, który przenosi ogólne włókna doprowadzające somatyczne (GSA). Włókna te unerwiają skórę twarzy poprzez gałąź oczną (V1), szczękową (V2) i żuchwową (V3), które zostały tutaj wykorzystane do badania przejść między wyrazami twarzy (neutralny vs. uśmiech). (B) Wykorzystując kilka minut nagrania wideo wykonanego komercyjnie dostępnymi kamerami, możliwe jest wyodrębnienie informacji o twarzy za pomocą OpenPose i naniesienie 70 punktów na twarzy zgodnie z obszarami V1, V2, V3 (kodowanie kolorami jak na panelu A). MMS z tych serii czasowych są następnie wprowadzane do procesu Gamma, a parametry skali i kształtu Gamma są szacowane empirycznie dla każdego stanu. (C) Analizy ujawniają, że w tym przypadku obszar V2 jest w największym stopniu dotknięty przejściem ze stanu neutralnego do uśmiechu u tej konkretnej osoby, ponieważ zmiana PDF jest największa. Aby zobaczyć powiększoną wersję tej ryciny, kliknij tutaj.

Rysunek 14: Integracja cyfrowych sygnałów biofizycznych z wielu warstw układu nerwowego przy użyciu ważonych grafów nieskierowanych i metod teorii informacji. Łączność sieciowa wzajemnej informacji parowej pomiędzy wszystkimi sygnałami EEG, ruchu (magnetometr) i EKG. (A) Reprezentatywny pomiar łączności zdrowego uczestnika podczas trzech zadań chodu – zadanie 13 kontrolne (lewo), zadanie 14 spontaniczne dostosowanie do metronomu (środek) oraz zadanie 15 instruowane kontrolowane oddychanie (prawo). Każdy węzeł reprezentuje sygnał z jednego czujnika; kolor linii reprezentuje poziom MI, gdzie jaśniejszy kolor wskazuje na wyższą łączność; kolor węzła reprezentuje średnie MI sygnału z tego czujnika ze wszystkimi pozostałymi czujnikami. Skala kolorów jest jednakowa dla wszystkich zadań i wszystkich uczestników i została dowolnie ustawiona tak, aby najjaśniejszy kolor odpowiadał maksymalnej wartości MI we wszystkich zadaniach i u wszystkich uczestników, a najciemniejszy kolor minimalnej wartości MI we wszystkich zadaniach i u wszystkich uczestników. Łączność zdrowego uczestnika wykazuje najsilniejsze połączenia pomiędzy węzłami mózgu i ciała. (B) Pomiar łączności pacjenta z PWP i wynikiem UPDRS 16, z takim samym układem schematycznym jak w panelu A, wykazuje mniejszą gęstość łączności niż sieć zdrowego uczestnika. (C) Pomiar łączności pacjenta z PWP i wynikiem UPDRS 44, z takim samym układem schematycznym jak w panelu A, wykazuje najrzadszy wzorzec łączności pomiędzy mózgiem a ciałem. Kliknij tutaj, aby wyświetlić większą wersję tego rysunku.
Następnie określamy ilość informacji przesyłanych przez te biorytmy. W tym celu stosujemy podejście teoretyczno-informacyjne opracowane przez Shannona19, wykorzystując wzajemną informację (MI) pomiędzy sygnałami każdej pary czujników (tj. czujnika EEG, czujnika ruchu, czujnika EKG). W tym celu uzyskaliśmy amplitudy MMS dla każdego typu przebiegu.
MI pomiędzy dwoma czujnikami ocenia poziom redukcji niepewności w sygnale jednego czujnika poprzez wprowadzenie informacji z sygnału drugiego czujnika; wysoka wartość MI oznacza, że dwa sygnały są silnie powiązane, natomiast niska wartość sugeruje, że sygnały te są w większości niezależne. Konkretnie, MI oblicza się następująco:

gdzie
to znormalizowana wartość histogramu rozkładu wartości dla sygnału X, a
to znormalizowana wartość histogramu rozkładu łącznego wartości dla sygnałów X i Y. Przedziały próbkowania ustawiono z przyrostem 0,05 w zakresie od 0,5 do maksymalnej wartości amplitudy. Szczegóły dotyczące wyprowadzenia tego wzoru można znaleźć w wielu publikacjach z zakresu teorii informacji stosowanej w analizach klinicznych20,21.
Ogólnie rzecz biorąc, zdrowy uczestnik wykazywał bardziej połączoną sieć podczas trzech zadań związanych z chodzeniem, podczas gdy u uczestników chorych połączenia były rzadsze, co przedstawiono na Rysunku 13. W grupie PWP nie tylko transmisja informacji w sieci, w której informacja wzajemna była wyprowadzona z własnych biorytmów, jest znacznie niższa; co ważniejsze, istnieją fundamentalne różnice w wzorcach transmisji MI między warunkami, które różnią się w zależności od pacjenta. Można tutaj dalej wykorzystać miary łączności z analiz sieciowych do podsumowania cech topologicznych tych ewoluujących sieci, a tym samym dostarczyć dodatkowych wskaźników zdolności do synchronizacji fizycznej, odzwierciedlających poziomy komunikacji między mózgiem, ciałem i sercem w sytuacjach, gdy zachodzi synchronizacja fizyczna związana z metronomem, w porównaniu z sytuacjami, gdy ona nie występuje.