Name: MPI CyberMotion Simulator: implementacja nowatorskiego symulatora ruchu w celu zbadania integracji ścieżek multisensorycznych w trzech wymiarach (Wideo) | JoVE Journal
Uploaded: 2012-05-10T12:00:00.000+00:00
Duration: 9 min 46 s
Description: Poznaj metodę badania nawigacji przestrzennej w trzech wymiarach za pomocą symulatora MPI CyberMotion. Technika ta pozwala kontrolować bodźce wzrokowe i przedsionkowe, ujawniając asymetryczne reprezentacje ruchu w mózgu.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Stypendia MPI Postdoc dla MB-C i TM; Korean NRF (R31-2008-000-10008-0) dla HHB. Podziękowania dla Karla Beykircha, Michaela Kergera i Joachima Tescha za pomoc techniczną i dyskusje naukowe.

1. KUKA Roboter GmbH
<ol>
	<li>Symulator CyberMotion MPI składa się z sześcio przegubowego robota szeregowego w konfiguracji 3-2-1 (Rysunek 1). Oparty jest on na komercyjnym systemie KUKA Robocoaster (zmodyfikowanym robocie przemysłowym KR-500 o udźwigu 500 kg). Modyfikacje fizyczne oraz struktura sterowania oprogramowaniem niezbędna do stworzenia elastycznego i bezpiecznego układu eksperymentalnego zostały opisane wcześniej, w tym ograniczenia prędkości i przyspieszenia symulatora ruchu oraz opóźnienia i funkcja przejścia systemu 9. Modyfikacje względem poprzedniego układu zdefiniowano poniżej.</li>
</ol>
<img alt="Schemat robota przemysłowego, ruch sześciosiowy, zakres ramienia robotycznego, inżynieria mechaniczna." src="/files/ftp_upload/3436/3436fig1.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 1"> 
Rycina 1. Graficzne przedstawienie aktualnej przestrzeni roboczej symulatora MPI CyberMotion.
<ol start="2">
	<li>Symulator MPI CyberMotion umożliwia tworzenie złożonych profilów ruchu, łączących przemieszczenia boczne z obrotami. Osie 1, 4 i 6 mogą obracać się w sposób ciągły. Cztery pary sprzętowych ograniczników ruchu ograniczają zakres pracy osi 2, 3 i 5 w obu kierunkach. Maksymalny zakres ruchów liniowych jest silnie uzależniony od pozycji początkowej ruchu. Obecne sprzętowe ograniczniki ruchu symulatora MPI CyberMotion przedstawiono w Tabeli 1.
	<table border="1">
		<tbody>
			<tr>
				<td>Oś</td>
				<td>Zakres [deg]</td>
				<td>Maks. prędkość [deg/s]</td>
			</tr>
			<tr>
				<td>Oś 1</td>
				<td>Ciągły</td>
				<td>69</td>
			</tr>
			<tr>
				<td>Oś 2</td>
				<td>-128 do -48</td>
				<td>57</td>
			</tr>
			<tr>
				<td>Oś 3</td>
				<td>-45 do +92</td>
				<td>69</td>
			</tr>
			<tr>
				<td>Oś 4</td>
				<td>Ciągły</td>
				<td>76</td>
			</tr>
			<tr>
				<td>Oś 5</td>
				<td>-58 do +58</td>
				<td>76</td>
			</tr>
			<tr>
				<td>Oś 6</td>
				<td>Ciągły</td>
				<td>120</td>
			</tr>
		</tbody>
	</table>
	</li>
</ol>
Tabela 1. Aktualna specyfikacja techniczna symulatora MPI CyberMotion.
<ol start="3">
	<li>Przed przeprowadzeniem jakiegokolwiek eksperymentu na symulatorze MPI CyberMotion, każda eksperymentalna trajektoria ruchu przechodzi fazę testową na komputerze symulacyjnym KUKA (Office PC). „Office PC” to specjalny produkt oferowany przez firmę KUKA, który symuluje rzeczywiste ramię robota i posiada taki sam system operacyjny oraz układ ekranu sterowania jak rzeczywisty robot. Schematyczny przegląd systemu sterowania symulatora MPI CyberMotion w konfiguracji pętli otwartej przedstawiono na Rysunku 2.</li>
</ol>
<img alt="Schemat systemu sterowania MPI-KUKA z oprogramowaniem sterowania osiami, trajektorią robota i przepływem pozycji przegubów." src="/files/ftp_upload/3436/3436fig2.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 2"> 
Rycina 2. Schematyczny przegląd układu sterowania w pętli otwartej symulatora MPI CyberMotion. <a href="https://www.jove.com/files/ftp_upload/3436/3436fig2large.jpg" target="_blank">Kliknij tutaj, aby powiększyć rycinię</a>.
<ol start="4">
	<li>Szczegóły dotyczące struktury sterowania można znaleźć tutaj 9. W skrócie, w przypadku konfiguracji pętli otwartej, takiej jak ta zastosowana w obecnym eksperymencie, trajektorie są programowane wstępnie poprzez konwersję trajektorii wejściowych z układu współrzędnych kartezjańskich na kąty w przestrzeni przegubowej za pomocą kinematyki odwrotnej (Rycina 2).</li>
	<li>System sterowania MPI odczytuje te pożądane przyrosty kątów przegubowych i przesyła je do systemu sterowania KUKA w celu wykonania ruchów osi za pomocą prądów silnika. Wartości resolverów przegubowych są przesyłane do systemu sterowania KUKA, który określa aktualne pozycje kątowe przegubów z wewnętrzną częstotliwością 12ms, co z kolei wyzwala odczyt kolejnego przyrostu przegubowego z pliku przez system sterowania MPI oraz zapis aktualnych pozycji kątowych przegubów na dysku. Komunikacja między systemami sterowania MPI i KUKA odbywa się poprzez połączenie Ethernet z wykorzystaniem protokołu KUKA-RSI.</li>
	<li>Siedzisko wyścigowe (RECARO Pole Position) wyposażone w 5-punktowy system pasów bezpieczeństwa (Schroth) jest przymocowane do podwozia, które zawiera podnóżek. Podwozie jest zamontowane do kołnierza ramienia robota (Rycina 3a). Eksperymenty można również przeprowadzać, umieszczając uczestników w zamkniętej kabinie (Rycina 3b).</li>
</ol>
<img alt="Układ interakcji człowiek-robot z symulatorami w eksperymencie laboratoryjnym dotyczącym testów ruchu i sterowania." src="/files/ftp_upload/3436/3436fig3.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 3"> 
Rysunek 3. Układ symulatora MPI CyberMotion. a) Konfiguracja dla bieżącego eksperymentu z wyświetlaczem LCD. b) Konfiguracja dla eksperymentów wymagających zamkniętej kabiny z frontowym stereoskopowym wyświetlaczem projekcyjnym. c) Frontowy monoprojekcyjny wyświetlacz. d) Wyświetlacz montowany na głowie.
<ol start="7">
	<li>Ponieważ eksperyment jest przeprowadzany w ciemności, kamery na podczerwień umożliwiają monitorowanie wizualne z pokoju kontrolnego.</li>
</ol>
2. Wizualizacja
<ol>
	<li>W symulatorze MPI CyberMotion możliwe są różne konfiguracje wizualizacji, w tym ekran LCD, przednia projekcja stereo lub mono oraz wyświetlacze montowane na głowie (Rysunek 3). W obecnym eksperymencie wskazówki wizualne dotyczące ruchu własnego były dostarczane przez wyświetlacz LCD (Rysunek 3a) umieszczony 50 cm przed obserwatorami, którzy w pozostałym zakresie byli badani w ciemności.</li>
	<li>Prezentacja wizualna została wygenerowana przy użyciu oprogramowania Virtools 4.1 i składała się z losowego pola kropek o ograniczonym czasie trwania. Prostopadłościan rozciągający się o osiem jednostek wirtualnych do przodu, w prawo, w lewo, w górę i w dół z punktu widzenia uczestnika (tj. o wymiarach 16 x 16 x 8 jednostek) został wypełniony 200 000 cząsteczkami o tej samej wielkości, składającymi się z białych kół o średnicy 0,02 jednostki na czarnym tle. Kropki zostały rozłożone losowo w przestrzeni (jednorodny rozkład prawdopodobieństwa w obrębie przestrzeni). Ruch w jednostkach wirtualnych został przeskalowany tak, aby odpowiadał w stosunku 1:1 ruchowi fizycznemu (1 jednostka wirtualna = 1 metr fizyczny).</li>
	<li>Każda cząsteczka była wyświetlana przez dwie sekundy przed zniknięciem i natychmiastowym ponownym pojawieniem się w losowej lokalizacji w przestrzeni. W ten sposób połowa kropek zmieniała swoją pozycję w ciągu jednej sekundy. Uczestnikom wyświetlano kropki znajdujące się w odległości od 0,085 do 4 jednostek (odpowiadające kąty widzenia: 13° i 0,3°).</li>
	<li>Ruch w polu kropek był synchronizowany z ruchem fizycznym poprzez odbieranie trajektorii ruchu z komputera sterującego MPI przesyłanych połączeniem Ethernet z wykorzystaniem protokołu UDP. Podczas poruszania się w polu kropek średnia liczba kropek pozostawała stała dla wszystkich ruchów. Wyświetlacz ten nie zapewniał bezwzględnej skali wielkości, lecz przepływ optyczny i paralaksę ruchu, ponieważ kropki były sferami o stałym rozmiarze, które wydawały się mniejsze w zależności od ich odległości od obserwatora.</li>
</ol>
3. Projekt eksperymentalny
<ol>
	<li>16 uczestników, którzy nie byli zaznajomieni z przebiegiem eksperymentu z wyjątkiem jednego z autorów (MB-C), nosili słuchawki z redukcją szumów wyposażone w mikrofon, aby umożliwić dwustronną komunikację z eksperymentatorem. Przez słuchawki stale emitowano dodatkowy szum akustyczny, aby dalej maskować dźwięki generowane przez robota.</li>
	<li>Uczestnicy korzystali z joysticka zbudowanego na specjalne zamówienie i wyposażonego w przyciski odpowiedzi, a dane były przesyłane przez połączenie Ethernet z wykorzystaniem protokołu UDP.</li>
	<li>Kąt dwóch segmentów ruchu wynosił 45° lub 90°. Ruchy w płaszczyźnie poziomej, strzałkowej i czołowej składały się odpowiednio z: ruchów do przodu-w prawo (FR) lub w prawo-do przodu (RF), w dół-do przodu (DF) lub do przodu-w dół (FD) oraz w dół-w prawo (DR) lub w prawo-w dół (RD) (Rysunek 4a).</li>
</ol>
<img alt="Trajektorie translacyjne, informacje sensoryczne, schemat zadania wskazywania; Analiza wejścia przedsionkowego i wzrokowego." src="/files/ftp_upload/3436/3436fig4.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 4"> 
Rycina 4. Procedura. a) Schematyczne przedstawienie trajektorii wykorzystanych w eksperymencie. b) Informacje sensoryczne dostarczone dla każdego badanego typu trajektorii. c) Zadanie wskazywania wykorzystane do oznaczenia punktu wyjścia, z którego uczestnicy uważali, że się przemieścili. <a href="https://www.jove.com/files/ftp_upload/3436/3436fig4large.jpg" target="_blank">Kliknij tutaj, aby powiększyć rycinę</a>.
<ol start="4">
	<li>Informacje sensoryczne manipulowano poprzez dostarczenie wskazówek wizualnych (przepływ optyczny, ograniczone pole gwiazd), przedsionkowo-kinestetycznych (pasywny ruch własny z zamkniętymi oczami) lub jednocześnie wizualnych i przedsionkowo-kinestetycznych (Rysunek 4b).</li>
	<li>Trajektorie ruchu składały się z dwóch odcinków o różnych długościach (1.: 0,4 m, 2.: 1 m; szczytowe przyspieszenie ±0,24 m/s2; Rysunek 4b). Trajektorie obejmowały wyłącznie translację. Nie następowały żadne rotacje uczestników. Aby zminimalizować możliwe zakłócenia wynikające z ruchu przed każdą próbą i upewnić się, że układ przedsionkowy jest testowany w stanie spoczynku, każdej trajektorii poprzedzała 15 s przerwy.</li>
	<li>Obserwatorzy wskazywali drogę powrotną do punktu wyjścia poprzez przesuwanie strzałki nałożonej na awatara wyświetlanego na ekranie (Rysunek 4c). Ruch strzałki był ograniczony do płaszczyzny trajektorii i kontrolowany za pomocą dżojstika. Awatar prezentowano z perspektywy czołowej, strzałkowej i poziomej. Obserwatorzy mogli korzystać z dowolnej lub wszystkich perspektyw w celu udzielenia odpowiedzi. Początkowa orientacja strzałki była randomizowana w poszczególnych próbach.</li>
	<li>Ponieważ zadanie wskazywania wymagało od uczestników mentalnej transformacji perspektywy z reprezentacji egocentrycznej na eksocentryczną, przed próbami treningowymi i eksperymentalnymi przekazano im instrukcje, jak wskazywać drogę powrotną do punktu wyjścia w odniesieniu do awatara. Poinformowano uczestników, że wskazywanie powinno odbywać się tak, jakby awatar był ich własnym ciałem. Następnie polecono uczestnikom wskazać fizyczne cele względem siebie, stosując technikę pomiaru eksocentrycznego. Na przykład uczestnicy otrzymali polecenie wskazania dżojstika spoczywającego na ich kolanach, w połowie drogi między nimi a ekranem, co wymagało skierowania strzałki do przodu i w dół względem awatara. Wszyscy uczestnicy byli w stanie wykonać te zadania bez zgłaszania zagubienia.</li>
	<li>Każdy warunek eksperymentalny powtórzono 3 razy i prezentowano w kolejności losowej. Błąd podpisany oraz czas reakcji analizowano jako zmienne zależne w dwóch oddzielnych analizach ANOVA z powtarzanymi pomiarami 3 (płaszczyzna) * 2 (kąt) * 3 (modalność). Czas reakcji jednego uczestnika, będącego ekstremalną wartością odstającą, został usunięty z analizy.</li>
</ol>
4. Reprezentatywne wyniki
Wyniki błędów z uwzględnieniem znaku zostały zagregowane w ramach modalności i kątów, ponieważ nie stwierdzono istotnych efektów głównych dla tych czynników. Rycina 5a przedstawia istotny efekt główny płaszczyzny ruchu (F(2,30) = 7.0, p = 0.003), w której obserwatorzy niedoszacowali wielkości kąta (średnie dane mniejsze niż 0°) dla ruchu w płaszczyźnie poziomej (-8.9°, s.e. 1.8). W płaszczyźnie czołowej obserwatorzy mieli średnio większą tendencję do przeszacowania wielkości kąta (5.3°, s.e. 2.6), podczas gdy w płaszczyźnie strzałkowej nie odnotowano takiej tendencji (-0.7°, s.e. 3.7). Chociaż efekty główne kąta i modalności nie były istotne, stwierdzono istotną interakcję kąta z płaszczyzną (F(2,30) = 11.1, p &lt; 0.001), tak że przeszacowania w płaszczyźnie czołowej były większe dla ruchów o 45° (7.9°, s.e. 2.6) niż dla ruchów o 90° (2.8°, s.e. 2.7), natomiast taka rozbieżność nie wystąpiła w pozostałych płaszczyznach. Dodatkowo stwierdzono istotną interakcję modalności z kątem (F(2,30) = 4.7, p = 0.017), w wyniku której niedoszacowania wynikające z samych informacji przedsionkowych dla ruchów o 90° były istotnie większe (-4.3°, s.e. 2.1) w porównaniu z warunkami opartymi na informacji wzrokowej (-2.0°, s.e. 2.4) oraz połączonej informacji przedsionkowej i wzrokowej (2.3°, s.e. 2.2), podczas gdy takie rozbieżności nie wystąpiły dla ruchów o 45°. Nie stwierdzono istotnego efektu międzyosobniczego dla błędu z uwzględnieniem znaku (F(1,15) = 0.7, p = 0.432). Rycina 5b przedstawia wyniki czasu reakcji. Odnotowano istotny efekt główny modalności (F(2,28) = 22.6, p &lt; 0.001), gdzie obserwatorzy reagowali najwolniej, odpowiadając wyłącznie na podstawie informacji przedsionkowo-kinestetycznych (11.0 s, s.e. 1.0) w porównaniu z warunkami wzrokowymi (9.3 s, s.e. 0.8) i połączonymi (9.0 s, s.e. 0.8). Stwierdzono również istotny efekt główny płaszczyzny (F(2,28) = 7.5, p = 0.002), gdzie obserwatorzy reagowali najwolniej podczas ruchu w płaszczyźnie poziomej (10.4 s, s.e. 1.0) w porównaniu z płaszczyznami strzałkową (9.4 s, s.e. 0.8) i czołową (9.4 s, s.e. 0.9). Nie stwierdzono istotnego efektu głównego kąta segmentu ani żadnych interakcji. Znaleziono istotny efekt międzyosobniczy dla czasu reakcji (F(1,14) = 129.1, p &lt; 0.001).
 
<img alt="Wykres porównujący błąd podpisany i czas reakcji w warunkach przedsionkowych, wizualnych i łączonych." src="/files/ftp_upload/3436/3436fig5.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 5"> 
Rycina 5. Wyniki. a) Błąd podpisany zagregowany dla wszystkich modalności w badanych płaszczyznach. b) Czas reakcji zagregowany dla wszystkich płaszczyzn ruchu w badanych modalnościach. Słupki błędów oznaczają +/- 1 s.e.m.

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+Basic+and+applied+research%5BTitle%5D)+AND+%22Optometry+and+Vision+Science%22%5BJournal%5D)">Navigating without vision: Basic and applied research.</a> Optometry and Vision Science. 78, 282-289 (2001).</li>
<li>Vidal, M., Amorim, M. A., Berthoz, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+in+a+virtual+three-dimensional+maze%3A+how+do+egocentric+and+allocentric+reference+frames+interact%5BTitle%5D)+AND+%22Cognitive+Brain+Research%22%5BJournal%5D)">Navigating in a virtual three-dimensional maze: how do egocentric and allocentric reference frames interact.</a> Cognitive Brain Research. 19, 244-258 (2004).</li>
<li>Vidal, M., Amorim, M. A., McIntyre, J., Berthoz, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+perception+of+visually+presented+yaw+and+pitch+turns%3A+Assessing+the+contribution+of+motion%2C+static%2C+and+cognitive+cues%5BTitle%5D)+AND+%22Perception+%26+Psychophysics%22%5BJournal%5D)">The perception of visually presented yaw and pitch turns: Assessing the contribution of motion, static, and cognitive cues.</a> Perception & Psychophysics. 68, 1338-1350 (2006).</li>
<li>Loomis, J. M., Klatzky, R. K., Philbeck, J. W., Golledge, R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessing+auditory+distance+perception+using+perceptually+directed+action%5BTitle%5D)+AND+%22Perception+%26+Psychophysics%22%5BJournal%5D)">Assessing auditory distance perception using perceptually directed action.</a> Perception & Psychophysics. 60, 966-980 (1998).</li>
<li>Loomis, J. M., Klatzky, R. L., Golledge, R. G., Cicinelli, J. G., Pellegrino, J. W., Fry, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Nonvisual+navigation+by+blind+and+sighted%3A+Assessment+of+path+integration+ability%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology+General%22%5BJournal%5D)">Nonvisual navigation by blind and sighted: Assessment of path integration ability.</a> Journal of Experimental Psychology General. 122, 73-91 (1993).</li>
<li>Bakker, N. H., Werkhoven, P. J., Passenier, P. O. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+effects+of+proprioceptive+and+visual+feedback+on+geographical+orientation+in+virtual+environments%5BTitle%5D)+AND+%22Presence%22%5BJournal%5D)">The effects of proprioceptive and visual feedback on geographical orientation in virtual environments.</a> Presence. 8, 36-53 (1999).</li>
<li>Kearns, M. J., Warren, W. H., Duchon, A. P., Tarr, M. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Path+integration+from+optic+flow+and+body+senses+in+a+homing+task%5BTitle%5D)+AND+%22Perception%22%5BJournal%5D)">Path integration from optic flow and body senses in a homing task.</a> Perception. 31, 349-374 (2002).</li>
<li>Study of a novel motion platform for flight simulators using an anthropomorphic robot. Pollini, L., Innocenti, M., Petrone, A. Proceedings of the AIAA Modeling and Simulation Technologies Conference and Exhibit, Keystone, Colorado AIAA, , 2006-6360 (2006).</li>
<li>Teufel, H. J., Nusseck, H. -G., Beykirch, K. A., Butler, J. S., Kerger, M., Bulthoff, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((MPI+motion+simulator%3A+development+and+analysis+of+a+novel+motion+simulator%5BTitle%5D)+AND+%22%22%5BJournal%5D)">MPI motion simulator: development and analysis of a novel motion simulator.</a> Proceedings of the AIAA Modeling and Simulation Technologies Conference and Exhibit, Hilton Head, South Carolina AIAA, , 2007-6476 (2007).</li>
<li>Gärling, T., Böök, A., Lindberg, E., Arce, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Is+elevation+encoded+in+cognitive+maps%5BTitle%5D)+AND+%22Journal+of+Environmental+Psychology%22%5BJournal%5D)">Is elevation encoded in cognitive maps.</a> Journal of Environmental Psychology. 10, 341-351 (1990).</li>
<li>Montello, D. R., Pick, H. L. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Integrating+knowledge+of+vertically+aligned+large-scale+spaces%5BTitle%5D)+AND+%22Environment+and+Behaviour%22%5BJournal%5D)">Integrating knowledge of vertically aligned large-scale spaces.</a> Environment and Behaviour. 25, 457-483 (1993).</li>
<li>Correia, M. J., Hixson, W. C., Niven, J. I. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((On+predictive+equations+for+subjective+judgments+of+vertical+and+horizon+in+a+force+field%5BTitle%5D)+AND+%22Acta+oto-laryngologica+Supplementum%22%5BJournal%5D)">On predictive equations for subjective judgments of vertical and horizon in a force field.</a> Acta oto-laryngologica Supplementum. 230, 3(1968).</li>
<li>Barnett-Cowan, M., Harris, L. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Perceived+timing+of+vestibular+stimulation+relative+to+touch%2C+light+and+sound%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Perceived timing of vestibular stimulation relative to touch, light and sound.</a> Experimental Brain Research. 198, 221-231 (2009).</li>
<li>Barnett-Cowan, M., Harris, L. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Temporal+processing+of+active+and+passive+head+movement%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Temporal processing of active and passive head movement.</a> Experimental Brain Research. 214, 27-35 (2011).</li>
<li>Sanders, M. C., Chang, N. N., Hiss, M. M., Uchanski, R. M., Hullar, T. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Temporal+binding+of+auditory+and+rotational+stimuli%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Temporal binding of auditory and rotational stimuli.</a> Experimental Brain Research. 210, 539-547 (2011).</li>
<li>Barnett-Cowan, M., Raeder, S. M., Bulthoff, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Persistent+perceptual+delay+for+head+movement+onset+relative+to+auditory+stimuli+of+different+duration+and+rise+times%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Persistent perceptual delay for head movement onset relative to auditory stimuli of different duration and rise times.</a> Experimental Brain Research. , Forthcoming (2012).</li>
</ol>

Brak zadeklarowanych konfliktów interesów.

Integracja ścieżki została dobrze udokumentowana jako metoda służąca do ustalenia punktu startowego obserwatora, jednak jest ona podatna na niedoszacowanie kąta przebytego ruchu 5. Nasze wyniki wykazują to zjawisko w przypadku ruchu translacyjnego, ale wyłącznie w płaszczyźnie poziomej. W płaszczyznach pionowych uczestnicy częściej mają tendencję do przeszacowania przebytego kąta lub nie wykazują żadnego błędu systematycznego. Wyniki te mogą wyjaśniać, dlaczego szacunki wysokości przebytej w terenie mają tendencję do wyolbrzymienia 10, a także dlaczego nawigacja przestrzenna między różnymi piętrami budynku jest utrudniona 11. Wyniki te mogą być również powiązane ze znanymi asymetriami w względnej proporcji receptorów woreczka do receptorów łagiewki (~0,58) 12. Dłuższy czas reakcji oparty wyłącznie na informacjiach przedsionkowo-kinestetycznych w porównaniu do sytuacji z dostępem do informacji wizualnych sugeruje, że mogą istnieć dodatkowe opóźnienia związane z próbą określenia punktu startowego wyłącznie na podstawie wskazówek bezwładnościowych, co może wiązać się z niedawnymi badaniami wykazującymi, że percepcja przedsionkowa jest powolna w porównaniu z innymi zmysłami 13-16. Ogólnie nasze wyniki sugerują, że podczas ruchu w pionie mogą być stosowane alternatywne strategie określania punktu startowego, co może wynikać z faktu, że ludzie doświadczają ruchu głównie w płaszczyźnie poziomej. Co więcej, choć sekwencyjne translacje zdarzają się rzadko, występują one najczęściej w płaszczyźnie strzałkowej – gdzie błędy są minimalne – na przykład podczas chodzenia w stronę schodów ruchomych i wjazdu na nie. Chociaż wywiady poeksperymentalne nie wykazały stosowania różnych strategii w zależności od płaszczyzny, przyszłe badania powinny eksplorować tę możliwość. Planowane są eksperymenty z trajektoriami wykorzystującymi dodatkowe stopnie swobody, dłuższymi ścieżkami, przy różnej orientacji ciała względem grawitacji, a także z wykorzystaniem szerszego pola widzenia, co jest obecnie możliwe dzięki symulatorowi MPI CyberMotion, aby dalej badać wydajność integracji ścieżki w trzech wymiarach.

symulator cybermotion mpi: implementacja nowatorskiego symulatora ruchu do badania wielozmysłowej integracji ścieżki w trzech wymiarach

MPI CyberMotion Simulator: Implementation of a Novel Motion Simulator to Investigate Multisensory Path Integration in Three Dimensions

Integracja ścieżki to proces, w którym ruch własny jest sumowany w czasie w celu uzyskania szacunkowej informacji o aktualnej pozycji względem punktu startowego 1. Ludzie mogą przeprowadzać integrację ścieżki opierając się wyłącznie na wskazówkach wizualnych 2-3, słuchowych 4 lub inercyjnych 5. Jednak w obecności wielu wskazówek, sygnały inercyjne – w szczególności kinestetyczne – wydają się dominować 6-7. W przypadku braku wzroku ludzie mają tendencję do przeceniania krótkich dystansów (&lt;5 m) i kątów obrotu (&lt;30°), natomiast niedoceniają tych dłuższych 5. Przesunięcie w przestrzeni fizycznej nie wydaje się zatem być dokładnie reprezentowane przez mózg.
Przeprowadzono liczne badania nad oceną integracji ścieżki w płaszczyźnie poziomej, jednak niewiele wiadomo na temat ruchu w pionie (patrz 3 w odniesieniu do ruchu wirtualnego opartego wyłącznie na wzroku). Jednym z powodów tego stanu rzeczy jest fakt, że tradycyjne symulatory ruchu mają niewielki zakres przemieszczeń, ograniczony głównie do płaszczyzny poziomej. W niniejszej pracy wykorzystujemy symulator ruchu 8-9 o dużym zakresie przemieszczeń, aby ocenić, czy integracja ścieżki przebiega podobnie w płaszczyznach poziomej i pionowej. Oceniono również względny wkład wskazówek inercyjnych i wizualnych w nawigację po ścieżce.
16 obserwatorów siedziało w pozycji wyprostowanej w fotelu zamocowanym do kołnierza zmodyfikowanego antropomorficznego ramienia robota KUKA. Informacje sensoryczne manipulowano poprzez dostarczanie wskazówek wizualnych (przepływ optyczny, pole gwiazd o ograniczonym czasie trwania), przedsionkowo-kinestetycznych (bierny ruch własny z zamkniętymi oczami) lub jednoczesnych wskazówek wizualnych i przedsionkowo-kinestetycznych. Trajektorie ruchu w płaszczyznach poziomej, strzałkowej i czołowej składały się z dwóch odcinków (pierwszy: 0.4 m, drugi: 1 m; maksymalne przyspieszenie ±0.24 m/s2). Kąt między dwoma odcinkami wynosił 45° lub 90°. Obserwatorzy wskazywali powrót do punktu startowego, przesuwając strzałkę nałożoną na awatara wyświetlanego na ekranie.
Obserwatorzy częściej niedoszacowali wielkości kąta w przypadku ruchu w płaszczyźnie poziomej w porównaniu do płaszczyzn pionowych. W płaszczyźnie czołowej obserwatorzy częściej przeceniali wielkość kąta, podczas gdy w płaszczyźnie strzałkowej nie odnotowano takiej tendencji. Wreszcie, obserwatorzy odpowiadali wolniej, gdy opierali się wyłącznie na informacjach przedsionkowo-kinestetycznych. Integracja ścieżki u ludzi oparta wyłącznie na informacjach przedsionkowo-kinestetycznych trwa zatem dłużej niż w obecności informacji wizualnych. Fakt, że wskazywanie jest spójne z niedoszacowaniem i przecenianiem kąta, przez który przesunął się badany, odpowiednio w płaszczyznach poziomej i pionowej, sugeruje, że neuronalna reprezentacja ruchu własnego w przestrzeni jest niesymetryczna, co może wiązać się z faktem, że ludzie doświadczają ruchu głównie w płaszczyźnie poziomej.

Opisano wydajną metodę pozwalającą zrozumieć sposób, w jaki ludzie orientują się w przestrzeni trójwymiarowej. Metoda ta wykorzystuje symulator ruchu zdolny do przemieszczania obserwatorów w sposób nieosiągalny dla tradycyjnych symulatorów. Wyniki potwierdzają, że ruch w płaszczyźnie poziomej jest niedoszacowany, natomiast ruch pionowy jest przeszacowany.

Symulator CyberMotion MPI: Implementacja nowatorskiego symulatora ruchu do badania wielozmysłowej integracji ścieżki w trzech wymiarach

Integracja ścieżki jest procesem, w którym ruch własny jest integrowany w czasie w celu uzyskania szacunkowej aktualnej pozycji względem punktu wyjścia 1. ...

Ogólnym celem następnego eksperymentu jest pomiar nawigacji przestrzennej w trzech wymiarach przy jednoczesnej kontroli wizualnych i przedsionkowych bodźców sensorycznych dostarczanych uczestnikowi. Zostaje to osiągnięte przy użyciu zmodyfikowanego krzesła robotycznego o sześciu stopniach swobody, które stymuluje układ przedsionkowy osoby siedzącej na krześle. Uczestnik obserwuje wirtualne pole gwiazd. Poprzez ruch krzesła robotycznego i jednoczesną zmianę pola gwiazd, system dostarcza uczestnikowi wskazówek wizualnych i przedsionkowych.Uczestnicy przekazują informacje zwrotne dotyczące nawigacji po ścieżce poprzez dokładność i szybkość, z jaką potrafią wskazać zapamiętaną pozycję początkową. Wyniki pokazują, że niedokładna ocena ruchu własnego zależy od płaszczyzny ruchu oraz kąta, pod którym są przemieszczani. Główną zaletą tej techniki w porównaniu z istniejącymi metodami, takimi jak platformy ruchome, jest fakt, że symulator MPI Cyber Motion posiada duży obszar roboczy, umożliwiający przemieszczanie obserwatorów w różnych wymiarach, w szczególności w dół.Metoda ta może przynieść odpowiedzi na kluczowe pytania z dziedziny neuronauki, takie jak to, czy mózg w równy sposób reprezentuje ruch własny w różnych wymiarach. Pomysł na te eksperymenty pojawił się po zapoznaniu się z badaniami naszego kolegi, Manuela Vidala, który przemieszczał osoby przez wirtualne labirynty, wykorzystując wyłącznie prezentację wizualną.Wykazał on, że nawigacja przestrzenna jest zaburzona, gdy MACES obejmują komponent pionowy. Implikacje tej techniki rozciągają się na diagnostykę dezorientacji przestrzennej, ponieważ dostarczają one punktu odniesienia dla nawigacji ścieżkowej w zdrowym mózgu. Stymulator ruchu NPI Cyber składa się z sześcio przegubowego robota szeregowego w konfiguracji 3, 2, 1.System opiera się na robocie przemysłowym o udźwigu 500 kilogramów, co zapewnia bezpieczeństwo podczas przeprowadzania eksperymentów. Wprowadzono modyfikacje zarówno w sprzęcie, jak i w oprogramowaniu, co umożliwia tworzenie złożonych profili ruchu łączących przemieszczenia boczne z rotacjami. Wykorzystano do tego symulator ruchu cybernetycznego MPI.Osie pierwsza, czwarta i szósta mogą obracać się w sposób ciągły; cztery pary ograniczników sprzętowych ograniczają ruch osi drugiej, trzeciej i piątej w obu kierunkach. Maksymalny zakres ruchów liniowych jest silnie zależny od pozycji, z której rozpoczyna się ruch. Przed przeprowadzeniem jakichkolwiek eksperymentów każda trajektoria ruchu doświadczalnego musi przejść fazę testową.Trajektorie są programowane przy użyciu komputera biurowego marki KUKA w celu skonfigurowania symulatora ruchu cyber motion MPI. W tej konfiguracji pętli otwartej trajektorie są wprowadzane w współrzędnych kartezjańskich i konwertowane na kąty w przestrzeni przegubowej za pomocą kinematyki odwrotnej w odstępach 12 milisekund. Aktualne pozycje kątowe przegubów są przesyłane z systemu sterowania do symulatora ruchu cyber motion MPI poprzez połączenie ethernet, gdzie są one odczytywane przyrostowo i zapisywane na dysku robota.Siedzisko wyścigowe wyposażone w pięciopunktowy system pasów bezpieczeństwa jest przymocowane do podwozia z podnóżkiem. Podwozie jest zamontowane do kołnierza ramienia robota. Uczestnicy muszą nosić słuchawki z redukcją szumów, wyposażone w mikrofon do dwustronnej komunikacji z eksperymentatorem.Powinni oni również nie być zaznajomieni z układem eksperymentalnym. Przez słuchawki emitowany jest ciągły szum, który maskuje hałas generowany przez robota. Eksperymenty można również przeprowadzać, umieszczając uczestników w zamkniętej kabinie, w warunkach całkowitej ciemności.Kamery podczerwieni umożliwiają wizualne monitorowanie z pokoju sterowania. Możliwe są różne konfiguracje wizualizacji, w tym ekran LCD, stereo projekcja przednia, mono projekcja przednia lub wyświetlacz montowany na głowie. W tym eksperymencie wizualne wskazówki dotyczące ruchu własnego są dostarczane przez wyświetlacz LCD, umieszczony 50 centymetrów przed obserwatorami.Oprogramowanie przedstawia uczestnikowi wirtualną przestrzeń OID wypełnioną 200 000 kropkami. Każda z nich w przestrzeni jest rysowana jako białe koło na czarnym tle. Ekran wyświetla kropki odpowiadające kątom widzenia od 13 do 0,3 stopnia.Kropki te znajdują się w odległości 0,085 oraz czterech jednostek wirtualnych od uczestnika. Ruch w polu wirtualnym jest zsynchronizowany z ruchem fizycznym za pomocą trajektorii ruchu przesyłanych z komputera sterującego MPI, aby stworzyć paralaksę między przepływem optycznym a ruchem.Kropki znajdujące się głębiej w polu widzenia są rysowane w mniejszym rozmiarze, niezależnie od ruchów uczestnika. Każda z nich jest wyświetlana przez dwie sekundy asynchronicznie, zanim zostanie przypisana losowo. W ten sposób w każdej sekundzie przemieszcza się łącznie sto tysięcy kropek.Specjalnie skonstruowany joystick wyposażony w przyciski odpowiedzi umożliwia uczestnikom przesyłanie danych przez połączenie ethernetowe do systemu sterowania. Informacje sensoryczne mogą być manipulowane poprzez dostarczanie wyłącznie wskazówek wizualnych z ograniczonego pola gwiazd, wyłącznie wskazówek kinestetyczno-westybularnych podczas pasywnego ruchu z zamkniętymi oczami uczestnika lub obu rodzajów wskazówek przy otwartych oczach uczestnika.W tym doświadczeniu trajektorie ruchu składały się z dwóch odcinków o różnej długości. Pierwszy z nich wynosił 0,4 metra, a drugi jeden metr. Kąt między dwoma dowolnymi odcinkami ruchu wynosił 45 stopni lub 90 stopni.Na przykład ruch w płaszczyźnie poziomej składa się z ruchu w przód i w prawo o 90 stopni, ruchu w prawo o 45 stopni, ruchu w przód o 90 stopni lub ruchu w prawo i w przód o 45 stopni. Tego rodzaju ruchy są wykonywane również w płaszczyznach strzałkowej i czołowej. Trajektorie są realizowane jako translacje bez rotacji.Każdej trajektorii towarzyszy sekwencja repozycjonowania, po której następuje 15-sekundowa przerwa w celu zredukowania ewentualnych zakłóceń wywołanych ruchem przed każdą próbą. Aby zapewnić, że układ przedsionkowy jest badany ze stanu spoczynku w celu uzyskania informacji zwrotnej o odczuwanym ruchu, uczestnicy przesuwają strzałkę za pomocą joysticka, aby wskazać swój ruch względem punktu wyjścia. Punkt wyjścia jest przedstawiony jako awatar z trzech punktów widzenia, a strzałka przed każdą próbą jest zawsze rozmieszczana w sposób losowy przed dokonaniem korekty. Kluczowe jest przeszkolenie uczestnika w celu dokładnego korzystania z systemu informacji zwrotnej.Powinni być oni w stanie skierować strzałkę na obiekty w swoim otoczeniu, takie jak joystick spoczywający na ich kolanach podczas próby. Ruch joysticka jest ograniczony do płaszczyzny trajektorii, a uczestnicy mogą korzystać z dowolnych lub wszystkich punktów widzenia podczas zbierania danych. Każdy warunek eksperymentalny jest powtarzany trzykrotnie i prezentowany w losowej kolejności.Przeanalizowano dane od 16 uczestników. Odrzucono wyniki będące ekstremalnymi wartościami odstającymi. Modalność oraz kąt nie miały istotnego wpływu na szacowany ruch. Jednakże uczestnicy niedoszacowali wielkości kąta ruchu w płaszczyźnie poziomej o prawie dziewięć stopni i przeszacowali wielkość kąta w płaszczyźnie czołowej o około pięć stopni.Stwierdzono, że czynnik kąta znacząco oddziałuje z czynnikiem płaszczyzny czołowej w taki sposób, że przeszacowania były większe dla ruchów o 45 stopni niż dla ruchów o 90 stopni. Ponadto stwierdzono, że modalność znacząco oddziałuje z kątem w taki sposób, że niedoszacowania wynikające z samych informacji przedsionkowych dla ruchów o 90 stopni były znacząco większe w porównaniu z warunkami wizualnymi i łączonymi. Takie rozbieżności nie występowały w przypadku ruchów o 45 stopni.Stwierdzono, że czas reakcji był znacząco dłuższy w przypadku, gdy informacja zwrotna była dostarczana wyłącznie za pomocą wskazówek kinestetycznych przedsionkowych, w porównaniu z warunkami wizualnymi i łączonymi. Uczestnicy reagowali również znacząco wolniej podczas przemieszczania w płaszczyźnie poziomej w porównaniu z innymi płaszczyznami. Wyniki te są zaskakujące, ponieważ sugerują, że reprezentacja przestrzeni w mózgu nie jest symetryczna w różnych wymiarach.Od pewnego czasu wiadomo, że ludzie mają tendencję do niedoszacowywania swojego ruchu w płaszczyźnie poziomej; tutaj po raz pierwszy wykazujemy, że nie ma to miejsca w wymiarze pionowym. W przyszłości będziemy mogli wykorzystać te metody do konstruowania ścieżek we wszystkich trzech wymiarach, w tym tych zakrzywionych. Pozwoli nam to odpowiedzieć na dodatkowe pytania, takie jak to, w jaki sposób mózg integruje ruch w różnych płaszczyznach oraz jak nawiguje podczas zakrętów.

mpi-cybermotion-simulator-implementation-novel-motion-simulator-to

Research

JoVE Journal

Neuroscience

Neuronauka

Symulator CyberMotion MPI: Wdrożenie nowatorskiej implementacji symulatora ruchu do badania wielozmysłowej integracji ścieżki w trzech wymiarach

W ostatnim czasie pojawiło się wiele perspektyw dla interaktywnych systemów człowiek-robot. W niniejszym artykule opisujemy integrację nowego urządzenia robotycznego z oprogramowaniem open source, które pozwala na szybkie stworzenie biblioteki funkcji interaktywnych. Następnie przedstawiamy zastosowanie kliniczne w ramach neurorehabilitacji.

Rehabilitacja haptyczno-graficzna: integracja robota z biblioteką środowisk wirtualnych i zastosowanie w terapii udarów mózgu

Nowy system obliczeniowy z akcelerowaną przez GPU symulacją dynamiki molekularnej oraz wizualizacją 3D/VR, analizą i manipulacją nanostruktur został zaimplementowany, reprezentując nowatorskie podejście do zaawansowanych badań materiałowych i promowania innowacyjnych badań i alternatywnych metod uczenia się o strukturach materialnych o wymiarach niewidocznych dla ludzkiego oka.

Nowatorskie interaktywne środowisko 3D/VR do symulacji, wizualizacji i analizy MD

Przezczaszkowa stymulacja magnetyczna, elektromiografia i przechwytywanie ruchu 3D są powszechnie stosowanymi nieinwazyjnymi technikami badania funkcji nerwowo-mięśniowych u ludzi. W tym artykule opisujemy protokół, który synchronicznie próbkuje dane generowane przez wszystkie trzy z tych narzędzi wraz z unikalnym dodatkiem prezentacji bodźców rzeczywistości wirtualnej i informacji zwrotnych.

Wielofunkcyjny zestaw do badania kontroli motorycznej człowieka za pomocą przezczaszkowej stymulacji magnetycznej, elektromiografii, przechwytywania ruchu i rzeczywistości wirtualnej

Wykorzystanie przezczaszkowej stymulacji magnetycznej (TMS) do badania kontroli motorycznej człowieka wymaga integracji systemów akwizycji danych w celu kontrolowania dostarczania TMS i jednoczesnego rejestrowania ludzkich zachowań. Niniejszy manuskrypt zawiera szczegółową metodologię integracji systemów akwizycji danych w celu badania ruchu człowieka za pomocą TMS.

Połączenie wielu systemów gromadzenia danych w celu badania wydajności korowo-rdzeniowej i biomechaniki wielosegmentowej

Przedstawiamy protokół do stosowania nieprzystających bodźców wzrokowo-dotykowych podczas zadania polegającego na przenoszeniu obiektów. W szczególności, podczas transferów bloków, wykonywanych, gdy ręka jest ukryta, wirtualna prezentacja bloku pokazuje losowe przypadki fałszywych dropów bloków. Protokół opisuje również dodawanie wibrodotykowego sprzężenia zwrotnego podczas wykonywania zadania motorycznego.

Stosowanie nieodpowiednich bodźców wzrokowo-dotykowych podczas przenoszenia obiektu z wibrodotykowym sprzężeniem zwrotnym

WheelCon to nowatorska, darmowa platforma o otwartym kodzie źródłowym do projektowania gier wideo, która nieinwazyjnie symuluje jazdę na rowerze górskim po stromym, krętym i wyboistym szlaku. Zawiera komponenty obecne w kontroli sensomotorycznej człowieka (opóźnienie, kwantyzacja, szum, zakłócenia i wielokrotne pętle sprzężenia zwrotnego) i pozwala naukowcom badać warstwową architekturę w kontroli sensomotorycznej.

WheelCon: platforma do gier oparta na sterowaniu kierownicą do badania kontroli sensomotorycznej człowieka

Kontrolowany fizyczny obrót ludzkiego obserwatora jest pożądany dla pewnych eksperymentalnych, rekreacyjnych i edukacyjnych zastosowań. W tym artykule przedstawiono metodę przekształcania biurowego krzesła obrotowego w medium do kontrolowanego obrotu fizycznego w środowisku rzeczywistości wirtualnej.

Kontrolowana rotacja ludzkich obserwatorów w środowisku wirtualnej rzeczywistości

Obrazy motoryczne w środowisku wirtualnej rzeczywistości mają szerokie zastosowanie w systemach interfejsu mózg-komputer. Manuskrypt ten przedstawia wykorzystanie spersonalizowanych cyfrowych awatarów, które przypominają uczestników wykonujących ruchy wyobrażone przez uczestnika w środowisku rzeczywistości wirtualnej, aby zwiększyć immersję i poczucie posiadania ciała.

Wydajność obrazowania motorycznego dzięki ucieleśnionym cyfrowym bliźniakom w środowisku interfejsu mózg-komputer z obsługą rzeczywistości wirtualnej

Przedstawiono uogólnioną, zgodną z zasadami FAIR metodę dla ekspertów dziedzinowych, którzy chcą zintegrować narzędzia symulacyjne i do przetwarzania danych w zautomatyzowane przepływy pracy dla wirtualnych eksperymentów 3D. Przykład neutroniki pokazuje, jak skonfigurować lokalną instancję Galaxy, integrując OpenMC i narzędzia do konwersji plików, uruchamiać przepływy pracy z Omniverse oraz wizualizacje skonwertowanych wyników 3D.

Integracja zautomatyzowanych przepływów symulacji z wizualizacją 3D do wirtualnych eksperymentów w Metaverse

Podejście oparte na porównaniu gatunków pozwala neurobiologom behawioralnym badać różne czynniki neurobiologiczne związane z określonymi zachowaniami, uznawanymi za charakterystyczne dla danego modelu zwierzęcego. Wykorzystując naturalnie występujące różnice w zachowaniu między blisko spokrewnionymi gatunkami, technika ta nie wymaga stosowania inwazyjnych metod w celu manipulacji ekspresją danego zachowania.

Wykorzystanie podejścia porównawczego gatunków do badania neurobiologii reakcji ojcowskich

Poznaj metodę badania nawigacji przestrzennej w trzech wymiarach za pomocą symulatora MPI CyberMotion. Technika ta pozwala kontrolować bodźce wzrokowe i przedsionkowe, ujawniając asymetryczne reprezentacje ruchu w mózgu.

MPI CyberMotion Simulator: implementacja nowatorskiego symulatora ruchu w celu zbadania integracji ścieżek multisensorycznych w trzech wymiarach (Wideo) | JoVE Journal

Symulator CyberMotion MPI: Implementacja nowatorskiego symulatora ruchu do badania wielozmysłowej integracji ścieżki w trzech wymiarach

Przeglądaj więcej filmów