Name: MPI CyberMotion模拟器:一种新型的运动模拟器的执行情况调查三个维度的多感官的路径积分 (视频) | JoVE Journal
Uploaded: 2012-05-10T12:00:00.000+00:00
Duration: 9 min 46 s
Description: 了解MPI CyberMotion模拟器在三维多感官路径积分中的应用，探索人类如何在三维空间中进行导航。该研究揭示了水平运动常被低估而垂直运动被高估的现象，为神经科学中的空间定向研究提供了新的方法。

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

MPI 博士后津贴资助 MB-C 和 TM；韩国国家研究基金会（R31-2008-000-10008-0）资助 HHB。感谢 Karl Beykirch、Michael Kerger 和 Joachim Tesch 提供的技术支持与科学讨论。

1. KUKA Roboter GmbH
<ol>
	<li>MPI CyberMotion 模拟器由一个六关节串联机器人组成，采用 3-2-1 配置（图 1）。该系统基于商用 KUKA Robocoaster（一种改进型 KR-500 工业机器人，有效载荷为 500 kg）。此前已有文献描述实现灵活且安全实验设置所需的物理改造和软件控制结构，包括运动模拟器的速度和加速度限制，以及系统的延迟和传递函数9。本文下方将定义对此前设置的修改。</li>
</ol>
<img alt="工业机器人示意图，六轴运动，机械臂活动范围，机械工程。" src="/files/ftp_upload/3436/3436fig1.jpg" data-altupdatedat="1788304762000" data-alt="Figure 1"> 
图1. 当前MPI CyberMotion模拟器工作空间的图示。
<ol start="2">
	<li>MPI CyberMotion 模拟器能够实现结合侧向运动与旋转的复杂运动轨迹。轴 1、4 和 6 可连续旋转。4 对硬件限位挡块在两个方向上限制轴 2、3 和 5 的运动。线性运动的最大范围在很大程度上取决于运动起始位置。当前 MPI CyberMotion 模拟器的硬件限位挡块如图所示 表1.
	<table border="1">
		<tbody>
			<tr>
				<td>轴</td>
				<td>范围 [度]</td>
				<td>最大速度 [deg/s]</td>
			</tr>
			<tr>
				<td>轴 1</td>
				<td>连续的</td>
				<td>69</td>
			</tr>
			<tr>
				<td>轴 2</td>
				<td>-128 至 -48</td>
				<td>57</td>
			</tr>
			<tr>
				<td>轴 3</td>
				<td>-45 至 +92</td>
				<td>69</td>
			</tr>
			<tr>
				<td>轴 4</td>
				<td>连续的</td>
				<td>76</td>
			</tr>
			<tr>
				<td>轴 5</td>
				<td>-58 至 +58</td>
				<td>76</td>
			</tr>
			<tr>
				<td>Axis 6</td>
				<td>连续的</td>
				<td>120</td>
			</tr>
		</tbody>
	</table>
	</li>
</ol>
表1. MPI CyberMotion 模拟器当前的技术规格。
<ol start="3">
	<li>在对MPI CyberMotion模拟器进行任何实验之前，每个实验性运动轨迹都需在KUKA模拟PC（办公用PC）上经历一个测试阶段。“办公用PC”是KUKA公司销售的一种特殊产品，可模拟真实机械臂，其操作系统和控制界面布局与真实机械臂完全相同。图示为MPI CyberMotion模拟器开环配置控制系统的示意图。 图2.</li>
</ol>
<img alt="MPI-KUKA 控制系统示意图，包含轴控制软件、机器人轨迹、关节位置流。" src="/files/ftp_upload/3436/3436fig2.jpg" data-altupdatedat="1788304762000" data-alt="图 2"> 
图 2. MPI CyberMotion 模拟器开环控制系统示意图。<a href="https://www.jove.com/files/ftp_upload/3436/3436fig2large.jpg" target="_blank">点击此处查看大图</a>。
<ol start="4">
	<li>控制结构的详细信息可参见此处9。简而言之，对于本实验所采用的开环配置，通过逆运动学将笛卡尔坐标系中的输入轨迹转换为关节空间角度，从而预先编程生成轨迹（图2）。</li>
	<li>MPI控制系统读取这些期望的关节角度增量，并将其发送至KUKA控制系统，以通过电机电流实现轴的运动。关节解析器的数值被传送至KUKA控制系统，后者以12 ms的内部频率确定当前的关节角度位置，进而触发MPI控制系统从文件中读取下一个关节角度增量，同时将当前的关节角度位置写入磁盘。MPI与KUKA控制系统之间的通信通过以太网连接，采用KUKA-RSI协议进行。</li>
	<li>一个配备五点式安全带系统（Schroth）的赛车座椅（RECARO Pole Position）被安装在一个包含脚踏板的底盘上，该底盘固定于机械臂的法兰盘上（图3a）。此外，也可将受试者安置于封闭式座舱内进行实验（图3b）。</li>
</ol>
<img alt="实验室中进行运动与控制测试时，使用模拟器的人机交互设置。" src="/files/ftp_upload/3436/3436fig3.jpg" data-altupdatedat="1788304762000" data-alt="图 3"> 
图 3. MPI CyberMotion 模拟器设置。a) 当前实验的配置，配备 LCD 显示屏。b) 需要封闭舱体并使用前投式立体显示的实验配置。c) 前投式单目显示。d) 头戴式显示器。
<ol start="7">
	<li>由于实验在黑暗中进行，红外相机可实现从控制室进行视觉监测。</li>
</ol>
2. 可视化
<ol>
	<li>使用 MPI CyberMotion 模拟器可实现多种可视化配置，包括 LCD 显示、立体或单眼前投影以及头戴式显示器（图 3）。在当前实验中，视觉自运动线索由放置在受试者前方 50 cm 处的 LCD 显示屏提供（图 3a），受试者在其余环境中处于黑暗条件下进行测试。</li>
	<li>视觉刺激由 Virtools 4.1 软件生成，包含一个具有随机分布且生命周期有限的点场。以受试者视点为中心，向前、向右、向左、向上和向下各延伸八个虚拟单位的空间（即尺寸为 16 × 16 × 8 个虚拟单位）内填充了 200,000 个直径为 0.02 个虚拟单位的白色圆形粒子，背景为黑色。这些点在整个空间内随机分布（空间内呈均匀概率分布）。虚拟单位中的运动经过缩放，与实际物理运动一一对应（1 个虚拟单位 = 1 个物理米）。</li>
	<li>每个粒子显示两秒后消失，并立即在空间内的随机位置重新出现。因此，每秒钟有一半的点会改变其位置。向受试者显示的点位于距离 0.085 至 4 个虚拟单位之间的范围内（对应的视觉角度：13° 和 0.3°）。</li>
	<li>通过以太网连接使用 UDP 协议接收来自 MPI 控制计算机的运动轨迹，实现点场内的运动与实际物理运动的同步。当穿过点场时，所有运动过程中点的平均数量保持恒定。该显示未提供绝对尺寸标度，但由于点是固定大小的球体，会根据其相对于观察者的距离呈现大小变化，从而提供光流和运动视差信息。</li>
</ol>
3. 实验设计
<ol>
	<li>16名参与者（除一位作者（MB-C）外，其余均未接触过本实验）佩戴带有麦克风的主动降噪耳机，以便与实验者进行双向通信。耳机中持续播放额外的背景噪音，以进一步掩盖机器人产生的噪声。</li>
	<li>参与者使用一个定制的操纵杆，其上装有响应按钮，数据通过以太网连接并采用UDP协议传输。</li>
	<li>两个运动阶段之间的角度为45°或90°。水平面、矢状面和冠状面内的运动分别包括：前-右（FR）或右-前（RF）、下-前（DF）或前-下（FD）、下-右（DR）或右-下（RD）运动（图4a）。</li>
</ol>
<img alt="平移轨迹、感觉信息、指向任务示意图；前庭输入与视觉输入分析。" src="/files/ftp_upload/3436/3436fig4.jpg" data-altupdatedat="1788304762000" data-alt="图 4"> 
图 4. 实验流程。a) 实验中所用轨迹的示意图。b) 每种测试轨迹类型所提供的感觉信息。c) 指向任务，用于指示参与者认为其运动起始位置的来源。<a href="https://www.jove.com/files/ftp_upload/3436/3436fig4large.jpg" target="_blank">点击此处查看大图</a>。
<ol start="4">
	<li>通过提供视觉（光流、有限寿命的星场）、前庭-本体感觉（闭眼状态下的被动自我运动）或视觉与前庭-本体感觉运动线索来操控感觉信息（图4b）。</li>
	<li>运动轨迹由两个线段组成（第1段：0.4 m，第2段：1 m；峰值加速度±0.24 m/s2；图4b）。轨迹仅包含平移运动，不涉及受试者的任何旋转。为减少每次试验前运动可能带来的干扰，并确保前庭系统从稳态开始测试，每次轨迹执行前均设有15秒的暂停期。</li>
	<li>观察者通过移动屏幕上叠加在虚拟形象上的箭头，指向其起始位置（图4c）。箭头的运动被限制在轨迹平面内，并由操纵杆控制。虚拟形象从冠状面、矢状面和水平面三个视角呈现。观察者可任选一个或多个视角进行判断。箭头的初始朝向在各次试验中随机化。</li>
	<li>由于指向任务要求参与者在心理上将指向视角从自我中心转换为外部参照系表征，因此在练习和正式实验前，研究人员向参与者提供了如何参照虚拟形象返回起点的指导。参与者被告知，指向时应假设该虚拟形象即为其自身身体。随后，参与者被要求使用外部参照系测量技术，指向相对于自身的物理目标。例如，参与者需指向位于其大腿上、自身与屏幕中间位置的操纵杆，这要求他们将箭头相对于虚拟形象向前并向下指向。所有参与者均能顺利完成这些任务，未表现出困惑。</li>
	<li>每种实验条件重复3次，并以随机顺序呈现。 Signed error（有符号误差）和反应时间作为因变量，分别进行3（平面）×2（角度）×3（感觉模态）的重复测量方差分析。一名极端异常值参与者的反应时间数据被从分析中剔除。</li>
</ol>
4. 代表性结果
符号误差结果在不同模态和角度之间进行了合并，因为这些因素未发现显著的主效应。图5a显示了运动平面的显著主效应（F(2,30) = 7.0，p = 0.003），其中观察者在水平面内运动时低估了角度大小（平均数据小于0°），平均低估为-8.9°（标准误1.8）；在额状面内运动时，观察者平均倾向于高估角度大小（5.3°，标准误2.6），而在矢状面内则未表现出此类偏差（-0.7°，标准误3.7）。尽管角度和模态的主效应不显著，但角度与平面之间存在显著交互作用（F(2,30) = 11.1，p &lt; 0.001），表现为在额状面内，通过45°运动时的高估程度（7.9°，标准误2.6）大于通过90°运动时（2.8°，标准误2.7），而其他平面未出现此类差异。此外，模态与角度之间也存在显著交互作用（F(2,30) = 4.7，p = 0.017），表现为仅基于前庭信息进行90°运动时的低估程度（-4.3°，标准误2.1）显著大于仅视觉条件（-2.0°，标准误2.4）以及视觉与前庭信息结合条件（2.3°，标准误2.2），而在45°运动时未出现此类差异。符号误差未发现显著的被试间效应（F(1,15) = 0.7，p = 0.432）。图5b展示了反应时间结果。模态具有显著主效应（F(2,28) = 22.6，p &lt; 0.001），观察者在仅依据前庭-本体感觉信息作答时反应最慢（11.0 s，标准误1.0），相较于视觉条件（9.3 s，标准误0.8）和联合条件（9.0 s，标准误0.8）。平面也存在显著主效应（F(2,28) = 7.5，p = 0.002），观察者在水平面内运动时反应最慢（10.4 s，标准误1.0），相较于矢状面（9.4 s，标准误0.8）和额状面（9.4 s，标准误0.9）。运动节段角度的主效应及其交互作用均不显著。反应时间存在显著的被试间效应（F(1,14) = 129.1，p &lt; 0.001）。
 
<img alt="比较前庭、视觉及联合条件下带符号误差与反应时间的图表。" src="/files/ftp_upload/3436/3436fig5.jpg" data-altupdatedat="1788304762000" data-alt="Figure 5"> 
图5. 结果。a) 不同测试平面在各感觉模式下合并的带符号误差。b) 不同运动平面在各测试感觉模式下合并的反应时间。误差条表示 ±1 s.e.m。

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+Basic+and+applied+research%5BTitle%5D)+AND+%22Optometry+and+Vision+Science%22%5BJournal%5D)">Navigating without vision: Basic and applied research.</a> Optometry and Vision Science. 78, 282-289 (2001).</li>
<li>Vidal, M., Amorim, M. A., Berthoz, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+in+a+virtual+three-dimensional+maze%3A+how+do+egocentric+and+allocentric+reference+frames+interact%5BTitle%5D)+AND+%22Cognitive+Brain+Research%22%5BJournal%5D)">Navigating in a virtual three-dimensional maze: how do egocentric and allocentric reference frames interact.</a> Cognitive Brain Research. 19, 244-258 (2004).</li>
<li>Vidal, M., Amorim, M. A., McIntyre, J., Berthoz, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+perception+of+visually+presented+yaw+and+pitch+turns%3A+Assessing+the+contribution+of+motion%2C+static%2C+and+cognitive+cues%5BTitle%5D)+AND+%22Perception+%26+Psychophysics%22%5BJournal%5D)">The perception of visually presented yaw and pitch turns: Assessing the contribution of motion, static, and cognitive cues.</a> Perception & Psychophysics. 68, 1338-1350 (2006).</li>
<li>Loomis, J. M., Klatzky, R. K., Philbeck, J. W., Golledge, R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessing+auditory+distance+perception+using+perceptually+directed+action%5BTitle%5D)+AND+%22Perception+%26+Psychophysics%22%5BJournal%5D)">Assessing auditory distance perception using perceptually directed action.</a> Perception & Psychophysics. 60, 966-980 (1998).</li>
<li>Loomis, J. M., Klatzky, R. L., Golledge, R. G., Cicinelli, J. G., Pellegrino, J. W., Fry, P. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Nonvisual+navigation+by+blind+and+sighted%3A+Assessment+of+path+integration+ability%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology+General%22%5BJournal%5D)">Nonvisual navigation by blind and sighted: Assessment of path integration ability.</a> Journal of Experimental Psychology General. 122, 73-91 (1993).</li>
<li>Bakker, N. H., Werkhoven, P. J., Passenier, P. O. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+effects+of+proprioceptive+and+visual+feedback+on+geographical+orientation+in+virtual+environments%5BTitle%5D)+AND+%22Presence%22%5BJournal%5D)">The effects of proprioceptive and visual feedback on geographical orientation in virtual environments.</a> Presence. 8, 36-53 (1999).</li>
<li>Kearns, M. J., Warren, W. H., Duchon, A. P., Tarr, M. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Path+integration+from+optic+flow+and+body+senses+in+a+homing+task%5BTitle%5D)+AND+%22Perception%22%5BJournal%5D)">Path integration from optic flow and body senses in a homing task.</a> Perception. 31, 349-374 (2002).</li>
<li>Study of a novel motion platform for flight simulators using an anthropomorphic robot. Pollini, L., Innocenti, M., Petrone, A. Proceedings of the AIAA Modeling and Simulation Technologies Conference and Exhibit, Keystone, Colorado AIAA, , 2006-6360 (2006).</li>
<li>Teufel, H. J., Nusseck, H. -G., Beykirch, K. A., Butler, J. S., Kerger, M., Bulthoff, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((MPI+motion+simulator%3A+development+and+analysis+of+a+novel+motion+simulator%5BTitle%5D)+AND+%22%22%5BJournal%5D)">MPI motion simulator: development and analysis of a novel motion simulator.</a> Proceedings of the AIAA Modeling and Simulation Technologies Conference and Exhibit, Hilton Head, South Carolina AIAA, , 2007-6476 (2007).</li>
<li>Gärling, T., Böök, A., Lindberg, E., Arce, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Is+elevation+encoded+in+cognitive+maps%5BTitle%5D)+AND+%22Journal+of+Environmental+Psychology%22%5BJournal%5D)">Is elevation encoded in cognitive maps.</a> Journal of Environmental Psychology. 10, 341-351 (1990).</li>
<li>Montello, D. R., Pick, H. L. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Integrating+knowledge+of+vertically+aligned+large-scale+spaces%5BTitle%5D)+AND+%22Environment+and+Behaviour%22%5BJournal%5D)">Integrating knowledge of vertically aligned large-scale spaces.</a> Environment and Behaviour. 25, 457-483 (1993).</li>
<li>Correia, M. J., Hixson, W. C., Niven, J. I. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((On+predictive+equations+for+subjective+judgments+of+vertical+and+horizon+in+a+force+field%5BTitle%5D)+AND+%22Acta+oto-laryngologica+Supplementum%22%5BJournal%5D)">On predictive equations for subjective judgments of vertical and horizon in a force field.</a> Acta oto-laryngologica Supplementum. 230, 3(1968).</li>
<li>Barnett-Cowan, M., Harris, L. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Perceived+timing+of+vestibular+stimulation+relative+to+touch%2C+light+and+sound%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Perceived timing of vestibular stimulation relative to touch, light and sound.</a> Experimental Brain Research. 198, 221-231 (2009).</li>
<li>Barnett-Cowan, M., Harris, L. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Temporal+processing+of+active+and+passive+head+movement%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Temporal processing of active and passive head movement.</a> Experimental Brain Research. 214, 27-35 (2011).</li>
<li>Sanders, M. C., Chang, N. N., Hiss, M. M., Uchanski, R. M., Hullar, T. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Temporal+binding+of+auditory+and+rotational+stimuli%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Temporal binding of auditory and rotational stimuli.</a> Experimental Brain Research. 210, 539-547 (2011).</li>
<li>Barnett-Cowan, M., Raeder, S. M., Bulthoff, H. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Persistent+perceptual+delay+for+head+movement+onset+relative+to+auditory+stimuli+of+different+duration+and+rise+times%5BTitle%5D)+AND+%22Experimental+Brain+Research%22%5BJournal%5D)">Persistent perceptual delay for head movement onset relative to auditory stimuli of different duration and rise times.</a> Experimental Brain Research. , Forthcoming (2012).</li>
</ol>

未声明利益冲突。

路径整合已被充分证实是一种用于判断观察者起始位置的方法，但该方法容易低估个体所经过的角度5。我们的结果显示，这种低估现象仅发生在水平面的平移运动中。而在垂直平面内，参与者更倾向于高估所经过的角度，或几乎不存在偏差。这些结果可能解释了为何在地形行进过程中对高度变化的估计往往被夸大10，以及为何在建筑物不同楼层之间的空间导航能力较差11。这些发现也可能与前庭系统中球囊与椭圆囊感受器比例存在的已知不对称性（约0.58）有关12。仅依赖前庭-本体感觉信息时反应时间较慢，相较于存在视觉信息的情况，表明仅依靠惯性线索判断自身起始位置可能存在额外的延迟，这可能与近期研究发现的前庭感知速度较其他感觉更慢的现象相关13-16。总体而言，我们的结果提示，在垂直方向运动时，个体可能采用了不同的策略来判断起始位置，这可能与人类日常运动主要发生在水平面有关。此外，尽管连续的平移运动较为罕见，但它们最常出现在误差最小的矢状面，例如当我们步行接近并进入自动扶梯时。尽管实验后的访谈未反映出不同平面间存在策略差异，未来的研究仍应进一步探索这一可能性。我们计划利用MPI CyberMotion Simulator开展进一步实验，通过引入更多自由度的轨迹、更长的路径、身体相对于重力的不同朝向，以及更大的视野范围，深入探究三维空间中的路径整合表现。

mpi cybermotion 模拟器：一种新型运动模拟器的实现及其在三维多感官路径整合研究中的应用

MPI CyberMotion Simulator: Implementation of a Novel Motion Simulator to Investigate Multisensory Path Integration in Three Dimensions

路径整合是一种将随时间累积的自身运动信息进行整合，以估算当前相对于起始位置所在方位的过程1。人类可以仅依赖视觉2-3、听觉4或惯性线索5完成路径整合。然而，当多种线索同时存在时，惯性线索——特别是动觉线索——似乎占据主导地位6-7。在缺乏视觉的情况下，人类倾向于高估较短的距离（&lt;5 m）和较小的转向角度（&lt;30°），但会低估较长的距离和较大的转向角度5。因此，大脑似乎并不能准确表征在物理空间中的运动过程。
关于水平面内的路径整合已有大量研究，但对垂直方向运动的了解却很少（参见3，其中仅通过视觉研究虚拟运动）。造成这一现象的原因之一是，传统的运动模拟器运动范围较小，主要局限于水平面。本文利用一种具有较大运动范围的运动模拟器8-9，评估水平面与垂直面之间的路径整合是否相似。同时，也评估了惯性线索和视觉线索在路径导航中的相对贡献。
16名观察者直坐在安装于改进型库卡人形机器人臂法兰盘上的座椅中。通过提供视觉（光流、有限寿命的星场）、前庭-本体感觉（闭眼状态下的被动自身运动）或视觉与前庭-本体感觉运动线索来操控感觉信息。在水平面、矢状面和冠状面中的运动轨迹由两段组成（第一段：0.4 m，第二段：1 m；峰值加速度±0.24 m/s2）。两段轨迹之间的夹角为45°或90°。观察者通过移动屏幕上虚拟人物叠加的箭头，指向其起始位置。
观察者在水平面运动时更倾向于低估角度大小，而在垂直面运动时则没有这种倾向。在冠状面中，观察者更倾向于高估角度大小，而在矢状面中则未表现出此类偏差。最后，当仅依赖前庭-本体感觉信息作答时，观察者的反应速度较慢。因此，仅基于前庭-本体感觉信息的人体路径整合所需时间比存在视觉信息时更长。指向行为的一致性表明，在水平面和垂直面中分别低估和高估所经过的角度，提示大脑对空间中自我运动的神经表征具有非对称性，这可能与人类日常运动主要发生在水平面有关。

本文描述了一种有效的方法，用于深入了解人类在三维空间中进行导航的方式。该方法利用了一种能够以传统模拟器无法实现的方式移动观察者的运动模拟器。实验结果证实，在水平面内的运动被低估，而垂直方向的运动则被高估。

MPI CyberMotion 模拟器：一种新型运动模拟器的实现及其在三维多感官路径整合研究中的应用

路径整合是一种将随时间累积的自我运动信息进行整合，以估算个体相对于起点当前位置的过程¹。

以下实验的总体目标是在控制参与者视觉和前庭感觉输入的同时，测量其在三维空间中的路径导航能力。该目标通过使用一种具有六个自由度的改良型机器人椅来实现，该机器人椅可对坐在其中的参与者产生前庭系统刺激。参与者可观察虚拟星空。通过移动机器人椅并同时改变星空图像，系统可向参与者提供视觉和前庭线索。参与者通过准确性和返回记忆起始位置所需的时间来提供路径导航反馈。结果表明，对自身运动估计的不准确性取决于运动平面以及移动的角度。与现有的运动平台等方法相比，该技术的主要优势在于，MPI Cyber Motion 模拟器具有较大的工作空间，能够使观察者在不同维度上移动，尤其是向下移动。该方法可以解答神经科学领域中的关键问题，例如大脑是否以相等程度表征不同维度的自我运动。我们从同事 Manuel Vidal 的一项研究中获得了这些实验的灵感。他仅通过视觉呈现，使人们在虚拟的迷宫中移动。他发现，当 MACES 包含垂直分量时，药物导航能力会受到损害。该技术的应用意义在于为空间定向障碍的诊断提供了可能，因为它们为正常大脑中的路径导航提供了基准。NPI 网络运动模拟器由一个六关节串联机器人组成，采用 3、2、1 配置。该系统基于一台有效载荷为500公斤的工业机器人，以确保机器人在实验过程中的安全性。对硬件和软件均进行了改造，可实现复杂的运动轨迹，包括侧向移动与旋转的组合运动。通过MPI网络运动模拟器实现。轴一、四和六可连续旋转，四对硬件限位装置在两个方向上限制轴二、三和五。线性运动的最大范围在很大程度上取决于运动起始位置。在开展任何实验之前，每条实验运动轨迹都必须经过测试阶段。使用KUKA设计的办公用PC对MPI cyber motion模拟器进行轨迹编程。在此开环配置中，轨迹以笛卡尔坐标系输入，并通过逆向运动学每12毫秒转换为关节空间角度。当前的关节角度位置通过以太网连接从控制系统传输至MPI cyber motion模拟器，并在机器人端被逐次读取并记录到磁盘中。一辆赛车座椅配备五点式安全带系统，并连接至包含脚踏板的底盘。该底盘安装在机器人机械臂的法兰盘上。受试者必须佩戴带有麦克风的主动降噪耳机，以便与实验人员进行双向通信。受试者还应未接触过实验装置。耳机中会持续播放噪音，以掩盖机器人的运行声音。也可将受试者安置在封闭的舱室内进行实验，因为实验是在黑暗环境中进行的。红外相机可实现从控制室进行视觉监控。可采用多种可视化配置，包括液晶显示屏、立体前投影、单目前投影或头戴式显示器。在本实验中，通过放置在观察者前方50厘米处的液晶显示屏提供自我运动的视觉线索。该软件向参与者呈现一个充满200,000个点的虚拟OID空间。每个点以白色圆形显示在黑色背景上。屏幕上显示的点对应于13至0.3度的视觉角度。这些点距离参与者分别为 0.085 和四个虚拟单位。虚拟场景的运动通过来自 MPI 控制计算机的运动轨迹与实际运动同步，从而在视流与运动之间产生视差。视野中较深处的点无论参与者如何移动都会被绘制得更小。每个点异步显示两秒钟后，会被随机重新分配位置。因此，每秒钟共有十万个点在移动。一种定制的操纵杆配备了响应按钮，可允许参与者通过以太网连接向控制系统传输数据。可通过提供有限寿命星场的纯视觉线索来操控感觉信息；也可在参与者闭眼的情况下，仅提供来自被动自我运动的前庭本体感觉线索；或在参与者睁眼的情况下同时提供两种线索。在本实验中，运动轨迹由两段线段组成。第一段长度为 0.4 米，第二段长度为 1 米。任意两段运动线段之间的夹角为 45 度或 90 度。例如，水平面内的运动包括：向前向右移动90度、向右移动45度、向前移动90度，或向右前方移动45度。这类运动也可在矢状面和冠状面内完成。轨迹以平移方式实现，不伴随旋转。每条运动轨迹之后均跟随一个重新定位序列，随后是15秒的暂停，以消除每次试验前运动可能带来的干扰，并确保前庭系统从稳定状态开始接受测试，从而提供对受试者感知运动的反馈。参与者通过操纵杆移动一个箭头，以指示其相对于起始位置的运动方向。起始位置以三种不同视角的虚拟形象呈现，箭头在每次试验前的调整阶段始终被随机放置。对参与者进行准确使用反馈系统的训练至关重要。受试者应能够将箭头指向其周围环境中的物体，例如试验过程中放置于其膝上的操纵杆。操纵杆的运动被限制在轨迹平面内，受试者在采集数据时可使用任意一个或全部视角。每种实验条件重复三次，并以随机顺序呈现。16名参与者的数据被进行了分析。一种极端离群值得分被剔除。模态和角度对估计的运动没有显著影响。然而，参与者在水平面上低估了运动角度的大小近九度，而在冠状面上高估了角度大小约五度。角度因素与额状面因素存在显著的交互作用，表现为45度运动的高估程度大于90度运动。此外，感觉模式与角度之间也存在显著交互作用，仅由前庭信息引起的90度运动的低估程度显著大于视觉条件及联合条件。而对于45度运动，此类差异则不存在。当仅提供前庭本体感觉反馈时，参与者的反应时间明显比视觉反馈和联合反馈条件下更慢。当在水平面内移动时，参与者的反应速度也明显慢于其他平面。这些结果令人十分意外，因为它们表明大脑对空间的表征在不同维度上并非对称分布。我们早已知道，人们在水平面内运动时往往会低估自身的移动，而首次在此研究中发现，这种低估现象在垂直维度中并不存在。未来，我们将能够利用这些方法构建包含曲线路径的三维运动轨迹。这将使我们能够回答更多问题，例如大脑如何整合跨平面的运动信息，以及如何实现转弯时的导航。

mpi-cybermotion-simulator-implementation-novel-motion-simulator-to

Research

科研

JoVE Journal

Neuroscience

神经科学

MPI Cyber​​Motion模拟器：一种新型的运动模拟器的执行情况调查三个维度的多感官的路径积分

近年来，人机交互系统出现了大量发展前景。本文概述了一种新型机器人设备与开源软件的集成，该集成可快速实现一系列交互功能。随后，我们介绍了一种神经康复应用的临床应用。...

触觉/图形康复：将机器人整合至虚拟环境库并应用于中风康复治疗

已开发出一种新型计算系统，该系统采用GPU加速的分子动力学模拟，并结合纳米结构的3D/VR可视化、分析与操控功能，为推进材料研究提供了全新途径，促进了对人类肉眼不可见尺度材料结构的创新性探索与替代性学习方法。...

用于分子动力学模拟、可视化与分析的新型3D/VR交互环境

经颅磁刺激、肌电图和三维运动捕捉是研究人类神经肌肉功能的常用无创技术。本文介绍了一种同步采集这三种工具所产生的数据的方案，同时还创新性地加入了虚拟现实刺激呈现与反馈。...

用于研究人类运动控制的多功能实验平台：结合经颅磁刺激、肌电图、运动捕捉与虚拟现实技术

使用经颅磁刺激（TMS）研究人类运动控制需要整合数据采集系统，以控制TMS的递送并同时记录人类行为。本文提供了通过TMS研究人类运动时整合数据采集系统的详细方法学。...

结合多种数据采集系统研究皮质脊髓输出与多节段生物力学

我们提出了一种在物体转移任务中施加视觉-触觉不匹配刺激的实验方案。具体而言，在执行手部被遮挡的方块转移过程中，通过虚拟呈现的方式随机显示方块虚假掉落的情景。该方案还描述了在执行运动任务的同时添加振动触觉反馈的方法。...

在带有振动触觉反馈的物体传递过程中施加视觉-触觉不一致刺激

WheelCon：一种基于轮式控制器的游戏平台，用于研究人类感觉运动控制

在某些实验、娱乐和教育应用中，对人类观察者的物理旋转进行控制是可取的。本文概述了一种将办公转椅改装成在虚拟现实环境中实现受控物理旋转装置的方法。...

在虚拟现实环境中对人类观察者进行可控旋转

在虚拟现实环境中，运动想象在脑机接口系统中具有广泛的应用。本文阐述了使用个性化的数字化身，这些化身在虚拟现实环境中模拟参与者所想象执行的动作，以增强沉浸感和身体所有权感知。...

基于虚拟现实脑机接口环境中具身化数字孪生的运动想象表现

本文介绍了一种通用的、符合FAIR原则的方法，适用于领域专家研究人员将模拟和数据处理工具集成到三维虚拟实验的自动化工作流中。以中子学为例，展示了如何建立本地Galaxy实例，封装OpenMC和文件转换工具，从Omniverse启动工作流，并对转换后的三维输出结果进行可视化。...

将自动化仿真工作流与3D可视化集成以实现元宇宙中的虚拟实验

比较物种方法使行为神经科学家能够探索与特定行为相关的各种神经生物学因素，这些行为被视为特定动物模型的特征。该技术利用近缘物种之间自然存在的行为差异，无需采用侵入性手段即可调控行为的表达。...

采用跨物种比较方法研究父性行为的神经生物学机制

了解MPI CyberMotion模拟器在三维多感官路径积分中的应用，探索人类如何在三维空间中进行导航。该研究揭示了水平运动常被低估而垂直运动被高估的现象，为神经科学中的空间定向研究提供了新的方法。

MPI CyberMotion 模拟器：一种新型运动模拟器的实现及其在三维多感官路径整合研究中的应用

探索更多视频