Name: 基于音频的虚拟游戏环境的发展，以帮助盲人的导航技巧 (视频) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: 学习基于音频的虚拟环境模拟器AbES，通过游戏化训练帮助视障人士掌握空间导航技能。该方法利用音频线索识别物体位置，使虚拟环境中习得的技能有效迁移至真实建筑导航，为传统定向行走训练提供安全可控的替代方案。

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

作者谨此感谢 Rabih Dow、Padma Rajagopal、Molly Connors 以及卡罗尔盲人中心（美国马萨诸塞州牛顿市）的工作人员在开展本研究过程中提供的支持。本工作得到美国国立卫生研究院/国家眼科研究所资助：RO1 EY019924。

1. 参与者人口统计学信息
这是一项正在进行的研究，招募18至45岁之间的盲人男性和女性参与者。所有参与者均为法律定义的盲人，且为早发性失明（有记录显示在3岁前已确诊），病因包括多种眼部疾病。所有研究参与者此前均不熟悉目标建筑物的空间布局。
2. AbES 的准备与熟悉
<ol>
	<li> 为参与者提供眼罩和耳机，并要求其在整个训练和评估过程中佩戴。确保眼罩舒适地覆盖双眼，耳机正确朝向并贴合双耳（即左声道对应左耳）。</li>
 <li> 培训参与者如何使用AbES中指定的按键以及音频提示所代表的信息。通过特定的按键操作（图3），用户可在虚拟环境中导航并探索建筑结构（前进、向右或向左移动）。每一次虚拟步进约等于真实物理建筑中的一步。</li>
 <li> 熟悉游戏的规则与基本设定。</li>
 <li> 熟悉与游戏过程相关的特定音频提示（例如 寻找宝石的声音以及附近怪物出现的声音）。当用户在建筑中导航时，基于听觉和情境的空间信息将被依次获取并动态更新。空间与情境信息依赖于每迈出一步后所提供的图示性及空间化的声音提示。方位基于基本罗盘方向（例如 “北”或“东”），并通过文本转语音（TTS）提供有关用户当前位置、朝向和行进方向的进一步信息（例如 “您位于一楼走廊，面朝西”），以及路径中物体和障碍物的身份信息（例如 “这是一扇门”）。距离提示通过调节声音强度来提供。声音的空间定位会根据用户的自我中心朝向实时更新。本质上，该软件会根据用户的位置和自我中心朝向播放相应的音频文件，并持续追踪用户在环境中的位置变化。例如，若一扇门位于用户右侧，则敲击声将仅出现在右耳（即软件在右声道播放敲击声的音频文件）。若用户随后转身180度，使同一扇门位于其左侧，则相同的敲击声将出现在左耳（即 软件在左声道播放敲击声的音频文件）。最后，当用户正对门时，相同的敲击声将在双耳等强度地播放。通过持续追踪用户的自我中心朝向，软件能够播放适当的空间定位声音，以识别物体的存在与位置，并在用户穿越虚拟环境时实时更新这些变化。参见 图4。</li>
</ol>
3. 使用 AbES 进行训练与游戏（共3次会话，每次持续30分钟，总计1.5小时）
<ol>
	<li>允许自由游戏，并记录任何困难和挑战（即 使用键盘按键、音频提示以及导航困难区域）。每次培训结束时提供正向反馈和解释说明。</li>
 <li>记录游戏表现（例如 参与者找到宝石的数量、时间及位置。</li>
</ol>
4. 评估虚拟导航任务表现
<ol>
	<li>向参与者详细解释测试内容，并提供完成虚拟导航任务的指导说明。参与者将使用AbES软件依次完成10项预先设定的导航任务。即 一旦参与者成功完成第一项任务，计算机将自动将其重新定位至下一项任务的起始点。</li>
 <li>告知参与者，他们最多有6分钟时间完成每项导航任务。</li>
 <li>10 条难度相当的虚拟导航路径（即 移动距离和转弯次数）根据预设的10个起始点和终止点的配对位置确定即 具体而言，导航目标路线所需的步数范围为25至35步（在虚拟环境中），并包含3至4次90度转弯。</li>
 <li>将10组导航配对载入AbES，以实现表现的自动呈现和数据采集。</li>
 <li>结果指标通过AbES内置软件自动记录。结果指标包括：导航任务的成功完成情况以及到达目标所需的时间。参见 图 5A.</li>
 <li>在每个任务开始时，AbES 软件会自动提供描述起始位置和目标位置的指令。当受试者从起始位置迈出第一个虚拟步时，计时立即开始，并在到达目标位置时结束（若用时超过 6 分钟，则视为未完成，系统将呈现下一条路径）。采集的数据会自动保存至文本文件，随后导入数据库或统计软件进行进一步分析。 </li>
</ol>
5. 评估物理导航任务表现
<ol>
	<li>向参与者详细解释测试内容，并提供完成实际导航任务的指导说明。参与者将在有经验的研究人员监督下，完成10项预先设定的导航任务（任务顺序从先前的虚拟表现评估中随机打乱）。</li>
 <li>告知参与者每项导航任务最多有6分钟时间完成。在实际导航任务中，允许参与者使用其白色手杖作为移动辅助工具。</li>
 <li>10条实际导航路径的选择基于10对预先设定的起始和终止位置（i.e. 房间），这些路径具有相似的难度（i.e. 行进距离和转弯次数）。</li>
 <li>研究人员准备秒表和带有导航任务列表的写字板，用于手动评分任务表现。</li>
 <li>研究人员手动记录结果指标。结果指标包括：是否成功完成导航任务以及到达目标位置所用的时间。</li>
 <li>将参与者“对齐起始位置”（i.e. 使参与者背对起始位置的门）。每项任务开始时，研究人员提供关于起始位置和目标位置的口头说明。计时从参与者迈出起始位置的第一步立即开始，当参与者口头报告到达目的地时结束（若超过6分钟仍未完成，则记为未完成任务，并进入下一条路径）。采集的数据由人工记录，随后转入数据库/统计软件进行进一步分析。参见 Figure 5B。</li>
</ol>
6. 评估物理掉落任务表现
<ol>
	<li>向参与者详细解释测试内容，并说明如何完成实地导航任务。参与者将在经验丰富的研究人员监督下，完成5项导航任务，目标是尽可能选择最短路线离开建筑物。</li>
 <li>告知参与者每项导航任务最多有6分钟完成时间。在实地导航任务中，允许参与者使用白色手杖辅助移动。</li>
 <li>采用5个预先确定的物理起始位置，使得存在3条不同长度的可选出口路径。</li>
 <li>研究人员准备秒表和带有导航任务列表的写字板，用于手动评分任务表现。</li>
 <li>研究人员手动记录结果指标。结果指标包括：是否成功完成导航任务以及到达目标所需的时间。此外，路径将根据长度评分，最短路径得分最高（即 最短路径得3分，第二短得2分，最长得1分，未能完成任务得0分）。参见图5C。</li>
 <li>将参与者“对齐”至第一个起始位置。每项任务开始时，研究人员会提供关于起始位置的说明。计时从参与者从起始位置迈出第一步时立即开始，到参与者口头报告已到达建筑物出口门时结束（若超过6分钟仍未完成，则记为未完成任务，并进入下一个起始位置）。采集的数据由人工记录，随后转入数据库或统计软件进行进一步分析。</li>
</ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

作者声明无利益冲突。

我们介绍了一种基于音频的交互式虚拟环境模拟器，旨在提高盲人的整体空间感知能力和导航技能。我们证明，与AbES进行交互可提供准确的线索，描述物体之间的空间关系以及目标环境的整体布局。盲人用户能够基于这些听觉信息，并通过与沉浸式虚拟环境的交互，构建出准确的空间认知地图。此外，在游戏隐喻的背景下与AbES交互表明，空间认知结构可以通过与软件的因果性交互被隐式且较为简单地习得。如本研究初期阶段所展示的，这种游戏的交互性和沉浸性能够增强个体对新环境的空间感知，为构建准确的空间认知地图提供平台，并可能减少在到达陌生建筑之前独立导航时所产生的不安感。
通常，视觉障碍者可以通过定向与行动能力（O&M）训练获得功能性独立。然而，训练策略必须保持灵活且可适应，以便应用于新颖和不熟悉的情境，并根据个人的优势与不足进行调整，从而应对他们特定的挑战、需求和学习策略。交互式虚拟导航环境（如 AbES）的创造性应用可提供这种灵活性，并补充当前的 O&M 培训课程。该软件是一种辅助策略，不仅能够利用高度激励性的优势，还提供了一个测试平台，用于开展更受控且可量化的研究，以检验和验证这些训练方法的有效性。
<...

在陌生环境中找到方向对盲人来说是一项重大挑战。成功的导航需要理解自身与环境中物体之间存在的空间关系1,2。描述周围空间的心理表征被称为空间认知地图3。盲人可以通过其他感官通道（如听觉）获取有关周围环境的相关空间信息，从而构建准确的空间认知地图，以完成现实世界中的导航任务4,5。
关于虚拟环境和动作视频游戏在学习和掌握技能方面的教育潜力，人们已产生了极大的兴趣6-9。事实上，为此目的已开发出多种针对盲人的策略和方法（见4,10-12）。我们开发了基于音频的环境模拟器（Audio-based Environment Simulator, AbES）；这是一种以用户为中心的基于音频的虚拟环境，可模拟对真实物理建筑的导航与探索。基于原始建筑设计平面图，利用AbES软件生成了一座现代两层建筑的虚拟渲染模型（位于马萨诸塞州牛顿市的卡罗尔盲人中心；Carroll Center for the Blind）（图1A和B）。AbES采用动作游戏的隐喻设计，旨在促进用户对建筑空间的全面探索。用户通过简单的键盘操作和空间化的声音提示，在整栋建筑中进行导航和探索，以收集隐藏在各个房间内的尽可能多的宝石。用户必须避开四处游走的怪物，这些怪物会将其抓走并藏在建筑内的其他位置（图1C）。
我们证明，通过与AbES交互，盲人用户能够基于动作游戏隐喻情境中获取的听觉信息，为目标建筑生成精确的空间认知地图。这一结论通过一系列训练后的行为表现测试得到验证，这些测试旨在评估从虚拟环境获取的空间信息向真实世界大尺度室内导航任务的迁移能力（整体研究设计见图2）。我们的结果表明，尽管在实验过程中从未告知参与者研究的整体目的，也未要求他们在玩游戏时主动记忆建筑的空间布局，盲人用户仍能够成功地在先前完全陌生的建筑中完成导航。

<table><tbody><tr><td>笔记本电脑</td><td></td><td></td><td>专用于培训参与者和收集数据的笔记本电脑</td></tr><tr><td>立体声耳机 &lt;em&gt;（全封闭式耳罩设计）&lt;/em&gt;</td><td></td><td></td><td>所有参与者在培训期间佩戴</td></tr><tr><td>眼罩</td><td></td><td></td><td>所有参与者在培训和测试期间佩戴</td></tr></tbody></table>

开发基于音频的虚拟游戏环境以辅助盲人导航技能训练

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

基于音频的环境模拟器（AbES）是一种虚拟环境软件，旨在提高盲人的真实世界导航能力。该软件仅使用基于音频的线索，并以视频游戏为隐喻背景，使用户能够获取有关建筑物布局的相关空间信息。这使得用户能够构建出关于大型三维空间的精确空间认知地图，并可将其运用于实际的室内导航任务中。在游戏结束后，参与者将在游戏中所代表的目标真实建筑物内进行导航能力的评估。初步结果表明，早盲用户能够获取有关此前不熟悉建筑物空间布局的相关信息，这一点通过他们在一系列导航任务中的表现得以体现。这些任务包括在虚拟环境和真实建筑物中进行路径寻找，以及一系列投放任务。我们发现，AbES软件所具有的沉浸感和高度交互性似乎能极大地促使盲人用户主动探索虚拟环境。该方法的应用前景可能扩展至更广泛的视觉障碍人群。

展示了三名早盲参与者（年龄在19至22岁之间）的实验结果（参与者的具体特征见表1）。总体而言，三名参与者在使用AbES软件进行游戏训练后，均在全部三项导航任务中表现出较高的成功率。这一结果通过三项行为任务中的表现得分（群体均值及个体得分）得到了验证（见图6）。虚拟导航任务的正确率（平均：90%）和实际导航任务的正确率（平均：88.7%）均显示出较高的任务完成水平，且两项任务的表现相当（图6A）。在“放下”实验任务中的表现表明，参与者通常会选择最短路径离开建筑物（平均得分：3.0）（图6B）。最后，图6C展示了完成三项导航任务到达目标点所需的平均时间。虚拟导航时间（首先进行测试）通常长于实际导航（平均：137.3秒 vs. 73.8秒）。而“放下”任务中较短的平均导航时间（平均：37.3秒）与参与者倾向于选择最短路径离开建筑物的结果一致。
对一名代表性研究参与者在全部三项任务中的个体结果及导航路径进行评估显示，在虚拟...

基于音频的环境模拟器（AbES）是一种虚拟环境软件，旨在提高盲人的真实世界导航能力。

基于音频的环境模拟器（AbES）是一种虚拟环境软件，旨在通过仅使用音频来提升盲人的真实世界导航能力。

以下实验的总体目标是证明，与虚拟环境进行交互能够实现空间导航技能的迁移，且这些技能可在后续的真实物理环境中进行评估。该目标首先通过学习在虚拟环境中进行游戏时用于导航的键盘操作来实现。接下来，参与者学习如何识别声音，从而能够辨别物体及其相对位置。游戏结束后，将进行一系列虚拟和实际的导航任务，以评估参与者对环境的空间理解能力。研究结果表明，参与者能够成功穿越在游戏过程中通过虚拟环境呈现的真实物理建筑。与现有的标准定向与行动训练等方法相比，该技术的主要优势在于，可以通过虚拟探索以安全且可控的方式学习陌生建筑的空间布局。本实验操作将由本实验室的研究协调员 Aaron Connors 和 Lindsey Aino 演示。本研究的参与者均为法定盲人，对需要学习的目标建筑的空间布局毫无了解，也不知晓通过游戏方式学习目标建筑空间布局的整体研究目的。开始前，向参与者提供眼罩和耳机。确保耳机正确佩戴在耳朵上。接下来，指导参与者如何使用指定的按键以及音频提示在基于音频的环境模拟器中提供的信息。此处显示的特定按键用于在虚拟环境中进行导航和探索。每个虚拟步骤对应真实物理建筑中的一个实际步长。在讲解操作控制之后，需说明游戏的前提和规则，并告知参与者游戏过程中使用的各种音频提示。例如，当用户在虚拟环境中移动时，随着每一步的行进，系统会逐步获取并动态更新听觉和空间信息，如附近珠宝和怪物的声音。使用语音合成技术提供有关用户当前位置、朝向、行进方向以及路径上物体和障碍物身份的进一步信息。声音的空间定位会随之更新，以匹配用户的自我中心行进方向。例如，如果一扇门位于人的右侧，则敲门声会被人耳右侧听到。如果此人现在转身180度，使同一扇门位于其左侧，则同样的敲门声现在会从左侧通道听到。让参与者进行三次、每次30分钟的游戏训练。在每次训练结束后，记录游戏过程中出现的任何困难或挑战，给予参与者积极的反馈，并提供必要的澄清或进一步指导。随后，通过统计参与者找到Juul设备的次数、时间以及位置，对其游戏表现进行评分。为了评估虚拟导航任务的表现，向参与者说明他们将依次完成由Abes软件呈现的10项预设导航任务。路径的难度相当，根据预先设定的10对起始和终止位置进行选择。在每个任务开始时，告知参与者完成每个任务的最长时间为六分钟。系统会自动提供描述起始位置和目标位置的指令。当参与者接收到音频指令后，计时自动开始；当其到达目标位置时，计时自动结束。到达目标位置后，系统将自动记录结果指标，包括导航任务是否成功完成以及到达目标位置所用的时间。为了测试参与者在实际环境中的表现，向其说明将接受10项预先设定的导航任务。在经验丰富的研究人员监督下进行。告知参与者，每项任务最多有六分钟时间完成，且允许使用手杖作为行动辅助工具。准备好秒表、导航任务列表和用于手动评分的剪贴板。让受试者面向起始位置，并向其描述起始地点和目标目的地

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

科研

JoVE Journal

Medicine

医学

基于音频的虚拟游戏环境的发展，以帮助盲人的导航技巧

虚拟现实智能多传感器系统治疗焦虑相关障碍项目（INTREPID）旨在开发一种多传感器、情境感知的虚拟现实系统，用于治疗焦虑相关障碍。...

虚拟现实临床应用中的生物反馈：INTREPID 项目

证明精神分裂症认知功能损害治疗有效性的难点之一，在于找到能够优化评估与日常功能相关技能的测量方法。...

日常生活技能虚拟现实评估工具的开发

有复杂沟通需求的儿童可从使用言语生成设备（SGD）中获益。已有研究指出，认知能力会影响使用者在言语生成设备不同层级间进行导航的能力。本方案描述了言语-语言病理学家评估认知技能和导航能力所需的具体步骤。...

导航评估中认知任务的实用方法学

本文介绍了一种利用网络化计算机实验室进行多人决策与导航实验的方法。...

用于多参与者决策科学与导航实验的网络化桌面虚拟现实系统

本文介绍了一种基于随机点刺激的、以游戏化知觉学习软件来改善立体视锐度的实验方案。患者为无斜视的立体视功能缺陷受试者。该方案结合了视光中心的随访与家庭训练软件的使用。依从性及立体视锐度的变化数据将存储于云端。...

使用随机点视频游戏改善立体视锐度

虚拟现实（VR）是一种强大但尚未充分利用的方法，可用于推动神经系统疾病的诊断与治疗。克利夫兰诊所虚拟现实购物平台将先进的VR内容与全向跑步机相结合，用以量化日常生活中工具性活动能力——这一指标被认为是神经系统疾病的前驱标志物。...

克利夫兰医学中心用于评估日常生活工具性活动能力的沉浸式虚拟现实购物平台

本方案旨在通过应用事件相关电位技术，研究重度聋哑受试者在接受短期听觉-触觉感觉替代训练后，与学习相关的潜在电生理变化。...

使用事件相关电位技术评估重度聋人参与者的视听触觉感觉替代训练

本文介绍了一种新颖、简短且主动的空间导航任务，可同时评估空间导航能力和情景记忆能力。重要的是，空间导航与情景记忆能力相互关联，且该任务对运动干预具有敏感性。...

评估人类在虚拟空间中的空间导航能力及其对运动的敏感性

在虚拟现实环境中，运动想象在脑机接口系统中具有广泛的应用。本文阐述了使用个性化的数字化身，这些化身在虚拟现实环境中模拟参与者所想象执行的动作，以增强沉浸感和身体所有权感知。...

基于虚拟现实脑机接口环境中具身化数字孪生的运动想象表现

在缺乏明确表型标志物的小鼠骨髓移植模型中，确定供体细胞植入情况具有挑战性。我们描述了一种定量分析雄性供体细胞在雌性移植受体小鼠中植入程度的方法。该方法适用于所有小鼠品系，可用于造血干细胞（HSC）功能的研究。...

利用定量实时 PCR 检测在竞争性小鼠骨髓移植模型中供体细胞的植入情况

学习基于音频的虚拟环境模拟器AbES，通过游戏化训练帮助视障人士掌握空间导航技能。该方法利用音频线索识别物体位置，使虚拟环境中习得的技能有效迁移至真实建筑导航，为传统定向行走训练提供安全可控的替代方案。

开发基于音频的虚拟游戏环境以辅助盲人导航技能训练

探索更多视频