Name: Ontwikkeling van een Audio-based Virtual Gaming Milieu om te helpen met Navigatie Vaardigheden in het Blind (Video) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: Verken een virtueel audio-gebaseerd spel om navigatievaardigheden bij blinden te verbeteren via AbES-software. Deze methode maakt veilige overdracht van ruimtelijk inzicht naar echte gebouwen mogelijk.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

De auteurs willen graag Rabih Dow, Padma Rajagopal, Molly Connors en het personeel van de Carroll Center for the Blind (Newton MA, USA) bedanken voor hun steun bij de uitvoering van dit onderzoek. Dit werk werd ondersteund door de NIH / NEI subsidie: RO1 EY019924.

1. Deelnemer Demografie Dit is een on-going onderzoek dat blinde mannelijke en vrouwelijke deelnemers tussen 18-45 jaar werft. Alle deelnemers zijn blind van early onset (vóór de leeftijd van 3 gedocumenteerd) en van verschillende oculaire oorzaken. Geen van de deelnemers aan de studie waren eerder bekend met de ruimtelijke inrichting van het doel fysieke gebouw. 2. Voorbereiding en Kennismaking met ABES <ol><li> Zorg voor de deelnemer met een blinddoek en een hoofdtelefoon om te worden gedragen tijdens de training en beoordelingsproces. Zorg ervoor dat de blinddoek comfortabel wordt geplaatst over de ogen en de hoofdtelefoon goed georiënteerd en gepositioneerd over de oren (dwz linker luidspreker op linkeroor). </li><li> Trein deelnemer hoe toegewezen toetsen en de informatie weergegeven door het audio signalen in ABES gebruiken. Met behulp van specifieke toetsaanslagen (figuur 3), een gebruiker door en verkent dehet opbouwen van virtueel (vooruit, rechts of links). Elke virtuele stap benadert een stap in de echte fysieke gebouw. </li><li> Vertrouwd te maken met regels en uitgangspunt van het spel. </li><li> Vertrouwd te maken met auditieve signalen die specifiek zijn voor het spel (bijvoorbeeld geluid van het vinden van juwelen en geluid van monsters in de buurt). Als de gebruiker navigeert door het gebouw, wordt auditief-based en contextuele ruimtelijke informatie sequentieel verkregen en wordt dynamisch bijgewerkt. Ruimtelijke en situationele gegevens zijn gebaseerd op iconische en spatialized geluid signalen die na het nemen van elke stap. Oriëntatie is gebaseerd op kardinaal kompas (bijv. &quot;noorden&quot; of &quot;oost&quot;) en tekst via spraak (TTS) wordt gebruikt om meer informatie over een gebruiker de huidige locatie, oriëntatie en richting (bijvoorbeeld: &quot;je bent in de gang op de eerste zorgen verdieping, op west &quot;) en de identiteit van objecten en hindernissen in hun pad (bijvoorbeeld&quot; dit is een deur &quot;). Afstand cues zijn voorzien op basis van on modulerende geluidsintensiteit. De ruimtelijke lokalisatie van het geluid wordt bijgewerkt om de gebruiker egocentrisch rubriek passen. In wezen is de software ontworpen om een ​​geschikte audio-bestand af te spelen als een functie van de plaats en de egocentrische post van de gebruiker en houdt van de positie van de gebruiker als ze bewegen door de omgeving. Bijvoorbeeld, als een deur bevindt zich aan de rechterkant van de persoon kant, is het kloppend geluid horen in het recht van de gebruiker oor (dat wil zeggen de software een audiobestand van een kloppend geluid in het rechterkanaal speelt). Als de persoon nu draait rond de 180 graden, zodat het dezelfde deur nu bevindt zich aan de linker kant, wordt dezelfde kloppend geluid nu gehoord in het linker kanaal (dat wil zeggen de software speelt een audiobestand van een kloppend geluid in het linker kanaal). Ten slotte, als de gebruiker naar de deur wordt dezelfde kloppen geluid in beide oren gelijk. Door het bijhouden van egocentrische van de gebruiker rubriek, kan de software speel de juiste ruimtelijke gelokaliseerde geluiden die te identificerende aanwezigheid en locatie van objecten en houden deze veranderingen als de gebruiker zich door de virtuele omgeving. Zie afbeelding 4. </li></ol> 3. Training en spel te spelen met ABES (3 sessies van telkens 30 min. voor een totaal van 1,5 uur) <ol><li> Laat gratis spel te spelen en noteer eventuele moeilijkheden en uitdagingen (dwz gebruik van toetsaanslagen, auditieve signalen, de gebieden van moeilijke navigatie). Positieve bekrachtiging en verduidelijkingen worden verstrekt aan het einde van elke trainingssessie. </li><li> Record prestaties van het spel (bijvoorbeeld aantal, tijdstip en locatie waar een deelnemer vindt een juweel). </li></ol> 4. Beoordeel Virtuele Navigatie Taakuitvoeringfouten <ol><li> Leg deelnemer de details van de testen en instructies geven over hoe u de virtuele navigatie taken te voltooien. De deelnemer zal voltooien 10 vooraf bepaalde navigatie taken gepresenteerd sequentieel met behulp van de ABES-software (dat wil zeggen zodra de deelnemendebroek met succes de eerste taak is voltooid, wordt de computer automatisch opnieuw vinden ze naar het startpunt van de volgende taak). </li><li> Informeer de deelnemer dat zij maximaal 6 minuten aan elke navigatie taak te voltooien hebben. </li><li> 10 virtuele navigatiepaden van vergelijkbare moeilijkheidsgraad (dat wil zeggen de afgelegde afstand en het aantal windingen) zijn gekozen op basis van vooraf bepaalde paringen van 10 start en stop locaties (dat wil zeggen kamers). Met name de reeks stappen nodig om de doelstelling route navigeren varieerde tussen 25-35 stappen (in de virtuele omgeving) en opgenomen tussen 3-4 bochten van 90 graden. </li><li> Laad de 10 navigatie paren in ABES voor geautomatiseerde presentatie en data capture van de prestaties. </li><li> Uitkomstmaten worden automatisch geregistreerd met behulp van interne software ABES &#39;. Uitkomstmaten zijn: succesvolle voltooiing van de navigatie-taak en de tijd genomen om doel te bereiken. Zie figuur 5A. </li><li> Aanwijzingen describing de beginpositie en de gewenste bestemming worden automatisch door de software ABES aan het begin van elke taak. Timing begint wanneer de subject is de eerste stap van de virtuele startlocatie en eindigt na aankomst op de gewenste plaats (tenzij duurt langer dan 6 min, waarbij de punt wordt gescoord als onvolledig en het volgende pad wordt gepresenteerd). Gevangen gegevens worden automatisch verzonden naar een tekstbestand en opende vervolgens in de database / statistische software voor verdere analyse. </li></ol> 5. Beoordeel Fysieke Navigatie Taakuitvoeringfouten <ol><li> Leg deelnemer de details van de testen en instructies geven over hoe u de fysieke navigatie taken te voltooien. De deelnemer zal voltooien 10 vooraf bepaalde navigatie taken (die in gecodeerde volgorde van de vorige virtuele prestatiebeoordeling) en onder toezicht van een ervaren onderzoeker. </li><li> Informeer de deelnemer zullen zij een maxi hebbenmum van 6 min. aan elke navigatie taak te voltooien. Voor de toepassing van de fysieke navigatie taak, wordt de deelnemer toegestaan ​​om hun witte stok gebruiken voor mobiliteit ondersteuning. </li><li> 10 fysieke navigatie paden worden gekozen op basis van vooraf bepaalde paringen van 10 start en stop locaties (dat wil zeggen kamers) met een vergelijkbare moeilijkheidsgraad (dwz afgelegde afstand en het aantal slagen). </li><li> Investigator bereidt stopwatch en klembord met een lijst van navigatie taken voor handmatige scoring van de prestaties. </li><li> Uitkomstmaten worden handmatig vastgelegd door de onderzoeker. Uitkomstmaten zijn: succesvolle voltooiing van de navigatie-taak en de tijd genomen om doel te bereiken. </li><li> &quot;Square-off&quot; van de deelnemer (dat wil zeggen de positie van de deelnemer met de deur van de startlocatie achter hen). Aanwijzingen de beginpositie en de gewenste bestemming worden door de onderzoeker aan het begin van elke taak. Timing begint onmiddellijk nadat het onderwerp takes de eerste fysieke stap van de startlocatie en eindigt wanneer de deelnemer mondeling mededelingen die op de bestemming (tenzij duurt langer dan 6 min, waarbij de punt wordt gescoord als onvolledig en het volgende pad wordt gepresenteerd). Vastgelegde gegevens wordt handmatig opgeslagen en vervolgens overgebracht naar de database / statistische software voor verdere analyse. Zie Figuur 5B. </li></ol> 6. Beoordeel Fysieke Drop off Taakuitvoeringfouten <ol><li> Leg deelnemer de details van de testen en instructies geven over hoe je de fysieke drop-off navigatie taken te voltooien. De deelnemer zal voltooien 5 navigatie taken met de doelstellingen van het verlaten van het gebouw met behulp van de kortste route en onder toezicht van een ervaren onderzoeker. </li><li> Informeer de deelnemer dat zij maximaal 6 minuten aan elke navigatie taak te voltooien hebben. Voor de toepassing van de fysieke drop off menu taak is de deelnemer toegestaanhun witte stok gebruiken voor mobiliteit ondersteuning. </li><li> 5 voorafbepaalde fysieke startplaatsen worden gebruikt dat drie uitgang paden met verschillende lengtes mogelijk. </li><li> Investigator bereidt stopwatch en klembord met een lijst van navigatie taken voor handmatige scoring van de prestaties. </li><li> Uitkomstmaten worden handmatig vastgelegd door de onderzoeker. Uitkomstmaten zijn: succesvolle voltooiing van de navigatie-taak en de tijd genomen om doel te bereiken. Bovendien zijn paden gescoord, dat de genomen kortste weg is het maximum aantal punten (dus 3 voor kortste weg, 2 voor het tweede, 1 voor de langste, en 0 voor het niet in staat om de taak te voltooien) gegeven. Zie Figuur 5C. </li><li> &quot;Square-off&quot; van de deelnemer op de eerste startplaats. Aanwijzingen de beginpositie worden door de onderzoeker aan het begin van elke taak. Timing begint onmiddellijk nadat het onderwerp neemt hun eerste fysieke stap van de startlocatie en eindigtwanneer de deelnemer rapporteert mondeling te komen tot een uitgangsdeur van het gebouw (tenzij duurt langer dan 6 minuten, waarbij de run wordt gescoord als onvolledig en de volgende start locatie wordt gepresenteerd). Vastgelegde gegevens wordt handmatig opgeslagen en vervolgens overgebracht naar de database / statistische software voor verdere analyse. </li></ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

De auteurs verklaren geen belangenconflicten.

We beschrijven een interactieve audio-gebaseerde virtuele omgeving simulator ontworpen om algemene ruimtelijk inzicht en navigatie vaardigheden in de blinde te verbeteren. We zien dat de interactie met ABES nauwkeurige signalen die de ruimtelijke relaties tussen objecten en de algemene lay-out van de doelomgeving beschrijven biedt. Blinde gebruikers kunnen genereren nauwkeurige ruimtelijke cognitieve kaarten op basis van deze auditieve informatie en door interactie met de meeslepende virtuele omgeving. Bovendien interac...

Het vinden van een weg in een onbekende omgeving presenteert als een belangrijke uitdaging voor de blinden. Navigeren met succes vereist een begrip van de ruimtelijke relaties die bestaan ​​tussen jezelf en objecten in de omgeving 1,2. De mentale representatie die beschrijft ruimte er omheen wordt aangeduid als een ruimtelijk cognitieve kaart 3. Blinde mensen kunnen verzamelen relevante ruimtelijke informatie met betrekking tot hun omgeving via andere zintuiglijke kanalen (zoals het horen), waardoor voor het genereren van een nauwkeurige ruimtelijke cognitieve kaart voor de doeleinden van de echte wereld navigatietaken 4,5. Grote belangstelling is ontstaan ​​ten aanzien van de educatieve mogelijkheden van virtuele omgevingen en actie video games als een middel om te leren en te beheersen vaardigheden 6-9. Inderdaad, vele strategieën en methoden ontwikkeld voor blinden hiervoor (zie 4,10-12). We hebben Audio-gebaseerde omgeving Simulator (ABES), een user-centered audio-gebaseerde virtuele omgeving die het mogelijk maakt voor gesimuleerde navigatie en exploratie van een bestaande fysieke gebouw. Puttend uit originele architectonische plattegronden, een virtuele weergave van een moderne twee-verdiepingen tellende gebouw (gelegen aan de Carroll Center for the Blind, Newton, MA) werd gegenereerd met ABES software (figuren 1A en B). ABES is uitgerust met een actie spel metafoor met een premisse ontworpen om volledige verkenning van het gebouw ruimte te bevorderen. Met behulp van eenvoudige toetsaanslagen en spatialized geluid signalen, gebruikers navigeren en verken het hele gebouw tot een maximum aantal van juwelen verborgen in verschillende kamers te verzamelen. Gebruikers moeten voorkomen dat rondzwervende monsters die kan ze weg en verstopt ze elders in het gebouw (figuur 1C). We laten zien dat de interactie met ABES kan een blinde gebruiker te genereren een nauwkeurige ruimtelijke cognitieve kaart van een target gebouw op basis van auditieve informatie eencquired in het kader van een actie spel metafoor. Dit wordt bevestigd door een reeks van na de training gedragsverandering performance tests ontworpen om de overdracht van verworven ruimtelijke informatie uit een virtuele omgeving naar een real-world en grootschalige indoor navigatie taak (zie figuur 2 voor de algehele opzet van het onderzoek) te beoordelen. Onze resultaten laten zien dat blinde gebruikers in staat zijn om succesvol te navigeren in een gebouw waarvoor ze voorheen onbekende, ondanks het feit dat op geen enkel moment waren ze op de hoogte van het algemene doel van het onderzoek, noch waren zij de opdracht om de ruimtelijke indeling van de te herinneren bouwen tijdens het spelen van het spel.

<table border="1"><tbody><tr><td> Naam van de apparatuur </td><th > Reacties </td></tr><tr><td> Laptop computer </td><td > Laptop die uitsluitend voor deelnemers aan de opleidingen en het verzamelen van gegevens </td></tr><tr><td> Stereo Hoofdtelefoon (volledig gesloten circumaural-ontwerp) </td><td > Gedragen door alle deelnemers tijdens de training </td></tr><tr><td> Geblinddoekt </td><td > Gedragen door alle deelnemers tijdens de training en testen </td></tr></tbody></table>

ontwikkeling van een audio-based virtual gaming milieu om te helpen met navigatie vaardigheden in het blind

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

Audio-based Milieu Simulator (ABES) is virtuele omgeving software ontworpen om echte wereld navigatie vaardigheden te verbeteren in de blind. Met alleen audio op basis van signalen en zet in het kader van een video game metafoor, gebruikers verzamelen relevante ruimtelijke informatie met betrekking tot een gebouw lay-out. Hierdoor kan de gebruiker het ontwikkelen van een nauwkeurige ruimtelijke cognitieve kaart van een grote driedimensionale ruimte kunnen worden gemanipuleerd ten behoeve van een real indoor navigatie taak. Na het spel, worden de deelnemers vervolgens beoordeeld op hun vermogen om te navigeren binnen de doelstelling fysieke gebouw vertegenwoordigd in het spel. Voorlopige resultaten suggereren dat vroege blinde gebruikers in staat waren om relevante informatie over de ruimtelijke inrichting van een eerder onbekende gebouw als geïndexeerd door hun prestaties op een reeks van navigatie taken te verwerven. Deze taken omvatten weg vinden via de virtuele en fysieke gebouw, alsmede een reeks drop off taken. Wij vinden dat de meeslependeen zeer interactieve karakter van de ABES software lijkt sterk gaan de blinde gebruiker actief verkennen van de virtuele omgeving. Toepassingen van deze aanpak kan zich uitstrekken tot grotere populaties van visuele handicap.

Resultaten van drie vroege blinde deelnemers (leeftijd tussen 19 en 22 jaar) worden weergegeven (zie tabel 1 voor kenmerken van de deelnemer). Kortom, alle drie de deelnemers bleek een hoge mate van succes op alle drie de navigatie taken na het spelen met de ABES software. Dit werd bevestigd door de prestatiescores (groep gemiddelde en individueel) op alle drie taken gedrag (zie figuur 6). Het percentage correct uitvoeren voor de virtuele (gemiddelde: 90%), gevolgd door de fysieke (gemi...

Audio-based Milieu Simulator (ABES) is virtuele omgeving software ontworpen om echte wereld navigatie vaardigheden te verbeteren in de blind.

Ontwikkeling van een Audio-based Virtual Gaming Milieu om te helpen met Navigatie Vaardigheden in het Blind

Audio-based Environment Simulator (AbES) is virtual environment software designed to improve real world navigation skills in the blind. Using only audio ...

Het algemene doel van het volgende experiment is om aan te tonen dat interactie met een virtuele omgeving mogelijk maakt dat ruimtelijke navigatievaardigheden worden overgedragen, die later in de werkelijke fysieke omgeving kunnen worden beoordeeld. Dit wordt bereikt door eerst de toetsaanslagen te leren die worden gebruikt voor navigatie in de virtuele omgeving tijdens het gamen. Vervolgens leren de deelnemers hoe ze geluiden kunnen identificeren waarmee objecten en hun relatieve locatie kunnen worden vastgesteld.Na het gamen wordt een reeks virtuele en fysieke navigatietaken gepresenteerd om hun ruimtelijk begrip van de omgeving te beoordelen. De resultaten tonen aan dat deelnemers in staat zijn te navigeren door een echt fysiek gebouw dat tijdens het gamen werd gerepresenteerd door de virtuele omgeving. Het belangrijkste voordeel van deze techniek ten opzichte van bestaande methoden, zoals standaard oriëntatie- en mobiliteitstraining, is dat de ruimtelijke indeling van een onbekend gebouw op een veilige en gecontroleerde manier kan worden geleerd via virtuele exploratie.Deze procedure zal worden gedemonstreerd door Aaron Connors en Lindsey Aino, beiden studiecoördinatoren in mijn laboratorium. De deelnemers aan dit onderzoek zijn wettelijk blind en hebben geen voorafgaande kennis van de ruimtelijke indeling van het te leren doelgebouw, noch zijn zij op de hoogte van het algemene doel van het spel met betrekking tot het leren van de ruimtelijke indeling van het doelgebouw. Om te beginnen, voorzie de deelnemer van een blinddoek en een koptelefoon.Zorg ervoor dat de hoofdtelefoon correct over de oren is geplaatst. Instrueer de deelnemer vervolgens over het gebruik van de toegewezen toetsen en de informatie die wordt gepresenteerd door de audio-aanwijzingen in de audio-gebaseerde environment.Simulator. Specifieke toetscombinaties, zoals hier getoond, worden gebruikt om door de virtuele omgeving te navigeren en deze te verkennen.Elke virtuele stap komt ongeveer één stap in het werkelijke fysieke gebouw overeen. Leg na het uitleggen van de bediening het uitgangspunt en de regels van het spel uit. Informeer de deelnemer over de verschillende audio-aanwijzingen die tijdens het spelen worden gebruikt.Bijvoorbeeld, bij het geluid van het lokaliseren van juwelen en monsters in de nabijheid terwijl de gebruiker door het gebouw navigeert, wordt auditieve en ruimtelijke informatie sequentieel verkregen en dynamisch bijgewerkt na elke stap die in de virtuele omgeving wordt gezet. Tekst-naar-spraak wordt gebruikt om verdere informatie te verschaffen over de huidige locatie, oriëntatie en koers van de gebruiker, evenals de identiteit van objecten en obstakels op hun pad. De ruimtelijke lokalisatie van geluiden wordt bijgewerkt om overeen te komen met de egocentrische koers van de gebruiker.Als een deur zich bijvoorbeeld aan de rechterkant van de persoon bevindt, wordt het kloppende geluid in het rechteroor van de gebruiker gehoord. Als de persoon zich nu 180 graden omdraait zodat dezelfde deur zich nu aan hun linkerkant bevindt, wordt hetzelfde kloppende geluid nu in het linkerkanaal gehoord. Laat de deelnemer het spel spelen gedurende drie sessies van 30 minuten.Noteer eventuele moeilijkheden of uitdagingen die tijdens het gamen optreden; bied na elke trainingssessie positieve bekrachtiging en eventuele verduidelijkingen of verdere instructies. Score daarna hun prestaties tijdens het gamen door het aantal, het tijdstip en de locatie bij te houden waar een deelnemer een Juul vindt. Om de prestaties bij de virtuele navigatietaak te testen, legt u aan de deelnemer uit dat deze 10 vooraf vastgestelde navigatietaken zal voltooien die sequentieel door de Abes-software worden gepresenteerd.De paden zijn van vergelijkbare moeilijkheidsgraad en worden gekozen op basis van vooraf vastgestelde koppelingen van 10 start- en stoppunten. Informeer de deelnemer aan het begin van elke taak dat zij maximaal zes minuten de tijd hebben om elke taak te voltooien.Instructies die de startlocatie en de doelbestemming beschrijven, worden automatisch verstrekt. De tijdmeting start automatisch zodra de deelnemer de audio-instructie ontvangt en stopt wanneer zij de doellocatie bereiken. Op dat moment worden de uitkomstmaten automatisch geregistreerd, waaronder de succesvolle voltooiing van de navigatietaak en de benodigde tijd om het doel te bereiken.Om de prestaties van de deelnemer op de fysieke locatie te testen, legt u uit dat zij 10 vooraf bepaalde navigatietaken zullen krijgen. Dit gebeurt onder toezicht van een ervaren onderzoeker. Informeer de deelnemer dat zij maximaal zes minuten de tijd hebben om elke taak te voltooien en dat het is toegestaan om hun stok als mobiliteitshulpmiddel te gebruiken.Zorg dat een stopwatch, de lijst met navigatietaken en een klembord voor handmatige scoren klaarliggen. Markeer het startpunt voor de deelnemer en beschrijf de startlocatie en de doellocatie. De tijdmeting begint onmiddellijk zodra de proefpersoon de eerste stap zet en eindigt wanneer de bestemming is bereikt.Wanneer de deelnemer verbaal meldt dat deze de bestemming heeft bereikt, worden de succesvolle voltooiing van de taak en de tijd die nodig was om het doel te bereiken genoteerd. Leg aan de deelnemer uit dat deze vijf navigatietaken zal voltooien met als doel het gebouw te verlaten via de kortst mogelijke route. Informeer de deelnemer, onder supervisie van een ervaren onderzoeker, dat er maximaal zes minuten de tijd is voor het voltooien van elke navigatietaak en dat het gebruik van een stok voor mobiliteitsondersteuning is toegestaan.Er worden vijf vooraf bepaalde startlocaties gebruikt, zodat drie uitgangspaden van verschillende lengte en complexiteit mogelijk zijn. Zorg dat een stopwatch, de lijst met navigatietaken en een klembord voor handmatige scoren klaarliggen. Instrueer de deelnemer en beschrijf de startlocatie.De tijdmeting begint onmiddellijk zodra zij hun eerste stap zetten en eindigt wanneer de deelnemer verbaal meldt dat hij of zij bij een uitgangsdeur van het gebouw is aangekomen. De succesvolle voltooiing van de aflevertaak, de gevolgde route en de tijd die nodig is om het gebouw te verlaten, worden geregistreerd. Bovendien worden de routes zo gescoord dat de kortste route meer punten oplevert dan langere routes.De gemiddelde prestaties van drie deelnemers bij de navigatietaken worden hier gepresenteerd. Het percentage correcte antwoorden voor de virtuele en fysieke navigatietaken illustreert een hoog succesniveau bij beide taken. De tijd om naar het doel te navigeren was langer bij virtuele navigatie in vergelijking met de fysieke prestaties.Bij de taak om het gebouw te verlaten bleek dat deelnemers vaak de kortst mogelijke route kozen om het gebouw te verlaten. Dit wordt onderbouwd door de kortere gemiddelde tijd die nodig was om de uitgang te bereiken en te verlaten. De hier getoonde resultaten zijn afkomstig van één individuele deelnemer over alle drie de navigatietaken.Tijdens de virtuele navigatie duurde het 79 seconden om de taak te voltooien. De taak, zoals weergegeven door het geel gemarkeerde pad, nam 46 seconden in beslag op hetzelfde pad in het fysieke gebouw. In de drop-off taak.De deelnemer nam de kortste mogelijke route om het gebouw te verlaten. Vergeet niet dat het werken met blinde deelnemers die nieuwe technologie gebruiken, aanmoediging vereist. We zijn hen dankbaar voor hun tijd en bereidheid om deel te nemen aan deze demonstratie en studie.

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

JoVE Journal

Medicine

Geneeskunde

Het project op de Virtual Reality Intelligent Multi-sensor-systeem voor de behandeling van angst-gerelateerde stoornissen (Intrepid) is gericht op het ontwikkelen van een multi-sensor context-aware virtual reality-systeem voor de behandeling van angst-gerelateerde stoornissen.

Het gebruik van biofeedback in Clinical Virtual Reality: The INTREPID Project

Een uitdaging voor het bewijs van werkzaamheid van de behandeling van cognitieve stoornissen bij schizofrenie is het vinden van het optimaliseren van de meting van vaardigheden met betrekking tot het dagelijks functioneren. De Virtual Reality Functional Capacity Assessment Tool (VRFCAT) is een interactieve game gebaseerd geautomatiseerde maatregel gericht op vaardigheden in verband met het dagelijks functioneren, met inbegrip van basislijn stoornissen en de behandeling samenhangende...

Ontwikkeling van een Virtual Reality Evaluatie van het dagelijks leven vaardigheden

Kinderen die hebben complexe communicatiebehoeften kunnen profiteren van het gebruik van een speech genererende apparaat (SGD). Cognitieve vaardigheden werden geïdentificeerd als die van invloed zijn op het vermogen om te navigeren tussen de niveaus van SGDs. Dit protocol beschrijft de stappen die nodig zijn voor spraak-taal Pathologen aan cognitieve vaardigheden en navigatie-capaciteiten te beoordelen.

Praktische Methodologie van cognitieve taken binnen een navigatie Assessment

Dit document beschrijft een methode voor het uitvoeren van multi-user experimenten op besluitvorming en navigatie met behulp van een netwerkcomputer laboratorium.

Een genetwerkte bureaublad Virtual Reality Setup voor besluit wetenschap en navigatie experimenten met meerdere deelnemers

Hier gepresenteerd is een protocol om stereoacuity te verbeteren met behulp van gegamificeerde-leersoftware op basis van Random-dot stimuli. Patiënten zijn stereo-deficiënte proefpersonen zonder strabismus. Het protocol combineert optometrie Center bezoeken met thuis oefeningen met behulp van software. Compliance en stereoacuity evolutie worden opgeslagen in de Cloud.

Stereoacuity verbetering met behulp van Random-dot video games

Virtual reality (VR) is een krachtige maar onderbenutte aanpak om de diagnose en behandeling van neurologische aandoeningen te bevorderen. Het Cleveland Clinic Virtual Reality Shopping-platform combineert state-of-the-art VR-inhoud met een omnidirectionele loopband om instrumentele activiteiten van het dagelijks leven te kwantificeren - een voorgestelde prodromale marker van neurologische aandoeningen.

Het immersive Cleveland Clinic Virtual Reality Shopping Platform voor de beoordeling van instrumentele activiteiten van het dagelijks leven

Dit protocol is ontworpen om onderliggende leergerelateerde elektrofysiologische veranderingen te onderzoeken bij proefpersonen met diepe doofheid na een korte trainingsperiode in audio-tactiele sensorische substitutie door de gebeurtenisgerelateerde potentiële techniek toe te passen.

Beoordeling van audio-tactiele sensorische substitutietraining bij deelnemers met diepe doofheid met behulp van de gebeurtenisgerelateerde potentiële techniek

Hier presenteren we een nieuwe, korte en actieve ruimtelijke navigatietaak die zowel ruimtelijke navigatie als episodisch geheugenvermogen beoordeelt. Belangrijk is dat ruimtelijke navigatie en episodisch geheugen met elkaar werden geassocieerd, en deze taak toonde gevoeligheid voor lichaamsbeweging.

Beoordeling van menselijke ruimtelijke navigatie in een virtuele ruimte en de gevoeligheid ervan voor lichaamsbeweging

Motorische beelden in een virtual reality-omgeving hebben brede toepassingen in hersen-computerinterfacesystemen. Dit manuscript schetst het gebruik van gepersonaliseerde digitale avatars die lijken op de deelnemers die bewegingen uitvoeren die door de deelnemer zijn bedacht in een virtual reality-omgeving om de onderdompeling en het gevoel van lichaamseigendom te vergroten.

Prestaties op het gebied van motorische beelden door middel van belichaamde digitale tweelingen in een virtual reality-enabled hersen-computerinterface-omgeving

Het bepalen van donorcel innesteling vormt een uitdaging in de muis beenmerg transplantatie modellen die goed gedefinieerde fenotypische merkers missen. We beschreven een methode om mannelijke donor cel innesteling te kwantificeren in vrouwelijke transplantatie ontvangende muizen. Deze methode kan worden gebruikt in alle muizenstammen voor de studie van HSC functies.

Met behulp van kwantitatieve real-time PCR voor donorcel Engraftment bepalen in een concurrerende Murine beenmergtransplantatie Model

Verken een virtueel audio-gebaseerd spel om navigatievaardigheden bij blinden te verbeteren via AbES-software. Deze methode maakt veilige overdracht van ruimtelijk inzicht naar echte gebouwen mogelijk.

Ontwikkeling van een Audio-based Virtual Gaming Milieu om te helpen met Navigatie Vaardigheden in het Blind

Meer video's verkennen