Name: Entwicklung eines Audio-based Virtual Gaming Umwelt mit Navigation Skills in the Blind Assist (Video) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: Erfahren Sie, wie virtuelle Umgebungen mit Audio-Cues blinde Personen bei der Entwicklung von Navigationsfähigkeiten unterstützen. Diese Methode ermöglicht den sicheren Transfer erlernter Fähigkeiten in reale Gebäude.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Die Autoren bedanken sich bei Rabih Dow, Padma Rajagopal, Molly Connors und das Personal des Carroll Center for the Blind (Newton MA, USA) für ihre Unterstützung bei der Durchführung dieser Forschung danken. RO1 EY019924: Diese Arbeit wurde durch die NIH / NEI Zuschuss unterstützt.

Ein. Teilnehmer Demographie Dies ist eine laufende Studie, die blind männlichen und weiblichen Teilnehmern zwischen 18-45 Jahren rekrutiert. Alle Teilnehmer sind blind der frühe Beginn (dokumentiert vor dem Alter von 3) und von unterschiedlicher okuläre Ursachen. Keiner der Teilnehmer der Studie waren zuvor vertraut mit der räumlichen Anordnung des Ziels bauphysikalischen. 2. Vorbereitung und Einarbeitung in Abes <ol><li> Geben Sie die Teilnehmer mit einer Augenbinde und Kopfhörer während des Trainings-und Bewertungsprozess getragen werden. Sicherzustellen, dass die Augenbinde bequem über den Augen gelegt und die Kopfhörer korrekt orientiert und positioniert über den Ohren (dh linken Lautsprecher über linken Ohr). </li><li> Zug Teilnehmer, wie man zugeordneten Tasten und die Informationen der Audio-Signale in Abes vertreten verwenden. Mit Hilfe spezieller Tastenkombinationen (Abbildung 3), navigiert der Benutzer durch und untersucht dieAufbau praktisch (vorwärts, rechts oder links). Jede virtuelle Schritt annähert ein Schritt in die reale physische Gebäude. </li><li> Machen Sie sich mit Regeln und Prämisse des Spiels. </li><li> Machen Sie mit Audio-Signale spezifisch für Spiel (z. B. Sound der Lokalisierung Juwelen und Ton von Monstern in der Nähe). Wenn der Benutzer navigiert durch das Gebäude wird auditiv-basierte und kontextuellen räumliche Informationen sequenziell und erworben wird dynamisch aktualisiert. Räumliche und situationsbezogenen Informationen auf ikonischen und verräumlichten Sound Cues nach jedem Schritt bereitgestellt werden. Orientierung auf Kardinal Kompass Überschriften (zB &quot;Norden&quot; oder &quot;Osten&quot;) und Text durch Sprache (TTS) wird verwendet, um weitere Informationen über eines Benutzers aktuellen Standort, Ausrichtung und Position (zB &quot;Sie sind auf dem Flur im ersten bereitzustellen Basis Stock, Westlage &quot;) sowie die Identität von Objekten und Hindernissen in den Weg (zB&quot; Dies ist eine Tür &quot;). Entfernung Hinweise basieren o vorgesehenn modulierenden Schallintensität. Die räumliche Lokalisation der Klänge wird aktualisiert, um die Benutzer-egozentrischen Position entsprechen. Im Wesentlichen ist die Software, die entworfen, um eine geeignete Audiodatei als Funktion des Ortes und egozentrischen Position des Benutzers zu spielen und verfolgt die Position des Benutzers, wie sie durch die Umgebung bewegen. Zum Beispiel, wenn eine Tür an der Person rechten Seite angeordnet ist, wird das Klopfgeräusch im Benutzerprofil rechten Ohr gehört (dh die Software eine Audio-Datei eines Klopfgeräusch im rechten Kanal spielt). Wenn nun die Person dreht sich um 180 Grad, so dass die gleiche Tür jetzt auf der linken Seite befindet, wird die gleiche Klopfgeräusch jetzt in den linken Kanal (dh die Software spielt eine Audiodatei eines Klopfgeräusch im linken Kanal) gehört. Schließlich, wenn der Benutzer der Tür zugewandten, wird dieselbe Klopfgeräusch auf beiden Ohren zu hören gleichermaßen. Durch das Verfolgen des Benutzers egozentrischen Überschrift, kann die Software spielen die entsprechenden räumlichen lokalisierten Klänge, zu identifizierendie Anwesenheit und Lokalisierung von Objekten und behalten diese Änderungen als der Benutzer bewegt sich durch die virtuelle Umgebung. Siehe Abbildung 4. </li></ol> 3. Training und Spiel mit ABES (3 Sessions à 30 min für eine Summe von 1,5 hr) <ol><li> Lassen Sie für freies Spiel zu spielen und beachten Sie eventuelle Schwierigkeiten und Herausforderungen (dh die Verwendung von Tastenkombinationen, Audio Cues Bereichen schwierige Navigation). Positive Verstärkung und Klarstellungen sind am Ende jeder Trainingseinheit zur Verfügung gestellt. </li><li> Rekord-Spiel Performance (zB Rufnummer, Uhrzeit und Ort, an dem ein Teilnehmer findet ein Juwel). </li></ol> 4. Bewerten Virtuelle Navigation Aufgabenerfüllung <ol><li> Erklären Sie Teilnehmer die Details zu den Test und geben Anweisungen, wie die virtuellen Navigation Aufgaben zu erledigen. Der Teilnehmer wird komplett 10 vorgegebenen Navigation Aufgaben präsentiert nacheinander mit der ABES Software (dh, wenn die Teilnehmerpant erfolgreich die erste Aufgabe, wird der Computer automatisch neu suchen sie an den Ausgangspunkt der folgenden Aufgabe). </li><li> Informieren Sie die Teilnehmer, dass sie ein Maximum von 6 min, jedes Navigationssystem Aufgabe haben. </li><li> 10 virtuelle Navigationspfade vergleichbarer Schwierigkeiten (dh Strecke und Anzahl der Umdrehungen) werden basierend auf vorbestimmten Paarungen von 10 Start ausgewählt und zu stoppen Standorten (dh Zimmer). Insbesondere lag der Bereich der erforderlichen Schritte, um das Ziel Route navigieren zwischen 25-35 Schritte (in der virtuellen Umgebung) und integriert zwischen 3-4 Umdrehungen von 90 Grad. </li><li> Legen Sie die 10 Navigation Paare in Abes zur automatisierten Darstellung und Datenerfassung der Leistung. </li><li> Zielparameter werden automatisch aufgezeichnet mit Abes internen Software. Outcome Maßnahmen umfassen: erfolgreicher Abschluss des Navigationssystems Aufgabe und Zeit, um Ziel zu erreichen. Siehe Abbildung 5A. </li><li> Instructions describing den Startort und den Zielort automatisch durch die Software ABES zu Beginn jeder Task vorgesehen ist. Zeitablauf gestartet, sobald der Gegenstand nimmt ihre erste virtuelle Schritt von dem Startort und endet, wenn der Ankunft am Zielort (sofern Zeit dauert länger als 6 Minuten, für die der Lauf als unvollständig und der nächste Pfad wird vorgestellt fällt). Die erfassten Daten werden automatisch in einer Textdatei geschickt und öffnete anschließend in der Datenbank / Statistik-Software zur weiteren Analyse. </li></ol> 5. Bewerten Physical Navigation Aufgabenerfüllung <ol><li> Erklären Sie Teilnehmer die Details zu den Test und geben Anweisungen, wie die physikalischen Navigation Aufgaben zu erledigen. Der Teilnehmer wird komplett 10 vorgegebenen Navigation Aufgaben (vorgestellt in verschlüsselter um aus der vorherigen virtuellen Leistungsbeurteilung) und unter der Aufsicht eines erfahrenen Untersucher. </li><li> Informieren Sie die Teilnehmer sie eine maxi haben wirdMutter von 6 min zu vervollständigen jedes Navigationssystem Aufgabe. Für die Zwecke der physischen Navigation Aufgabe wird die Teilnehmer dürfen ihre weißen Stock zur Unterstützung der Mobilität zu nutzen. </li><li> 10 physischen Navigationspfade werden basierend auf vorbestimmten Paarungen von 10 Start-und Stop Standorte (dh Räume) vergleichbarer Schwierigkeiten (dh Wegstrecke für die Anzahl der Umdrehungen) übernommen. </li><li> Investigator bereitet Stoppuhr und Klemmbrett mit einer Liste der Navigation Aufgaben für manuelle Auswertung der Leistung. </li><li> Zielparameter werden manuell durch den Prüfarzt aufgezeichnet. Outcome Maßnahmen umfassen: erfolgreicher Abschluss des Navigationssystems Aufgabe und Zeit, um Ziel zu erreichen. </li><li> &quot;Square-off&quot; der Teilnehmer (dh Position der Teilnehmer mit der Tür der Startposition hinter ihnen). Instruktionen zur Beschreibung der Startort und der Zielort durch den Untersucher zu Beginn jeder Task vorgesehen ist. Zeitablauf beginnt, sobald das Thema takn ihren ersten physischen Stufe von dem Startort und endet, wenn der Teilnehmer verbal meldet der Ankunft am Zielort (sofern Zeit dauert länger als 6 Minuten, für die der Lauf als unvollständiger und der nächste Pfad wird vorgestellt fällt). Die erfassten Daten manuell erfasst und anschließend Datenbank / Statistik-Software zur weiteren Analyse übertragen. Siehe Abbildung 5B. </li></ol> 6. Bewerten Physical Drop off Aufgabenerfüllung <ol><li> Erklären Sie Teilnehmer die Details zu den Test und geben Anweisungen, wie die physische drop off Navigation Aufgaben zu erledigen. Die Teilnehmer werden 5 Navigation Aufgaben mit den Zielen der aus dem Gebäude auf dem kürzesten Weg möglich und unter der Aufsicht eines erfahrenen Untersucher abzuschließen. </li><li> Informieren Sie die Teilnehmer, dass sie ein Maximum von 6 min, jedes Navigationssystem Aufgabe haben. Für die Zwecke der physischen drop off Navigation Aufgabe, wird der Teilnehmer zugelassenihre weißen Stock zur Unterstützung der Mobilität zu nutzen. </li><li> 5 vorgegebenen physikalischen Startpunkte verwendet werden, so dass 3 Ausfahrt unterschiedlich lange Wege möglich sind. </li><li> Investigator bereitet Stoppuhr und Klemmbrett mit einer Liste der Navigation Aufgaben für manuelle Auswertung der Leistung. </li><li> Zielparameter werden manuell durch den Prüfarzt aufgezeichnet. Outcome Maßnahmen umfassen: erfolgreicher Abschluss des Navigationssystems Aufgabe und Zeit, um Ziel zu erreichen. Darüber hinaus werden Wege erzielt, so dass der kürzeste Weg genommen maximale Punktzahl (dh 3 für kürzeste Weg, 2 für den zweiten, 1 für die längste und 0 für nicht in der Lage, die Aufgabe abzuschließen) gegeben ist. Siehe Abbildung 5C. </li><li> &quot;Square-off&quot; der Teilnehmer an der ersten Startposition. Instruktionen zur Beschreibung der Startposition durch den Untersucher zu Beginn jeder Task vorgesehen ist. Zeitablauf beginnt, sobald das Thema nimmt ihre ersten physikalischen Schritt vom Startort und endetwenn der Teilnehmer mündlich berichtet ankommen zu einer Ausfahrt Tür des Gebäudes (es sei denn Zeit dauert länger als 6 min, für den die run als unvollständig erzielt wurde und der nächste Start Ort dargestellt). Die erfassten Daten manuell erfasst und anschließend Datenbank / Statistik-Software zur weiteren Analyse übertragen. </li></ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

Die Autoren erklären, keine Interessenkonflikte.

Wir beschreiben eine interaktive audio-basierten virtuellen Umgebung Simulator entwickelt, um allgemeine räumliche Wahrnehmung und Navigation Fähigkeiten der Blinden zu verbessern. Wir zeigen, dass die Interaktion mit Abes liefert genaue Hinweise, dass die räumlichen Beziehungen zwischen Objekten und das gesamte Layout der Zielumgebung zu beschreiben. Blinde Benutzer generieren können genaue räumliche kognitiven Landkarten auf dieser auditiven Informationen und durch die Interaktion mit dem immersiven virtuellen Umgebun...

Finding ein Weg in einer fremden Umgebung stellt sich als eine große Herausforderung für Blinde. Navigieren erfolgreich erfordert ein Verständnis der räumlichen Beziehungen, die zwischen sich selbst und Objekte in der Umgebung 1,2 existieren. Die mentale Repräsentation, die umgebenden Raum beschreibt, ist als einer räumlichen kognitiven Karte 3 bezeichnet. Blinde können relevante räumliche Informationen über ihre Umgebung durch andere sensorische Kanäle (wie Hören) Ermöglichen für die Erzeugung einer genauen räumlichen kognitive Karte zum Zweck der realen Welt Navigationsaufgaben 4,5 sammeln. Großes Interesse hat über die erzieherische Potential von virtuellen Umgebungen und Handeln Videospiele als ein Mittel, um zu lernen und zu beherrschen Fertigkeiten 6-9 entstanden. Tatsächlich haben viele Strategien und Ansätze für Blinde zu diesem Zweck (siehe 4,10-12) entwickelt worden. Wir haben Audi entwickelto-based Environment Simulator (ABES), ein User-Centered audio-basierte virtuelle Umgebung, die für simulierte Navigation und Exploration von einem vorhandenen physischen Gebäudes ermöglicht. Zeichnung aus ursprünglichen architektonischen Grundrisse, eine virtuelle Darstellung eines modernen zweistöckigen Gebäude (an der Carroll Center for the Blind, Newton, MA) wurde mit dem ABES Software (1A und B) erzeugt. ABES enthält ein Action-Spiel Metapher mit einer Prämisse entworfen, um vollen Erforschung der Bauraum zu fördern. Mit einfachen Tastenkombinationen und verräumlichten Sound Cues, navigieren Nutzer und erkunden Sie das gesamte Gebäude um eine maximale Anzahl von Edelsteinen in verschiedenen Räumen versteckt zu sammeln. Benutzer müssen vermeiden, Roving Monstern, die sie mitnehmen und sich verstecken sie anderswo im Gebäude (1C). Wir zeigen, dass die Interaktion mit Abes ermöglicht eine blinde Benutzer, um eine genaue räumliche kognitive Karte eines Ziels Gebäude auf auditive Informationen einer generierencquired im Rahmen eines Actionspiels Metapher. Dies wird durch eine Reihe von Post-Trainings Verhaltensleistung Tests entwickelt, um die Übertragung der erworbenen räumliche Informationen aus einer virtuellen Umgebung zu einem realen und großen Indoor-Navigation Aufgabe (siehe Abbildung 2 für die gesamte Studiendesign) Beurteilung bestätigt. Unsere Ergebnisse zeigen, dass blinde Benutzer in der Lage, erfolgreich in einem Gebäude, für die sie bisher unbekannten navigieren sind, trotz der Tatsache, dass zu keinem Zeitpunkt waren sie informiert der allgemeine Zweck der Studie, noch waren sie angewiesen, die räumliche Anordnung des Rückrufs Aufbau während des Spiels.

<table border="1"><tbody><tr><td> Name der Einrichtung </td><th > Kommentare </td></tr><tr><td> Laptop-Computer </td><td > Laptop verwendet ausschließlich für Schulungsteilnehmer und Sammeln von Daten </td></tr><tr><td> Stereo Kopfhörer (voll gekapselt ohrumschließend Design) </td><td > Getragen von allen Teilnehmern während der Ausbildung </td></tr><tr><td> Augenbinde </td><td > Getragen von allen Teilnehmern während der Ausbildung und Prüfung </td></tr></tbody></table>

entwicklung eines audio-based virtual gaming umwelt mit navigation skills in the blind assist

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

Audio-based Environment Simulator (ABES) ist virtuelle Umgebung Software entwickelt, um realen Welt Navigation Fähigkeiten im toten verbessern. Verwendung nur Tonbasisrichtung Signale und Satzes im Kontext eines Videospiels Metapher sammeln Benutzer relevante räumliche Informationen bezüglich eines Gebäudes u.dgl. Dies ermöglicht dem Benutzer, um eine genaue räumliche kognitiven Karte eines großen dreidimensionalen Raum, die für die Zwecke einer Echtzeit Indoor-Navigation Aufgabe manipuliert werden kann entwickeln. Nachdem ein Spiel spielen, werden die Teilnehmer dann auf ihre Fähigkeit, innerhalb des Ziels bauphysikalischen im Spiel dargestellt navigieren beurteilt. Vorläufige Ergebnisse legen nahe, dass eine frühzeitige blinde Benutzer in der Lage, relevante Informationen bezüglich der räumlichen Anordnung eines zuvor unbekannten Gebäude wie durch ihre Leistung an einer Serie von Navigationsaufgaben indexiert gewinnen konnten. Diese Aufgaben enthalten Wegfindung durch die virtuelle und physische Gebäude, sowie eine Reihe von Drop-off Aufgaben. Wir finden, dass die immersiveund hoch interaktive Natur des ABES Software erscheint stark Eingriff mit dem blinden Benutzer aktiv die virtuelle Umgebung. Anwendungen dieses Ansatzes können zu größeren Populationen von sehbehinderten Menschen zu verlängern.

Die Ergebnisse von drei frühen blinden Teilnehmer (im Alter zwischen 19 und 22 Jahre) gezeigt werden (siehe Tabelle 1 für Teilnehmer Eigenschaften). Zusammenfassend zeigten alle drei Teilnehmer ein hohes Maß an Erfolg auf allen drei Navigations-Aufgaben nach Spiel mit der ABES Software. Dies wurde durch die Leistungswerte (Gruppe Mittelwert und individuell) an allen drei Verhaltensstörungen Aufgaben (siehe Abbildung 6) bestätigt. Der Prozentsatz korrekte Leistung für die virtuelle (Mitt...

Audio-based Environment Simulator (ABES) ist virtuelle Umgebung Software entwickelt, um realen Welt Navigation Fähigkeiten im toten verbessern.

Entwicklung eines Audio-based Virtual Gaming Umwelt mit Navigation Skills in the Blind Assist

Audio-based Environment Simulator (AbES) is virtual environment software designed to improve real world navigation skills in the blind. Using only audio ...

Das übergeordnete Ziel des folgenden Experiments besteht darin, zu zeigen, dass die Interaktion mit einer virtuellen Umgebung die Übertragung räumlicher Navigationsfähigkeiten ermöglicht, die anschließend in der tatsächlichen physischen Umgebung überprüft werden können. Dies wird erreicht, indem zunächst die Tastenkombinationen erlernt werden, die während des Spielens zur Navigation in der virtuellen Umgebung verwendet werden. Danach lernen die Teilnehmer, Geräusche zu identifizieren, die es ermöglichen, Objekte und deren relative Position zu erkennen.Nach dem Spielen werden eine Reihe virtueller und physischer Navigationsaufgaben präsentiert, um das räumliche Verständnis der Umgebung zu bewerten. Es werden Ergebnisse erzielt, die zeigen, dass die Teilnehmer in der Lage sind, durch ein reales physisches Gebäude zu navigieren, das während des Spielens durch die virtuelle Umgebung repräsentiert wurde. Der Hauptvorteil dieser Technik gegenüber bestehenden Methoden, wie beispielsweise der standardmäßigen Orientierungs- und Mobilitätsausbildung, liegt darin, dass der räumliche Grundriss eines unbekannten Gebäudes durch eine virtuelle Erkundung auf sichere und kontrollierte Weise erlernt werden kann.Den Ablauf dieses Verfahrens werden Aaron Connors und Lindsey Aino demonstrieren, beide Studienkoordinatoren in meinem Labor. Die Teilnehmer an dieser Studie sind gesetzlich blind und besitzen keinerlei Vorkenntnisse über die räumliche Anordnung des zu erlernenden Zielgebäudes, noch sind sie sich des übergeordneten Zwecks des Spiels im Hinblick auf das Erlernen der räumlichen Struktur des Zielgebäudes bewusst. Zu Beginn wird dem Teilnehmer eine Augenbinde und Kopfhörer bereitgestellt.Stellen Sie sicher, dass die Kopfhörer korrekt über den Ohren sitzen. Weisen Sie anschließend den Teilnehmer an, wie die zugewiesenen Tasten sowie die durch die Audiosignale in der auf Audio basierenden Umgebung präsentierten Informationen zu verwenden sind. Simulator. Wie hier gezeigt, werden bestimmte Tastenkombinationen verwendet, um sich durch die virtuelle Umgebung zu bewegen und sie zu erkunden.Jeder virtuelle Schritt entspricht einem Schritt beim tatsächlichen physischen Bau. Nachdem Sie die Steuerung erklärt haben, erläutern Sie die Grundidee und die Regeln des Spiels. Weisen Sie den Teilnehmer auf die verschiedenen während des Spielablaufs verwendeten Audiocues hin.Beispielsweise werden beim Durchlaufen des Gebäudes die Geräusche zur Lokalisierung von Juwelen und von in der Nähe befindlichen Monstern wahrnehmbar, wobei auditorische und räumliche Informationen schrittweise erfasst und nach jedem Schritt in der virtuellen Umgebung dynamisch aktualisiert werden. Eine Sprachausgabe wird verwendet, um zusätzliche Informationen über den aktuellen Standort, die Orientierung und die Blickrichtung des Nutzers sowie über die Identität von Objekten und Hindernissen auf seinem Weg bereitzustellen. Die räumliche Lokalisation der Geräusche wird aktualisiert, um sie an die egozentrische Blickrichtung des Nutzers anzupassen.Wenn sich beispielsweise eine Tür auf der rechten Seite der Person befindet, ist das Klopfgeräusch im rechten Ohr des Nutzers zu hören. Dreht sich die Person nun um 180 Grad, sodass sich dieselbe Tür auf ihrer linken Seite befindet, ist dasselbe Klopfgeräusch nun im linken Kanal zu hören. Lassen Sie den Teilnehmer das Spiel drei Mal für jeweils 30 Minuten spielen.Notieren Sie alle Schwierigkeiten oder Herausforderungen, die während des Spielens auftreten. Nach jeder Trainingssitzung geben Sie positive Rückmeldungen sowie Klarstellungen oder zusätzliche Anweisungen. Später bewerten Sie die Leistung beim Spielen, indem Sie die Anzahl, die Zeit und den Ort erfassen, an dem ein Teilnehmer ein Juul findet. Um die Leistung in der virtuellen Navigationsaufgabe zu testen, erklären Sie dem Teilnehmer, dass er 10 vorgegebene Navigationsaufgaben absolvieren wird, die nacheinander von der Abes-Software präsentiert werden.Die Strecken weisen eine vergleichbare Schwierigkeit auf und werden basierend auf vorbestimmten Paarungen von 10 Start- und Zielorten ausgewählt. Weisen Sie den Teilnehmer darauf hin, dass er für die Bearbeitung jeder Aufgabe zu Beginn der jeweiligen Aufgabe maximal sechs Minuten Zeit hat.Es werden automatisch Anweisungen zur Startposition und zum Zielort bereitgestellt. Die Zeitmessung beginnt automatisch, sobald der Teilnehmer die akustische Anweisung erhält, und endet, sobald er am Zielort angekommen ist. Sobald sie am Zielort eintreffen, werden die Ergebnisparameter automatisch erfasst und umfassen den erfolgreichen Abschluss der Navigationsaufgabe sowie die benötigte Zeit, um das Ziel zu erreichen.Um die Leistung des Teilnehmers am physischen Ort zu testen, erklären Sie, dass er 10 vorbestimmte Navigationsaufgaben erhalten wird. Unter Aufsicht eines erfahrenen Untersuchers. Informieren Sie den Teilnehmer darüber, dass er für jede Aufgabe maximal sechs Minuten Zeit hat und dass er seinen Stock zur Mobilitätsunterstützung benutzen darf.Halten Sie eine Stoppuhr, die Liste der Navigationsaufgaben und einen Klemmblock für die manuelle Bewertung bereit. Positionieren Sie den Teilnehmer und beschreiben Sie den Startort und das Ziel. Die Zeitnahme beginnt unmittelbar mit dem ersten Schritt des Probanden und endet dort.Wenn der Teilnehmer mündlich berichtet, dass er das Ziel erreicht hat, werden die erfolgreiche Durchführung einer Aufgabe und die benötigte Zeit bis zum Erreichen des Ziels dokumentiert. Erklären Sie dem Teilnehmer, dass er fünf Orientierungsaufgaben bewältigen wird, wobei das Ziel darin besteht, das Gebäude über den kürzestmöglichen Weg zu verlassen. Unter Aufsicht eines erfahrenen Untersuchers weisen Sie den Teilnehmer darauf hin, dass er für jede Orientierungsaufgabe maximal sechs Minuten zur Verfügung hat und seinen Blindenstock zur Mobilitätshilfe nutzen darf.Fünf vorbestimmte Startpositionen werden verwendet, sodass drei Ausgangspfade unterschiedlicher Länge und Komplexität möglich sind. Halten Sie eine Stoppuhr, die Liste der Navigationsaufgaben und einen Klemmblock für die manuelle Bewertung bereit. Positionieren Sie den Teilnehmer im Quadrat und beschreiben Sie die Startposition.Die Zeitmessung beginnt unmittelbar mit dem ersten Schritt und endet, wenn die Versuchsperson mündlich meldet, eine Ausgangstür des Gebäudes erreicht zu haben. Die erfolgreiche Durchführung der Ablagetask, der eingeschlagene Weg und die zum Verlassen des Gebäudes benötigte Zeit werden aufgezeichnet. Darüber hinaus werden die Wege bewertet, sodass der kürzeste Weg mehr Punkte erhält als längere Wege.Die durchschnittliche Leistung von drei Teilnehmern bei den Navigationsaufgaben wird hier dargestellt. Der Prozentsatz korrekter Antworten bei den virtuellen und physischen Navigationsaufgaben zeigt ein hohes Maß an Erfolg bei beiden Aufgaben. Die Zeit, um zum Ziel zu navigieren, war bei der virtuellen Navigation im Vergleich zur physischen Durchführung länger.Bei der „Drop-off“-Aufgabe deutet darauf hin, dass die Teilnehmer häufig die kürzestmögliche Route wählten, um das Gebäude zu verlassen. Dies zeigt sich in der kürzeren durchschnittlichen Zeit, die benötigt wurde, um das Ziel zu erreichen und das Gebäude zu verlassen. Die hier gezeigten Ergebnisse stammen von einem einzelnen Teilnehmer bei allen drei Navigationsaufgaben.Während der virtuellen Navigation dauerte die Durchführung 79 Sekunden. Die Aufgabe, wie sie durch den gelb markierten Pfad dargestellt wird, dauerte in dem physischen Gebäude auf dem gleichen Pfad 46 Sekunden. Bei der Ablieferungsaufgabe.Der Teilnehmer wählte den kürzestmöglichen Weg, um das Gebäude zu verlassen. Vergessen Sie nicht, dass die Arbeit mit blinden Teilnehmern, die neue Technologien verwenden, Ermutigung erfordert. Wir sind dankbar für ihre Zeit und Bereitschaft, an dieser Demonstration und Studie teilzunehmen.

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

Forschung

JoVE Journal

Medicine

Medizin

Das Project on Virtual Reality Intelligent Multi-Sensor-System für die Behandlung von Angst-Erkrankungen (Intrepid) ist auf die Entwicklung eines Multi-Sensor-kontextsensitive Virtual-Reality-System für die Behandlung von Angst-Erkrankungen ausgerichtet.

Der Einsatz von Biofeedback in der klinischen Virtual Reality: Die INTREPID Projekt

Eine Herausforderung für den Nachweis für die Wirksamkeit der Behandlung kognitiver Störungen bei Schizophrenie ist das Finden der Optimierung der Messung von Fähigkeiten, um alltägliche Funktionieren zusammen. Die Virtual-Reality-Functional Capacity Assessment Tool (VRFCAT) ist ein EDV-basierte interaktive Spiele Maßnahme Fähigkeiten mit alltäglichen Funktionieren verbunden sind, einschließlich Basiswertminderungen und behandlungsbedingte Veränderungen ausgerichtet.

Entwicklung eines Virtual-Reality-Bewertung der Alltag Fähigkeiten

Kinder, die komplexe Kommunikationsbedarf haben, können von der Verwendung einer Spracherzeugungseinrichtung (SGD) profitieren. Kognitive Fähigkeiten wurden, die Auswirkungen auf die Fähigkeit, zwischen den Ebenen der SGDs Ebene identifiziert. Dieses Protokoll beschreibt die Schritte zum Logopäden notwendig, um die kognitiven Fähigkeiten und Navigationsfähigkeiten zu beurteilen.

Praktische Methodologie der kognitiven Aufgaben innerhalb eines Navigations Bewertung

Dieses Papier beschreibt eine Methode für die Durchführung von Multi-User-Experimente an Entscheidungs- und Navigation mit einem vernetzten Computerlabor.

Ein vernetzten Desktop-Virtual-Reality-Setup für Entscheidung Wissenschaft und Navigation Experimente mit mehreren Teilnehmern

Präsentiert hier ist ein Protokoll zur Verbesserung der Stereoakuität mit gamified Perceptual Learning-Software auf der Grundlage von Zufällig-Punkt-Reizen. Die Patienten sind Stereo-Mangel-Patienten ohne Strabismus. Das Protokoll kombiniert Optometrie-Center-Besuche mit Hausübungen mit Software. Compliance und Stereoakuitätsentwicklung werden in der Cloud gespeichert.

Stereoakuitätsverbesserung mit Random-Dot Video Spielen

Virtual Reality (VR) ist ein leistungsstarker, aber wenig genutzter Ansatz, um die Diagnose und Behandlung neurologischer Erkrankungen voranzutreiben. Die Cleveland Clinic Virtual Reality Shopping-Plattform kombiniert hochmoderne VR-Inhalte mit einem omnidirektionalen Laufband, um instrumentelle Aktivitäten des täglichen Lebens zu quantifizieren - ein vorgeschlagener Prodromalmarker für neurologische Erkrankungen.

Die immersive Cleveland Clinic Virtual Reality Shopping Plattform für die Bewertung von instrumentellen Aktivitäten des täglichen Lebens

Dieses Protokoll wurde entwickelt, um die zugrunde liegenden lernbezogenen elektrophysiologischen Veränderungen bei Probanden mit hochgradiger Taubheit nach einer kurzen Trainingszeit in audiotaktiler sensorischer Substitution unter Anwendung der ereignisbezogenen Potentialtechnik zu untersuchen.

Bewertung des audiotaktilen sensorischen Substitutionstrainings bei Teilnehmern mit hochgradiger Taubheit unter Verwendung der ereignisbezogenen Potenzialtechnik

Hier stellen wir eine neuartige, kurze und aktive räumliche Navigationsaufgabe vor, die sowohl die räumliche Navigation als auch die episodische Gedächtnisleistung bewertet. Wichtig ist, dass räumliche Navigation und episodisches Gedächtnis miteinander verbunden waren, und diese Aufgabe zeigte die Sensibilität für Bewegung.

Bewertung der menschlichen räumlichen Navigation im virtuellen Raum und ihrer Empfindlichkeit gegenüber Bewegung

Motorische Bilder in einer Virtual-Reality-Umgebung haben breite Anwendungen in Gehirn-Computer-Schnittstellensystemen. Dieses Manuskript beschreibt die Verwendung personalisierter digitaler Avatare, die den Teilnehmern ähneln, die Bewegungen ausführen, die sich der Teilnehmer in einer Virtual-Reality-Umgebung vorstellt, um die Immersion und das Gefühl der Körperverantwortung zu verbessern.

Leistung der motorischen Bildgebung durch verkörperte digitale Zwillinge in einer Virtual-Reality-fähigen Gehirn-Computer-Schnittstellenumgebung

Bestimmung Donorzelle Transplantation stellt eine Herausforderung in der Maus Knochenmarktransplantation Modelle, die gut definierte phänotypische Marker fehlen. Wir beschrieben eine Methode zur männlichen Spenders Engraftment bei weiblichen Transplantatempfängers Mäusen zu quantifizieren. Dieses Verfahren kann in allen Mausstämmen zur Untersuchung von HSC-Funktionen verwendet werden.

Mittels quantitativer real-time PCR zum Donor Cell Engraftment in einem Competitive Murine Bone Marrow Transplantation Modell fest

Erfahren Sie, wie virtuelle Umgebungen mit Audio-Cues blinde Personen bei der Entwicklung von Navigationsfähigkeiten unterstützen. Diese Methode ermöglicht den sicheren Transfer erlernter Fähigkeiten in reale Gebäude.

Entwicklung eines Audio-based Virtual Gaming Umwelt mit Navigation Skills in the Blind Assist

Weitere Videos entdecken