Name: Sviluppo di un audio-based ambiente di gioco virtuale per assistere con doti di navigazione in the Blind (Video) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: Scopri come l'ambiente virtuale audio AbES insegna abilità di navigazione spaziale a persone non vedenti. Questo metodo facilita il trasferimento delle competenze apprese al mondo reale in modo sicuro.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Gli autori desiderano ringraziare Rabih Dow, Padma Rajagopal, Molly Connors e il personale del Centro di Carroll per i Ciechi (Newton MA, USA) per il supporto nella realizzazione di questa ricerca. Questo lavoro è stato supportato dal NIH / NEI sovvenzione: RO1 EY019924.

1. Partecipanti Popolazione Si tratta di un continuo studio che recluta ciechi partecipanti uomini e donne di età compresa tra 18-45 anni. Tutti i partecipanti sono legalmente cieco di esordio precoce (documentato prima dell&#39;età di 3) e di varie eziologie oculari. Nessuno dei partecipanti allo studio erano precedentemente familiarità con la disposizione spaziale dell&#39;edificio bersaglio fisico. 2. Preparazione e familiarizzazione con Abes <ol><li> Fornire il partecipante con gli occhi bendati e le cuffie da indossare tutto il processo di formazione e di valutazione. Assicurarsi che la benda è comodamente posizionato sopra gli occhi e le cuffie siano correttamente orientati e posizionati sopra le orecchie (cioè altoparlanti sinistro sopra l&#39;orecchio sinistro). </li><li> Partecipante treno come utilizzare i tasti assegnati e le informazioni rappresentate dai segnali audio in Abes. Utilizzo di specifiche combinazioni di tasti (figura 3), un utente tramite e esplora ilcostruire virtualmente (muovendosi in avanti, a destra oa sinistra). Ogni passo virtuale si avvicina di un passo nella struttura fisica reale. </li><li> Familiarizzare con le norme e premessa del gioco. </li><li> Familiarizzare con segnali audio specifici per il gioco (ad esempio, il suono di gioielli localizzazione e suono di mostri nelle vicinanze). Mentre l&#39;utente naviga attraverso l&#39;edificio, uditivo-based e contestuale informazione spaziale viene acquisita in sequenza e viene aggiornato dinamicamente. Informazione spaziale e situazionale si basa su segnali audio spazializzato iconici e forniti dopo ogni passo compiuto. Orientamento si basa su voci bussola cardinali (ad esempio, &quot;del nord&quot; o &quot;est&quot;) e il testo attraverso speech (TTS) è usato per fornire ulteriori informazioni sulla posizione corrente di un utente, l&#39;orientamento e la direzione (ad esempio &quot;si è nel corridoio al primo piano, esposto ad ovest &quot;), così come l&#39;identità di oggetti e ostacoli nel loro percorso (ad esempio,&quot; si tratta di una porta &quot;). Distanza spunti sono forniti sulla base on intensità del suono modulante. La localizzazione spaziale dei suoni viene aggiornata in modo che corrisponda egocentrica voce dell&#39;utente. Essenzialmente, il software è progettato per riprodurre un file audio appropriato in funzione della posizione e egocentrica voce dell&#39;utente e registra la posizione dell&#39;utente mentre si muovono attraverso l&#39;ambiente. Ad esempio, se una porta si trova sul lato destro della persona, il suono è sentito bussare all&#39;orecchio destro dell&#39;utente (cioè il software svolge un file audio di un suono bussare nel canale destro). Se la persona si rivolge ora intorno a 180 gradi in modo che la porta stessa si trova ora sul lato sinistro, lo stesso suono bussare è ora ascoltato nel canale sinistro (cioè il software svolge un file audio di un suono bussare nel canale sinistro). Infine, se l&#39;utente si trova di fronte alla porta, lo stesso suono bussare si sente allo stesso modo in entrambe le orecchie. Per tenere traccia di voce egocentrico dell&#39;utente, il software in grado di riprodurre i suoni appropriati spaziali localizzate che identificanola presenza e la posizione di oggetti e tenere traccia di questi cambiamenti come l&#39;utente si muove attraverso l&#39;ambiente virtuale. Vedere la Figura 4. </li></ol> 3. Formazione e Gioco con Abes (3 sessioni ciascuna della durata 30 minuti per un totale di 1,5 ore) <ol><li> Consentire gioco libero gioco e prendete nota di eventuali difficoltà e le sfide (cioè l&#39;uso di combinazioni di tasti, segnali audio, le aree di navigazione difficile). Il rinforzo positivo e chiarimenti sono disponibili alla fine di ogni sessione di allenamento. </li><li> Gioco Prestazioni da record (ad esempio, numero, tempo e luogo in cui un partecipante si trova un gioiello). </li></ol> 4. Valutare virtuale prestazioni dell&#39;attività di navigazione <ol><li> Spiegate ai partecipanti i dettagli della prova e di fornire istruzioni su come completare le attività di navigazione virtuale. Il partecipante completerà 10 attività di navigazione prestabiliti presentati in sequenza utilizzando il software Abes (vale a dire una volta che la partecipazionepant completa con successo il primo compito, il computer verrà automaticamente ri-localizzare il punto di partenza del lavoro che segue). </li><li> Informare il partecipante che avrà un massimo di 6 minuti per completare ogni attività di navigazione. </li><li> 10 percorsi di navigazione virtuale di difficoltà comparabili (cioè la distanza percorsa e il numero di giri) sono scelti sulla base di accoppiamenti predeterminati di 10 posizioni di inizio e fine (ad esempio le camere). Specificamente, la gamma delle fasi necessarie per navigare sulla rotta bersaglio variava tra 25-35 passi (in ambiente virtuale) e incorporati tra 3-4 giri di 90 gradi. </li><li> Caricare le 10 coppie di navigazione in Abes per la presentazione automatica e raccolta dati delle prestazioni. </li><li> Le misure di outcome sono registrati automaticamente utilizzando il software interno Abes &#39;. Le misure di outcome sono: il completamento del compito di navigazione e tempo impiegato per raggiungere l&#39;obiettivo. Vedere Figura 5A. </li><li> Istruzioni describing la posizione di partenza e la destinazione vengono fornite automaticamente dal software Abes all&#39;inizio di ogni attività. La temporizzazione inizia immediatamente una volta che il soggetto prende il loro primo passo virtuale dal punto di partenza e termina una volta arrivati ​​nel percorso di destinazione (a meno che ora richiede più tempo di 6 minuti, per il quale è segnato il percorso in quanto incompleta e il percorso successivo è presentato). I dati acquisiti vengono automaticamente inviati a un file di testo e aperte successivamente nel database / software statistico per ulteriori analisi. </li></ol> 5. Valutare fisica prestazioni dell&#39;attività di navigazione <ol><li> Spiegate ai partecipanti i dettagli della prova e di fornire istruzioni su come completare le attività di navigazione fisici. Il partecipante completerà 10 attività di navigazione predeterminati (presentati in ordine strapazzate dalla valutazione precedente prestazione virtuale) e sotto la supervisione di un esperto investigatore. </li><li> Informare il partecipante avranno un maximassima di 6 minuti per completare ogni attività di navigazione. Ai fini dell&#39;attività fisica di navigazione, il partecipante è permesso di usare il loro bastone bianco per il supporto alla mobilità. </li><li> 10 percorsi di navigazione fisici sono scelti sulla base di accoppiamenti predeterminati di 10 posizioni iniziale e di arresto (ad esempio camere) di difficoltà paragonabile (cioè la distanza percorsa e il numero di giri). </li><li> Investigator prepara cronometro e appunti con l&#39;elenco delle attività di navigazione per il punteggio manuale delle prestazioni. </li><li> Le misure di outcome sono registrati manualmente dallo sperimentatore. Le misure di outcome sono: il completamento del compito di navigazione e tempo impiegato per raggiungere l&#39;obiettivo. </li><li> &quot;Square-off&quot; del partecipante (ovvero la posizione del partecipante con la porta del luogo di partenza dietro di loro). Istruzioni descrivono la posizione di partenza e la destinazione sono forniti dal ricercatore all&#39;inizio di ogni attività. La temporizzazione inizia immediatamente una volta che il soggetto Takes il loro primo passo fisico dal punto di partenza e termina quando il partecipante riporta verbalmente arrivare a destinazione (a meno che ora richiede più tempo di 6 minuti, per il quale è segnato il percorso come incompleta e il percorso successivo è presentato). I dati acquisiti vengono registrati manualmente e successivamente trasferiti al database / software statistico per ulteriori analisi. Vedere Figura 5B. </li></ol> 6. Valutare Goccia fisica off performance Task <ol><li> Spiegate ai partecipanti i dettagli della prova e di fornire istruzioni su come completare il calo fisico off compiti di navigazione. Il partecipante sarà completare 5 compiti di navigazione con gli obiettivi in ​​uscita dell&#39;edificio utilizzando il percorso più breve possibile e sotto la supervisione di un investigatore esperto. </li><li> Informare il partecipante che avrà un massimo di 6 minuti per completare ogni attività di navigazione. Ai fini del calo fisico fuori tema di navigazione, il partecipante è consentitodi usare il loro bastone bianco per il supporto alla mobilità. </li><li> 5 predeterminate posizioni fisiche iniziali vengono utilizzati in modo tale che tre percorsi di uscita di lunghezze diverse sono possibili. </li><li> Investigator prepara cronometro e appunti con l&#39;elenco delle attività di navigazione per il punteggio manuale delle prestazioni. </li><li> Le misure di outcome sono registrati manualmente dallo sperimentatore. Le misure di outcome sono: il completamento del compito di navigazione e tempo impiegato per raggiungere l&#39;obiettivo. Inoltre, i percorsi sono segnati in modo tale che il percorso più breve presa è dato il massimo dei punti (cioè 3 per il percorso più breve, 2 per il secondo, 1 per il più lungo, e 0 per non essere in grado di completare l&#39;operazione). Vedi Figura 5C. </li><li> &quot;Square-off&quot; il partecipante alla prima posizione di partenza. Istruzioni descrivono la posizione di partenza sono forniti dal ricercatore all&#39;inizio di ogni attività. La temporizzazione inizia immediatamente una volta che il soggetto prende il loro primo passo fisico dal punto di partenza e terminaquando il partecipante riferisce verbalmente arrivando ad una porta d&#39;uscita dell&#39;edificio (meno tempo richiede più di 6 min, per cui è ottenuto il run come incompleta e la posizione di avvio successivo viene presentato). I dati acquisiti vengono registrati manualmente e successivamente trasferiti al database / software statistico per ulteriori analisi. </li></ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

Gli autori dichiarano assenza di conflitto di interessi.

Descriviamo interattiva audio-based simulatore virtuale ambiente progettato per migliorare la generale consapevolezza spaziale e capacità di navigazione in cieco. Abbiamo dimostrato che l&#39;interazione con Abes fornisce indicazioni precise che descrivono le relazioni spaziali tra gli oggetti e la disposizione complessiva dell&#39;ambiente di destinazione. Vedenti possono generare accurati mappe spaziali cognitive basate su tali informazioni uditivo e interagendo con l&#39;ambiente virtuale immersiva. Inoltre, interage...

Orientarsi in un ambiente sconosciuto si presenta come una sfida significativa per i non vedenti. Navigazione con successo richiede una comprensione delle relazioni spaziali esistenti tra se stessi e gli oggetti del 1,2 ambiente. La rappresentazione mentale che descrive lo spazio circostante viene indicato come una mappa cognitiva del territorio 3. Persone non vedenti in grado di raccogliere informazioni spaziali rilevanti per quanto riguarda l&#39;ambiente circostante tramite altri canali sensoriali (ad esempio l&#39;udito) che consentono la generazione di una precisa mappa spaziale cognitiva ai fini delle funzioni reali di navigazione del mondo 4,5. Notevole interesse è sorta per quanto riguarda il potenziale educativo degli ambienti virtuali e videogiochi d&#39;azione come mezzo per imparare e padroneggiare le abilità di 6-9. In effetti, molte strategie e gli approcci sono stati sviluppati per i non vedenti per questo scopo (cfr. 4,10-12). Abbiamo sviluppato Audio basata Simulator Ambiente (Abes), un utente-centrico audio-based ambiente virtuale che permette la navigazione simulata e l&#39;esplorazione di un edificio esistente fisico. Attingendo originali planimetrie architettoniche, una rappresentazione virtuale di un moderno edificio a due piani (che si trova presso il Centro Carroll per i ciechi, Newton, MA) è stato generato con il software Abes (Figure 1A e B). Abes incorpora una metafora gioco d&#39;azione con una premessa progettato per promuovere l&#39;esplorazione completa dello spazio dell&#39;edificio. Utilizzo di semplici combinazioni di tasti e spunti sonori spazializzati, gli utenti a navigare ed esplorare l&#39;intero edificio di raccogliere un numero massimo di gioielli nascosti nelle varie stanze. Gli utenti devono evitare di vagante mostri che li può portare via e nasconderli altrove nell&#39;edificio (Figura 1C). Abbiamo dimostrato che l&#39;interazione con Abes consente a un utente non vedente per generare una accurata mappa spaziale cognitiva di un edificio di destinazione sulla base di informazioni uditive uncquired nel contesto di una metafora gioco d&#39;azione. Ciò è confermato da una serie di post-formazione test di performance comportamentali destinati a valutare il trasferimento delle informazioni spaziali acquisite da un ambiente virtuale di un mondo reale e su larga scala attività di navigazione interna (vedere la figura 2 per il disegno generale dello studio). I nostri risultati mostrano che gli utenti non vedenti sono in grado di navigare con successo all&#39;interno di un edificio per il quale erano in precedenza sconosciuta, nonostante il fatto che in nessun momento erano informati dello scopo generale dello studio, né erano istruiti a ricordare la disposizione spaziale del costruire durante il gioco.

<table border="1"><tbody><tr><td> Nome di attrezzature </td><th > Commenti </td></tr><tr><td> Computer portatile </td><td > Computer portatile utilizzato esclusivamente per i partecipanti alla formazione e la raccolta di dati </td></tr><tr><td> Cuffie stereo (completamente chiusa disegno circumaurale) </td><td > Indossato da tutti i partecipanti durante l&#39;allenamento </td></tr><tr><td> Benda </td><td > Indossato da tutti i partecipanti durante l&#39;allenamento e le prove </td></tr></tbody></table>

sviluppo di un audio-based ambiente di gioco virtuale per assistere con doti di navigazione in the blind

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

Audio-based Simulator Ambiente (Abes) è un software ambiente virtuale progettato per migliorare le reali doti di navigazione mondiali nel cieco. Utilizzando solo segnali audio based e si inserisce nel contesto di una metafora videogioco, gli utenti di raccogliere informazioni pertinenti riguardanti il ​​layout dello spazio di un edificio. Questo consente all&#39;utente di sviluppare una accurata mappa spaziale cognitiva di un grande spazio tridimensionale che può essere manipolata per fini di un compito reale navigazione interna. Dopo il gioco, i partecipanti vengono valutati sulla loro capacità di navigare all&#39;interno del palazzo di destinazione fisica rappresentata nel gioco. I risultati preliminari indicano che i primi utenti non vedenti sono in grado di acquisire le informazioni utili per quanto riguarda la disposizione spaziale di un edificio in precedenza sconosciuto, come indicizzato da loro prestazioni su una serie di compiti di navigazione. Questi compiti inclusi percorso trovando attraverso l&#39;edificio virtuale e fisico, nonché una serie di drop off compiti. Troviamo che la coinvolgentee la natura altamente interattivo del software Abes sembra coinvolgere notevolmente l&#39;utente non vedente di esplorare attivamente l&#39;ambiente virtuale. Le applicazioni di questo approccio può estendersi ai più grandi popolazioni di individui con disabilità visive.

I risultati di tre partecipanti i primi ciechi (di età compresa tra 19 e 22 anni) sono riportati (cfr. tabella 1 per le caratteristiche dei partecipanti). In sintesi, tutti e tre i partecipanti hanno mostrato un alto livello di successo su tutti e tre i compiti di navigazione seguendo gioco con il software Abes. Ciò è stato confermato dal punteggio di prestazione (media di gruppo e individuali) su tutte e tre le attività comportamentali (vedi Figura 6). La performance percentuale corret...

Audio-based Simulator Ambiente (Abes) è un software ambiente virtuale progettato per migliorare le reali doti di navigazione mondiali nel cieco.

Sviluppo di un audio-based ambiente di gioco virtuale per assistere con doti di navigazione in the Blind

Audio-based Environment Simulator (AbES) is virtual environment software designed to improve real world navigation skills in the blind. Using only audio ...

L'obiettivo generale del seguente esperimento è dimostrare che l'interazione con un ambiente virtuale consente il trasferimento di abilità di navigazione spaziale che possono essere valutate successivamente nel reale ambiente fisico. Questo risultato si ottiene innanzitutto apprendendo i tasti da premere per muoversi all'interno dell'ambiente virtuale durante il gioco. Successivamente, i partecipanti imparano a identificare i suoni che permettono di riconoscere gli oggetti e la loro posizione relativa.Dopo il gioco, viene presentata una serie di compiti di navigazione virtuali e fisici al fine di valutare la comprensione spaziale dell'ambiente da parte dei partecipanti. Si ottengono risultati che dimostrano come i partecipanti siano in grado di orientarsi in un edificio reale che era stato rappresentato dall'ambiente virtuale durante il gioco. Il vantaggio principale di questa tecnica rispetto ai metodi esistenti, come la formazione standard nell'orientamento e nella mobilità, è che la disposizione spaziale di un edificio sconosciuto può essere appresa attraverso l'esplorazione virtuale in modo sicuro e controllato.Ad illustrare questa procedura saranno Aaron Connors e Lindsey Aino, entrambi coordinatori dello studio per il mio laboratorio. I partecipanti a questo studio sono legalmente ciechi e non hanno alcuna conoscenza pregressa della disposizione spaziale dell'edificio bersaglio da apprendere, né sono a conoscenza dello scopo generale del gioco in relazione all'apprendimento della disposizione spaziale dell'edificio bersaglio. Per iniziare, fornire al partecipante una benda e delle cuffie.Assicurarsi che le cuffie siano posizionate correttamente sopra le orecchie. Successivamente, istruire il partecipante su come utilizzare i tasti assegnati e le informazioni fornite dai segnali audio nell'ambiente basato sull'audio.Simulatore. Specifici tasti, come mostrati qui, vengono utilizzati per muoversi ed esplorare l'ambiente virtuale.Ogni passo virtuale approssima un passo nella costruzione fisica reale. Dopo aver spiegato i comandi, illustrare la premessa e le regole del gioco. Informare il partecipante sui diversi segnali audio utilizzati durante il gioco.Ad esempio, mentre l'utente si sposta all'interno dell'edificio, il suono che indica la posizione di gioielli e mostri nelle vicinanze consente di acquisire informazioni uditive e spaziali in modo sequenziale, aggiornate dinamicamente dopo ogni passo compiuto nell'ambiente virtuale. La sintesi vocale viene utilizzata per fornire ulteriori informazioni sulla posizione attuale, l'orientamento e la direzione dell'utente, nonché sull'identità degli oggetti e degli ostacoli presenti sul percorso. La localizzazione spaziale dei suoni viene aggiornata in base alla direzione egocentrica dell'utente.Ad esempio, se una porta si trova sul lato destro della persona, il suono di un colpo è percepito nell'orecchio destro dell'utente. Se la persona ora si gira di 180 gradi in modo che la stessa porta si trovi sul lato sinistro, lo stesso suono di colpo viene ora percepito nel canale sinistro. Consentire al partecipante di giocare per tre sessioni di 30 minuti ciascuna.Prenda nota di eventuali difficoltà o problemi riscontrati durante il gioco; dopo ogni sessione di allenamento, fornisca un rinforzo positivo e eventuali chiarimenti o ulteriori istruzioni. Successivamente, valuti la prestazione nel gioco registrando il numero, il tempo e la posizione in cui un partecipante trova un Juul. Per valutare la prestazione nel compito di navigazione virtuale, spieghi al partecipante che dovrà completare 10 compiti di navigazione predeterminati presentati in sequenza dal software Abes.I percorsi hanno una difficoltà comparabile e vengono scelti in base a coppie predeterminate di punti di partenza e di arrivo. Informare il partecipante che avrà un massimo di sei minuti per completare ciascun compito all'inizio di ogni compito.Vengono fornite automaticamente istruzioni che descrivono la posizione di partenza e la destinazione finale. Il cronometraggio inizia automaticamente non appena il partecipante riceve l'istruzione audio e termina. Una volta giunto alla posizione finale, vengono registrati automaticamente i parametri di esito, che includono il completamento con successo del compito di navigazione e il tempo impiegato per raggiungere la destinazione.Per valutare le prestazioni del partecipante nella posizione fisica, spiegare che gli verranno assegnati 10 compiti predeterminati di navigazione. Sotto la supervisione di un ricercatore esperto. Informare il partecipante che avrà un massimo di sei minuti per completare ciascun compito e che potrà utilizzare il bastone per il supporto alla mobilità.Prepararsi con un cronometro, l'elenco dei compiti di navigazione e una bacheca per la valutazione manuale. Posizionare il partecipante e descrivere la posizione iniziale e la destinazione finale. Il cronometraggio inizia immediatamente non appena il soggetto fa il primo passo e termina.Quando il partecipante riferisce verbalmente di essere arrivato a destinazione, vengono registrati il corretto completamento del compito e il tempo impiegato per raggiungere l'obiettivo. Spiegare al partecipante che dovrà completare cinque compiti di navigazione con l'obiettivo di uscire dall'edificio seguendo il percorso più breve possibile. Sotto la supervisione di un ricercatore esperto, informare il partecipante che avrà un massimo di sei minuti per completare ciascun compito di navigazione e che potrà utilizzare il bastone per il supporto alla mobilità.Si utilizzano cinque posizioni di partenza predeterminate in modo che siano possibili tre percorsi di uscita di lunghezza e complessità diverse. Tenere pronti un cronometro, l'elenco dei compiti di navigazione e una bacheca per la valutazione manuale. Posizionare il partecipante di fronte e descrivere la posizione di partenza.Il cronometraggio inizia immediatamente quando compiono il primo passo e termina quando il partecipante dichiara verbalmente di essere arrivato a una porta d'uscita dell'edificio. Viene registrato il completamento con successo del compito di abbandono, il percorso seguito e il tempo impiegato per uscire dall'edificio. Inoltre, i percorsi vengono valutati in modo che il percorso più breve riceva un punteggio maggiore rispetto a quelli più lunghi.Viene presentata la prestazione media di tre partecipanti nei compiti di navigazione. La percentuale di risposte corrette nei compiti di navigazione virtuale e fisica illustra un alto livello di successo in entrambi i compiti. Il tempo necessario per raggiungere la destinazione è stato maggiore nella navigazione virtuale rispetto alla prestazione fisica.Nell'attività di consegna, l'incarico suggerisce che i partecipanti spesso scegliessero il percorso più breve possibile per uscire dall'edificio. Questo è dimostrato dal tempo medio più breve impiegato per raggiungere l'uscita ed uscire. I risultati mostrati qui provengono da un singolo partecipante in tutte e tre le attività di navigazione.Durante la navigazione virtuale, sono stati necessari 79 secondi per completare il percorso. Il compito, osservato lungo il percorso indicato in giallo, ha richiesto 46 secondi nello stesso percorso nell'edificio reale. Nel compito di rilascio.Il partecipante ha seguito il percorso più breve possibile per uscire dall'edificio. Non dimenticare che lavorare con partecipanti non vedenti che utilizzano nuove tecnologie richiede incoraggiamento. Siamo grati per il loro tempo e per la disponibilità a partecipare a questa dimostrazione e allo studio.

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

Ricerca

JoVE Journal

Medicine

Medicina

Il Progetto su Virtual Reality intelligente multi-sensore di sistema per il trattamento di ansia disturbi legati all'alimentazione (Intrepid) è finalizzato a sviluppare un multi-sensore di context-aware sistema di realtà virtuale per il trattamento di ansia disturbi correlati.

L&#39;uso del Biofeedback in Clinica Realtà Virtuale: Il Progetto INTREPID

Una sfida per dimostrare l'efficacia del trattamento per i disturbi cognitivi nella schizofrenia è trovare la misura ottimizzazione delle competenze relative al funzionamento quotidiano. La realtà virtuale Functional Capacity Assessment Tool (VRFCAT) è un gioco interattivo basato misura computerizzato finalizzato a competenze associate con il funzionamento di tutti i giorni, compresi i disturbi di base e trattamento cambiamenti legati.

Sviluppo di una Realtà Virtuale valutazione della vita quotidiana Skills

I bambini che hanno esigenze di comunicazione complessi possono trarre vantaggio dall'utilizzo di un dispositivo-speech che genera (SGD). Abilità cognitive sono stati identificati come aventi un impatto sulla capacità di navigare tra i livelli di SGDs. Questo protocollo descrive i passi necessari per Speech lingua Patologi per valutare le capacità cognitive e le abilità di navigazione.

Metodologia pratica di compiti cognitivi All&#39;interno di una valutazione di navigazione

Questo documento descrive un metodo per condurre esperimenti di multi-utenti il processo decisionale e di navigazione utilizzando un laboratorio di computer in rete.

Un'installazione in rete di realtà virtuale Desktop per decisione scienza ed esperimenti di navigazione con più partecipanti

Presentato qui è un protocollo per migliorare la stereoacuità utilizzando software di apprendimento percettivo gamified basato su stimoli punto casuale. I pazienti sono soggetti stereo-carenti senza strabismo. Il protocollo combina le visite al centro di optometria con gli esercizi domestici utilizzando il software. La conformità e l'evoluzione della stereoacuità sono memorizzate nel cloud.

Stereoacuità Miglioramento con videogiochi Random-Dot

La realtà virtuale (VR) è un approccio potente ma sottoutilizzato per far progredire la diagnosi e il trattamento delle malattie neurologiche. La piattaforma Cleveland Clinic Virtual Reality Shopping combina contenuti VR all'avanguardia con un tapis roulant omnidirezionale per quantificare le attività strumentali della vita quotidiana, un marcatore prodromico proposto di malattia neurologica.

La piattaforma di shopping immersiva in realtà virtuale della Cleveland Clinic per la valutazione delle attività strumentali della vita quotidiana

Questo protocollo è progettato per esplorare i cambiamenti elettrofisiologici correlati all'apprendimento in soggetti con sordità profonda dopo un breve periodo di formazione nella sostituzione sensoriale audio-tattile applicando la tecnica del potenziale correlato agli eventi.

Valutazione della formazione di sostituzione sensoriale audio-tattile in partecipanti con sordità profonda utilizzando la tecnica del potenziale correlato all'evento

Qui, presentiamo un compito di navigazione spaziale nuovo, breve e attivo che valuta sia la navigazione spaziale che la capacità di memoria episodica. È importante sottolineare che la navigazione spaziale e la memoria episodica erano associate l'una all'altra e questo compito ha dimostrato sensibilità all'esercizio.

Valutazione della navigazione spaziale umana in uno spazio virtuale e della sua sensibilità all'esercizio fisico

L'immaginazione motoria in un ambiente di realtà virtuale ha ampie applicazioni nei sistemi di interfaccia cervello-computer. Questo manoscritto delinea l'uso di avatar digitali personalizzati che assomigliano ai partecipanti che eseguono movimenti immaginati dal partecipante in un ambiente di realtà virtuale per migliorare l'immersione e il senso di proprietà del corpo.

Prestazioni delle immagini motorie attraverso gemelli digitali incorporati in un ambiente di interfaccia cervello-computer abilitato alla realtà virtuale

Determinare l'attecchimento delle cellule del donatore rappresenta una sfida in modelli di trapianto di midollo osseo di topo che non hanno ben definiti marcatori fenotipici. Abbiamo descritto una metodologia per quantificare maschio attecchimento delle cellule del donatore nel topo femmina riceventi di trapianto. Questo metodo può essere utilizzato in tutti i ceppi di topo per lo studio delle funzioni HSC.

Utilizzando quantitativa real-time PCR per la determinazione cellulare attecchimento dei donatori in un modello murino competitivo trapianto di midollo osseo

Scopri come l'ambiente virtuale audio AbES insegna abilità di navigazione spaziale a persone non vedenti. Questo metodo facilita il trasferimento delle competenze apprese al mondo reale in modo sicuro.

Sviluppo di un audio-based ambiente di gioco virtuale per assistere con doti di navigazione in the Blind

Esplora altri video