Name: Ses tabanlı Sanal Oyun Ortamı Geliştirilmesi Kör Navigasyon Becerileri ile Yrd etmek (Video) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: Öğrenin, ses tabanlı sanal ortam kullanarak görme engelli bireylerde navigasyon becerilerini nasıl geliştirebilirsiniz. Bu yöntem, sanal ortamda kazanılan becerilerin gerçek dünya navigasyonuna aktarılmasını sağlar.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Yazarlar bu araştırma yürüten verdikleri destek için Rabih Dow, Padma Rajagopal, Molly Connors ve Körler Carroll Merkezi (Newton MA, ABD) personel teşekkür etmek istiyorum. RO1 EY019924: Bu çalışma NIH / NEI hibe ile desteklenmiştir.

1. Katılımcı Demografi Bu 18-45 yaş arasındaki kör kız ve erkek katılımcıların acemi bir on-going çalışmadır. Tüm katılımcılar erken başlangıçlı (önceki 3 yaşına kadar belgelenmiş) ve oküler nedenlere değişen yasal olarak kör vardır. Çalışmaya katılanların hiçbiri Hedef fiziksel binanın mekansal düzeni ile daha önceden aşina idi. 2. Abes ile Hazırlık ve Alışma <ol><li> Eğitim ve değerlendirme süreci boyunca takılabilir bir gözbağı ve kulaklık ile katılımcı sağlayın. Gözbağı rahatça gözlerinin üzerine yerleştirilir ve kulaklık düzgün yönlendirilmiş ve kulaklar (sol kulağının üzerinde yani sol hoparlör) üzerine yerleştirilmiş olduğundan emin olun. </li><li> Nasıl atandığı tuşları ve Abes yılında ses yardımlar ile temsil bilgileri kullanmayı Tren katılımcı. Belirli tuş vuruşlarını (Şekil 3) kullanarak, bir kullanıcı gezinirken ve araştırıyor(sağ veya sol, ileri hareket) neredeyse bina. Her sanal adım gerçek fiziksel binada bir adım yaklaşır. </li><li> Oyunun kuralları ve öncül ile tanışın. </li><li> Oyun özgü ses yardımlar (yerini mücevherleri ve yakındaki canavarlar ses yani ses) ile tanışın. Kullanıcının binayı dolaşırken gibi, işitsel tabanlı ve bağlamsal mekansal bilgi sırayla elde edilir ve dinamik olarak güncelleştirilir. Mekansal ve durumsal bilgi atılan her adımdan sonra sağlanan ikonik ve uzamsallaştırılamaz ses ipuçları dayanmaktadır. Oryantasyon kardinal pusula başlıkları (örneğin, &quot;kuzey&quot; veya &quot;doğu&quot;) ve konuşma yoluyla metni (TTS) Bir kullanıcının geçerli konumu, yönelim ve (örneğin, &quot;Eğer ilk günü koridor vardır başlığı daha fazla bilgi sağlamak için kullanılan esas batıya bakan zemin &quot;) yanı sıra nesneleri ve onların yoluna engeller (örneğin kimlik&quot; bu bir kapıdır &quot;). Uzaklık ipuçları dayalı o sağlanmaktadırn modülasyonlu ses şiddeti. Seslerin mekansal Lokalizasyon kullanıcının benmerkezci başlığı eşleşecek şekilde güncelleştirilir. Esasen, yazılım, kullanıcı yerini ve başlık benci bir fonksiyonu olarak uygun bir ses dosyasını yürütmek için tasarlanmıştır ve çevre arasında hareket ederken kullanıcının konumunu takip eder edilir. Bir kapı kişinin sağ tarafta bulunan Örneğin, vurma sesi (yazılım sağ kanal bir vurma sesi bir ses dosyası oynar yani) kullanıcının sağ kulakta duyulur. Kişi şimdi aynı kapıdan şimdi sol tarafta yer almaktadır böylece 180 derece etrafında dönerse, aynı vurma sesi artık sol kanal (yani yazılımın sol kanal bir vurma sesi bir ses dosyası çalar) duyulur. Kullanıcı kapıya bakan Son olarak, eğer, aynı vurma sesi eşit iki kulakta duyulur. Kullanıcının benmerkezci başlığı takip ederek, yazılımı tanımlamak uygun mekansal yerelleştirilmiş sesleri çalabilirvarlığı ve konumu nesneleri ve kullanıcı olarak bu değişiklikleri izlemek sanal ortamda boyunca ilerler. Şekil 4&#39;e bakın. </li></ol> 3. Eğitim ve Abes ile Oyun Oyun (3 Sessions 1.5 saat bir toplam için her Ömürlü 30 dk) <ol><li> Ücretsiz oyun herhangi bir zorluklar ve sorunlar (tuş vuruşlarını yani kullanımı, ses yardımlar, zor gezinti alanları) oynamak ve dikkat için izin ver. Pozitif takviye ve açıklamalar her eğitim oturumunun sonunda verilmiştir. </li><li> Kayıt oyun performansı (örneğin bir katılımcının bir mücevher bulur numarası, zaman ve yer). </li></ol> 4. Sanal Gezinti Görev Performansı değerlendirin <ol><li> Katılımcının test ayrıntıları açıklayın ve sanal gezinti görevleri tamamlamak için yönergeleri sağlar. Katılımcı sırayla katılımcı kez Abes yazılım (yani kullanarak sunulan 10 önceden belirlenmiş bir navigasyon tamamlayacaktırpantolon ilk görev başarıyla tamamlandığında, bilgisayar otomatik olarak) aşağıdaki görevin başlangıç ​​noktasına onları yeniden bulur. </li><li> Onlar her gezinti görevi tamamlamak için 6 dak maksimum olacağı katılımcı bilgilendirin. </li><li> Karşılaştırılabilir zorluk (yani mesafe seyahat ve tur sayısı) 10 sanal gezinti yolları 10 başlangıç ​​önceden belirlenmiş eşlendirme göre seçilir ve (yani odalarda) yerle durdurur. Özellikle, hedef rota gezinmek için izlenmesi gereken adımlar aralığı 25-35 adımları (sanal ortamda) ve 90 derece 3-4 dönüşler arasındaki dahil arasındaydı. </li><li> Otomatik sunum ve performans veri yakalama için Abes içine 10 navigasyon çiftleri yükleyin. </li><li> Sonuç ölçümleri otomatik Abes &#39;dahili yazılım kullanılarak kaydedilir. Sonuç önlemler şunlardır: Navigasyon görev ve hedefe ulaşmak için gerekli zaman, başarıyla tamamlanması. Şekil 5A bakınız. </li><li> Talimatlar dbaşlangıç ​​konumu ve hedef hedef escribing, her bir iş başlangıcında ABES yazılım tarafından otomatik olarak sağlanır. Zamanlama kez konu başlangıç ​​konumundan ilk sanal adım alır ve bir kez (zaman çalışma eksik ve sonraki yolu sunulmuştur olarak puanlanmıştır olduğu için 6 dk, daha uzun sürer sürece) hedef konuma gelmeden biter hemen başlar. Yakalanan verileri otomatik olarak bir metin dosyasına gönderilir ve veritabanı / ileri analiz için istatistik yazılımı sonradan açıldı. </li></ol> 5. Fiziksel Navigasyon Görev Performansı değerlendirin <ol><li> Katılımcının test ayrıntıları açıklayın ve fiziksel navigasyon görevleri tamamlamak için yönergeleri sağlar. Katılımcının 10 önceden belirlenmiş navigasyon görevlerin (önceki sanal performans değerlendirmesinden karıştırılmış sırayla sunulması) ve deneyimli bir araştırmacı gözetiminde tamamlayacak. </li><li> Onlar maxi olacak katılımcı Inform6 dakika mum her gezinti görevi tamamlamak için. Fiziksel navigasyon görev amaçları için, katılımcı hareketlilik destek için beyaz şeker kamışı kullanmasına izin verilir. </li><li> 10 fiziksel gezinme yolları karşılaştırılabilir zorluk 10 start ve stop konumları (yani oda) (yani mesafe seyahat ve tur sayısı) önceden belirlenmiş eşlendirme dayalı seçilir. </li><li> Araştırmacı kronometre ve performans manuel puanlama için navigasyon görevlerin listesini panoya hazırlar. </li><li> Sonuç ölçümleri manuel olarak araştırmacı tarafından kaydedilir. Sonuç önlemler şunlardır: Navigasyon görev ve hedefe ulaşmak için gerekli zaman, başarıyla tamamlanması. </li><li> &quot;Kare-off&quot; katılımcının (yani pozisyon arkalarındaki başlangıç ​​konumu kapı ile katılımcı). Başlangıç ​​konumu ve hedef hedef yönergeler, her bir iş başlangıcında araştırmacı tarafından sağlanmaktadır. Zamanlama kez hemen konuyu tak başlarkatılımcı sözlü (zaman çalışma tamamlanmamış ve sonraki yolu sunulmuştur olarak puanlanmıştır olduğu için 6 dk, daha uzun sürer sürece) hedef gelmeden bildirdiğinde es başlangıç ​​konumundan ilk fiziksel adım ve biter. Yakalanan verileri elle kaydedilen ve daha sonra veritabanı / ileri analiz için istatistik yazılımı aktarılır. Şekil 5B bakın. </li></ol> 6. Görev Performans kapanır Fiziksel Bırak değerlendirin <ol><li> Katılımcının test ayrıntıları açıklayın ve navigasyon görevleri kapalı fiziksel damla tamamlamak için yönergeleri sağlar. Katılımcı en kısa yolu kullanarak binanın çıkma hedefleri ve deneyimli bir araştırmacı gözetiminde 5 gösterime görevleri tamamlamak olacaktır. </li><li> Onlar her gezinti görevi tamamlamak için 6 dak maksimum olacağı katılımcı bilgilendirin. Navigasyon Görevi fiziksel damla amaçları için, katılımcı izin verilirmobilite destek için beyaz baston kullanmak. </li><li> 5 önceden belirlenmiş bir fiziksel başlangıç ​​konumları farklı uzunluklarda 3 çıkış yolları da mümkün olduğu bu gibi kullanılır. </li><li> Araştırmacı kronometre ve performans manuel puanlama için navigasyon görevlerin listesini panoya hazırlar. </li><li> Sonuç ölçümleri manuel olarak araştırmacı tarafından kaydedilir. Sonuç önlemler şunlardır: Navigasyon görev ve hedefe ulaşmak için gerekli zaman, başarıyla tamamlanması. Ayrıca, yolları alınan kısa yolu maksimum puan (kısa yol için, yani 3, ikinci için 2, görevi tamamlamak için mümkün olmadığı için uzun için 1 ve 0) verilir böyle puanlanır. Şekil 5C bakın. </li><li> Ilk başlangıç ​​yeri &quot;Kare-off&quot; katılımcı. Başlangıç ​​konumunu belirten talimatları, her bir iş başlangıcında araştırmacı tarafından sağlanmaktadır. Zamanlama kez konu başlangıç ​​konumundan ilk fiziksel adım alır ve biter hemen başlarkatılımcı sözlü (zaman çalışma tamamlanmamış olarak atılırsa ve sonraki başlangıç ​​konumu sunulduğu için 6 dk, daha uzun sürer sürece) binanın çıkış kapısına gelen raporlar. zaman Yakalanan verileri elle kaydedilen ve daha sonra veritabanı / ileri analiz için istatistik yazılımı aktarılır. </li></ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

Yazarlar herhangi bir çıkar çatışmalarını beyan.

Biz kör genel mekansal farkındalık ve navigasyon becerilerini geliştirmek için tasarlanmış interaktif bir ses tabanlı sanal ortam simülatörü açıklanmaktadır. Biz Abes ile etkileşim nesneleri ve hedef çevrenin genel düzenini arasındaki uzaysal ilişkileri açıklamak doğru ipuçları sağladığını göstermektedir. Kör kullanıcıların bu işitsel bilgi ve sürükleyici sanal ortam ile etkileşerek göre doğru uzamsal bilişsel haritalar üretebilirsiniz. Ayrıca, bir oyun metafor bağlamında Abes etkileşen mekansal bilişsel yapıları yazılı...

Bilinmedik bir ortamda bir yolunu bulmak kör için önemli bir sorun olarak görülmektedir. Başarıyla gezinme kişinin kendinin ve çevrenin 1,2 nesneler arasındaki mevcut mekansal ilişkilerin anlaşılmasını gerektirir. Alanı çevreleyen açıklanır zihinsel gösterimi mekansal bir bilişsel harita 3 olarak adlandırılır. Kör bireyler 4,5 gerçek dünya navigasyon görevlerin amaçlar için doğru bir mekansal bilişsel harita üretimi için izin diğer duyusal kanalları (örneğin işitme gibi) aracılığıyla çevreye ilişkin ilgili mekansal bilgi toplayabilir. Büyük ilgi öğrenmek ve becerilerini 6-9 ustalaşmak için bir araç olarak sanal ortamlar ve aksiyon video oyunları eğitici potansiyeli ile ilgili ortaya çıkmıştır. Nitekim, birçok strateji ve yaklaşımlar bu amaçla (4,10-12 bakınız) körler için geliştirilmiştir. Biz Audi geliştirdiko tabanlı Çevre Simülatörü (Abes); varolan fiziksel binanın simüle navigasyon ve keşif için izin veren bir kullanıcı-merkezli ses tabanlı sanal ortam. Abes yazılım (Şekil 1A ve B) ile oluşturulan; özgün mimari kat planları, modern iki katlı bina (Newton, MA Körler Carroll Merkezinde bulunan) bir sanal render yola çıkarak. Abes bina alanı bütünüyle araştırmayı teşvik etmek için tasarlanmış bir öncül ile bir aksiyon oyunu metafor içermektedir. Basit tuş vuruşlarını ve uzamsallaştırılamaz ses ipuçlarını kullanarak, kullanıcılar gezinmek ve çeşitli odalarında gizli mücevher bir maksimum sayıda toplamak için tüm bina keşfetmek. Kullanıcılar onları götürmek ve başka bir yerde bina (Şekil 1C) bunları gizleyebilirsiniz canavarlar fitil kaçınmak gerekir. Biz Abes ile etkileşim kör bir kullanıcı işitsel bilgiler esas hedef binanın doğru bir mekansal bilişsel haritası oluşturmasına olanak sağlar göstermektedirbir aksiyon oyunu metafor bağlamında cquired. Bu bir gerçek dünya ve büyük ölçekli kapalı navigasyon görevi (genel çalışma tasarımı için bakınız Şekil 2) için bir sanal ortamda alınan mekansal bilgi transferi değerlendirmek için tasarlanmış eğitim sonrası davranışsal performans testleri bir dizi ile teyit edilir. Bizim sonuçlar hiçbir zaman onlar çalışmanın genel amacı hakkında bilgi vardı, ne de mekansal düzenini çağırmak için talimat olduğu gerçeğine rağmen, görme engelli kullanıcılar başarıyla daha önce bilmediğiniz kazandığınız bir bina içinde gezinmek mümkün olduğunu göstermektedir oyun oynarken bina.

<table border="1"><tbody><tr><td> Ekipman Adı </td><th > Yorumlar </td></tr><tr><td> Dizüstü bilgisayar </td><td > Laptop eğitim katılımcıları ve verilerin toplanması için özel olarak kullanılan </td></tr><tr><td> Stereo Başkanı telefonlar (tamamen kapalı çevresel tasarım) </td><td > Eğitim sırasında tüm katılımcılar tarafından Aşınmış </td></tr><tr><td> Körü körüne </td><td > Eğitim ve test sırasında tüm katılımcılar tarafından Aşınmış </td></tr></tbody></table>

ses tabanlı sanal oyun ortamı geliştirilmesi kör navigasyon becerileri ile yrd etmek

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

Ses temelli Çevre Simülatörü (Abes) kör gerçek dünyada navigasyon becerilerini geliştirmek için tasarlanmış sanal ortamda bir yazılımdır. Bir video oyunu metafor bağlamında sadece ses tabanlı ipuçları ve seti kullanarak, kullanıcıların bir binanın yerleşimine ilişkin ilgili mekansal bilgi toplamak. Bu, kullanıcının bir gerçek kapalı navigasyon görev amaçları için manipüle edilebilir bir büyük ölçekli üç-boyutlu uzayda bir doğru uzamsal bilişsel harita geliştirmelerine olanak sağlamaktadır. Oyun sonra, katılımcılar daha sonra oyun temsil Hedef fiziksel yapı içinde gezinmek yeteneklerine göre değerlendirilirler. Ön sonuçlar erken kör kullanıcılar navigasyon görevleri bir dizi performans ile endeksli olarak önceden bilmediğiniz binanın mekansal düzeni ile ilgili bilgileri elde etmek mümkün olduğunu göstermektedir. Bu görevler sanal ve fiziksel yapı sayesinde bulma yolu yanı sıra görevleri kapalı damla bir dizi içermektedir. Biz bulmak sürükleyicive Abes yazılım yüksek etkileşimli doğası büyük ölçüde aktif sanal ortamda keşfetmek için kör kullanıcıya meşgul görünüyor. Bu yaklaşımın Uygulamaları görme engelli bireylerin büyük nüfusa uzatabilir.

Üç erken kör katılımcılar (19 ve 22 yaşları arasında) alınan sonuçlar (katılımcı özellikleri için Tablo 1&#39;e bakınız) gösterilir. Özet olarak, her üç katılımcı Abes yazılım ile oyun sonrasında her üç navigasyon görevlerin başarı yüksek düzeyde gösterdi. Bu her üç davranışsal görevler (bkz. Şekil 6) ile ilgili performans puanları (grup ortalaması ve bireysel) tarafından doğrulandı. Sanal (ortalama:% 90) için oran doğru performansı takip fiziksel (ortalama: 88.7%), navigasyon görevleri...

Ses temelli Çevre Simülatörü (Abes) kör gerçek dünyada navigasyon becerilerini geliştirmek için tasarlanmış sanal ortamda bir yazılımdır.

Ses tabanlı Sanal Oyun Ortamı Geliştirilmesi Kör Navigasyon Becerileri ile Yrd etmek

Audio-based Environment Simulator (AbES) is virtual environment software designed to improve real world navigation skills in the blind. Using only audio ...

Aşağıdaki deneyin genel amacı, sanal bir ortamla etkileşime girmenin, daha sonra gerçek fiziksel ortamda değerlendirilebilen mekansal navigasyon becerilerinin aktarımına olanak tanıdığını göstermektir. Bu, öncelikle oyun sırasında sanal ortamda gezinmek için kullanılan tuş vuruşlarının öğrenilmesiyle gerçekleştirilir. Ardından katılımcılar, nesnelerin ve bunların göreceli konumlarının belirlenmesine olanak tanıyan seslerin nasıl tanımlanacağını öğrenirler.Oyun oynandıktan sonra, katılımcıların çevreye dair mekânsal anlayışlarını değerlendirmek amacıyla bir dizi sanal ve fiziksel navigasyon görevi sunulur. Elde edilen sonuçlar, katılımcıların oyun sırasında sanal ortamla temsil edilen gerçek bir fiziksel bina içerisinde navigasyon yapabildiklerini göstermektedir. Bu tekniğin, standart oryantasyon ve mobilite eğitimi gibi mevcut yöntemlere göre temel avantajı, yabancı bir binanın mekânsal düzeninin güvenli ve kontrollü bir şekilde sanal keşif yoluyla öğrenilebilmesidir.Bu prosedürü, laboratuvarımdaki çalışma koordinatörleri olan Aaron Connors ve Lindsey Aino uygulamalı olarak gösterecekler. Bu çalışmaya katılanlar yasal olarak görme engellidir ve öğrenilecek hedef binanın mekânsal düzeni hakkında önceden bilgi sahibi değillerdir; ayrıca oyunun, hedef binanın mekânsal düzenini öğrenmeye yönelik genel amacından haberdar değillerdir. Başlamak için katılımcıya bir göz bandı ve kulaklık sağlayın.Kulaklıkların kulakların üzerine doğru şekilde yerleştirildiğinden emin olun. Ardından, katılımcıya atanmış tuşların nasıl kullanılacağı ve ses tabanlı ortam olan Simulator'deki sesli ipuçları tarafından sunulan bilgiler hakkında talimatlar verin. Sanal ortamda gezinmek ve keşif yapmak için burada görüldüğü gibi belirli tuş vuruşları kullanılır.Her bir sanal adım, gerçek fiziksel binadaki yaklaşık bir adıma denk gelir. Kontrolleri açıkladıktan sonra, oyunun temel mantığını ve kurallarını açıklayın. Katılımcıyı, oynanış sırasında kullanılan çeşitli sesli ipuçları hakkında bilgilendirin.Örneğin, kullanıcı binada gezinirken mücevherlerin konumuna dair sesler ve yakındaki canavarların sesleri geldiğinde, işitsel ve mekansal bilgiler ardışık olarak edinilir ve sanal ortamda atılan her adımdan sonra dinamik olarak güncellenir. Kullanıcının mevcut konumu, yönelimi ve gidiş yönünün yanı sıra yolundaki nesnelerin ve engellerin kimliği hakkında daha fazla bilgi sağlamak için metinden konuşmaya (text to speech) özelliği kullanılır. Seslerin mekansal lokalizasyonu, kullanıcının egosentrik gidiş yönüyle uyumlu olacak şekilde güncellenir.Örneğin, bir kapı kişinin sağ tarafındaysa, kapı çalma sesi kullanıcının sağ kulağına gelir. Kişi şimdi 180 derece dönerek aynı kapının sol tarafında kalmasını sağlarsa, aynı kapı çalma sesi artık sol kanaldan duyulur. Katılımcının oyunu üç adet 30 dakikalık oturum boyunca oynamasına izin verin.Oyun sırasında meydana gelen zorlukları veya güçlükleri not edin; her eğitim oturumunun ardından olumlu geri bildirimlerde bulunun, gerekli açıklamaları yapın veya ek talimatlar verin. Daha sonra, bir katılımcının Juul bulduğu sayıyı, zamanı ve konumu hesaplayarak oyun performanslarını puanlayın. Sanal navigasyon görevindeki performansı test etmek için katılımcıya, Abes yazılımı tarafından ardışık olarak sunulan önceden belirlenmiş 10 navigasyon görevini tamamlayacaklarını açıklayın.Yollar benzer zorluktadır ve 10 adet önceden belirlenmiş başlangıç ve bitiş noktası eşleşmelerine göre seçilir. Her görevin başlangıcında, katılımcıya her bir görevi tamamlamak için en fazla altı dakikası olduğu bilgisini verin.Başlangıç konumu ve hedef varış noktasını tanımlayan talimatlar otomatik olarak sağlanır. Zamanlama, katılımcı sesli talimatı aldığı anda otomatik olarak başlar ve sona erer. Hedef konuma ulaştıklarında, navigasyon görevinin başarıyla tamamlanması ve hedefe ulaşmak için geçen süreyi içeren sonuç ölçümleri otomatik olarak kaydedilir.Katılımcının fiziksel konumdaki performansını test etmek için, onlara önceden belirlenmiş 10 navigasyon görevi verileceğini açıklayın. Bu süreç deneyimli bir araştırmacı gözetiminde gerçekleştirilmelidir. Katılımcıya, her görevi tamamlamak için maksimum altı dakikaları olduğu ve mobilite desteği için baston kullanabilecekleri bilgisini verin.Bir kronometre, navigasyon görevleri listesi ve manuel puanlama için bir yazı tahtası ile hazırlıklı olun. Katılımcıyı konumlandırın; başlangıç noktasını ve hedef varış noktasını tarif edin. Süre tutma işlemi, denek ilk adımını attığı anda başlar ve varışla sona erer.Katılımcı hedefe vardığını sözlü olarak bildirdiğinde, görevin başarıyla tamamlanıp tamamlanmadığı ve hedefe ulaşmak için geçen süre kaydedilir. Katılımcıya, binadan mümkün olan en kısa yolu kullanarak çıkma hedefiyle beş navigasyon görevi tamamlayacaklarını açıklayın. Deneyimli bir araştırmacının gözetiminde, katılımcıya her bir navigasyon görevini tamamlamak için maksimum altı dakikaları olduğu ve mobilite desteği için baston kullanmalarına izin verileceği bilgisini verin.Farklı uzunluklarda ve karmaşıklıklarda üç çıkış yolunun mümkün olduğu, önceden belirlenmiş beş başlangıç konumu kullanılır. Bir kronometre, navigasyon görevleri listesi ve manuel puanlama için bir sekreterlik tahtası hazırlayın. Katılımcıyı konumlandırın ve başlangıç noktasını tanımlayın.Süre ölçümü, katılımcıların ilk adımı attığı anda başlar ve katılımcının binanın bir çıkış kapısına ulaştığını sözlü olarak bildirmesiyle sona erer. Bırakma görevinin başarıyla tamamlanması, izlenen yol ve binadan çıkış için geçen süre kaydedilir. Ayrıca, yollar, en kısa yolun daha uzun olanlardan daha fazla puan alacağı şekilde skorlanır.Navigasyon görevlerinde üç katılımcının ortalama performansı burada sunulmuştur. Sanal ve fiziksel navigasyon görevleri için doğru cevap yüzdesi, her iki görevde de yüksek bir başarı düzeyi olduğunu göstermektedir. Hedefe ulaşma süresi, fiziksel performansla karşılaştırıldığında sanal navigasyon için daha uzundu.Bırakma Görevi'nde katılımcıların binadan çıkmak için genellikle mümkün olan en kısa yolu seçtikleri öne sürülmektedir. Bu durum, ulaşma ve çıkış için geçen ortalama sürenin daha kısa olmasıyla kanıtlanmaktadır. Burada gösterilen sonuçlar, her üç navigasyon görevi için tek bir katılımcıya aittir.Sanal navigasyon işlemi 79 saniyede tamamlanmıştır. Sarı ile işaretlenen yol boyunca gerçekleştirilen görev, fiziksel binadaki aynı yol üzerindeki performansla 46 saniye sürmüştür. Bırakma görevinde.Katılımcı, binadan çıkmak için mümkün olan en kısa yolu izledi. Yeni teknoloji kullanan görme engelli katılımcılarla çalışırken teşvik etmenin gerektiğini unutmayın. Bu demonstrasyona ve çalışmaya katılım gösterme konusundaki isteklilikleri ve ayırdıkları zaman için kendilerine minnettarız.

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

JoVE Journal

Medicine

Tıp

Anksiyete Bozuklukları (INTREPID) Tedavi için Sanal Gerçeklik Akıllı Çoklu sensör Sistem Projesi anksiyete bozukluklarının tedavisi için çoklu sensör, bağlam-duyarlı bir sanal gerçeklik sistemi geliştirilmesi hedeflenmektedir.

Klinik Sanal Gerçeklik Biofeedback kullanımı: INTREPID Projesi

Şizofrenide bilişsel bozukluklar için tedavi etkinliğini kanıtlamak için bir meydan okuma günlük işleyişi ile ilgili becerilerin ölçümü optimize bulgudur. Sanal Gerçeklik Fonksiyonel Kapasite Değerlendirme Aracı (VRFCAT) interaktif oyun tabanlı taban bozuklukları ve tedavi ile ilgili değişiklikler de dahil olmak üzere günlük işleyişi ile ilgili becerileri, yönelik bilgisayarlı ölçüsüdür.

Gündelik Yaşam Becerileri bir Sanal Gerçeklik Değerlendirmesi Gelişimi

Karmaşık iletişim ihtiyaçları Çocuklar konuşma üreten cihazı (SGD) kullanımından yararlanabilir. Bilişsel beceriler SGDs düzeyleri arasında gezinmek için yeteneği üzerinde bir etkiye sahip olduğu tespit edilmiştir. Bu protokol, bilişsel beceri ve yeteneklerini değerlendirmek üzere seyir Konuşma-dil Patologlar için gerekli adımları açıklar.

Bir Seyir Değerlendirilmesi içinde Bilişsel Görevler Pratik Yöntem

Bu kağıt üzerinde karar verme ve bir ağa bağlı bilgisayar laboratuvarı kullanarak gezinti çok kullanıcılı deneyler için bir yöntem açıklanır.

Bir ağa bağlı Masaüstü sanal gerçeklik kurulum karar bilim ve birden fazla katılımcı ile gezinti deneyler için

Burada sunulan rastgele nokta uyaranlara dayalı gamified algısal öğrenme yazılımı kullanarak stereocuity geliştirmek için bir protokoldür. Hastalar şaşılık olmayan stereo-eksik öznelerdir. Protokol, optometri merkezi ziyaretlerini yazılım kullanarak ev egzersizleri ile birleştiriyor. Uyumluluk ve stereocuity evrimi bulutta depolanır.

Random-Dot Video Oyunları kullanarak Stereoacuity İyileştirme

Sanal gerçeklik (VR), nörolojik hastalıkların tanı ve tedavisini ilerletmek için güçlü ancak az kullanılan bir yaklaşımdır. Cleveland Clinic Sanal Gerçeklik Alışveriş platformu, nörolojik hastalığın önerilen prodromal bir belirteci olan günlük yaşamın enstrümantal aktivitelerini ölçmek için son teknoloji VR içeriğini çok yönlü bir koşu bandı ile birleştirir.

Günlük Yaşamın Enstrümantal Aktivitelerinin Değerlendirilmesi için Sürükleyici Cleveland Clinic Sanal Gerçeklik Alışveriş Platformu

Bu protokol, olayla ilgili potansiyel tekniği uygulayarak sesli-dokunsal duyusal ikamede kısa bir eğitim süresinden sonra derin sağırlığı olan deneklerde öğrenmeyle ilgili elektrofizyolojik değişikliklerin altında yatan değişiklikleri araştırmak için tasarlanmıştır.

Derin Sağırlığı Olan Katılımcılarda Sesli Dokunsal Duyusal İkame Eğitiminin Olayla İlgili Potansiyel Tekniği Kullanılarak Değerlendirilmesi

Burada, hem uzamsal navigasyonu hem de epizodik hafıza yeteneğini değerlendiren yeni, kısa ve aktif bir uzamsal navigasyon görevi sunuyoruz. Daha da önemlisi, uzamsal navigasyon ve epizodik hafıza birbiriyle ilişkiliydi ve bu görev egzersize duyarlılık gösterdi.

Sanal Bir Alanda İnsan Mekansal Navigasyonunun ve Egzersize Duyarlılığının Değerlendirilmesi

Sanal gerçeklik ortamındaki motor görüntüleri, beyin-bilgisayar arayüz sistemlerinde geniş uygulamalara sahiptir. Bu el yazması, daldırmayı ve vücut sahipliği duygusunu geliştirmek için sanal gerçeklik ortamında katılımcı tarafından hayal edilen hareketleri gerçekleştiren katılımcılara benzeyen kişiselleştirilmiş dijital avatarların kullanımını özetlemektedir.

Sanal gerçeklik özellikli bir beyin-bilgisayar arayüzü ortamında somutlaştırılmış dijital ikizler aracılığıyla motor görüntü performansı

Donör hücre engraftman belirleme iyi tanımlanmış fenotipik belirteçlerin yoksun fare kemik iliği nakli modelleri bir meydan okuma sunuyor. Biz kadın transplant alıcı fareler erkek donör hücre uyumunu ölçmek için bir metodoloji tanımlamıştır. Bu yöntem, HSC fonksiyonların çalışması için tüm fare suşu olarak da kullanılabilir.

Rekabetçi bir mürin Kemik İliği Transplantasyon Modelinde Donör Hücre Aşı belirleme Kantitatif Gerçek-zamanlı PCR kullanarak

Öğrenin, ses tabanlı sanal ortam kullanarak görme engelli bireylerde navigasyon becerilerini nasıl geliştirebilirsiniz. Bu yöntem, sanal ortamda kazanılan becerilerin gerçek dünya navigasyonuna aktarılmasını sağlar.

Ses tabanlı Sanal Oyun Ortamı Geliştirilmesi Kör Navigasyon Becerileri ile Yrd etmek

Daha fazla video keşfet