Name: פיתוח של סביבת משחקים וירטואלית אודיו מבוססות המסייע במיומנויות ניווט בליינד (וידאו) | JoVE Journal
Uploaded: 2013-03-27T08:55:00.000+00:00
Duration: 9 min 1 s
Description: למד כיצד סביבת משחקים וירטואלית מבוססת אודיו מסייעת בפיתוח מיומנויות ניווט אצל אנשים עיוורים. השיטה מאפשרת העברת מיומנויות מהסביבה הווירטואלית למציאות הפיזית בבטיחות.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

המחברים מבקשים להודות לקאביח דאו, פאדמה Rajagopal, מול קונורס וצוות של קרול המרכז לעיוור (ניוטון מסצ&#39;וסטס, ארה&quot;ב) על תמיכתם בביצוע מחקר זה. עבודה זו נתמכה על ידי מענק NIH / ניי: RO1 EY019924.

1. דמוגרפיה משתתף זהו מחקר מתמשך שמגייס משתתפי גברים ונשים בגילים שבין 18-45 עיוורי שנים. כל המשתתפים הם עיוורים מהתחלה המוקדמת (שתועד לפני גיל 3) ושל שוני אטיולוגיה עינית. אף אחד מהמשתתפים במחקר היה בעבר הכיר היטב את המבנה המרחבי של המבנה הפיזי היעד. 2. הכנה והיכרות עם AbES <ol style=";text-align:right;direction:rtl"><li style=";text-align:right;direction:rtl"> ספק את המשתתף עם כיסוי עיניים ואוזניות ללבישה לאורך האימון ותהליך הערכה. ודא כי כיסוי העיניים ממוקם בנוחות על עיניים ואת האוזניות מכוונות כראוי וממוקמות מעל האוזניים (כלומר רמקול השמאלי מעל אוזן שמאל). </li><li style=";text-align:right;direction:rtl"> משתתף רכבת כיצד להשתמש במקשים שהוקצו והמידע המיוצג על ידי רמזי אודיו בAbES. באמצעות משייכות מפתח ספציפיות (איור 3), משתמש מנווט ובוחןבנייה כמעט (לנוע קדימה, ימינה או שמאלה). כל צעד וירטואלי מתקרב צעד אחד בבניין הפיזי האמיתי. </li><li style=";text-align:right;direction:rtl"> היכרות עם חוקים ונחת יסוד של המשחק. </li><li style=";text-align:right;direction:rtl"> היכרות עם רמזים ספציפיים למשחק שמע (למשל צליל של תכשיטים וסאונד של מפלצות סמוכות איתור). כמשתמש מנווט בבניין, מידע מרחבים מבוססים שמיעתי וקשר הוא רכש ברצף, והוא באופן דינמי מעודכן. מידע מרחבים וצבייה מבוסס על אותות קול וייצוג מרחבי אייקונים הניתנים לאחר כל צעד שנעשה. אורינטציה מבוססת על כותרות קרדינל מצפן (למשל &quot;צפון&quot; או &quot;מזרח&quot;) וטקסט דרך דיבור (TTS) משמש כדי לספק מידע נוסף לגבי המיקום הנוכחי של משתמש, התמצאות וכותרת (לדוגמה: &quot;אתה נמצא במסדרון על 1 רצפה, מול מערב &quot;), כמו גם את זהותו של חפצים ומכשולים בדרכם (למשל:&quot; זה הוא דלת &quot;). רמזי מרחק מסופקים בהתבסס on עוצמת צליל ויסות. הלוקליזציה המרחבית של הצלילים מתעדכנת כדי להתאים הכותרת האגוצנטרית של המשתמש. בעיקרון, תוכנה נועדה להפעיל קובץ שמע מתאים כפונקציה של המיקום וכיוון האגוצנטרי של המשתמש ועוקבת אחר המיקום של המשתמש, כאשר הם עוברים דרך הסביבה. לדוגמה, אם דלת ממוקמת בצדו הימני של האדם, קול הנקישה נשמע באוזן ימין של המשתמש (כלומר התוכנה מנגנת קובץ אודו של קול נקישה בערוץ הנכון). אם האדם עכשיו מסתובב 180 מעלות, כך שאותה הדלת ממוקמת כעת בצד השמאל שלהם, באותו הקול נקישה עכשיו שמע בערוץ השמאל (כלומר התוכנה מנגנת קובץ אודו של קול נקישה בערוץ השמאל). לבסוף, אם המשתמש מול הדלת, באותו הקול הנקישה נשמע בשתי האוזניים באופן שווה. על ידי שמירה על מסלול של הכותרת האגוצנטרית של המשתמש, התוכנה יכולה לנגן את הצלילים המקומיים מרחביים המתאימים המזהיםהנוכחות והמיקום של אובייקטים ולעקוב אחר שינויים אלה כמשתמש מעבירים באמצעות הסביבה הווירטואלית. ראה איור 4. </li></ol> 3. הדרכה ומשחק עם AbES (3 מושבים בכל 30 דקות שנמשכות בסך של 1.5 שעות) <ol style=";text-align:right;direction:rtl"><li style=";text-align:right;direction:rtl"> אפשר למשחק חופשי לשחק ושים לב לקשיים ואתגרים (כלומר שימוש של משייכות מפתח, רמזי אודיו, תחומי הניווט קשה). חיזוקים והבהרות חיוביים מסופקים בסוף כל אימון. </li><li style=";text-align:right;direction:rtl"> ביצועי משחק שיא (מספר, זמן ומיקום שבו משתתף מוצא תכשיט לדוגמה). </li></ol> 4. להעריך את ביצועי משימות ניווט וירטואליים <ol style=";text-align:right;direction:rtl"><li style=";text-align:right;direction:rtl"> להסביר למשתתף את הפרטים של הבדיקה ולספק הוראות כיצד להשלים את משימות ניווט הווירטואליות. המשתתף ישלים 10 משימות ניווט קבוע מראש המוצגות ברצף שימוש בתוכנת AbES (כלומר פעם אחת particiצפצף הצלחה משלים את המשימה הראשונה, מחשב באופן אוטומטי מחדש לאתר אותם לנקודת ההתחלה של המשימה הבאה). </li><li style=";text-align:right;direction:rtl"> להודיע ​​למשתתף כי יהיה להם מקסימום של 6 דקות כדי להשלים כל משימת ניווט. </li><li style=";text-align:right;direction:rtl"> 10 נתיבי ניווט וירטואליים של קושי דומה (כלומר מרחק נסע ומספר הסיבובים) נבחרים על הבסיס קבוע מראש של 10 זיווגי התחלה ולהפסיק מקומות (כלומר חדרים). באופן ספציפי, המגוון של צעדים הדרושים כדי לנווט את מסלול היעד נע בין 25-35 שלבים (בסביבה הווירטואלית) ושלב בין סיבובי 3-4 של 90 מעלות. </li><li style=";text-align:right;direction:rtl"> טען את 10 זוגות הניווט לAbES למצגת אוטומטית ולכידה נתונים של ביצועים. </li><li style=";text-align:right;direction:rtl"> מדדי תוצאות נרשמים באופן אוטומטי באמצעות התוכנה הפנימית &#39;AbES. מדדי תוצאות כוללים: סיום מוצלח של המשימה, והזמן שלוקח להגיע ליעד הניווט. ראה איור 5 א. </li><li style=";text-align:right;direction:rtl"> הוראות דescribing מיקום ההתחלה ויעד היעד ניתן באופן אוטומטי על ידי תוכנת AbES בתחילת כל משימה. עיתוי מתחיל מייד ברגע שלוקח את נושא הצעד הווירטואלי הראשון שלהם מנקודת ההתחלה ומסתיים ברגע שהגיע למיקום היעד (אלא אם כן הזמן לוקח יותר זמן מאשר 6 דקות, שלריצה היא בקיע כשלם ואת הדרך הבאה מוצגת). נתונים שנתפסו נשלחו באופן אוטומטי לקובץ טקסט ולאחר מכן פתחו במסד נתונים / תוכנות סטטיסטיות לניתוח נוסף. </li></ol> 5. להעריך את ביצועי משימות ניווט גופניים <ol style=";text-align:right;direction:rtl"><li style=";text-align:right;direction:rtl"> להסביר למשתתף את הפרטים של הבדיקה ולספק הוראות כיצד להשלים את משימות ניווט הפיזיות. המשתתף ישלים 10 משימות שנקבעו מראש (ניווט מוצג במקושקש הזמנה מהערכת הביצועים הווירטואלית הקודמת) ותחת פיקוחו של חוקר מנוסה. </li><li style=";text-align:right;direction:rtl"> ליידע את המשתתף יהיה להם maxiאמא של 6 דקות כדי להשלים כל משימת ניווט. לצורך משימת הניווט הפיסית, המשתתף מותר להשתמש במקל הלבן שלהם לתמיכה בניידות. </li><li style=";text-align:right;direction:rtl"> 10 נתיבי ניווט פיסיים נבחרים על בסיס קבוע מראש של 10 זיווגי התחלה ומקומות עצירה (כלומר חדרים) קושי דומה (כלומר מרחק נסע ומספר הסיבובים). </li><li style=";text-align:right;direction:rtl"> חוקר מכין שעון עצר ולוח עם רשימה של משימות ניווט לניקוד ידני של ביצועים. </li><li style=";text-align:right;direction:rtl"> מדדי תוצאות נרשמים באופן ידני על ידי החוקר. מדדי תוצאות כוללים: סיום מוצלח של המשימה, והזמן שלוקח להגיע ליעד הניווט. </li><li style=";text-align:right;direction:rtl"> &quot;כיכר הפעמית&quot; המשתתף (משתתף עם דלת מיקום ההתחלה מאחוריהם עמדה, כלומר). הוראות המתארות את מיקום ההתחלה ויעד היעד מסופקות על ידי החוקר בתחילת כל משימה. העיתוי מתחיל מייד לאחר tak הנושאes הצעד הראשון שלהם פיזי מנקודת ההתחלה ומסתיים כאשר המשתתף מילולי מדווח שהגיע ליעד (אלא אם כן הזמן לוקח יותר זמן מאשר 6 דקות, שלריצה היא בקיע כשלם ואת הדרך הבאה מוצגת). נתונים מתועדים נרשמים באופן ידני ולאחר מכן הועברו לבסיס נתונים / תוכנה סטטיסטית לניתוח נוסף. ראה איור 5 ב. </li></ol> 6. הערך בגלילה פיזית את ביצוע משימה <ol style=";text-align:right;direction:rtl"><li style=";text-align:right;direction:rtl"> להסביר למשתתף את הפרטים של הבדיקה ולספק הוראות כיצד להשלים את הירידה הפיסית את משימות ניווט. המשתתף ישלים 5 משימות ניווט עם מטרות של יציאה מהבניין באמצעות מסלול הקצר ביותר האפשרי, ותחת פיקוחו של חוקר מנוסה. </li><li style=";text-align:right;direction:rtl"> להודיע ​​למשתתף כי יהיה להם מקסימום של 6 דקות כדי להשלים כל משימת ניווט. לצורך הירידה הפיסית את משימת ניווט, המשתתף מותרלהשתמש במקל הלבן שלהם לתמיכה בניידות. </li><li style=";text-align:right;direction:rtl"> 5 מיקומים שנקבעו מראש החל פיסיים משמשים כזה ש3 נתיבי יציאה של אורכים שונים אפשריים. </li><li style=";text-align:right;direction:rtl"> חוקר מכין שעון עצר ולוח עם רשימה של משימות ניווט לניקוד ידני של ביצועים. </li><li style=";text-align:right;direction:rtl"> מדדי תוצאות נרשמים באופן ידני על ידי החוקר. מדדי תוצאות כוללים: סיום מוצלח של המשימה, והזמן שלוקח להגיע ליעד הניווט. יתר על כן, נתיבים מקבלים נקודות כך שהמסלול הקצר לקח ניתן נקודות מרביות (3 כלומר למסלול הקצר ביותר, 2 ל2, 1 לארוך ביותר, ו0 עבור לא להיות מסוגל להשלים את המשימה). ראה איור 5 ג. </li><li style=";text-align:right;direction:rtl"> &quot;כיכר הפעמי&quot; המשתתף במיקום הראשון מתחיל. הוראות המתארות את מיקום התחילה מסופקות על ידי החוקר בתחילת כל משימה. עיתוי מתחיל מייד ברגע שלוקח את נושא הצעד הפיזי הראשון שלהם מנקודת ההתחלה ומסתייםכאשר המשתתף מילולי מדווח שהגיע לדלת יציאה של הבניין (אלא אם כן הזמן לוקח יותר זמן מאשר 6 דקות, שלריצה היא בקיע כשלם ומיקום ההפעלה הבא מוצגת). נתונים מתועדים נרשמים באופן ידני ולאחר מכן הועברו לבסיס נתונים / תוכנה סטטיסטית לניתוח נוסף. </li></ol>

<ol><li>Loomis, J. M., Klatzky, R. L., Golledge, R. G. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Navigating+without+vision%3A+basic+and+applied+research%5BTitle%5D)+AND+%22Optom.+Vis.+Sci%22%5BJournal%5D)">Navigating without vision: basic and applied research.</a> Optom. Vis. Sci. 78, 282-289 (2001).</li>
<li>Siegel, A. W., White, S. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+development+of+spatial+representations+of+large-scale+environments%5BTitle%5D)+AND+%22Adv.+Child+Dev.+Behav%22%5BJournal%5D)">The development of spatial representations of large-scale environments.</a> Adv. Child Dev. Behav. 10, 9-55 (1975).</li>
<li>Strelow, E. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+is+needed+for+a+theory+of+mobility%3A+direct+perception+and+cognitive+maps--lessons+from+the+blind%5BTitle%5D)+AND+%22Psychol.+Rev%22%5BJournal%5D)">What is needed for a theory of mobility: direct perception and cognitive maps--lessons from the blind.</a> Psychol. Rev. 92, 226-248 (1985).</li>
<li>Giudice, N. A., Bakdash, J. Z., Legge, G. E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Wayfinding+with+words%3A+spatial+learning+and+navigation+using+dynamically+updated+verbal+descriptions%5BTitle%5D)+AND+%22Psychol.+Res%22%5BJournal%5D)">Wayfinding with words: spatial learning and navigation using dynamically updated verbal descriptions.</a> Psychol. Res. 71, 347-358 (2007).</li>
<li>Ashmead, D. H., Hill, E. W., Talor, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Obstacle+perception+by+congenitally+blind+children%5BTitle%5D)+AND+%22Percept.+Psychophys%22%5BJournal%5D)">Obstacle perception by congenitally blind children.</a> Percept. Psychophys. 46, 425-433 (1989).</li>
<li>Dede, C. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Immersive+interfaces+for+engagement+and+learning%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Immersive interfaces for engagement and learning.</a> Science. 323, 66-69 (2009).</li>
<li>Bavelier, D., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Brains+on+video+games%5BTitle%5D)+AND+%22Nat.+Rev.+Neurosci%22%5BJournal%5D)">Brains on video games.</a> Nat. Rev. Neurosci. 12, 763-768 (2011).</li>
<li>Bavelier, D., Green, C. S., Dye, M. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children%2C+wired%3A+for+better+and+for+worse%5BTitle%5D)+AND+%22Neuron%22%5BJournal%5D)">Children, wired: for better and for worse.</a> Neuron. 67, 692-701 (2010).</li>
<li>Lange, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Designing+informed+game-based+rehabilitation+tasks+leveraging+advances+in+virtual+reality%5BTitle%5D)+AND+%22Disabil.+Rehabil%22%5BJournal%5D)">Designing informed game-based rehabilitation tasks leveraging advances in virtual reality.</a> Disabil. Rehabil. , (2012).</li>
<li>Merabet, L., Sánchez, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Audio-based+Navigation+Using+Virtual+Environments%3A+Combining+Technology+and+Neuroscience%5BTitle%5D)+AND+%22AER+Journal%3A+Research+and+Practice+in+Visual+Impairment+and+Blindness%22%5BJournal%5D)">Audio-based Navigation Using Virtual Environments: Combining Technology and Neuroscience.</a> AER Journal: Research and Practice in Visual Impairment and Blindness. 2, 128-137 (2009).</li>
<li>Kalia, A. A., Legge, G. E., Roy, R., Ogale, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Assessment+of+Indoor+Route-finding+Technology+for+People+with+Visual+Impairment%5BTitle%5D)+AND+%22J.+Vis.+Impair.+Blind%22%5BJournal%5D)">Assessment of Indoor Route-finding Technology for People with Visual Impairment.</a> J. Vis. Impair. Blind. 104, 135-147 (2010).</li>
<li>Lahav, O., Schloerb, D. W., Srinivasan, M. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Newly+blind+persons+using+virtual+environment+system+in+a+traditional+orientation+and+mobility+rehabilitation+program%3A+a+case+study%5BTitle%5D)+AND+%22Disabil.+Rehabil.+Assist+Technol%22%5BJournal%5D)">Newly blind persons using virtual environment system in a traditional orientation and mobility rehabilitation program: a case study.</a> Disabil. Rehabil. Assist Technol. , (2011).</li>
<li>WHO | Global trends in the magnitude of blindness and visual impairment [Internet]. , World Health Organization (WHO). Available from:
		
	 <a target="_blank" href="http://www.who.int/blindness/causes/trends/en/index.html">http://www.who.int/blindness/causes/trends/en/index.html</a> (2012).</li>
</ol>

המחברים מצהירים ניגודי אינטרסים.

אנו מתארים סימולטור אינטרקטיווי אודים וירטואליים מבוסס סביבה שנועד לשפר את כישורי ניווט מודעות המרחבית בכלל ובעיוור. אנו מראים כי אינטראקציה עם AbES מספקת רמזים מדויקים המתארים את היחסים מרחביים בין אובייקטים והפריסה הכוללת של סביבת היעד. משתמשים עיוורים יכולים להפיק מפות קוגניטיביות מרחביים מדויקות המבוססות על מידע שמיעתי זה ועל ידי אינטראקציה עם הסביבה הווירטואלית immersive. יתר על כן, אינטראקציה עם AbES בהקשר של דימוי משחק מראה כי מבנים קוגניטיביים מרחביים ניתן ללמוד במרומז ולא...

למצוא את דרכו של אדם בסביבה לא מוכרת מתנות כמו אתגר משמעותי לעיוורים. ניווט בהצלחה דורשת הבנה של יחסים מרחביים שקיימים בין העצמי והאובייקטים בסביבתו של 1,2 1. ייצוג מנטלי המתאר סביב החלל המכונה הקוגניטיבית 3 מפת מרחבית. אנשים עיוורים יכולים לאסוף מידע המרחבי רלוונטי לגבי הסביבה המקיפה אותם בערוצים חושיים אחרים (כמו ששמע) המאפשרים לדור של מפת קוגניטיבית מרחבית מדויקת לצרכי ניווט המשימות בעולם אמיתית 4,5. עניין רב התעורר לגבי הפוטנציאל החינוכי של סביבות וירטואליות ומשחקי וידאו פעולה כאמצעי ללמוד ולשלוט במיומנויות 6-9. אכן, אסטרטגיות וגישות רבות פותחו לעיוורים למטרה זו (ראה 4,10-12). פתחנו אאודיסימולטור o מבוססת הסביבה (AbES); סביבה וירטואלית של משתמש במרכז אודיו מבוסס המאפשרת ניווט וחיפוש מדומה של מבנה פיזי קיים. ציור מתוכניות מקוריות אדריכליות רצפה, טיוח וירטואלי של בניין מודרני בן שתי קומות (הממוקמת בקרול המרכז לעיוור; ניוטון, MA) נוצר עם תוכנת AbES (איורים 1 א &#39;וב&#39;). AbES משלב מטאפורה משחק פעולה עם נחת יסוד שנועדה לקדם את חקר מלא של שטח הבניין. באמצעות הקשות פשוטות ורמזים קוליים ייצוג מרחבים, למשתמשים לנווט ולסרוק את הבניין כדי לאסוף את מספר מרבי של תכשיטים שהוסתרו בחדרים שונים. משתמשים חייבים להימנע משוטטות מפלצות שיכול להוציא אותם ולהסתיר אותם במקום אחר בבניין (התרשים 1C). אנו מראים כי אינטראקציה עם AbES מאפשרת למשתמש עיוור כדי לייצר מפה מדויקת מרחבית הקוגניטיבי של בניין היעד בהתבסס על מידע שמיעתיcquired בהקשר של דימוי משחק פעולה. זה אושר על ידי סדרה של בדיקות ביצועים התנהגותיים שלאחר אימון שנועדו לבחון את העברת המידע המרחבי רכש מסביבה וירטואלית למשימת ניווט מקורה עולם אמיתי, בקנה מידה גדול (ראה איור 2 לתכנון מחקר הכללי). התוצאות שלנו מראות שמשתמשים עיוורים יכולים לנווט בהצלחה לאורך כל בניין שהם היו בעבר לא מוכרים, למרות ששום שעה שהודיע ​​לו את המטרה הכוללת של המחקר, והם גם הורו לזוכרים את הפריסה המרחבית של בנייה בעת ששחק את המשחק.

<table border="1" style=";text-align:right;direction:rtl"><tbody><tr><td> שם ציוד </td><th > תגובות </td></tr><tr><td> מחשב נייד </td><td > מחשב נייד המשמש באופן בלעדי למשתתפי הכשרה ואת איסוף נתונים </td></tr><tr><td> ראש טלפוני סטריאו (עיצוב circumaural סגור לחלוטין) </td><td > משוחק על ידי כל המשתתפים במהלך אימון </td></tr><tr><td> לקשור עינים </td><td > משוחק על ידי כל המשתתפים במהלך אימונים ובדיקות </td></tr></tbody></table>

פיתוח של סביבת משחקים וירטואלית אודיו מבוססות המסייע במיומנויות ניווט בליינד

Development of an Audio-based Virtual Gaming Environment to Assist with Navigation Skills in the Blind

סימולטור סביבת אודיו המבוסס (AbES) הוא תוכנה לסביבה וירטואלית שנועדה לשפר את כישורי ניווט של עולם אמיתיים בעיוור. רק באמצעות רמזים מבוססי האודים ונקבעו בהקשר של דימוי משחק וידאו, משתמשים לאסוף מידע המרחבי רלוונטי לגבי פריסתו של בניין. זה מאפשר למשתמש לפתח מפה קוגניטיבית המרחבי מדויקת של מרחב בקנה מידה גדול תלת ממדים שניתן לטפל לצורך משימת ניווט מקורה אמיתית. לאחר משחק, משתתפים העריכו אז על היכולת שלהם לנווט בתוך המבנה הפיזי היעד מיוצג במשחק. תוצאות ראשוניות מצביעות על כך שהמשתמשים עיוורים המוקדמים היו מסוגלים להשיג מידע רלוונטי בנוגע לפריסה המרחבית של בניין בעבר לא מוכר כמו באינדקס של הביצועים שלהם בסדרה של משימות ניווט. משימות אלה כללו מציאת נתיב דרך הבניין הווירטואלי ופיזי, כמו גם סדרה של טיפה את המשימות. אנו מוצאים כי immersiveוהאופי אינטרקטיווי של תוכנת AbES מופיע לעסוק משתמש העיוור מאוד אקטיבי כדי לחקור את הסביבה הווירטואלית. יישומים של גישה זו עשויים להאריך את האוכלוסיות גדולות של אנשים לקויים ראייה.

תוצאות משלושה משתתפים עיוורים מוקדמים (בגילים שבין 19 ל 22 שנים) מוצגות (ראה טבלת מס &#39;1 למאפייני משתתף). לסיכום, כל שלושת המשתתפים הראו רמה גבוהה של הצלחה בכל השלוש משימות הניווט בעקבות משחק עם תוכנת AbES. זה אושר על ידי הציונים (ממוצע ביצועי קבוצה והיחיד) בכל השלוש המשימות התנהגותיות (ראה איור 6). ביצוע הנכון האחוז לוירטואלי (ממוצע: 90%) ואחריו פיזי (ממוצע: 88.7%) משימות ניווט ממחישה רמה גבוהה של הצלחה וביצועים דומים לשתי המשימות (איו...

סימולטור סביבת אודיו המבוסס (AbES) הוא תוכנה לסביבה וירטואלית שנועדה לשפר את כישורי ניווט של עולם אמיתיים בעיוור.

Audio-based Environment Simulator (AbES) is virtual environment software designed to improve real world navigation skills in the blind. Using only audio ...

המטרה הכוללת של הניסוי הבא היא להדגים כי אינטראקציה עם סביבה וירטואלית מאפשרת העברה של מיומנויות ניווט מרחבי שניתן להעריכן מאוחר יותר בסביבה הפיזית בפועל. דבר זה מושג תחילה על ידי למידת לחיצות המקשים המשמשות לניווט בסביבה הוירטואלית במהלך המשחק. לאחר מכן, המשתתפים לומדים כיצד לזהות צלילים המאפשרים את זיהוי העצמים ומיקומם היחסי.לאחר המשחק, מוצגות סדרה של משימות ניווט וירטואליות ופיזיות על מנת להעריך את הבנתם המרחבית של הסביבה. התוצאות שהתקבלו מראות כי המשתתפים מסוגלים לנווט בבניין פיזי ממשי שיוצג על ידי הסביבה הווירטואלית במהלך המשחק. היתרון המרכזי של טכניקה זו על פני שיטות קיימות, כגון אימוני אוריינטציה וניידות סטנדרטיים, הוא שניתן ללמוד את הפריסה המרחבית של בניין שאינו מוכר באמצעות חקירה וירטואלית באופן בטוח ומבוקר.את הפרוצדורה הזו ידגימו אהרון קונורס (Aaron Connors) ולינדזי אינו (Lindsey Aino), שניהם רכזי מחקר במעבדה שלי. המשתתפים במחקר זה הם עיוורים מבחינה משפטית ואין להם ידע מוקדם על המבנה המרחבי של הבניין המהווה את היעד ללמידה, וכן הם אינם מודעים למטרה הכללית של המשחק בכל הנוגע ללמידת המבנה המרחבי של הבניין. לתחילת הפרוצדורה, ספקו למשתתף כיסוי עיניים ואוזניות.ודאו שהאוזניות ממוקמות כראוי על האוזניים. לאחר מכן, הנחו את המשתתף כיצד להשתמש במקשים שהוקצו לו ובמידע המוצג על ידי הרמזים הקוליים בסביבה מבוססת השמע Simulator. לניווט וסיור בסביבה הווירטואלית משמשים מקשים ספציפיים כפי שניתן לראות כאן.כל שלב וירטואלי מקבב שלב אחד במבנה הפיזי האמיתי. לאחר הסבר על הבקרים, הסבר את הנחת היסוד ואת כללי המשחק. יידע את המשתתף לגבי הרמזים הקוליים השונים המשמשים במהלך המשחק.לדוגמה, בעת איתור תכשיטים או מפלצות בקרבת מקום בזמן שהמשתמש מנווט בבניין, מידע שמיעי ומרחבי נרכש באופן רצפי ומעודכן דינמית לאחר כל צעד הננקט בסביבה הווירטואלית. טכנולוגיית המרת טקסט לדיבור משמשת למתן מידע נוסף לגבי מיקומו הנוכחי של המשתמש, אוריינטציה וכיוון התקדמות, וכן לגבי זהותם של חפצים ומכשולים בדרכו. הלוקליזציה המרחבית של הצלילים מעודכנת כדי להתאים לכיוון הפנייה האגוצנטרי של המשתמש.לדוגמה, אם דלת ממוקמת בצדו הימני של האדם, צליל הנקישה יישמע באוזנו הימנית של המשתמש. אם האדם מסתובב כעת ב-180 מעלות כך שהדלת אותה דלת ממוקמת כעת בצדו השמאלי, צליל הנקישה הזה יישמע כעת בערוץ השמאלי. אפשרו למשתתף לשחק במשחק במשך שלושה מפגשים של 30 דקות.יש לסמן כל קושי או אתגר המתרחשים במהלך המשחק, ולאחר כל מפגש אימון, לספק חיזוק חיובי וכל הבהרה או הנחיה נוספת. לאחר מכן, יש לדרג את ביצועיהם במשחק על ידי ספירת המספר, הזמן והמיקום שבהם המשתתף מצא Juul. כדי לבחון את הביצועים במטלת הניווט הווירטואלית, הסבירו למשתתף כי הוא ישליים 10 מטלות ניווט שנקבעו מראש ויוצגו ברצף על ידי תוכנת Abes.המסלולים הם ברמת קושי דומה ונבחרים על בסיס צימודים שנקבעו מראש של 10 מיקומי התחלה וסיום. בתחילת כל משימה, יש להודיע למשתתף כי יעמוד לרשותו זמן מקסימלי של שש דקות להשלמתה.הוראות המתארות את נקודת ההתחלה ואת יעד היעד מסופקות באופן אוטומטי. התזמון מתחיל באופן אוטומטי ברגע שהמשתתף מקבל את ההוראה הקולית ומסתיים עם הגעתו למיקום היעד. עם הגעתם למיקום היעד, מדדי התוצאה נרשמים באופן אוטומטי וכוללים את ההשלמה המוצלחת של משיבת הניווט ואת הזמן שנדרש להגעה ליעד.כדי לבחון את ביצועי המשתתף במיקום הפיזי, הסבירו כי יינתנו לו 10 משימות ניווט שנקבעו מראש, תחת פיקוחו של חוקר מנוסה. יידעו את המשתתף כי יעמוד לרשותו זמן מקסימלי של שש דקות להשלמת כל משימה, וכי הוא רשאי להשתמש במקל להסתמכות בניידות.הכינו סטופר, את רשימת משימות הניווט ולוח כתיבה לדירוג ידני. הגדירו למשתתף את גבולות התנועה ותארו את נקודת ההתחלה ואת יעד היעד. מדידת הזמן תתחיל מיד עם הצעד הראשון של הנבדק ותסתיים עם הגעתו.כאשר המשתתף מדווח בעל פה על הגעתו ליעד, נרשמים השלמתו המוצלחת של המשימה והזמן שנדרש להגעה למטרה. הסבירו למשתתף כי עליו להשלים חמש משימות ניווט שמטרתן היא לצאת מהבניין באמצעות המסלול הקצר ביותר האפשרי. תחת פיקוח של חוקר מנוסה, הודעו למשתתף כי יעמוד לרשותו זמן מקסימלי של שש דקות להשלמת כל משימת ניווט, וכי הוא רשאי להשתמש במקל להשערת ניידות.נעשה שימוש בחמישה מיקומי התחלה שנקבעו מראש, כך שניתן להגיע לשלוש דרכי יציאה שונות באורכן ובמורכבותן. הכינו סטופר, את רשימת משימות הניווט ולוח כתיבה לדירוג ידני. הציבו את המשתתף במיקום המיועד ותארו לו את נקודת ההתחלה.התזמון מתחיל מיד עם הצעד הראשון ומסתיים כאשר המשתתף מדווח בעל פה על הגעתו לדלת יציאה מהבניין. נרשמים השלמתו המוצלחת של משימת ההורדה, המסלול שבו נסע והזמן שנדרש ליציאה מהבניין. יתרה מכך, המסלולים מקבלים ניקוד כך שהמסלול הקצר ביותר שווה ליותר נקודות מאשר מסלולים ארוכים יותר.הביצועים הממוצעים של שלושה משתתפים במטלות הניווט מוצגים כאן. אחוז התשובות הנכונות במטלות הניווט הווירטואליות והפיזיות ממחיש רמת הצלחה גבוהה בשתי המטלות. הזמן הדרוש לניווט אל היעד היה ארוך יותר בניווט וירטואלי בהשוואה לביצועים הפיזיים.במשימת הירידה, נראה כי המשתתפים בחרו לעיתים קרובות במסלול הקצר ביותר האפשרי כדי לצאת מהבניין. דבר זה בא לידי ביטוי בזמן הממוצע הקצר יותר שנדרש כדי להגיע ליציאה ולצאת ממנה. התוצאות המוצגות כאן הן של משתתף בודד בכל שלוש משימות הניווט.במהלך הניווט הווירטואלי, השלמת הפעולה ארכה 79 שניות. המשימה, כפי שנראית במסלול המסומן בצהוב, ארכה 46 שניות בביצוע באותו מסלול בבניין הפיזי. במשימת ההורדה.המשתתף סלק בנתיב הקצר ביותר האפשרי כדי לצאת מהבניין. אין לשכוח שעבודה עם משתתפים עיוורים המשתמשים בטכנולוגיה חדשה דורשת עידוד. אנו אסירי תודה על זמנם ועל נכונותם להשתתף בהדגמה ובמחקר זה.

development-an-audio-based-virtual-gaming-environment-to-assist-with

Research

JoVE Journal

Medicine

רפואה

פרויקט על Virtual Reality System Intelligent Multi-חיישן לטיפול בנושא הפרעות חרדה (ללא חת) נועד לפתח רב חיישן הקשר מודעים מערכת מציאות מדומה לטיפול בנושא הפרעות חרדה.

השימוש ביופידבק במציאות מדומה קליני: פרויקט ללא חת

אתגר להוכחת יעילות טיפול בליקויים קוגניטיביים בסכיזופרניה הוא למצוא את מדידת אופטימיזציה של מיומנויות הקשורות לתפקוד יומיומי. הכלי הוירטואלי המציאות פונקציונלי הערכת קיבולת (VRFCAT) הוא משחקים אינטראקטיביים המבוססים מידה ממוחשבת שמטרתם כישורים הקשורים בתפקוד יומיומי, כוללים ליקויים בסיסיים ושינויי טיפול בנושא.

פיתוח של הערכת מציאות מדומה של מיומנויות חיי היומיום

ילדים שיש להם צרכי תקשורת מורכבים יכולים ליהנות מהשימוש במכשיר מניבי דיבור (SGD). כישורים קוגניטיביים זוהו כבעלי השפעה על היכולת לנווט בין הרמות של SGDs. פרוטוקול זה מתאר את הצעדים דרושים לפתולוגים דיבור בשפה כדי להעריך את הכישורים קוגניטיביים ויכולות ניווט.

מתודולוגיה המעשית של משימות קוגניטיביות בתוך הערכת ניווט

מאמר זה מתאר שיטה עבור ניסויים מרובת משתמשים על קבלת החלטות, ניווט באמצעות מעבדה מחשב מרושת.

מלכודת ברשת מציאות מדומה של שולחן העבודה עבור ההחלטה מדע, ניסויים ניווט עם משתתפים מרובים

המוצג כאן הוא פרוטוקול לשיפור הסטריאוחדות באמצעות תוכנת למידה תפיסתית מגמרית המבוססת על גירוי בנקודה אקראית. חולים הם נושאים לקוי סטריאו ללא פזילה. הפרוטוקול משלב ביקורים אופטומטריה center עם תרגילי בית באמצעות תוכנה. האבולוציה של התאימות והסטריאוחדות מאוחסנות בענן הצמתים.

שיפור בחדות באמצעות משחקי וידאו אקראיים

מציאות מדומה (VR) היא גישה רבת עוצמה אך לא מנוצלת לקידום האבחון והטיפול במחלות נוירולוגיות. פלטפורמת הקניות מציאות מדומה של קליבלנד קליניק משלבת תוכן VR משוכלל עם הליכון רב-כיווני כדי לכמת פעילויות אינסטרומנטליות של חיי היומיום - סמן פרודרומלי מוצע של מחלות נוירולוגיות.

פלטפורמת קניות המציאות המדומה Immersive של קליבלנד קליניק להערכת פעילויות אינסטרומנטליות של חיי היומיום

פרוטוקול זה נועד לחקור את השינויים האלקטרופיזיולוגיים הבסיסיים הקשורים ללמידה אצל נבדקים עם חירשות עמוקה לאחר תקופת אימון קצרה בהחלפה חושית אודיו-מישושית על ידי יישום טכניקת הפוטנציאל הקשורה לאירוע.

הערכה של אימון החלפה חושית אודיו-מישושית במשתתפים עם חירשות עמוקה באמצעות טכניקת הפוטנציאל הקשורה לאירוע

כאן אנו מציגים מטלת ניווט מרחבית חדשנית, קצרה ופעילה המעריכה הן את יכולת הניווט המרחבי והן את יכולת הזיכרון האפיזודי. חשוב לציין שניווט מרחבי וזיכרון אפיזודי היו קשורים זה לזה, ומשימה זו הפגינה רגישות לפעילות גופנית.

הערכת ניווט מרחבי אנושי במרחב וירטואלי ורגישותו לפעילות גופנית

לדימוי מוטורי בסביבת מציאות מדומה יש יישומים רחבים במערכות ממשק מוח-מחשב. כתב יד זה מתאר את השימוש באווטארים דיגיטליים מותאמים אישית הדומים למשתתפים המבצעים תנועות שדמיין המשתתף בסביבת מציאות מדומה כדי לשפר את הטבילה ואת תחושת הבעלות על הגוף.

ביצועי דימויים מוטוריים באמצעות תאומים דיגיטליים מגולמים בסביבת ממשק מוח-מחשב התומכת במציאות מדומה

קביעת engraftment תא התורם מציגה אתגר במודלי עכבר השתלות מח עצם שאין מוגדרים היטב סמני phenotypical. אנו תארנו המתודולוגיה לכמת engraftment תא התורם גברי בעכברי השתלה נשיות. שיטה זו ניתן להשתמש בכל זני העכבר לחקר פונקציות HSC.

באמצעות PCR כמוני בזמן אמת לקביעת engraftment תא התורם במודל תחרותי Murine מח עצם השתלה

למד כיצד סביבת משחקים וירטואלית מבוססת אודיו מסייעת בפיתוח מיומנויות ניווט אצל אנשים עיוורים. השיטה מאפשרת העברת מיומנויות מהסביבה הווירטואלית למציאות הפיזית בבטיחות.

פיתוח של סביבת משחקים וירטואלית אודיו מבוססות המסייע במיומנויות ניווט בליינד

גלה סרטונים נוספים