تطوير بيئة المستندة إلى الصوت الألعاب الافتراضية للمساعدة في مهارات التنقل في مكفوفين

الهدف العام للتجربة التالية هو إثبات أن التفاعل مع بيئة افتراضية يسمح بنقل مهارات التنقل المكاني التي يمكن تقييمها لاحقا في البيئة المادية الفعلية. يتم تحقيق ذلك من خلال التعلم الأول ، ضغطات المفاتيح المستخدمة للتنقل في البيئة الافتراضية أثناء اللعب. بعد ذلك ، يتعلم المشاركون كيفية تحديد الأصوات التي تسمح بتحديد الأشياء وموقعها النسبي.

بعد اللعب ، يتم تقديم سلسلة من مهام التنقل الافتراضية والمادية من أجل تقييم فهمهم المكاني للبيئة. يتم الحصول على النتائج التي تظهر أن المشاركين قادرون على التنقل عبر مبنى مادي حقيقي تم تمثيله بالبيئة الافتراضية أثناء اللعب. الميزة الرئيسية لهذه التقنية على الأساليب الحالية ، مثل التوجيه القياسي والتدريب على التنقل ، هي أنه يمكن تعلم التخطيط المكاني لمبنى غير مألوف من خلال الاستكشاف الافتراضي بطريقة آمنة وخاضعة للرقابة.

سيوضح هذا الإجراء آرون كونورز وليندسي أينو ، وكلاهما منسق دراسة في مختبري. المشاركون في هذه الدراسة مكفوفون قانونيا وليس لديهم معرفة سابقة بالتخطيط المكاني للمبنى المستهدف الذي سيتم تعلمه ، كما أنهم ليسوا على دراية بالغرض العام من اللعب فيما يتعلق بتعلم التخطيط المكاني للمبنى المستهدف. للبدء ، زود المشارك بعصابة العينين وسماعات الرأس.

تأكد من وضع سماعات الرأس بشكل صحيح فوق الأذنين. بعد ذلك ، قم بإرشاد المشارك حول كيفية استخدام المفاتيح والمعلومات المعينة التي تقدمها الإشارات الصوتية في البيئة القائمة على الصوت. محاكاه. يتم استخدام ضغطات مفاتيح محددة كما هو موضح هنا للتنقل عبر البيئة الافتراضية واستكشافها.

كل خطوة افتراضية تقترب من خطوة واحدة في المبنى المادي الحقيقي. بعد شرح عناصر التحكم ، اشرح فرضية اللعبة وقواعدها. أبلغ المشارك بالإشارات الصوتية المختلفة المستخدمة أثناء اللعب.

على سبيل المثال ، يتم الحصول على صوت تحديد موقع الجواهر والوحوش القريبة أثناء تنقل المستخدم عبر المبنى والمعلومات السمعية والمكانية بالتتابع ويتم تحديثها ديناميكيا بعد اتخاذ كل خطوة في البيئة الافتراضية. يتم استخدام تحويل النص إلى كلام لتوفير مزيد من المعلومات فيما يتعلق بالموقع الحالي للمستخدم واتجاهه واتجاهه ، بالإضافة إلى هوية الكائنات والعقبات التي تعترض طريقه. يتم تحديث الترجمة المكانية للأصوات لتتناسب مع العنوان الأناني للمستخدم.

على سبيل المثال ، إذا كان الباب موجودا على الجانب الأيمن للشخص ، سماع صوت الطرق في الأذن اليمنى للمستخدم. إذا استدار الشخص الآن حوالي 180 درجة بحيث يكون نفس الباب موجودا الآن على جانبه الأيسر ، الآن سماع نفس صوت الطرق في القناة اليسرى. اسمح للمشارك بلعب اللعبة لمدة ثلاث جلسات مدة كل منها 30 دقيقة.

لاحظ أي صعوبات أو تحديات تحدث أثناء اللعب ، بعد كل جلسة تدريبية ، وقدم تعزيزا إيجابيا وأي توضيحات أو تعليمات إضافية. في وقت لاحق ، سجل أدائهم في طريقة اللعب عن طريق حساب العدد والوقت والموقع الذي يجد فيه المشارك Juul. لاختبار الأداء في مهمة الملاحة الافتراضية ، اشرح للمشارك أنه سيكمل 10 مهام ملاحة محددة مسبقا يتم تقديمها بالتتابع بواسطة برنامج Abes.

المسارات ذات صعوبة مماثلة ويتم اختيارها بناء على أزواج محددة مسبقا من 10. مواقع البدء والإيقاف. أبلغ المشارك أنه سيكون أمامه ست دقائق كحد أقصى لإكمال كل مهمة في بداية كل مهمة.

يتم توفير التعليمات التي تصف موقع البداية والوجهة المستهدفة تلقائيا. يبدأ التوقيت تلقائيا بمجرد أن يتلقى المشارك تعليمات صوتية وينتهي. بمجرد وصولها إلى الموقع المستهدف ، يتم تسجيل مقاييس النتائج تلقائيا وتشمل الإكمال الناجح لمهمة الملاحة والوقت المستغرق للوصول إلى الهدف.

لاختبار أداء المشارك في الموقع الفعلي ، اشرح أنه سيتم تكليفه ب 10 مهام تنقل محددة مسبقا. تحت إشراف محقق متمرس. أبلغ المشارك أنه سيكون أمامه ست دقائق كحد أقصى لإكمال كل مهمة وأنه يسمح له باستخدام عصاه لدعم الحركة.

كن مستعدا باستخدام ساعة توقيت وقائمة مهام التنقل وحافظة للتسجيل اليدوي. قم بتحديد المشارك ووصف موقع البداية والوجهة المستهدفة. يبدأ التوقيت على الفور بمجرد أن يخطو الموضوع خطوته الأولى وينتهي.

عندما يبلغ المشارك شفهيا عن وصوله إلى الوجهة ، يتم تسجيل الإنجاز الناجح للمهمة والوقت المستغرق للوصول إلى الهدف. اشرح للمشارك أنه سيكمل خمس مهام ملاحية بهدف الخروج من المبنى باستخدام أقصر طريق ممكن. تحت إشراف محقق متمرس ، أبلغ المشارك أنه سيكون أمامه ست دقائق كحد أقصى لإكمال كل مهمة ملاحة ويسمح له باستخدام عصاه لدعم الحركة.

يتم استخدام خمسة مواقع بدء محددة مسبقا بحيث تكون ثلاثة مسارات خروج ممكنة بأطوال وتعقيدات مختلفة. كن مستعدا باستخدام ساعة توقيت وقائمة مهام التنقل وحافظة للتسجيل اليدوي. قم بتربيع المشارك ووصف موقع البدء.

يبدأ التوقيت على الفور عندما يتخذون خطوتهم الأولى وينتهي عندما يبلغ المشارك شفهيا عن وصوله إلى باب الخروج من المبنى. يتم تسجيل الإكمال الناجح لمهمة التسليم والمسار المتبع والوقت المستغرق للخروج من المبنى. علاوة على ذلك ، يتم تسجيل المسارات بحيث يكون أقصر مسار يستحق نقاطا أكثر من المسار الأطول.

يتم عرض متوسط أداء ثلاثة مشاركين في مهام التنقل هنا. توضح النسبة المئوية الصحيحة لمهام التنقل الافتراضية والمادية مستوى عال من النجاح في كلتا المهمتين. كان وقت التنقل إلى الهدف أطول للتنقل الظاهري عند مقارنته بالأداء الفعلي.

عند التسليم ، تقترح المهمة أن المشاركين غالبا ما يختارون أقصر طريق ممكن للخروج من المبنى. يتضح ذلك من خلال متوسط الوقت الأقصر الذي يستغرقه الوصول والخروج. النتائج المعروضة هنا هي من مشارك فردي واحد في جميع مهام التنقل الثلاث.

أثناء التنقل الافتراضي ، استغرق الأمر 79 ثانية لإكماله. استغرقت المهمة كما يتضح من المسار المميز باللون الأصفر على نفس المسار في المبنى الفعلي 46 ثانية. في مهمة التسليم.

وسلك المشارك أقصر طريق ممكن للخروج من المبنى. لا تنس أن العمل مع المشاركين المكفوفين باستخدام التكنولوجيا الجديدة يتطلب التشجيع. نحن ممتنون لوقتهم واستعدادهم للمشاركة في هذا العرض والدراسة.