Мы разработали виртуальной реальности тест для оценки инструментальные мероприятия повседневной жизни (МАЮД) с системой захвата движения. Мы предлагаем детальный кинематический анализ интерпретировать участника различных движений, включая траектории, движущихся расстояние и время завершения для оценки возможностей МАЮД.
Для просмотра этого контента требуется подписка на JoVE. Войдите или начните свой бесплатный пробный период.
Методическая статья
Измерение кинематика движения повседневной жизни с системами захвата движения в виртуальной реальности
В этой статье
Краткое содержание
Аннотация
Неспособность завершить инструментальные мероприятия повседневной жизни (МАЮД) является прекурсором для различных нервно-психического заболевания. На основе вопросника оценки МАЮД проста в использовании, но подвержены субъективным предвзятости. Здесь мы описываем Роман виртуальной реальности (VR) тест, чтобы оценить две сложные задачи МАЮД: обработка финансовых транзакций и общественном транспорте. В то время как участник выполняет задачи в обстановке VR, захвата движения системы следы положения и ориентации головы в трехмерной системе координат декартовых и доминирующей рукой. Кинематическая необработанные данные собираются и преобразуется в «кинематической показатели,» т.е., движения траектории, движущихся расстояние и время завершения. Траектории движения — это путь части конкретного органа (например, доминирующей рукой или руководитель) в пространстве. Перемещение расстояния ссылается на общее расстояние траектории, и время для завершения сколько времени потребовалось для завершения задачи МАЮД. Эти кинематической меры могли бы дискриминацию больных слабоумием от здоровых элементов управления. Развитие этого кинематической измерения протокола позволяет выявление ранних связанных с МАЮД когнитивные расстройства.
Введение
Инструментальная деятельность повседневной жизни (МАЮД), такие как обработка финансовых сделок, используя общественный транспорт и приготовления пищи, являются медицинские маркеры, поскольку они требуют множественные нейропсихологических функции1. Таким образом нарушение МАЮД возможности считаются прекурсоров для неврологических заболеваний, таких как легкого когнитивного расстройства (MCI) и слабоумие2. Всеобъемлющий обзор золота в МАЮД задачи3 сообщили, что познавательно более требовательных задач, как управление финансами и используя общественный транспорт, ранние предсказатель MCI и слабоумие.
На сегодняшний день, наиболее часто используемые оценки МАЮД являются сообщенные вопросники, информант на основе вопросников и на основе результатов оценки4. На основе вопросника оценки МАЮД экономически эффективной и простой в использовании, но подвержены субъективным предвзятости. Например когда самоотчетности, пациенты имеют тенденцию к над или под estimate возможности их МАЮД5. Аналогичным образом информаторы недооценивать МАЮД возможности из-за ошибочных представлений или пробелов знаний4наблюдателя. Таким образом по результатам оценок, которые просят больных для выполнения конкретных задач МАЮД были предпочтительным, хотя многие из задач являются неприемлемыми для общих клинических условиях6.
Недавно виртуальной реальности (VR) исследования показали, что эта технология может иметь значительные приложений в области медицины и здравоохранения, которая включает в себя все, от подготовки к реабилитации, к медицинской оценке7. Все участники могут быть проверены на тех же условиях VR, которые имитируют реальный мир. К примеру, Allain и др. 8 разработана задачу виртуальный кофе и показали, что пациенты с когнитивными нарушениями выполнил задачу плохо. Клингер и др. 9 разработал другой VR среды для почтовых и торговых задач и найти значимые отношения между время завершения задачи в VR и нейропсихологических тестов результаты. Предыдущие исследования VR МАЮД оценки главным образом были сосредоточены на простые показатели, например время реакции или точности при использовании обычных устройств ввода, таких как клавиатуры и мыши,8,9. Таким образом, более подробные данные о МАЮД производительности необходимо эффективно экран для пациентов с MCI4.
Кинематический анализ в реальном времени движение захвата данных представляет собой мощный подход к количественно подробные производительности данные, связанные с задачами МАЮД документа. Например, белый и др. 10 развитых Виртуальная кухня, которая захватывает данные участника совместной угол во время ежедневных задач жизни и использовать собранные данные для количественной оценки эффективности физической терапии. Dimbwadyo-Terrer и др. 11 развитых VR среда погружения для оценки производительности верхней конечности при проведении основных задач повседневной жизни и показал, что кинематической данные записаны в среде VR, тесно связана с функциональной весы верхней конечности. Эти кинематический анализ с системами захвата движения могли бы представить дополнительную возможность быстро оценить пациента когнитивных нарушений12. Включение подробных кинематической данных в скрининга для пациентов с MCI значительно улучшили классификации пациентов по сравнению с13здорового контроля.
Здесь мы описываем протокол для оценки кинематика движения повседневной жизни с системами захвата движения в среде погружения VR. Протокол включает две сложные задачи МАЮД: «задача 1: снять деньги» (обработка финансовых транзакций) и «задача 2: сесть на автобус» (с использованием общественного транспорта). В то время как задачи были выполнены, система захвата движения Трассируется, позиции и ориентации доминирующей рук и головы. После завершения задачи 1, были собраны доминирующей рукой траектории, движущихся расстояние и время завершения. В задаче 2 были собраны головы траектории, движущихся расстояние и время завершения. В разделе представитель результаты в этой статье подробно предварительное тестирование больных с MCI (т.е., МАЮД возможности являются нарушениями) по сравнению с здорового управления (т.е., МАЮД возможности неповрежденными).
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Протокол
Все экспериментальные методы, описанные здесь были утверждены институционального обзора Совет Ханьян университета, согласно Хельсинкской декларации (HYI-15-029-2). 6 здоровых элементов управления (4 кобеля и 2 суки) и 6 МРП больных (3 кобеля и 3 суки) были набраны из третичного медицинского центра, больницы университета Ханьянг.
1. привлечение участников
- Набирать пациентов MCI (то есть, нарушением МАЮД возможности) и здорового управления (то есть, нормальный МАЮД возможности), в возрасте 70-80 лет.
- С помощью невролог с более чем 10 лет клинического опыта обзор медицинских историй пациентов и исключить пациентов с историей неврологические/психических заболеваний или Хирургия головного мозга.
Примечание: Используйте следующие нейропсихологических тестов: Mini психического государственной экспертизы-деменция скрининг, корейский инструментальные мероприятия повседневной жизни, свободной и селективный Cued, напоминающие тест, цифра Span тест-вперед/назад, след делает тест-A/B13 и критерии Альберт и др. 14 для диагностики MCI.
2. установить VR программного обеспечения и подключение компьютеров
- Установка оборудования в выделенный номер похож на рисунке 1. Выполнить этот протокол в номер размера погружения виртуальной среде (4 x 2,5 x 2,5 м3) содержащий 4 компьютеров, 4 стереоскопические трехмерные (3D) Проекторы и 8 камер движения отслеживания для отслеживания положения и ориентации доминирующей рукой и голова во время выполнения двух задач МАЮД.
Примечание: VR технологий, используемых в этой статье, компьютерного оборудования и программного обеспечения, которые предлагают погружения и интерактивных 3D опытом, которыми реалистичные объекты и события могут быть представлены в виртуальной среде. Детали оборудования и программного обеспечения описаны в Таблице материалов. - Убедитесь, что все компьютеры оснащены необходимое программное обеспечение (распространяемого пакета Visual Studio 2012 (x86), DirectX и MiddleVR или эквивалент). Для MiddleVR, то есть, программное обеспечение middleware, проверьте на веб-сайте15 для получения последних версий библиотек для устройств ввода, стереоскопия, кластеризация и взаимодействия.
- Подключение компьютеров к стереоскопический 3D проекторов. Графические настройки, 1920 x 1080 пикселей резолюции.
- Создание домашней группы 10 Windows для подключения 4 компьютеров к домашней сети. На основном компьютере создайте папку и поделиться им с другими компьютерами домашней группы.
- На основном компьютере инициировать промежуточного программного обеспечения. Нажмите кнопку «Кластер». Установите основной компьютер как сервер и другие компьютеры в качестве клиентов. Это будет синхронизировать состояние всех устройств. Нажмите кнопку «3D узлы». Укажите положение, ориентацию и размер экрана виртуальной среды.
- Заполните параметры, основанные на веб-сайте15 и сохраните файл конфигурации.
3. Настройка системы захвата движения в виртуальной среде
- Гора 8 отслеживания движения камеры в виртуальной среде для полного покрытия захвата тома. Зафиксируйте камеры так, что они остаются неподвижными во время захвата. Убедитесь, что объекты в виртуальной среде будет виден по крайней мере 2 камеры на все времена.
- Установите программное обеспечение OptiTrack мотив, то есть, программное обеспечение захвата движения, на основном компьютере, используя ручной установки16. Подключите основной компьютер с системами захвата движения с кабели Ethernet категории 6.
- Калибровка системы захвата движения с помощью следующих шагов, как описано в программного обеспечения ручного16.
- Удалите все посторонние соображения или ненужные маркеры захвата тома.
- Нажмите кнопку «Маска видимых» чтобы замаскировать нежелательные отражения или внешнего вмешательства.
- Нажмите на кнопку «Начать Шабдан». Используйте палочку калибровки для поддержки захвата выборки для того, чтобы вычислить соответствующие позиции и ориентации в трехмерном пространстве.
- Нажмите на кнопку «Рассчитать» для калибровки системы с использованием собранных образцов.
- Проверить результаты калибровки (в порядке от худших лучше): бедных, ярмарка, хороший, большой, отлично и очень хорошо. Если результат лучше, чем большой, нажмите кнопку «Применить». Если нет, нажмите кнопку «Отмена» и повторите процесс Ваньдине.
- Место на площади калибровки внутри 3D пространстве, где вы хотите происхождения будет расположен. Нажмите кнопку «Задать заземленной», чтобы создать отслеживаемого трехмерная система координат происхождения.
- Выберите связанный светоотражающая маркеры для доминирующей рук и головы. Нажмите на кнопку «Твердого тела» и затем нажмите кнопку «Создать из выбранных маркеры».
- На движение захвата программного обеспечения, откройте меню «Течь». Убедитесь, что номер порта, указанный 3883 и выберите поле «Транслировать данные кадра» в категории «VRPN потокового двигатель». Нажмите «Ctrl» + «S», чтобы сохранить файл калибровки.
- На основном компьютере инициировать промежуточного программного обеспечения. Нажмите «Устройства». Добавить VRPN Tracker для получения данных отслеживания из системы захвата движения, а затем сохраните файл конфигурации.
4. Подготовьте виртуальную среду для использования
- Удалите все отражает объекты (например, часы, кольца, серьги, металлов, и т.д.) из виртуальной среды.
- Включите компьютеры, стереоскопические 3D проекторы и системы захвата движения (360 кадров в секунду).
- После 4 компьютеров, запустите программу VRDaemon. Например дважды щелкните на «VRDaemon.exe» которая расположена в «C:\Program Files (x86) \MiddleVR\bin.»
- На основном компьютере инициировать программное обеспечение захвата движения. Нажмите на кнопку возле верхнем меню с надписью «Открыть существующий проект.» Загрузите файл Калибровка камеры.
- На основном компьютере инициировать промежуточного программного обеспечения. Нажмите на кнопку «Моделирование». Загрузите соответствующий моделирования и конфигурации файлов из общей папки.
- На промежуточного программного обеспечения нажмите кнопку «Run» для выполнения погружения виртуальное приложение с выбранным моделирования и файлов конфигурации.
5. ознакомить участников с виртуальной средой
- Предоставить участнику стереоскопические очки, весом около 50 г. Частота отображения стереоскопических очков – 192 Гц. Убедитесь что стереоскопические очки удобно располагаются над глазами и ушами; Смотрите рисунок 2A.
- Прикрепите Светоотражающий маркеры, весом менее 1 g участника доминирующей рук и головы. Будьте осторожны, чтобы прикрепить Светоотражающий маркеры плотно; Смотрите Рисунок 2B. Проинформировать участников, что они могут свободно передвигаться или вращаться в виртуальной среде с помощью движения головы и можно нажать кнопку виртуальных объектов с доминирующей рукой. Виртуальный руку появляется в виртуальной среде, чтобы имитировать позицию участника указательный палец; Смотрите Рисунок 3.
- Попросите участников свободно двигаться (т.е., встать, сесть, налево и направо) в виртуальной среде на 5 минут, чтобы ознакомиться с VR окружающей среды. Затем попросите участников нажать виртуальные кнопки для 5 минут, чтобы ознакомиться с тем, как взаимодействовать с виртуальными объектами с доминирующей рукой. Предоставить еще 10 минут тренировки, если участник запрашивает один.
- Проверьте, является ли участник иммунитет к болезни VR с симулятор болезни вопросника17.
Предупреждение: Отслеживания на дисплей стереоскопического синхронизированные движения может привести к VR болезни, которая может привести к дискомфорт, головная боль, желудка осведомленность, тошнота, рвота, бледность, потливость, утомляемость, сонливость, дезориентация и апатии. Если участник жалуется на усталость или оценка болезни симулятор является слишком высокой, остановите протокол.
6. выполнить «задача 1: снять деньги»
Предупреждение: Противовес последовательности задач 1 и 2 задачи удалить переходящий эффект.
- Объяснить участнику Подробности задачи и обеспечивают 8 практические шаги для завершения задачи в виртуальной среде. Шаги являются (1) Вставьте карту в Банкомат, (2) выберите меню «отозвать», (3) выберите сумму снять (4) выберите тип счета, (5) введите PIN-код (персональный идентификационный номер), (6) выберите вариант получения, (7) Извлеките карту и (8) принимать деньги от Банкомат (см. Рисунок 4).
- На основном компьютере инициировать промежуточного программного обеспечения. На вкладке «Модели» выберите файл моделирования для задачи 1 и файла конфигурации. Нажмите на кнопку «Run»; «Задача 1: снять деньги» будет работать в виртуальной среде.
Примечание: Для задачи 1 файла, см. прилагаемый файл «Задача 1 снять Money.zip» в дополнительных файлов 1. Обратите внимание, что виртуальный задача была разработана с Унити трехмерный двигатель. - Если «задача 1: снять деньги» выполняется в виртуальной среде, проинструктируйте участников выполнять следующим образом: «просьба снять KRW 70000 (что эквивалентно около 60 долларов) из Банкомата для покупок. Выберите два различных типов нот, один отмечает 50 000 KRW записку для 50 000 KRW и два 10 000 KRW 20000 KRW. Пароль для вашей сделки является текущая дата. Например если эксперимент проводится на 11 ноября, PIN-код-1111. Пожалуйста держите квитанцию для дальнейшего ведения.»
- Когда задача завершена, проверьте кинематической данные в CSV-файлы (с разделителями-запятыми) для дальнейшего анализа из общей папки.
Примечание: Использование системы захвата движения, во время «задача 1: снять деньги» запись позиции и ориентации доминирующей рукой при проведении задачи с частотой записи 1 мс. - Дать участник около 5 минут перерыв перед началом «задача 2: на автобусе.»
7. выполнить «задача 2: сесть на автобус»
- Объяснить участнику Подробности задачи и приводятся инструкции по заполнению «задача 2: сесть на автобус» следующим: «подождите на автобусной остановке и сесть на автобус целевой. Целевой автобус информация будет предоставлена на экране VR на определенный номер строки, цвета и назначения. Когда целевой автобус прибывает, обязательно ходить из автобуса и передней двери автобуса целевого объекта. 8 различных целевых автобусов будет случайным образом генерируется и представил.» Смотрите Рисунок 5.
- На основном компьютере инициировать промежуточного программного обеспечения. На вкладке «Модели» выберите файл моделирования для задачи 2 и файла конфигурации. Нажмите кнопку «Run», затем «задача 2: сесть на автобус» будет работать в виртуальной среде.
Примечание: Для задачи 2 файла, увидеть вложенный файл «Задача 2 принять Bus.zip» в дополнительный файл 2. Обратите внимание, что виртуальный задача была разработана с Унити трехмерный двигатель. - Если «задача 2: сесть на автобус» выполняется в виртуальной среде, проинструктируйте участников ждать в автобусной остановки. Нажмите клавишу «Пробел» на клавиатуре, чтобы сделать автобусы прибывают на автобусной остановке.
- Когда задача завершена, проверьте кинематической данные в файлы CSV для дальнейшего анализа из общей папки.
Примечание: Использование системы захвата движения, во время «задача 2: сесть на автобус «запись позиции и ориентации головы при проведении задачи с частотой записи 1 мс. - Протокол является полным. Помочь участник удалить стереоскопические очки и отсоединить Светоотражающий маркеры от доминирующей рук и головы.
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Результаты
CSV файлов от «задача 1: снять деньги» были проанализированы с использованием статистического программного обеспечения R для расчета траектории доминирующей рукой, движущихся расстояние и время завершения. Визуализировать траектории движения доминирующей рукой (рис. 6). Движущихся расстояние доминирующей рукой рассчитывается путем суммирования всего расстояния между последовательной позиции во время выполнения задачи 1. Расстояние между позициями является евк...
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Обсуждение
Мы подробно кинематической измерения протокол повседневной жизни движений с системами захвата движения в среде погружения VR. Во-первых параметр экспериментальной, руководство по настройке, подготовить и ознакомить участников с VR среда погружения. Во-вторых мы разработали две стандартизированные МАЮД задачи в VR. В-третьих шаг 3 и шаг 5 в разделе протокол являются наиболее важные шаги для сведения к минимуму VR болезни. При настройке системы захвата движения в виртуальной среде (шаг 3), важно подключить камеры слежения ...
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Раскрытие информации
Авторы заявляют отсутствие конфликта интересов.
Благодарности
К.с. и а.л. способствовать одинаково. Это исследование было поддержано базовой программы исследований науки через национальных исследований фонда из Кореи (NRF) финансируется министерством науки, ИКТ и будущего планирования (СР 2016R1D1A1B03931389).
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Материалы
| Имя | Компания | Каталожный номер | Комментарии |
|---|---|---|---|
| Компьютер | Н/ | Д Н/Д | Требования к компьютеру: - Односокет H3 (LGA 1150) с поддержкой - Intel® Xeon® E3-1200 v3, 4-е поколение. Процессоры Core i7/i5/i3 - Intel® C226 Express PCH - до 32 ГБ DDR3 ECC/non-ECC 1600 МГц UDIMM в 4 разъемах - два порта Gigabit Ethernet LAN - 8x SATA3 (6 Гбит/с) - 2x PCI-E 3.0 x16, 3x PCI-E 2.0 x1 и 2x PCI 5V 32-битных слотов - 6x USB 3.0 (2 задних + 4 разъездных разъема) - 10x USB 2.0 (4 задних + 6 переходных разъемов) - HD Аудио 7.1-канальный разъем от Realtek ALC1150 - 1x разъем питания DOM и 1x разъем SPDIF Out - высокоэффективный блок питания 800 Вт - Intel Xeon E3-1230v3 - DDR3 PC12800 8GB ECC - WD 1TB BLUE WD 10EZEX 3,5" - NVIDIA QUADRO K5000 и |
| Стереоскопический 3D-проектор | Barco | F35 AS3D WUXGA | Разрешение: - WQXGA (2,560 x 1,600) - Panorama (2,560 x 1,080) - WUXGA (1,920 x 1,200), 1080p (1,920 x 1,080) |
| Стереоскопические очки | Volfoni | Edge 1.2 | Для получения дополнительной информации посетите сайт http://volfoni.com/en/edge-1-2/ |
| Системы захвата движения | NaturalPoint OptiTrack | 17W | Для получения дополнительной информации посетите http://optitrack.com/products/prime-17w/ |
| OptiTrack (программное обеспечение для захвата движения) | NaturalPoint OptiTrack | Motive 2.0 | Для получения дополнительной информации посетите https://optitrack.com/downloads/motive.html |
| MiddleVR (программное обеспечение промежуточного слоя) | MiddleVR | MiddleVR для Unity | Для получения дополнительной информации посетите http://www.middlevr.com/middlevr-for-unity/ |
| VRDaemon (Промежуточное программное обеспечение) программное обеспечение) | MiddleVR | MiddleVR For Unity | Для получения дополнительной информации посетите http://www.middlevr.com/middlevr-for-unity/ |
| Unity3D (Game engine) | Unity Technologies | Personal | Для получения дополнительной информации посетите https://unity3d.com/unity |
Ссылки
- Reppermund, S., et al. Impairment in instrumental activities of daily living with high cognitive demand is an early marker of mild cognitive impairment: the Sydney Memory and Ageing Study. Psychol. Med. 43 (11), 2437-2445 (2013).
- Graf, C. The Lawton instrumental activities of daily living scale. Am. J. Nurs. 108 (4), 52-62 (2008).
- Gold, D. A. An examination of instrumental activities of daily living assessment in older adults and mild cognitive impairment. J. Clin. Exp. Neuropsychol. 34 (1), 11-34 (2012).
- Jekel, K., et al. Mild cognitive impairment and deficits in instrumental activities of daily living: a systematic review. Alzheimers. Res. Ther. 7 (1), 17(2015).
- Suchy, Y., Kraybill, M. L., Franchow, E. Instrumental activities of daily living among community-dwelling older adults: discrepancies between self-report and performance are mediated by cognitive reserve. J. Clin. Exp. Neuropsychol. 33 (1), 92-100 (2011).
- Desai, A. K., Grossberg, G. T., Sheth, D. N. Activities of Daily Living in patients with Dementia. CNS drugs. 18 (13), 853-875 (2004).
- Ma, M., Jain, L. C., Anderson, P. Virtual, augmented reality and serious games for healthcare 1. 68, Springer Science & Business Pubs. Berlin. (2014).
- Allain, P., et al. Detecting everyday action deficits in Alzheimer's disease using a nonimmersive virtual reality kitchen. J. Int. Neuropsychol. Soc. 20 (5), 468-477 (2014).
- Klinger, E., et al. AGATHE: A tool for personalized rehabilitation of cognitive functions based on simulated activities of daily living. IRBM. 34 (2), 113-118 (2013).
- White, D., Burdick, K., Fulk, G., Searleman, J., Carroll, J. A virtual reality application for stroke patient rehabilitation. ICMA. 2, 1081-1086 (2005).
- Dimbwadyo-Terrer, I., et al. Activities of daily living assessment in spinal cord injury using the virtual reality system Toyra: functional and kinematic correlations. Virtual Real. 20 (1), 17-26 (2016).
- Preische, O., Heymann, P., Elbing, U., Laske, C. Diagnostic value of a tablet-based drawing task for discrimination of patients in the early course of Alzheimer's disease from healthy individuals. J. Alzheimers. Dis. 55 (4), 1463-1469 (2017).
- Seo, K., Kim, J. K., Oh, D. H., Ryu, H., Choi, H. Virtual daily living test to screen for mild cognitive impairment using kinematic movement analysis. PLOS ONE. 12 (7), e0181883(2017).
- Albert, M. S., et al. The diagnosis of mild cognitive impairment due to Alzheimer's disease: Recommendations from the National Institute on Aging-Alzheimer's Association workgroups on diagnostic guidelines for Alzheimer's disease. Alzheimers. Dement. 7 (3), 270-279 (2011).
- MiddleVR. User Guide. [FR]. , Available from: http://www.middlevr.com/doc/current/ c2014-c2017 (2017).
- OptiTrack. Motive Quick Start Guide. , Available from: https://optitrack.com/public/documents/motive-quick-start-guide-v1.10.0.pdf c1996-c2017 (2017).
- Kennedy, R. S., Lane, N. E., Berbaum, K. S., Lilienthal, M. G. Simulator sickness questionnaire: An enhanced method for quantifying simulator sickness. Int. J. Aviat. Psychol. 3 (3), 203-220 (1993).
- Singh, N. B., Baumann, C. R., Taylor, W. R. Can Gait Signatures Provide Quantitative Measures for Aiding Clinical Decision-Making? A Systematic Meta-Analysis of Gait Variability Behavior in Patients with Parkinson's Disease. Front. Hum. Neurosci. 10, 319(2016).
- Hernandez, F., et al. Six degree-of-freedom measurements of human mild traumatic brain injury. Ann. Biomed. Eng. 43 (8), 1918-1934 (2015).
- Gamito, P., et al. Cognitive training on stroke patients via virtual reality-based serious games. Disabil. Rehabil. 39 (4), 385-388 (2017).
Доступ ограничен. Войдите в систему или начните пробный период, чтобы просмотреть этот контент.
Перепечатки и разрешения
