Данное исследование с участием людей проводилось в соответствии с Хельсинкской декларацией и требованиями учреждения к поведенческим и образовательным исследованиям. Протокол исследования был одобрен Комитетом по этике исследований с участием людей Университета города Шэньян (номер одобрения SU1992837; дата одобрения: 18 января 2025 г.). Все участники предоставили письменное информированное согласие перед включением в исследование. Участники были проинформированы о том, что исследование предполагает погружение в виртуальную реальность, выполнение командных задач, заполнение опросников, поведенческое наблюдение и краткосрочное последующее тестирование. Участие было добровольным, и выход из исследования допускался в любое время без каких-либо академических, профессиональных или институциональных санкций. Все записи исследования были деидентифицированы перед проведением анализа. Каждому участнику был присвоен числовой код участника, а каждой команде — отдельный код команды. Имена, номера студентов, номера телефонов, изображения лиц или непосредственно идентифицируемые аудиозаписи в аналитический набор данных не включались. Категории оборудования, версии программного обеспечения и соответствующие ресурсы для воспроизведения перечислены в Таблице материалов.
1. Дизайн и условия исследования
В данном завершенном исследовании использовался одноцентровой трехплечевой параллельный экспериментальный дизайн для изучения того, связана ли совместная виртуальная реальность в большом пространстве с более выраженным ощущением пространственного присутствия, командной координацией и вовлеченностью в обучение в процессе иммерсивного тренинга. Были определены три условия обучения: совместное моделирование на настольном компьютере, распределенная совместная виртуальная реальность в масштабе комнаты и совместная виртуальная реальность в большом пространстве.
Условия были разработаны как функциональные компараторы, а не как полный факторный анализ погружения, сотрудничества и пространства для передвижения. Условие «настольный компьютер» представляло собой сотрудничество без использования иммерсивного шлема виртуальной реальности. Условие распределенного совместного VR в масштабе комнаты представляло собой иммерсивное командное сотрудничество в отдельных небольших зонах отслеживания. Условие совместного VR в большом общем пространстве объединяло иммерсивный визуальный опыт, совместное физическое перемещение и воплощенное командное взаимодействие в режиме реального времени в едином отслеживаемом тренировочном пространстве. Таким образом, групповые различия интерпретировались как различия между полными конфигурациями обучения, а не как эффекты, обусловленные каким-либо одним компонентом. Такая структура была выбрана, поскольку исследования в области иммерсивного обучения рассматривают пространственное присутствие, агентность и вовлеченность как механизмы, с помощью которых виртуальные среды могут влиять на поведение при обучении11.
Исследование проводилось в Лаборатории иммерсивного обучения и человеко-компьютерного взаимодействия в участвующем учреждении в период с 3 марта по 18 июля 2025 г. Набор участников и базовое тестирование проводились с 3 марта по 25 апреля 2025 г. Сеансы вмешательства проводились с 10 марта по 30 мая 2025 г. Оценки сохранения навыков через 2 недели были завершены в период с 24 марта по 16 июня 2025 г. Проверка данных, оценка наблюдателем и блокировка набора данных были завершены к 18 июля 2025 г.
Все сеансы проводились в одном лабораторном комплексе для контроля освещения, температуры, интернет-соединения, инструкций к заданиям и наблюдения со стороны исследователя. В условии совмещенной совместной виртуальной реальности в большом пространстве использовалась свободная зона отслеживания размером 8 m × 8 m. В условии распределенной совместной виртуальной реальности в масштабе комнаты использовались три раздельные размеченные зоны размером 3 m × 3 m. В условии совместного настольного моделирования использовались индивидуальные компьютерные рабочие станции, разделенные акустическими перегородками, чтобы участники могли общаться только через назначенный канал связи.
Перед рандомизацией участники были распределены по командам из трех человек. Команда была выбрана в качестве единицы обучения, поскольку задание требовало распределенного выполнения ролей, вербальной координации, общего ситуационного awareness и совместного решения проблем. Рандомизация проводилась на уровне команд, чтобы избежать взаимного влияния участников внутри одной сессии. Общий рабочий процесс исследования и физическая конфигурация трех условий показаны на Рисунке 1.
2. Участники и отбор подходящих кандидатов
Участники были набраны из программ бакалавриата и магистратуры в участвующем учебном заведении. В объявлениях о наборе исследование описывалось как иммерсивное обучающее исследование с использованием виртуальной реальности, координации команд и оценки обучения. В объявлениях не указывалось ожидаемое превосходство какого-либо из условий обучения. Заинтересованные участники заполняли онлайн-форму скрининга перед назначением времени посещения лаборатории.
Участники могли быть включены в исследование, если их возраст составлял 18–35 лет, они имели нормальное или скорректированное до нормы зрение, понимали язык обучения, ранее не принимали участия в аналогичном сценарии виртуального обучения и могли безопасно стоять и перемещаться в течение как минимум 30 min. Участники исключались, если сообщали о тяжелой форме кинетоза, неконтролируемой эпилепсии, недавних скелетно-мышечных травмах, влияющих на ходьбу или равновесие, нескорректированном нарушении зрения, тяжелом головокружении, тяжелой нескорректированной нарушении слуха, остром заболевании в настоящее время или любом медицинском состоянии, при котором воздействие иммерсивной виртуальной реальности было бы небезопасным. Также из исследования исключались лица, имевшие обширный предварительный опыт работы с данным конкретным сценарием обучения или ранее участвовавшие в пилотном тестировании той же системы.
Проверка соответствия критериям отбора проводилась в два этапа. Сначала ассистент исследователя изучал форму онлайн-скрининга. Затем в день тестирования, перед получением согласия, исследователь, проводящий сессию, подтверждал соответствие критериям устно. Участники, сообщившие о легком дискомфорте при движении в прошлом, не исключались автоматически, но находились под более тщательным наблюдением; им напоминали, что участие может быть прекращено немедленно в случае возникновения дискомфорта. Полная форма скрининга, пункты критериев отбора, первичный опросник, форматы ответов и правила кодирования представлены в Дополнительном файле 1.
Для определения необходимого размера выборки для данного экспериментального дизайна был проведен априорный расчет статистической мощности с использованием программного обеспечения G-Power. Исходя из ожидаемого среднего размера эффекта f = 0.25 на основании предыдущих публикаций по иммерсивному совместному обучению, уровня значимости альфа 0.05 и статистической мощности 0.80 для анализа трех групп, потребовалось минимум 111 участников. Чтобы обеспечить структуру команд из трех человек и сохранить сбалансированное распределение групп по условиям, итоговая выборка была расширена до 126 участников, что составило 42 независимые команды. Поскольку вмешательство осуществлялось на уровне команды, идентификаторы команд были сохранены для корректировки кластеризации, оценки координации по данным наблюдателей и проведения анализа чувствительности.
3. Рандомизация, сокрытие распределения и ослепление
После того как все участники команды из трех человек прошли подтверждение соответствия критериям включения, команда была случайным образом распределена в одну из трех групп обучения с использованием компьютерного списка блочной рандомизации с фиксированным размером блока в шесть команд. Последовательность распределения была сгенерирована до начала сбора данных с помощью пакета рандомизации в среде статистических вычислений с воспроизводимым начальным значением (seed) 20250301.
Скрытие распределения обеспечивалось с помощью непрозраных конвертов с последовательной нумерацией и защитой от вскрытия, подготовленных исследователем, который не участвовал в наборе участников и проведении вмешательства. Файл рандомизации хранился в защищенной паролем электронной таблице и был недоступен специалистам, оценивающим результаты.
Распределение по группам раскрывалось только после заполнения базового опросника и прохождения предварительного теста на знание материала. Исследователь, проводивший сессию, вскрывал следующий запечатанный конверт с распределением непосредственно перед настройкой оборудования. Ослепление участников относительно формата физической тренировки было невозможно, так как три условия заметно отличались друг от друга. Участники не были проинформированы о том, в каком из условий ожидаются лучшие результаты.
Двое наблюдателей оценивали координацию работы команд на основе стандартизированных записей экрана. Наблюдатели не были осведомлены о гипотезах исследования, обозначениях условий обучения и результатах анкетирования, а также не принимали участия в проведении обучения. Перед началом оценки видеофайлы были переименованы с использованием нейтральных кодов команд. Метки интерфейса, идентифицирующие условия исследования, по возможности были обрезаны или замаскированы до начала оценки наблюдателями.
4. Сценарий обучения и структура задачи
Сценарий обучения был разработан как совместная задача по экстренной логистике и пространственной навигации в симулированной промышленной учебной среде. От каждой команды из трех человек требовалось найти виртуальные ресурсы, интерпретировать пространственные ориентиры, передавать информацию о маршруте, координировать действия в соответствии с распределенными ролями и выполнить последовательность этапов миссии в фиксированный временной интервал.
Каждый участник выполнял одну из трех ролей: навигатор, менеджер ресурсов или контролер безопасности. Навигатор интерпретировал направление маршрута и последовательность пунктов назначения. Менеджер ресурсов выявлял и собирал виртуальные предметы, необходимые для выполнения задачи. Контролер безопасности отслеживал опасности, подтверждал соблюдение последовательности процедур и подавал сигнал команде перед окончательной отправкой.
Сценарий включал четыре зоны: зону ориентирования, зону ресурсов, зону опасностей и зону завершения. Каждая команда должна была выполнить восемь обязательных подзадач: определить целевое местоположение, выбрать три правильных ресурса из шести возможных, избежать двух неправильных ответвлений маршрута, отреагировать на три предупреждения об опасностях, передать информацию между членами команды и отправить окончательную последовательность действий. Максимальное время выполнения задачи составляло 20 min. Команды, которые не завершили все необходимые подзадачи в течение 20 min, были остановлены по истечении этого времени, и количество выполненных подзадач было зафиксировано.
Перед выполнением основного задания все участники прошли стандартизированный 8-минутный вводный инструктаж. В первые 3 мин были представлены правила исследования и процедуры безопасности. Следующие 3 мин были посвящены ознакомлению с элементами управления интерфейсом. Последние 2 мин участники потратили на отработку перемещения, выбора и коммуникации в нейтральной тренировочной среде, которая не содержала объектов, маршрутов, опасностей или ответов, используемых в основном сценарии. Данные о результативности в тренировочной среде не анализировались.
Одинаковый учебный контент, последовательность заданий, эталонные ответы, структура маршрутов, предупреждения об опасностях и критерии оценки использовались во всех трех условиях. Условия различались модальностью взаимодействия, степенью погружения, физическим перемещением и пространственной конфигурацией. Иммерсивные среды были разработаны с использованием коммерческой платформы для трехмерной разработки в режиме реального времени. Многопользовательская сеть и синхронизация пространственного состояния были реализованы с помощью специализированного фреймворка синхронизации для многопользовательского режима, работающего в локальной гигабитной сети Ethernet. Участники, распределенные в группы условий иммерсивной виртуальной реальности, использовали нашлемные дисплеи высокого разрешения с интегрированными наушниками и микрофонами. Пространственное отслеживание осуществлялось с помощью системы трекинга на основе инфракрасного лазера с четырьмя базовыми станциями. Для реализации аватаров использовались алгоритмы инверсной кинематики для отображения телеметрии головы и контроллеров рук в режиме реального времени на артикулированные аватары работников.
5. Проверка предварительных процедур исследования и уточнение измерений
Перед формальным сбором данных все пункты опросников, задания теста знаний, правила оценки наблюдателями и процедуры выполнения задач были рассмотрены двумя исследователями с опытом в области иммерсивного обучения и одним исследователем с опытом в области образовательных измерений. В ходе анализа основное внимание уделялось ясности формулировок пунктов, соответствию ролей и задач, согласованности подсчета баллов, формулировкам по технике безопасности и соответствию конструктов.
В период с 17 по 21 февраля 2025 года была проведена проверка предварительного протокола с участием шести добровольцев, которые соответствовали тем же критериям отбора, что и основная выборка. В ходе предварительной проверки оценивались время выполнения задач, комфорт при использовании гарнитуры, безопасность движений, ясность инструкций, время заполнения опросников, точность экспорта данных и возможность проведения оценки наблюдателем. Предварительные данные использовались исключительно для уточнения формулировок, времени подготовки, инструкций по технике безопасности и процедур экспорта лог-файлов. Эти участники не были включены в окончательную выборку, и их данные не учитывались при основном анализе.
6. Условие совместного моделирования на рабочих станциях
В условии совместного моделирования на рабочих станциях каждый участник использовал индивидуальное рабочее место, подключенное к 24-дюймовому монитору с разрешением 1080p. Устройства ввода состояли из компьютерной мыши и клавиатуры, а аудиосвязь обеспечивалась с помощью USB-гарнитуры и микрофона. Участники располагались за отдельными рабочими станциями; им было дано указание не общаться вне системы.
В настольном симуляторе использовались та же виртуальная среда, объекты задач, последовательность маршрута, предупреждения об опасностях и логика подсчета баллов, что и в условиях виртуальной реальности. Вид камеры был от первого лица. Как показано на рисунке 2A, участники из настольной группы перемещались с помощью клавиатуры и взаимодействовали с виртуальными ресурсами с помощью щелчков мыши через фиксированное двумерное поле зрения монитора. Поле зрения, скорость перемещения, дистанция взаимодействия и аудио-настройки были зафиксированы перед сбором данных и не изменялись между сессиями. Один исследователь контролировал техническую стабильность во время каждой сессии, но не давал советов по выполнению задач после начала основного сценария.
7. Условие распределенного совместного виртуального пространства в масштабе комнаты
В условии распределенного совместного виртуального пространства в масштабе комнаты три участника входили в один и тот же виртуальный сценарий из отдельных размеченных зон отслеживания 3 m × 3 m. Каждый участник использовал наголовной дисплей и ручные контроллеры. Члены команды общались через назначенный голосовой канал и выполняли одну и ту же командную задачу с распределением ролей, но не могли физически совместно перемещаться в общем большом пространстве отслеживания.
Перед выполнением основного задания были отрегулированы посадка гарнитуры, межзрачковое расстояние, система границ и ремешки контроллеров. Участникам было поручено немедленно прекратить выполнение задания в случае возникновения головокружения, тошноты, напряжения глаз, головной боли, потери равновесия или чувства тревоги. Исследователь находился в пределах 2 m от каждой активной зоны отслеживания на протяжении всего сеанса и следил за безопасностью, не предоставляя подсказок по выполнению задания.
Если участник пересекал отмеченную границу, сессия приостанавливалась, и положение участника корректировалось. При возникновении умеренного дискомфорта, определяемого как оценка дискомфорта 5 или выше по любому пункту шкалы от 0 до 10, сессия приостанавливалась, и участнику предлагалось сесть для восстановления. Если оценка по любому пункту дискомфорта достигала 7 или выше, сессия прекращалась.
8. Условие совместной виртуальной реальности с совместным размещением в большом пространстве
В условии совместной виртуальной реальности с совместным размещением в большом пространстве каждая команда из трех человек входила в одну и ту же отслеживаемую зону обучения размером 8 m × 8 m. Каждый участник использовал наголовный дисплей, два контроллера и был представлен аватаром, соответствующим его роли и видимым для других членов команды. Члены команды общались устно в режиме реального времени, физически перемещаясь по общему тренировочному пространству. Система синхронизировала местоположение участников, движения рук, выбор объектов и изменения состояния выполнения задачи. Как показано на Рисунке 2B и Рисунке 2C, участники в условиях иммерсивности выполняли задачи, используя трехмерные пространственные жесты рук с отслеживаемыми контроллерами и физический поворот головы для обеспечения обзора на 360°.
В условии с большим пространством использовалось то же содержание задания и тот же 20-минутный лимит времени, что и в других условиях. Физическое перемещение было откалибровано таким образом, чтобы виртуальный маршрут оставался в пределах отмеченной безопасной зоны. Когда участники приближались к краю зоны отслеживания, в гарнитуре появлялась граница безопасности. Перед началом основного задания были проверены зазоры у пола, отсутствие кабелей на пути движения, плотность прилегания гарнитуры, стабильность трекинга, аудиовход и отклик контроллеров. Участникам было поручено использовать естественную ходьбу, а не искусственные методы перемещения для навигации в виртуальной среде. Физический контакт между членами команды был запрещен. Если два участника сближались на расстояние менее 0,5 m, выводилось нейтральное напоминание о безопасности, не содержащее информации о задании.
За каждой сессией в большом пространстве наблюдали два исследователя. Один исследователь контролировал панель управления системой и статус записи. Второй исследователь находился за пределами активной зоны отслеживания и следил за безопасностью участника. Выполнение задания приостанавливалось, если отслеживание прерывалось более чем на 10 s, если участник сообщал о дискомфорте или если участник пересекал границу безопасной зоны. Если перерыв длился менее 2 min и участник желал продолжить, выполнение задания возобновлялось с последнего сохраненного состояния. Если перерыв превышал 2 min, сессия регистрировалась как незавершенная и сохранялась в наборе данных для анализа исходя из назначенного лечения (intention-to-treat).
9. Показатели результатов и сроки оценки
Оценку проводили на исходном этапе, сразу после обучения и через 2 недели после обучения. Исходные показатели включали демографические данные, предыдущий опыт использования виртуальной реальности и командного обучения, знакомство с компьютерными играми, а также предварительное тестирование знаний из 30 вопросов. Показатели сразу после обучения включали пространственное присутствие, самооценку и оценку стороннего наблюдателя координации команды, вовлеченность в обучение, когнитивную нагрузку, дискомфорт от симулятора, уровень знаний после обучения и показатели выполнения задачи. Для последующего наблюдения через 2 недели использовался тот же тест знаний из 30 вопросов с измененным порядком пунктов и незначительными вариациями в формулировках. График оценки представлен в Таблице 1.
Таблица 1: Сводка первичных и вторичных показателей. В этой таблице представлены переменные, шкалы измерения, время оценки и источники данных для первичных исходов, вторичных результатов обучения, а также показателей безопасности и процесса, оцениваемых на протяжении всего экспериментального протокола. Пожалуйста, нажмите здесь, чтобы скачать эту таблицу.
Пространственное присутствие измеряли сразу после обучения с помощью 8-пунктной 7-балльной шкалы, адаптированной на основе установленных параметров присутствия12. Баллы усреднялись, если было заполнено не менее 80% пунктов; в противном случае результат кодировался как пропущенный. Полный список пунктов и правила подсчета баллов приведены в Дополнительном файле 1.
Субъективная оценка координации команды измерялась с помощью специально разработанной шкалы из шести пунктов с 7-балльной градацией, охватывающей четкость коммуникации, осознание своих ролей, взаимный мониторинг, своевременность оказания помощи, общее понимание задачи и исправление ошибок. Пилотное тестирование с участием 20 добровольцев позволило оценить четкость и структуру пунктов, а эксплораторный факторный анализ выявил один доминирующий фактор. Внутренняя согласованность в основной выборке составила α Кронбаха = 0.88. Баллы участников рассчитывались как среднее значение по заполненным пунктам, а баллы на уровне команды — как среднее арифметическое баллов трех участников. Полный перечень пунктов и критерии оценки представлены в Дополнительном файле 1.
Координацию работы команды по оценке наблюдателя оценивали с помощью специально разработанного критерия, охватывающего своевременность коммуникации, выполнение ролей, взаимную поддержку, пространственную координацию и устранение ошибок. Каждая область оценивалась по шкале от 0 до 20, что давало общую сумму баллов от 0 до 100. Критерии прошли экспертную проверку, и два наблюдателя прошли 10 ч обучения перед началом официального подсчета баллов. Надежность оценивания проверяли с помощью двухстороннего коэффициента внутриклассовой корреляции (ICC) со случайными эффектами для абсолютного согласия; перед окончательным подсчетом баллов требовалось значение ICC ≥ 0,75. Различия в общей сумме баллов более 12 пунктов разрешались путем консенсуса; в остальных случаях использовалось среднее значение двух оценок. Полный перечень критериев и процедура согласования представлены в Дополнительном файле 1.
Вовлеченность в обучение измеряли сразу после тренинга с помощью краткой формы шкалы из 12 пунктов с 7-балльной оценкой13. Баллы усреднялись по всем заполненным пунктам; более высокие значения указывали на более сильную вовлеченность. Внутренняя согласованность оценивалась с помощью альфа Коэна. Когнитивная нагрузка оценивалась по пяти критериям в диапазоне от 1 до 7: умственные затраты, физические затраты, ограничение по времени, приложенные усилия и уровень разочарования14. Полный перечень пунктов и правила подсчета баллов приведены в Дополнительном файле 1.
Приобретение знаний оценивали с помощью теста из 30 баллов, состоящего из 20 вопросов с одним правильным ответом и пяти кратких ситуационных заданий на вынесение суждения. Одна и та же структура теста использовалась для предварительного тестирования, итогового тестирования и тестирования на сохранение знаний через 2 недели, при этом порядок вопросов был изменен, а формулировки заменены на эквивалентные. Прирост не менее 3 баллов между предварительным и итоговым тестами определялся как практически значимое описательное улучшение. Структура теста, правила подсчета баллов и критерии оценки приведены в Дополнительном файле 1.
Дискомфорт при использовании симулятора оценивали до воздействия, после ознакомления с аппаратурой и после выполнения основного задания с помощью пяти шкал оценки симптомов от 0 до 10. Среднее значение по пяти пунктам составляло индекс дискомфорта. Сеансы прекращались, если любой из показателей достигал 7 или выше. Значения индекса после выполнения задания выше 6 требовали наблюдения в течение как минимум 15 min, а значения 5 и выше — последующего наблюдения в течение 24 h. Полные правила оценки безопасности приведены в Дополнительном файле 1.
Показатели выполнения задачи включали статус завершения, время выполнения, правильно выбранные ресурсы, корректное реагирование на предупреждения об опасностях, ошибки маршрута и прерывания по соображениям безопасности. Командам, не завершившим задание, было присвоено время выполнения 1,200 s. Определения результатов, временные интервалы, диапазоны баллов, источники данных и уровни анализа обобщены в Таблице 1 и подробно описаны в Дополнительном файле 1.
10. Процедура сбора данных
Каждая сессия проходила по одной и той же схеме. Участники приходили за 15 min до запланированного времени тренировки. Личность подтверждалась по списку записей, повторно проверялось соответствие критериям отбора, разъяснялась форма информированного согласия и давались ответы на вопросы по процедуре. Затем участники подписывали форму согласия и получали коды участников. Ожидаемое превосходство любого из условий не обсуждалось.
Участники заполнили базовую анкету и прошли предварительный тест на знание материала с помощью лабораторного планшета. Базовая фаза длилась примерно 12 min. После завершения базовой фазы было объявлено о распределении по группам, и подготовлена соответствующая конфигурация обучения. Подготовка оборудования заняла примерно 5 min для настольного режима, 8 min для режима распределенного совместного виртуального пространства в масштабе комнаты и 10 min для режима совместного виртуального пространства в большом помещении. Время подготовки оборудования не учитывалось как время обучения.
Затем все участники прошли стандартный 8-минутный ознакомительный инструктаж. Основное задание начиналось сразу после инструктажа и длилось до 20 мин. Во время выполнения основного задания обучение, подсказки или корректирующая обратная связь не предоставлялись. Техническая помощь ограничивалась восстановлением функций системы, подгонкой гарнитуры, перемещением участников в пределах безопасной зоны или повторением ранее данных инструкций по технике безопасности. После завершения задания участники снимали оборудование, заполняли послетренинговую анкету и проходили тест на проверку знаний на индивидуальных рабочих станциях. Послетренинговая оценка занимала примерно 15 мин.
Тест на удержание знаний через 2 недели проводился в режиме онлайн через 14 дней после обучающего занятия, при этом допустимое окно для выполнения теста составляло с 13-го по 16-й день. Участники получали одно напоминание за 24 h до истечения срока и еще одно напоминание на 15-й день, если тест не был завершен. Ответы, присланные после 16-го дня, были сохранены в исходном наборе данных, но исключены из основного анализа удержания. Фактическое количество дней между обучением и последующим контролем было зафиксировано для анализа чувствительности.
11. Контроль качества данных
Электронные опросники включали проверку диапазонов для ключевых показателей, в то время как демографические пункты можно было пропустить. Фиксировалось время подачи ответов, и опросники, заполненные менее чем за одну треть медианного времени заполнения, помечались для последующего анализа. Системные логи экспортировались после каждого сеанса и сопоставлялись с записями сеансов в течение 48 h; расхождения устранялись с помощью записей с временными метками.
Баллы за координацию, оцененные наблюдателями, вносились двумя наблюдателями независимо друг от друга. Различия в общих баллах более 12 пунктов отмечались для согласования, и окончательные баллы фиксировались перед проведением анализа на уровне групп. Баллы по многопунктовым шкалам рассчитывались при условии заполнения не менее 80% пунктов; в противном случае баллы кодировались как отсутствующие. Неотвеченные вопросы на проверку знаний с одним правильным вариантом ответа оценивались в 0 баллов. Короткие ситуационные задания по оценке суждений оценивались двумя экспертами независимо; расхождения более 1 балла пересматривались третьим экспертом.
Итоговый набор данных был заблокирован после проверки записей о соответствии критериям включения, кодов участников и групп, диапазонов ответов в анкетах, показателей знаний, оценок наблюдателей, системных журналов, валидности проверочного теста, объединения данных и пропусков. Подробные правила подсчета баллов, очистки и блокировки набора данных представлены в Дополнительном файле 1.
12. Мониторинг безопасности и критерии прекращения
Мониторинг безопасности проводился на протяжении всех тренировочных сессий. Перед началом воздействия участников предупреждали о возможности возникновения дискомфорта во время тренировок в виртуальной реальности и о том, что они могут прекратить участие в любой момент. Во время выполнения задания контролировались осанка, равновесие, скорость движений и вербальные признаки дискомфорта. Выполнение задания немедленно прекращалось, если участник сообщал о сильном головокружении, тошноте, зрительном дискомфорте, головной боли, тревоге, потере равновесия или желании остановиться.
Предопределенные критерии прекращения эксперимента применялись последовательно. Сессия останавливалась, если любой показатель дискомфорта достигал 7 или более по шкале от 0 до 10, если участник дважды пересекал границу безопасности за одну сессию, если потеря трекинга длилась более 2 min, если неисправность оборудования препятствовала нормальному взаимодействию или если дальнейшее участие было признано создающим риск для безопасности. Прерванные сессии документировались с помощью формы прерывания сессии. После остановки участники присаживались, и за ними велось наблюдение до тех пор, пока симптомы не вернутся к легкому уровню, определяемому как значения всех показателей дискомфорта ниже 3. Ни одному участнику не разрешалось покидать лабораторию при наличии жалоб на умеренный или сильный дискомфорт.
13. Управление данными и конфиденциальность
Все данные хранились в деидентифицированной папке проекта на зашифрованном институциональном диске. Файл связи, сопоставляющий личности участников с их кодами, хранился отдельно и был доступен только главному исследователю. Данные опросников, журналы выполнения заданий, оценки наблюдателей и результаты тестов на знание объединялись исключительно с использованием кодов участников и команд; аналитический набор данных не содержал персональных идентификаторов.
Данные были организованы на уровне участников и команд. Файлы на уровне участников содержали идентификаторы, назначение условий, демографические переменные, результаты анкетирования, показатели знаний и переменные, связанные с выполнением задания. Файлы на уровне команд содержали идентификаторы команд, назначение условий, оценку координации наблюдателем, факт завершения задания, время выполнения, выбор ресурсов, работу с опасными объектами, ошибки маршрута и перерывы в целях безопасности. Исходные баллы наблюдателей хранились отдельно до этапа усреднения или достижения консенсуса. Определения переменных, диапазоны кодирования и структура набора данных представлены в Дополнительном файле 1.
14. Статистический анализ
Первичными результатами были эффект присутствия в пространстве, самооценка координации команды, оценка координации команды наблюдателем и вовлеченность в обучение. Вторичные результаты включали знания после обучения, сохранение знаний через 2 недели, когнитивную нагрузку, дискомфорт при использовании симулятора, выполнение задания, время выполнения и показатели процесса выполнения задания. Условия обучения включали совместную симуляцию на настольном компьютере, распределенную совместную виртуальную реальность в масштабе комнаты и совместную виртуальную реальность в большом пространстве с совместным размещением участников.
Переменные на уровне участников и команд были обобщены с использованием соответствующих описательных статистик. Исходные характеристики включали возраст, пол, предшествующий опыт использования виртуальной реальности, знакомство с геймингом, предшествующий опыт командного обучения и знания до начала обучения. Поскольку рандомизация проводилась на уровне команд, для оценки внутрикомандной зависимости рассчитывались коэффициенты внутригрупповой корреляции. Первичные результаты на уровне участников анализировались с помощью линейных моделей со смешанными эффектами, где условие обучения выступало в качестве фиксированного эффекта, а идентификатор команды — в качестве случайного перехвата. В моделях использовалась оценка ограниченного максимального правдоподобия, и анализировались доступные данные исходя из допущения о случайном отсутствии данных. Импутация первичных результатов анкетирования не применялась. Оцененные предельные средние значения сравнивались с использованием попарных контрастов с поправкой Тьюки. Координация, оцениваемая наблюдателем, анализировалась на уровне команд.
Для проведения анализа чувствительности по четырем основным исходам была применена процедура контроля частоты ложноположительных результатов Бенджамини-Хохберга. Все рандомизированные группы и участники анализировались в соответствии с первоначальным распределением. Баллы по многопунктовым шкалам рассчитывались при условии заполнения не менее 80% пунктов; в противном случае значения кодировались как пропущенные. Нормальность распределения остатков оценивали с помощью графиков Q-Q и тестов Шапиро-Уилка, а однородность дисперсии — с помощью теста Левена. При наличии выраженного отклонения от нормального распределения в качестве анализа чувствительности применялся критерий Краскела-Уоллиса.
Размеры эффектов указывались вместе со значениями p. Результаты дисперсионного анализа включали эта-квадрат и частичный эта-квадрат; парные сравнения включали d Коэна с 95% доверительными интервалами; в моделях со смешанными эффектами указывались расчетные средние разности с 95% доверительными интервалами. Статистическая значимость определялась как двустороннее p < 0.05. Связи между пространственным присутствием, командной координацией, вовлеченностью в обучение и результатами знаний изучались с помощью корреляций Пирсона или Спирмена, в зависимости от ситуации. Статистический синтаксис для описательного анализа, моделей со смешанными эффектами, анализа координации на уровне команды, корректировки по нескольким результатам, проверки допущений, анализа знаний и корреляционного анализа представлен в Supplementary File 1.