İnsan katılımcıların yer aldığı bu çalışma, Helsinki Bildirgesi'ne ve davranışsal ve eğitimsel araştırmalar için kurumsal gerekliliklere uygun olarak yürütülmüştür. Çalışma protokolü, Shenyang City University İnsan Araştırmaları Etik Kurulu tarafından onaylanmıştır (Onay No. SU1992837; Onay Tarihi: 18 Ocak 2025). Tüm katılımcılar, kayıt öncesinde yazılı bilgilendirilmiş onam vermiştir. Katılımcılara; çalışmanın sürükleyici sanal gerçeklik maruziyeti, ekip tabanlı görev performansı, anket doldurma, davranışsal gözlem ve kısa süreli takip testlerini içerdiği bildirilmiştir. Katılım gönüllülük esasına dayalıdır ve herhangi bir akademik, istihdam veya kurumsal ceza olmaksızın her an çekilmeye izin verilmiştir. Tüm çalışma kayıtları analiz öncesinde kimliksizleştirilmiştir. Her katılımcıya sayısal bir katılımcı kodu ve her ekibe ayrı bir ekip kodu atanmıştır. Analitik veri setine hiçbir isim, öğrenci numarası, telefon numarası, yüz görüntüsü veya doğrudan tanımlanabilir ses kaydı dahil edilmemiştir. Ekipman kategorileri, yazılım versiyonları ve ilgili tekrarlanabilirlik kaynakları Materyal Tablosu'nda listelenmiştir.
1. Çalışma tasarımı ve ortamı
Tamamlanmış olan bu çalışma; geniş alanlı ortak konumlu iş birlikçi sanal gerçekliğin, sürükleyici eğitim sırasında daha güçlü mekânsal varlık, ekip koordinasyonu ve öğrenme bağlılığı ile ilişkili olup olmadığını incelemek için tek merkezli, üç kollu, paralel gruplu deneysel bir tasarım kullanmıştır. Üç eğitim koşulu; masaüstü iş birlikçi simülasyon, oda ölçekli dağıtık iş birlikçi sanal gerçeklik ve geniş alanlı ortak konumlu iş birlikçi sanal gerçekliktir.
Koşullar, daldırma, iş birliği ve yürüme alanının tam faktöriyel bir ayrıştırmasından ziyade fonksiyonel karşılaştırıcılar olarak tasarlanmıştır. Masaüstü koşulu, sürükleyici bir başlığa maruz kalmadan gerçekleştirilen iş birliğini temsil etmiştir. Oda ölçekli dağıtık iş birlikli sanal gerçeklik koşulu, ayrı küçük takip alanlarındaki sürükleyici ekip iş birliğini temsil etmiştir. Geniş alanlı eş konumlu iş birlikli sanal gerçeklik koşulu ise tek bir takip edilen eğitim alanı içerisinde sürükleyici bir görsel deneyimi, paylaşılan fiziksel hareketi ve gerçek zamanlı somutlaştırılmış ekip etkileşimini birleştirmiştir. Bu nedenle, grup farkları tek bir bileşene atfedilebilen etkilerden ziyade, eksiksiz eğitim konfigürasyonları arasındaki farklar olarak yorumlanmıştır. Bu yapı, sürükleyici öğrenme üzerine yapılan araştırmaların mekansal mevcudiyeti, failliği ve etkileşimi, sanal ortamların öğrenme davranışını etkileyebileceği mekanizmalar olarak ele alması nedeniyle seçilmiştir11.
Çalışma, katılımcı kurumun Sürükleyici Öğrenme ve İnsan-Bilgisayar Etkileşimi Laboratuvarı'nda 3 Mart 2025–18 Temmuz 2025 tarihleri arasında yürütülmüştür. Katılımcı alımı ve başlangıç testleri 3 Mart–25 Nisan 2025 tarihleri arasında gerçekleştirilmiştir. Müdahale oturumları 10 Mart–30 Mayıs 2025 tarihleri arasında uygulanmıştır. 2 haftalık kalıcılık değerlendirmeleri 24 Mart–16 Haziran 2025 tarihleri arasında tamamlanmıştır. Veri kontrolü, gözlemci puanlaması ve veri setinin kilitlenmesi işlemleri 18 Temmuz 2025 tarihine kadar tamamlanmıştır.
Aydınlatma, sıcaklık, internet bağlantısı, görev talimatları ve araştırmacı gözetimini kontrol etmek amacıyla tüm oturumlar aynı laboratuvar kompleksinde gerçekleştirilmiştir. Geniş alanlı aynı konumda ortak çalışma sanal gerçeklik koşulunda 8 m × 8 m boyutunda engelsiz bir takip alanı kullanılmıştır. Oda ölçekli dağıtık ortak çalışma sanal gerçeklik koşulunda ise birbirinden ayrılmış üç adet 3 m × 3 m boyutunda işaretli alan kullanılmıştır. Masaüstü ortak simülasyon koşulunda, katılımcıların yalnızca belirlenen iletişim kanalı üzerinden iletişim kurabilmeleri için akustik bölmelerle ayrılmış bireysel bilgisayar iş istasyonları kullanılmıştır.
Katılımcılar, randomizasyon öncesinde üç kişilik ekiplere ayrılmıştır. Görev; dağıtılmış rol yürütme, sözel koordinasyon, paylaşılan durum farkındalığı ve ortak problem çözme gerektirdiği için eğitim birimi olarak ekip kullanılmıştır. Aynı oturumdaki katılımcılar arasında kontaminasyonu önlemek amacıyla randomizasyon ekip düzeyinde gerçekleştirilmiştir. Genel çalışma iş akışı ve üç koşulun fiziksel konfigürasyonu Şekil 1'de gösterilmektedir.
2. Katılımcılar ve uygunluk taraması
Katılımcılar, katılım sağlayan kurumun lisans ve lisansüstü programlarından seçilmiştir. Alım ilanlarında çalışma; sanal gerçeklik, ekip koordinasyonu ve öğrenme değerlendirmesini içeren sürükleyici bir eğitim çalışması olarak tanımlanmıştır. İlanlarda, herhangi bir eğitim durumunun beklenenden daha üstün olduğu belirtilmemiştir. İlgilenen katılımcılar, laboratuvar planlaması öncesinde çevrim içi bir tarama formunu doldurmuşlardır.
Katılımcıların uygunluk kriterleri; 18–35 yaş arasında olmak, normal veya düzeltilmiş normal görme yetisine sahip olmak, eğitim dilini anlayabilmek, aynı sanal eğitim senaryosuna daha önce katılmamış olmak ve en az 30 dk boyunca güvenle ayakta durup hareket edebilmek olarak belirlenmiştir. Şiddetli hareket hastalığı, kontrol altına alınmamış epilepsi, yürüme veya dengeyi etkileyen yakın tarihli kas-iskelet sistemi yaralanması, düzeltilmemiş görme bozukluğu, şiddetli vertigo, şiddetli düzeltilmemiş işitme kaybı, mevcut akut hastalık veya sürükleyici sanal gerçeklik maruziyetini güvensiz kılan herhangi bir tıbbi durum bildirenler çalışma dışı bırakılmıştır. Ayrıca, söz konusu eğitim senaryosuyla ilgili kapsamlı ön deneyimi olanlar veya aynı sistemin pilot testlerine daha önce katılmış olanlar da çalışma kapsamı dışında tutulmuştur.
Uygunluk iki adımda doğrulandı. İlk olarak bir araştırma asistanı çevrimiçi tarama formunu inceledi. Ardından seans araştırmacısı, test gününde onay alınmadan önce uygunluğu sözlü olarak teyit etti. Daha önce hafif hareket rahatsızlığı bildiren katılımcılar otomatik olarak hariç tutulmadı, ancak daha yakından izlendiler ve rahatsızlık oluşması durumunda katılımın derhal durdurulabileceği hatırlatıldı. Eksiksiz tarama formu, uygunluk maddeleri, başlangıç anketi, yanıt formatları ve kodlama kuralları Ek Dosya 1'de sunulmuştur.
Deneysel tasarım için gerekli örneklem boyutunu belirlemek amacıyla G-Power yazılımı kullanılarak a priori bir güç analizi yapılmıştır. Önceki sürükleyici işbirlikli öğrenme literatürüne dayanarak, beklenen orta düzey etki büyüklüğünün f = 0.25, alfa düzeyinin 0.05 ve üç grup analizinin istatistiksel gücünün 0.80 olduğu varsayıldığında, minimum 111 katılımcı gerektiği saptanmıştır. Üç kişilik ekip yapısına uyum sağlamak ve koşullar arasında dengeli grup dağılımını korumak için final örneklemi, 42 bağımsız ekipten oluşan 126 katılımcıya genişletilmiştir. Müdahale ekip düzeyinde uygulandığı için; kümeleme düzeltmesi, gözlemci tarafından puanlanan koordinasyon skorlaması ve hassasiyet kontrolleri amacıyla ekip kimlikleri muhafaza edilmiştir.
3. Randomizasyon, tahsis gizleme ve körleme
Üç kişilik bir ekibin tüm üyeleri uygunluk onayını tamamladıktan sonra, ekip, altı ekiplik sabit blok boyutuna sahip bilgisayar üretimli bir blok-randomizasyon listesi kullanılarak üç eğitim koşulundan birine rastgele atanmıştır. Tahsis dizisi, veri toplama işleminden önce, istatistiksel hesaplama ortamındaki bir randomizasyon paketi kullanılarak 20250301 yeniden üretilebilir seed değeri ile oluşturulmuştur.
Tahsis gizliliği, katılımcı alımı ve müdahalenin uygulanmasından bağımsız bir araştırmacı tarafından hazırlanan, ardışık olarak numaralandırılmış, opak ve kurcalandığında belli olan zarflar kullanılarak sürdürülmüştür. Randomizasyon dosyası, şifre korumalı bir hesap çizelgesinde saklanmış ve sonuç değerlendiricilerinin erişimine kapatılmıştır.
Gruplandırma, ancak başlangıç anketi ve eğitim öncesi bilgi testinin tamamlanmasından sonra açıklanmıştır. Oturum araştırmacısı, ekipman kurulumundan hemen önce bir sonraki mühürlü gruplandırma zarfını açmıştır. Üç koşul görünür şekilde farklı olduğu için katılımcıların fiziksel eğitim formatına karşı körlenmesi mümkün olmamıştır. Katılımcılara, hangi koşuldan daha iyi performans göstermesinin beklendiği bilgisi verilmemiştir.
İki gözlemci, standartlaştırılmış ekran kayıtlarından ekip koordinasyonunu değerlendirdi. Gözlemciler; çalışma hipotezleri, eğitim durumu etiketleri ve anket sonuçları hakkında bilgilendirilmemişti ve eğitimlerin verilme sürecinde yer almamışlardı. Video dosyaları, puanlama öncesinde nötr ekip kodları kullanılarak yeniden adlandırıldı. Durumu tanımlayan arayüz etiketleri, gözlemci puanlamasından önce mümkün olan yerlerde kırpıldı veya maskelendi.
4. Eğitim senaryosu ve görev yapısı
Eğitim senaryosu, simüle edilmiş bir endüstriyel eğitim ortamında, iş birlikli bir acil durum lojistiği ve mekansal navigasyon görevi olarak tasarlanmıştır. Her üç kişilik ekipten sanal kaynakları bulmaları, mekansal ipuçlarını yorumlamaları, rota bilgilerini iletmeleri, role özgü eylemleri koordine etmeleri ve belirli bir zaman penceresi içerisinde bir dizi görev adımını tamamlamaları istenmiştir.
Her katılımcı üç rolden birini üstlenmiştir: navigatör, kaynak yöneticisi veya güvenlik kontrolörü. Navigatör, rota yönünü ve hedef sırasını yorumladı. Kaynak yöneticisi, görevle ilgili sanal öğeleri belirledi ve topladı. Güvenlik kontrolörü ise tehlikeleri izledi, prosedür sırasını onayladı ve nihai gönderimden önce ekibi uyardı.
Senaryo dört bölgeden oluşmaktaydı: yönelim bölgesi, kaynak bölgesi, tehlike bölgesi ve tamamlama bölgesi. Her ekip sekiz zorunlu alt görevi tamamladı: hedef konumun belirlenmesi, altı olası kaynaktan üç doğru kaynağın seçilmesi, iki yanlış rota dalından kaçınılması, üç tehlike uyarısına yanıt verilmesi, ekip üyeleri arasında bilgi aktarımı ve final görev dizisinin teslim edilmesi. Maksimum görev süresi 20 dk idi. Tüm zorunlu alt görevleri 20 dk içinde tamamlayamayan ekipler süre sınırında durduruldu ve tamamlanan alt görev sayısı kaydedildi.
Ana görevden önce, tüm katılımcılar standartlaştırılmış 8 dakikalık bir oryantasyon sürecini tamamladı. İlk 3 dakikada çalışma kuralları ve güvenlik prosedürleri tanıtıldı. Sonraki 3 dakikada arayüz kontrolleri tanıtıldı. Son 2 dakikada ise katılımcıların; ana senaryoda kullanılan nesnelerin, rotaların, tehlikelerin veya cevapların bulunmadığı nötr bir uygulama ortamında hareket, seçim ve iletişim pratiği yapmaları sağlandı. Uygulama ortamından elde edilen hiçbir performans verisi analiz edilmedi.
Her üç koşulda da aynı öğrenme içeriği, görev dizisi, hedef cevaplar, rota yapısı, tehlike uyarıları ve puanlama kriterleri kullanılmıştır. Koşullar; etkileşim modalitesi, daldırma derecesi, fiziksel hareket ve mekansal konfigürasyon açısından farklılık göstermiştir. Sürükleyici ortamlar, ticari bir gerçek zamanlı üç boyutlu geliştirme platformu kullanılarak oluşturulmuştur. Çok oyunculu ağ bağlantısı ve mekansal durum senkronizasyonu, yerel bir gigabit Ethernet mimarisi üzerinden çalışan özel bir çok oyunculu senkronizasyon çerçevesi kullanılarak uygulanmıştır. Sürükleyici sanal gerçeklik koşullarına atanan katılımcılar, entegre kulaklık ve mikrofonlara sahip yüksek çözünürlüklü baş montajlı ekranlar kullanmıştır. Mekansal takip için dört baz istasyonlu, kızılötesi lazer tabanlı bir takip sistemi kullanılmıştır. Avatar uygulaması, gerçek zamanlı baş ve el kontrolcü telemetrisini eklemli işçi avatarlarına eşlemek için ters kinematik algoritmaları kullanmıştır.
5. Çalışma öncesi prosedür kontrolü ve ölçüm iyileştirmesi
Resmi veri toplama sürecinden önce tüm anket maddeleri, bilgi testi maddeleri, gözlemci değerlendirme kuralları ve görev prosedürleri; sürükleyici öğrenme konusunda deneyimli iki araştırmacı ve eğitimsel ölçme konusunda deneyimli bir araştırmacı tarafından gözden geçirilmiştir. İnceleme; madde netliği, rol-görev uyumu, puanlama tutarlılığı, güvenlik ifadeleri ve yapı uyumuna odaklanmıştır.
17 Şubat–21 Şubat 2025 tarihleri arasında, resmi örneklemle aynı uygunluk kriterlerini karşılayan altı katılımcı ile bir pilot prosedür kontrolü gerçekleştirilmiştir. Pilot çalışma; görev zamanlamasını, kulaklık konforunu, hareket güvenliğini, talimatların netliğini, anket doldurma süresini, veri dışa aktarım doğruluğunu ve gözlemci değerlendirme fizibilitesini incelemiştir. Pilot verileri yalnızca ifade biçimini, kurulum zamanlamasını, güvenlik talimatlarını ve günlük dışa aktarım prosedürlerini geliştirmek için kullanılmıştır. Bu katılımcılar final örneklemine dahil edilmemiş ve verileri resmi analize dahil edilmemiştir.
6. Masaüstü iş birlikçi simülasyon koşulu
Masaüstü iş birlikçi simülasyon koşulunda, her katılımcı 24 inç 1080p monitöre bağlı bireysel bir iş istasyonu kullandı. Giriş cihazları bir bilgisayar faresi ve klavyeden oluşuyordu ve sesli iletişim bir USB kulaklık ve mikrofon aracılığıyla sağlandı. Katılımcılar ayrı iş istasyonlarına oturtuldu ve sistem dışında iletişim kurmamaları konusunda talimatlandırıldı.
Masaüstü simülasyonunda, sanal gerçeklik koşullarıyla aynı sanal ortam, görev nesneleri, rota dizisi, tehlike uyarıları ve puanlama mantığı kullanılmıştır. Kamera bakış açısı birinci şahıs perspektisindeydi. Şekil 2A'da gösterildiği gibi, masaüstü grubundaki katılımcılar klavye girişlerini kullanarak yönlendirme yapmış ve sabit iki boyutlu bir monitör görüş alanı üzerinden fare tıklamalarıyla sanal kaynaklarla etkileşime girmişlerdir. Görüş alanı, hareket hızı, etkileşim mesafesi ve ses ayarları veri toplama öncesinde sabitlenmiş ve oturumlar arasında değiştirilmemiştir. Bir araştırmacı her oturum boyunca teknik stabiliteyi izlemiş ancak ana senaryo başladıktan sonra görevle ilgili tavsiyelerde bulunmamıştır.
7. Oda ölçekli dağıtık iş birliğine dayalı sanal gerçeklik koşulu
Oda ölçekli dağıtık iş birliğine dayalı sanal gerçeklik koşulunda, üç katılımcı ayrı 3 m × 3 m işaretli takip alanlarından aynı sanal senaryoya giriş yaptı. Her katılımcı, başa takılan bir ekran ve el tipi kontrol cihazlar kullandılar. Ekip üyeleri, atanan ses kanalı üzerinden iletişim kurdular ve aynı rol tabanlı ekip görevini tamamladılar, ancak paylaşılan geniş bir takip alanında fiziksel olarak birlikte gezinemediler.
Ana görevden önce kulaklık uyumu, interpupiller mesafe, sınır sistemi ve kontrolcü kayışları ayarlanmıştır. Katılımcılara baş dönmesi, mide bulantısı, göz yorgunluğu, baş ağrısı, denge kaybı veya anksiyete oluşması durumunda hemen durmaları talimatı verilmiştir. Bir araştırmacı, oturum boyunca her aktif takip alanının 2 m yakınında kalmış ve görevle ilgili yönlendirme yapmadan güvenliği izlemiştir.
Bir katılımcı işaretli sınırı geçtiğinde seans durduruldu ve katılımcı yeniden konumlandırıldı. Herhangi bir 0–10 arasındaki rahatsızlık maddesinde, öz değerlendirme rahatsızlık puanının 5 veya daha yüksek olması şeklinde tanımlanan orta dereceli bir rahatsızlık oluşursa, seans durduruldu ve katılımcının iyileşmesi için oturmasına izin verildi. Herhangi bir rahatsızlık maddesi 7 veya daha yüksek bir değere ulaştığında seans sonlandırıldı.
8. Geniş alanlı aynı konumlu iş birlikçi sanal gerçeklik koşulu
Geniş alanlı aynı konumlu iş birlikçi sanal gerçeklik koşulunda, üç kişiden oluşan her ekip 8 m × 8 m boyutlarındaki aynı izlenen eğitim alanına girdi. Her katılımcı bir baş monteli ekran taktı, iki kontrol cihazı tuttu ve diğer ekip üyeleri tarafından görülebilen role özel bir avatar ile temsil edildi. Ekip üyeleri, ortak eğitim alanı içinde fiziksel olarak hareket ederken gerçek zamanlı olarak sözlü iletişim kurdular. Sistem; katılımcı konumunu, el hareketlerini, nesne seçimini ve görev durumu değişikliklerini senkronize etti. Şekil 2B ve Şekil 2C'de gösterildiği gibi, sürükleyici koşullardaki katılımcılar, izlenen kontrol cihazlarıyla üç boyutlu mekansal el hareketlerini ve 360° görüş alanı için fiziksel baş rotasyonunu kullanarak görevleri gerçekleştirdiler.
Geniş alan koşulunda, diğer koşullarla aynı görev içeriği ve 20 dk'lık süre sınırı kullanılmıştır. Fiziksel hareket, sanal rotanın işaretlenmiş güvenlik alanı içerisinde kalması için kalibre edilmiştir. Katılımcılar takip bölgesinin kenarına yaklaştığında başlıkta bir güvenlik sınırı belirmiştir. Ana görevden önce; zemin açıklığı, kablosuz hareket, başlık uyumu, takip stabilitesi, ses girişi ve kontrolcü yanıtı kontrol edilmiştir. Katılımcılara, sanal ortamda gezinmek için yapay lokomosyon teknikleri yerine doğal fiziksel yürüyüşü kullanmaları talimatı verilmiştir. Ekip üyeleri arasındaki fiziksel temasa izin verilmemiştir. İki katılımcı birbirine 0,5 m kadar yaklaştığında, görev bilgisi içermeyen tarafsız bir güvenlik uyarısı yapılmıştır.
Her geniş alan oturumuna iki araştırmacı nezaret etti. Araştırmacılardan biri sistem panelini ve kayıt durumunu izledi. İkinci araştırmacı ise aktif izleme alanının dışında durarak katılımcı güvenliğini takip etti. İzleme 10 s'den fazla süreyle kesilirse, bir katılımcı rahatsızlık bildirirse veya bir katılımcı güvenlik sınırını geçerse görev durduruldu. Kesinti 2 dk'dan kısa sürerse ve katılımcı devam etmek isterse, görev son kaydedilen durumdan itibaren yeniden başlatıldı. Kesintinin 2 dk'yı aşması durumunda, oturum tamamlanmamış olarak kaydedildi ve tedavi niyeti veri setinde tutuldu.
9. Sonuç ölçümleri ve değerlendirme zamanlaması
Değerlendirmeler başlangıçta, eğitimin hemen ardından ve eğitimden 2 hafta sonra tamamlanmıştır. Başlangıç ölçümleri; demografik bilgileri, önceki sanal gerçeklik ve ekip eğitimi deneyimini, oyun aşinalığını ve 30 maddelik bir bilgi ön testini içermektedir. Eğitim sonrası hemen yapılan ölçümler; mekansal mevcudiyeti, öz değerlendirme ve gözlemci değerlendirmeli ekip koordinasyonunu, öğrenme bağlılığını, bilişsel yükü, simülatör rahatsızlığını, eğitim sonrası bilgiyi ve görev performans göstergelerini içermektedir. 2 haftalık takipte, maddeleri yeniden sıralanmış ve kelimelerinde küçük değişiklikler yapılmış olan aynı 30 maddelik bilgi testi kullanılmıştır. Değerlendirme takvimi Tablo 1'de gösterilmiştir.
Tablo 1: Birincil ve ikincil ölçümlerin özeti. Bu tablo, deneysel protokol boyunca değerlendirilen birincil sonuçlar, ikincil öğrenme sonuçları ve güvenlik ile süreç ölçümleri için değişkenleri, ölçüm ölçeklerini, değerlendirme zamanlamasını ve veri kaynaklarını özetlemektedir. Bu tabloyu indirmek için lütfen buraya tıklayın.
Mekansal mevcudiyet, eğitimden hemen sonra, yerleşmiş mevcudiyet boyutlarından uyarlanan 8 maddelik, 7'li bir ölçek kullanılarak ölçülmüştür12. Maddelerin en az %80'i tamamlandığında puanların ortalaması alınmış; aksi takdirde puan kayıp olarak kodlanmıştır. Maddelerin tamamı ve puanlama kuralları Ek Dosya 1'de sunulmuştur.
Kendi değerlendirmesine dayalı ekip koordinasyonu; iletişim netliği, rol farkındalığı, karşılıklı izleme, yardım zamanlaması, paylaşılan görev kavrayışı ve hata düzeltme konularını kapsayan, özelleştirilmiş altı maddelik, 7 puanlık bir ölçek kullanılarak ölçülmüştür. 20 katılımcıyla yapılan pilot testle maddelerin netliği ve yapısı değerlendirilmiş ve açımlayıcı faktör analizi sonucunda tek bir baskın faktör belirlenmiştir. Ana örneklemdeki iç tutarlılık Cronbach’s α = 0.88 olarak bulunmuştur. Katılımcı puanları, tamamlanan maddelerin ortalaması olarak; ekip düzeyindeki puanlar ise üç katılımcı puanının ortalaması olarak hesaplanmıştır. Maddelerin tamamı ve puanlama kriterleri Ek Dosya 1'de sunulmuştur.
Gözlemci tarafından değerlendirilen ekip koordinasyonu; iletişim zamanlaması, rol yürütme, karşılıklı destek, mekansal koordinasyon ve hata giderme konularını kapsayan özelleştirilmiş bir rubrik kullanılarak değerlendirilmiştir. Her bir alan 0–20 arasında puanlanmış ve toplamda 0–100 arasında bir puan elde edilmiştir. Rubrik uzman incelemesinden geçmiş ve iki gözlemci, resmi puanlamadan önce 10 saatin eğitimini tamamlamıştır. Değerlendiriciler arası güvenilirlik, mutlak uyum için iki yönlü rastgele etkili sınıf içi korelasyon katsayısı (ICC) kullanılarak değerlendirilmiş ve nihai puanlamadan önce ICC ≥ 0,75 şartı aranmıştır. 12 puandan fazla olan toplam puan farkları fikir birliği ile çözülmüş; bunun dışındaki durumlarda ise iki puanın ortalaması kullanılmıştır. Rubriğin tamamı ve uzlaşma prosedürü Ek Dosya 1'de sunulmuştur.
Öğrenme etkileşimi, eğitimden hemen sonra 12 maddelik, 7 puanlı kısa formlu bir ölçek kullanılarak ölçülmüştür13. Puanlar, tamamlanan maddeler üzerinden ortalaması alınmış olup daha yüksek değerler daha güçlü etkileşime işaret etmektedir. İç tutarlılık, Cronbach alfa kullanılarak değerlendirilmiştir. Bilişsel yük; zihinsel talep, fiziksel talep, zaman baskısı, çaba ve hayal kırıklığına yönelik beş adet 1–7 arası derecelendirme ile değerlendirilmiştir14. Maddelerin tamamı ve puanlama kuralları Ek Dosya 1'de sunulmuştur.
Bilgi edinimi, 20 tek seçmeli soru ve beş kısa senaryo değerlendirme maddesinden oluşan 30 puanlık bir test ile değerlendirilmiştir. Ön test, son test ve 2 haftalık kalıcılık testi için, soruların sırası değiştirilerek ve eş değer ifade değişiklikleri yapılarak aynı test planı kullanılmıştır. Ön testten son teste kadar en az 3 puanlık bir artış, pratik açıdan anlamlı bir tanımlayıcı gelişme olarak tanımlanmıştır. Test planı, puanlama kuralları ve değerlendirme rubriği Ek Dosya 1'de sunulmuştur.
Simülatör rahatsızlığı; maruziyet öncesinde, oryantasyon sonrasında ve ana görevden sonra beş adet 0–10 arası semptom değerlendirmesi kullanılarak belirlendi. Beş maddenin ortalaması rahatsızlık indeksini oluşturdu. Herhangi bir madde 7 veya daha yüksek bir değere ulaştığında oturumlara son verildi. Görev sonrası 6'nın üzerindeki indeksler en az 15 dakikalık izleme gerektirdi ve 5 veya daha yüksek indeksler 24 saatlik takip gerektirdi. Tam güvenlik puanlama kuralları Ek Dosya 1'de sunulmuştur.
Görev performans göstergeleri arasında tamamlama durumu, tamamlama süresi, doğru seçilen kaynaklar, doğru yönetilen tehlike uyarıları, rota hataları ve güvenlik kesintileri yer almıştır. Tamamlayamayan ekipler için tamamlama süresi 1.200 s olarak atanmıştır. Sonuç tanımları, zamanlama, puan aralıkları, veri kaynakları ve analiz düzeyleri Tablo 1'de özetlenmiş ve Ek Dosya 1'de detaylandırılmıştır.
10. Veri toplama prosedürü
Her oturum aynı sıralamayı takip etti. Katılımcılar planlanan eğitim saatinden 15 dk önce geldiler. Randevu listesi kullanılarak kimlik doğrulaması yapıldı, uygunluk durumu yeniden kontrol edildi, onam formu açıklandı ve prosedürle ilgili sorular yanıtlandı. Ardından katılımcılar onam formunu imzaladılar ve katılımcı kodlarını aldılar. Herhangi bir koşulun beklenen üstünlüğü hakkında tartışma yapılmadı.
Katılımcılar, başlangıç anketini ve eğitim öncesi bilgi testini bir laboratuvar tabletinde tamamladılar. Başlangıç aşaması yaklaşık 12 dk sürdü. Başlangıç aşamasının tamamlanmasının ardından ekip dağılımı açıklandı ve atanan eğitim kurulumu hazırlandı. Ekipman hazırlığı; masaüstü durumu için yaklaşık 5 dk, oda ölçekli dağıtılmış iş birlikçi sanal gerçeklik durumu için 8 dk ve geniş alanlı ortak konumlu iş birlikçi sanal gerçeklik durumu için 10 dk sürdü. Ekipman hazırlığı, eğitim maruziyeti olarak sayılmamıştır.
Ardından tüm katılımcılar standartlaştırılmış 8 dakikalık oryantasyonu tamamladılar. Ana görev, oryantasyonun hemen ardından başladı ve 20 dakikaya kadar sürdü. Ana görev sırasında herhangi bir öğretim, ipucu veya düzeltici geri bildirim verilmedi. Teknik destek; sistem işlevinin geri getirilmesi, kulaklık ayarının yapılması, katılımcıların güvenlik sınırı içerisinde yeniden konumlandırılması veya önceden belirtilen güvenlik talimatlarının tekrarlanmasıyla sınırlı tutuldu. Görev sonrası katılımcılar ekipmanları çıkardılar ve bireysel istasyonlarda eğitim sonrası anketini ve eğitim sonrası bilgi testini tamamladılar. Eğitim sonrası değerlendirme yaklaşık 15 dakika sürdü.
2 haftalık kalıcılık testi, eğitim oturumundan 14 gün sonra çevrimiçi olarak uygulanmış olup, kabul edilebilir tamamlama penceresi 13. gün ile 16. gün arası olarak belirlenmiştir. Katılımcılara, son teslim tarihinden 24 saat önce bir hatırlatma ve testin tamamlanmaması durumunda 15. günde bir hatırlatma daha gönderilmiştir. 16. günden sonra gönderilen yanıtlar ham veri setinde tutulmuş ancak birincil kalıcılık analizinden hariç tutulmuştur. Eğitim ile takip arasındaki gerçek gün sayısı, hassasiyet analizi için kaydedilmiştir.
11. Veri kalite kontrolü
Elektronik anketler, temel sonuçlar için aralık kontrolleri içerirken demografik maddeler atlanabilmekteydi. Gönderim süreleri kaydedildi ve medyan tamamlama süresinin üçte birinden daha kısa sürede tamamlanan anketler inceleme için işaretlendi. Sistem günlükleri her oturumdan sonra dışa aktarıldı ve 48 saatin içerisinde oturum kayıtlarıyla eşleştirildi; tutarsızlıklar zaman damgalı kayıtlar kullanılarak çözüldü.
Gözlemci tarafından puanlanan koordinasyon skorları, iki gözlemci tarafından bağımsız olarak girilmiştir. 12 puandan fazla olan toplam skor farkları fikir birliği incelemesi için işaretlenmiş ve nihai skorlar grup düzeyindeki analizden önce sabitlenmiştir. Maddelerin en az %80'i tamamlandığında çok maddeli ölçek skorları hesaplanmış; aksi takdirde skorlar eksik olarak kodlanmıştır. Cevaplanmayan tek doğru cevaplı bilgi maddeleri 0 olarak puanlanmıştır. Kısa senaryo değerlendirme maddeleri iki değerlendirici tarafından bağımsız olarak puanlanmış ve 1 puandan fazla olan görüş ayrılıkları üçüncü bir değerlendirici tarafından incelenmiştir.
Uygunluk kayıtları, katılımcı ve ekip kodları, anket aralıkları, bilgi puanları, gözlemci değerlendirmeleri, sistem günlükleri, kalıcılık testi geçerliliği, veri birleştirmeleri ve eksik verilerin doğrulanmasının ardından nihai veri seti kilitlenmiştir. Puanlama, temizleme ve veri seti kilitleme işlemleri için ayrıntılı kurallar Ek Dosya 1'de sunulmuştur.
12. Güvenlik izlemi ve durdurma kriterleri
Tüm eğitim seansları boyunca güvenlik izlemi gerçekleştirilmiştir. Maruziyet öncesinde katılımcılara, sanal gerçeklik eğitimi sırasında rahatsızlık hissedilebileceği ve istedikleri zaman çalışmadan çekilebilecekleri hatırlatılmıştır. Görev sırasında postür, denge, hareket hızı ve rahatsızlığa dair sözel belirtiler izlenmiştir. Bir katılımcının şiddetli baş dönmesi, mide bulantısı, görsel rahatsızlık, baş ağrısı, anksiyete, denge kaybı bildirmesi veya durma isteği olması durumunda görev derhal durdurulmuştur.
Önceden tanımlanmış durdurma kriterleri tutarlı bir şekilde uygulandı. Herhangi bir rahatsızlık maddesinin 0–10 ölçeğinde 7 veya daha yüksek bir değere ulaşması, bir katılımcının tek bir seansta güvenlik sınırını iki kez geçmesi, izleme kaybının 2 dakikadan fazla sürmesi, ekipman arızasının normal etkileşimi engellemesi veya katılımın devam etmesinin bir güvenlik riski oluşturduğuna karar verilmesi durumunda seans durduruldu. Durdurulan seanslar, bir seans kesintisi formu kullanılarak belgelendi. Katılımcılar durdurma işleminden sonra oturtuldu ve tüm rahatsızlık maddeleri 3'ün altına düşecek şekilde tanımlanan hafif seviyeye dönene kadar izlendi. Orta veya şiddetli rahatsızlık bildiren hiçbir katılımcının laboratuvardan ayrılmasına izin verilmedi.
13. Veri yönetimi ve gizlilik
Tüm veriler, şifrelenmiş bir kurumsal sürücüdeki kimliksizleştirilmiş bir proje klasöründe saklanmıştır. Katılımcı kimliklerini katılımcı kodlarıyla ilişkilendiren bağlantı dosyası ayrı olarak saklanmış ve yalnızca baş araştırmacı tarafından erişilebilir kılınmıştır. Anket verileri, görev günlükleri, gözlemci değerlendirmeleri ve bilgi testi puanları yalnızca katılımcı ve ekip kodları kullanılarak birleştirilmiştir ve analitik veri seti hiçbir kişisel tanımlayıcı içermemektedir.
Veriler katılımcı ve ekip düzeylerinde düzenlenmiştir. Katılımcı düzeyi dosyalar; tanımlayıcıları, koşul atamasını, demografik değişkenleri, anket sonuçlarını, bilgi düzeylemesi sonuçlarını ve görevle ilgili değişkenleri içermekteydi. Ekip düzeyi dosyalar ise ekip tanımlayıcılarını, koşul atamasını, gözlemci tarafından değerlendirilen koordinasyonu, görevin tamamlanma durumunu, tamamlanma süresini, kaynak seçimini, tehlike yönetimini, rota hatalarını ve güvenlik kesintilerini içermekteydi. Ham gözlemci puanları, ortalama alınmadan veya konsensüs çözümlenmeden önce ayrı olarak tutulmuştur. Değişken tanımları, kodlama aralıkları ve veri seti yapısı Ek Dosya 1'de sunulmuştur.
14. İstatistiksel analiz
Birincil sonuçlar; mekansal mevcudiyet, öz-değerlendirmeli ekip koordinasyonu, gözlemci değerlendirmeli ekip koordinasyonu ve öğrenme katılımıydı. İkincil sonuçlar arasında eğitim sonrası bilgi düzeyi, 2 haftalık kalıcılık, bilişsel yük, simülatör rahatsızlığı, görevin tamamlanması, tamamlanma süresi ve görev-süreç göstergeleri yer alıyordu. Eğitim koşulları; masaüstü iş birlikli simülasyon, oda ölçekli dağıtık iş birlikli sanal gerçeklik ve geniş alanlı ortak konumlu iş birlikli sanal gerçeklikten oluşmaktaydı.
Katılımcı ve ekip düzeyindeki değişkenler, uygun tanımlayıcı istatistikler kullanılarak özetlenmiştir. Başlangıç özellikleri arasında yaş, cinsiyet, önceki sanal gerçeklik deneyimi, oyun aşinalığı, önceki ekip tabanlı eğitim deneyimi ve eğitim öncesi bilgi yer almıştır. Randomizasyon ekip düzeyinde gerçekleştiği için, ekip içi bağımlılığı değerlendirmek amacıyla sınıf içi korelasyon katsayıları hesaplanmıştır. Katılımcı düzeyindeki birincil sonuçlar, eğitim durumu sabit etki ve ekip tanımlayıcı rastgele kesişim olarak belirlenen doğrusal karma etkili modeller kullanılarak analiz edilmiştir. Modellerde kısıtlanmış maksimum olabilirlik kestirimi kullanılmış ve rastgele eksiklik varsayımı altında mevcut veriler dahil edilmiştir. Birincil anket sonuçlarına herhangi bir atama uygulanmamıştır. Tahmin edilen marjinal ortalamalar, Tukey-düzeltmeli ikili karşılaştırmalar kullanılarak kıyaslanmıştır. Gözlemci tarafından değerlendirilen koordinasyon, ekip düzeyinde analiz edilmiştir.
Bir hassasiyet analizi olarak, dört birincil sonuç üzerinden Benjamini-Hochberg yanlış keşif oranı prosedürü uygulandı. Tüm randomize edilmiş ekipler ve katılımcılar orijinal tahsislere göre analiz edildi. Çok öğeli ölçek puanları, öğelerin en az %80'i tamamlandığında hesaplandı; aksi takdirde puanlar kayıp veri olarak kodlandı. Artıkların normalliği Q-Q grafikleri ve Shapiro-Wilk testleri kullanılarak, varyans homojenliği ise Levene testi kullanılarak değerlendirildi. Güçlü şekilde normal dağılmayan veriler, bir hassasiyet analizi olarak Kruskal-Wallis testi kullanılarak incelendi.
Etki büyüklükleri p değerleri ile birlikte raporlanmıştır. Varyans analizi sonuçları eta kare ve kısmi eta kareyi; ikili karşılaştırmalar 95% güven aralıklarıyla birlikte Cohen's d değerini; karma etkili modeller ise 95% güven aralıklarıyla birlikte tahmini ortalama farkları içermektedir. İstatistiksel anlamlılık, iki yönlü p < 0.05 olarak tanımlanmıştır. Mekansal mevcudiyet, ekip koordinasyonu, öğrenme katılımı ve bilgi çıktıları arasındaki ilişkiler, duruma göre Pearson veya Spearman korelasyonları kullanılarak incelenmiştir. Betimsel analizler, karma etkili modeller, ekip düzeyindeki koordinasyon analizi, çoklu çıktı düzeltmesi, varsayım kontrolleri, bilgi analizleri ve korelasyon analizleri için istatistiksel sözdizimi Ek Dosya 1'de sunulmuştur.