Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
Click here for the English version

Behavior

Esperimenti di realtà virtuale con misure fisiologiche

Published: August 29, 2018 doi: 10.3791/58318

Summary

Esperimenti di realtà virtuale (VR) possono essere difficili da implementare e richiede una pianificazione meticolosa. Questo protocollo descrive un metodo per la progettazione e la realizzazione di esperimenti VR che raccolgono dati fisiologici da partecipanti umani. Gli esperimenti in quadro di ambienti virtuali (EVE) è impiegato per accelerare questo processo.

Abstract

Esperimenti di realtà virtuale (VR) sempre più sono impiegati a causa della loro validità interna ed esterna rispetto all'osservazione del mondo reale ed esperimenti di laboratorio, rispettivamente. VR è particolarmente utile per effetti grafici geografici e le indagini del comportamento spaziale. Nella ricerca di comportamento spaziale, VR fornisce una piattaforma per studiare la relazione tra navigazione e misure fisiologiche (ad es., la pelle di conduttanza, frequenza cardiaca, pressione sanguigna). In particolare, misure fisiologiche permettono ai ricercatori di affrontare nuove questioni e vincolare le teorie precedenti di abilità spaziali, le strategie e le prestazioni. Ad esempio, le differenze individuali nella prestazione di navigazione possono essere spiegate dalla misura in cui cambiamenti in eccitazione mediano gli effetti di difficoltà del compito. Tuttavia, la complessità nella progettazione e realizzazione di esperimenti VR può distrarre sperimentatori provenienti da loro obiettivi di ricerca primaria e introdurre irregolarità nella raccolta dati e analisi. Per affrontare queste sfide, gli esperimenti in ambienti virtuali (EVE) framework include moduli standardizzati come partecipante di formazione con il controllo dell'interfaccia, raccolta di dati mediante questionari, la sincronizzazione delle fisiologiche misurazioni e archiviazione dei dati. EVE, inoltre, fornisce l'infrastruttura necessaria per la valutazione, la visualizzazione e la gestione dei dati. Il presente documento descrive un protocollo che utilizza il framework di vigilia di condurre esperimenti di navigazione nel VR con sensori fisiologici. Il protocollo elenca i passaggi necessari per reclutamento partecipanti, associare i sensori fisiologici, amministrare l'esperimento utilizzando EVE e valutare i dati raccolti con gli strumenti di valutazione di EVE. Nel complesso, questo protocollo faciliterà la ricerca futura semplificando la progettazione e la realizzazione di esperimenti VR con sensori fisiologici.

Introduction

Capire come gli individui navigare ha implicazioni importanti per diversi campi, tra cui scienza cognitiva1,2,3, neuroscienze4,5e computer scienza6 , 7. navigazione è stata studiata in ambienti reali e virtuali. Uno dei vantaggi di esperimenti reali è che la navigazione non richiede la mediazione di un interfaccia di controllo e perciò può produrre più realistico comportamento spaziale. Al contrario, gli esperimenti di realtà virtuale (VR) consentono per una misurazione più precisa del comportamento (ad es., camminare traiettorie) e fisiologico (ad es., frequenza cardiaca) dati, nonché di controllo più sperimentale (cioè., interno validità). A sua volta, questo approccio può provocare interpretazioni più semplice dei dati e teorie così più robuste della navigazione. Inoltre, neuroscienze possono beneficiare di VR, perché i ricercatori possono indagare i correlati neurali della navigazione, mentre i partecipanti sono impegnati nell'ambiente virtuale ma non è possibile spostare fisicamente. Per gli informatici, navigazione in VR richiede sviluppi unici in potenza di elaborazione, memoria e computer grafica al fine di garantire un'esperienza immersiva. I risultati dagli esperimenti di VR possono essere applicati anche in architettura e cartografia informando il design dell'edificio layout8 e mappa caratteristiche9 per facilitare la navigazione del mondo reale. Recentemente, gli avanzamenti nella tecnologia VR combinato con una diminuzione drammatica nel suo costo hanno condotto ad un aumento del numero di laboratori che impiegano VR per i loro disegni sperimentali. A causa di questa crescente popolarità, i ricercatori devono riflettere su come semplificare l'implementazione di applicazioni VR e standardizzare il flusso di lavoro di esperimento. Questo approccio aiuterà MAIUSC risorse attuazione allo sviluppo della teoria ed estendere le funzionalità esistenti di VR.

Configurazioni di VR possono variare da più a meno realistici in termini di display e i controlli. Più realistica di impostazioni VR tende a richiedere ulteriori infrastrutture quali spazi di rilevamento di grandi dimensioni e ad alta risoluzione Visualizza10. Questi sistemi spesso impiegano algoritmi a piedi reindirizzati al fine di iniettare impercettibili rotazioni e traduzioni nel feedback visivo fornito agli utenti ed effettivamente ingrandire l'ambiente virtuale attraverso il quale i partecipanti possono spostare11 , 12. questi algoritmi possono essere generalizzati in che non richiedono la conoscenza della struttura ambientale13 o predittiva in quanto essi assumono particolari percorsi per l' utente14. Anche se la maggior parte della ricerca sul camminare reindirizzata è utilizzato testa-montata display (HMDs), alcuni ricercatori utilizzano una versione di questa tecnica con a piedi-in-posto come parte di un sistema di proiezione di grandi dimensioni (ad es., grotte)15. Mentre sulla testa del partecipante può essere effettuata, HMDs, grotta display tendono a fornire un più ampio campo visivo orizzontale16,17. Tuttavia, meno infrastruttura è necessaria per i sistemi VR utilizzando schermi desktop18,19. La ricerca sulle neuroscienze ha impiegato anche sistemi VR in combinazione con la formazione immagine a risonanza magnetica funzionale (fMRI) durante la scansione20, in combinazione con fMRI dopo la scansione21,22e in combinazione con elettroencefalografia (EEG) durante la registrazione23,24. Ambienti di sviluppo software sono necessari al fine di coordinare la varietà di display e controlli che vengono utilizzati per la ricerca di navigazione.

Ricerca che incorpora VR e dati fisiologici pone ulteriori sfide come l'acquisizione di dati e sincronizzazione. Tuttavia, dati fisiologici consentono le indagini dei processi impliciti che possono mediare la relazione tra il comportamento di navigazione spaziale e potenziali. Infatti, il rapporto fra lo sforzo e la navigazione è stato studiato utilizzando desktop VR e una combinazione di diversi sensori fisiologici (cioè., frequenza cardiaca, pressione sanguigna, conduttanza cutanea, cortisolo salivare e alfa-amilasi)25 , 26 , 27 , 28. per esempio, van Gerven e colleghi29 studiato l'impatto dello stress sulla strategia di navigazione e le prestazioni utilizzando una versione di realtà virtuale di un compito del labirinto dell'acqua di Morris e diverse misure fisiologiche (ad es., pelle conduttanza, frequenza cardiaca, pressione arteriosa). I loro risultati hanno rivelato che lo stress predetto strategia di navigazione in termini di utilizzo di punto di riferimento (cioè., egocentrico contro allocentriche) ma non è stato collegato a prestazioni di navigazione. In generale, i risultati dagli studi precedenti sono un po ' incoerenti per quanto riguarda gli effetti dello stress sulle prestazioni di navigazione e memoria spaziale. Questo modello può essere attribuibile alla separazione del fattore di stress (ad es., la procedura pressoria fredda26, l' attività di analisi di Star Mirror25) dall'attività di navigazione effettiva, l'uso di semplici labirinto di ambienti virtuali ( ad esempio.,26del labirinto dell'acqua di Morris virtuale, virtuale braccio radiale del labirinto28) e le differenze nei dettagli metodologici (ad es., tipo di fattore di stress, tipo di dati fisiologici). Differenze nel formato di dati fisiologici raccolti possono anche essere problematiche per l'implementazione e l'analisi di tali studi.

Gli esperimenti nel quadro di esperimenti virtuali (EVE) facilita la progettazione, la realizzazione e l'analisi di esperimenti VR, soprattutto quelli con periferiche aggiuntive (ad es., eye tracker, dispositivi fisiologici)30. Il framework di EVE è liberamente disponibile come un progetto open-source su GitHub (https://cog-ethz.github.io/EVE/). Questo framework si basa sul popolare unità 3D gioco motore (https://unity3d.com/) e il sistema di gestione di database MySQL (https://www.mysql.com/). I ricercatori possono utilizzare il framework di vigilia al fine di preparare le varie fasi di un esperimento VR, inclusi questionari pre- e post-studio, misurazioni di base per qualsiasi dati fisiologici, formazione con l'interfaccia di controllo, l'attività di navigazione principale, e test per la memoria spaziale dell'ambiente navigabile (ad es., sentenze della direzione relativa). Gli sperimentatori possono inoltre controllare la sincronizzazione dei dati da fonti diverse e a diversi livelli di aggregazione (ad es., attraverso le prove, blocchi o sessioni). Le origini dati possono essere fisiche (cioè., collegato all'utente; Vedi Tabella materiali) o virtuale (cioè., dipendente dalle interazioni tra avatar del partecipante e l'ambiente virtuale). Ad esempio, un esperimento può richiedere la registrazione di frequenza cardiaca e orientamento e posizione dal partecipante quando avatar di tale partecipante si muove attraverso una particolare area dell'ambiente virtuale. Tutti i dati viene automaticamente memorizzati in un database MySQL e valutati con funzioni di riproduzione e il pacchetto di R evertools (https://github.com/cog-ethz/evertools/). Evertools fornisce funzioni di esportazione, base statistica descrittiva, e strumenti diagnostici per le distribuzioni dei dati.

Il quadro di EVE potrebbe essere distribuito con una varietà di infrastrutture fisiche e sistemi VR. Nel presente protocollo, descriviamo una particolare implementazione presso il NeuroLab presso ETH Zürich (Figura 1). Il NeuroLab è un 12m da 6 m camera contenente una camera isolata per condurre esperimenti di EEG, un box contenente il sistema VR (2,6 x 2,0 m) e una zona curtained per il collegamento di sensori fisiologici. Il sistema VR include un display televisione ad altissima definizione da 55", un computer gaming di fascia alta, un'interfaccia di controllo joystick e diversi sensori fisiologici (Vedi Tabella materiali). Nelle sezioni seguenti, descriviamo il protocollo per lo svolgimento di un esperimento di navigazione in NeuroLab utilizzando il framework di EVE e sensori fisiologici, presenti risultati rappresentativi da uno studio sullo stress e navigazione e discutere le opportunità e le sfide connesse con questo sistema.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

Il seguente protocollo è stata condotta conformemente agli orientamenti approvati dalla Commissione etica dell'ETH di Zurigo nell'ambito della proposta EK 2013-N-73.

1. reclutare e preparare i partecipanti

  1. Selezionare partecipanti con particolari dati demografici (ad es., età, sesso, priorità bassa educativa) utilizzando un sistema di reclutamento partecipante o mailing list (ad es., UAST; http://www.uast.uzh.ch/).
  2. Contattare i partecipanti selezionati per e-mail. In questa e-mail, ricordare ai partecipanti dei requisiti e durata della sessione. Lasciate che i partecipanti sanno che devono indossare un ritornello superiore (per il monitoraggio della pressione arteriosa), larghi da alcool per 12 h prima dell'esperimento e astenersi da parecchie altre attività (cioè., caffeina, il fumo, mangiare ed esercizio) per 3 h prima dell'esperimento.

2. preparare l'esperimento e fisiologici dispositivi utilizzando EVE

  1. Prima di ogni sessione sperimentale, avviare il computer, il monitor di sperimentatore e il test monitor.
  2. Assicurarsi che il ventilatore in camera, il termometro e il monitor di umidità sono su.
  3. Accendere la macchina che misura l'attività elettrodermica (EDA) e l'elettrocardiografia (ECG; ad es., PowerLab da ADInstruments). Vedere la tabella dei materiali.
  4. Aprire il software EDA/ECG (vigilia attualmente supporta Labchart da ADInstruments) e creare un nuovo file di impostazioni. Selezionare una frequenza di campionamento di 1.000 Hz e il numero appropriato di canali (ad es., uno per uno per ECG ed EDA). Salvare questo file di impostazioni e ri-salvare una versione con un nome diverso per ogni sessione sperimentale.
  5. Per gli elettrodi EDA, eseguire uno zero in circuito aperto (cioè., senza gli elettrodi attaccati a nulla) per ottenere una misura di base della conducibilità del sistema.
  6. Assicurarsi che l'interfaccia di controllo (ad es., joystick) è collegato al computer.
  7. Sul monitor sperimentatore, aprire il file eseguibile di unità per l'esperimento.
    1. Aprire il menu "Impostazioni di sperimentare" in EVE e immettere i parametri di esperimento (ad es., numero identificativo del partecipante, file di misurazione fisiologica, condizione sperimentale, temperatura e umidità).
    2. Fare clic su "Avvia esperimento".

3. procedura sperimentale

  1. Procedura di introduzione e consenso
    1. Pick up il partecipante nella posizione di incontro concordato e lui/lei guida al laboratorio.
    2. Indicare che la sessione sarà prendere circa 90 min e chiedere al partecipante di conservare il suo orologio e/o telefono cellulare.
    3. Chiedere al partecipante di sedersi sulla sedia sperimentale e spiegare la procedura sperimentale secondo il copione verbale preparato.
    4. Chiedere al partecipante di leggere il foglio informativo e firmare il modulo di consenso informato.
  2. Collegamento di sensori EDA ed ECG
    1. Pulire il dito indice e l'anulare della mano non-dominante con un panno umido senza sapone. Assicurarsi che siano asciutti e collegare i due elettrodi EDA per le falangi mediale.
    2. Pulire la pelle sul petto dove verranno posizionati gli elettrodi ECG con un panno umido.
    3. Posizionare gli elettrodi di bianchi, neri e rossi sul corpo del partecipante tra le costole in base alla Figura 2. Posizionare l'elettrodo bianco sulla parte superiore destra dell'addome (UR) e l'elettrodo nero sulla parte superiore sinistra dell'addome (UL). Posizionare l'elettrodo rosso sul basso addome sinistro (LL). Garantire che i tre elettrodi non sono direttamente sopra una costola.
    4. Collegare i tre cavi ECG color-coded agli elettrodi corrispondenti attaccati al corpo del partecipante.
  3. Questionari pre-esperimento
    1. Fornire al partecipante con una tastiera e un mouse che verrà utilizzato per rispondere a questionari (ad es., demografici domande, la prima parte del breve questionario di stato di Stress, il senso di Santa Barbara di direzione scala) e informare lui o lei che verrà chiesto una serie di domande sul computer.
    2. Informare i partecipanti che si possono chiedere lo sperimentatore domande riguardanti i questionari in qualsiasi momento.
    3. Chiudere le due pareti laterali della cabina mentre il partecipante sta completando i questionari.
  4. Preparazioni per la misurazione fisiologica. Questi passaggi possono essere effettuati mentre il partecipante sta completando i questionari.
    1. Informare il partecipante che lo sperimentatore ora preparerà i dispositivi fisiologici.
    2. Verificare che gli elettrodi sono stati montati nelle posizioni corrette.
    3. Fissare il bracciale della pressione al braccio non dominante.
    4. Fornire istruzioni al partecipante per quanto riguarda la misura esatta di pressione sanguigna. Dica al partecipante di ridurre al minimo i movimenti delle braccia e corpo, tenere il bracciale della pressione a livello del cuore e mantenere una postura eretta con i piedi appoggiati sul pavimento.
    5. Collegare i due fili EDA agli elettrodi sulle dita.
    6. Spegnere la luce sopra il monitor e tutte le altre luci ambientali per l'impostazione più bassa di dim.
    7. Mano il joystick al partecipante e assicurarsi che il mouse è fuori dallo schermo del monitor test.
    8. Zero il canale EDA al fine di ottenere una misura di livello di conduttanza cutanea iniziale di un individuo.
    9. Nel software EDA/ECG, aprire la finestra di dialogo "Bio Amp". Scegliere la portata del segnale in cui il segnale del battimento di cuore copre circa un terzo della finestra di anteprima (5 mV nella maggior parte dei casi).
    10. Avviare la registrazione con il software EDA/ECG e verifica se un segnale è visibile nella finestra del software EDA/ECG sul monitor sperimentatore.
    11. Iniziare la registrazione premendo il pulsante appropriato nella macchina pressione sanguigna la pressione sanguigna.
    12. Passare al programma aperto unità e premere "Avvia misure". Dovrebbe apparire una fissazione trasversale.
  5. Formazione di joystick e linea di base dei video
    1. Chiedere al partecipante di guardare e seguire il video di formazione che incarica lui o lei come utilizzare il joystick.
    2. Chiedere ai partecipanti di completare il labirinto di formazione al fine di pratica usando il joystick. In questo labirinto di formazione, i partecipanti sono incaricati di seguire le frecce che indicano un percorso e raccolgono le gemme galleggiante.
    3. Se l'esperimento include il suono, è possibile inserire la cuffia sulla testa del partecipante.
    4. Chiedere al partecipante di guardare il video di natura basale senza muoversi. Questo video è usato per rappresentare una misurazione di base dei dati fisiologici del partecipante durante l'analisi successiva.
  6. Attività di navigazione
    1. Garantire che i partecipanti abbiano letto le istruzioni per quanto riguarda l'attività di navigazione be-completato. Indagare su se il partecipante ha domande prima dell'inizio dell'attività di navigazione. Raccontare il partecipante che non dovrebbero chiedere domande durante l'attività di navigazione.
    2. Chiedere al partecipante di premere il grilletto sul joystick quando lui o lei è pronta per iniziare l'attività di navigazione.
  7. Misure fisiologiche finale e distacco dei sensori fisiologici
    1. Attendere che il sistema ha completato la misurazione della pressione finale.
    2. Interrompere la registrazione ECG ed EDA premendo il tasto stop nel software EDA/ECG.
    3. Rimuovere il polsino di pressione sanguigna.
    4. Rimuovere gli elettrodi EDA dal partecipante.
    5. Chiedere ai partecipanti di non rimuovere gli elettrodi ECG fino alla fine dell'esperimento.
    6. Rimuovere il joystick e cuffie.
  8. Post-esperimento questionari
    1. Fornire al partecipante con una tastiera e un mouse per i questionari post-esperimento (ad es., la seconda parte del breve questionario di stato di Stress, il manichino di autovalutazione, il questionario di malattia del simulatore).
    2. Informare i partecipanti che verrà chiesto un'altra serie di domande sul computer e che lui o lei può chiedere domande se necessario.
  9. Fine della sessione sperimentale
    1. Informare il partecipante che la parte sperimentale è ormai finita. Grazie a lui o lei per partecipano all'esperimento.
    2. Raccontare il partecipante che ora lui/lei può rimuovere gli elettrodi ECG.
    3. Pagare i partecipanti e chiedere loro di firmare la ricevuta stampata.
    4. Chiedere se il partecipante ha qualsiasi domanda riguardante lo scopo dell'esperimento le escort lui o lei fuori della camera sperimentale.

4. dopo ogni sessione sperimentale

  1. Aprire il menu di "valutazione" in vigilia al fine di condurre l'esperimento diagnostica (ad es., traiettorie di riproduzione) e salvare i file di misurazione fisiologica nel software EDA/ECG.
  2. Nel menu "valutazione" in vigilia, premere il pulsante "Aggiungi evento marcatore" per contrassegnare gli eventi nei file di misurazione fisiologica. Questo passaggio è fondamentale per l'analisi dei dati fisiologici in termini di particolari fasi sperimentali.
  3. Salvare il file EDA/ECG nel file fisiologiche di misura nel software EDA/ECG.
  4. Esportare i dati sperimentali per il backup usando il pacchetto evertools.
  5. Spegnere la macchina EDA/ECG e pulire gli elettrodi EDA con tamponi imbevuti di alcool.
  6. Segno che il partecipante si presentò nel sistema di reclutamento partecipanti.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

Da ogni partecipante il NeuroLab, raccogliamo in genere dati fisiologici (ad es., ECG), dati del questionario (ad es., il senso di Santa Barbara di direzione scala o SBSOD31) e dati di navigazione (ad es., percorsi attraverso il ambiente virtuale). Ad esempio, cambiamenti nella frequenza cardiaca (derivato da dati ECG) sono stati associati con i cambiamenti negli Stati di stress in combinazione con altri fisiologici32 e33di misure self-report. Il nostro sistema permette di essere presentato come il breve questionario di stato di Stress34 e il SBSOD31 per diversi tipi di questionari. Il SBSOD è un misure self-report di abilità spaziale che è spesso correlato con il comportamento di navigazione in tempo reale e virtuale, su larga scala, ambienti35. Inoltre, i dati di navigazione possono essere utilizzati per dedurre decisionale spaziale dei partecipanti (ad es., esitazioni, efficienza di navigazione) in diversi contesti stressanti36.

Uno studio rappresentativo studiato l'effetto dello stress sull'acquisizione della conoscenza spaziale durante la navigazione. Abbiamo testato 60 partecipanti (29 donne e 31 uomini; età media = 23,3) singolarmente durante una sessione di 90 min. Durante l'attività di navigazione di ogni sessione, i partecipanti sono stati collocati in uno dei due gruppi (i. e., stress e senza stress) e completato tre apprendimento e varie fasi di test, mentre EDA ed ECG dati continuamente sono stati registrati. Le fasi di apprendimento coinvolti trovare un set di quattro posizioni (Figura 3) con l'aiuto di una mappa che potrebbe essere attivata tramite un pulsante sul joystick. Le fasi di collaudo coinvolto navigando per ciascuna di queste posizioni in un ordine particolare con un timer visibile. Per solo il gruppo di sforzo, i partecipanti sono stati penalizzati anche monetariamente per il tempo necessario per trovare queste posizioni. Questa pressione monetaria era l'unica manipolazione dello stress nello studio presente.

Come previsto, i dati fisiologici da questo esperimento indicano l'eccitazione superiore per il gruppo di sforzo che il gruppo di nessun sforzo in termini di frequenza cardiaca, t(58) = 2.14, se = 1.03, p =.04, ma non in termini di EDA, t(58) = -0,68, se = 0,02, p =,50 (Figura 4). Inoltre, c'era una correlazione negativa fra SBSOD Punteggio e il tempo necessario per trovare le posizioni di quattro goal durante la fase di apprendimento, r(58) = -0.40, p =.002, ma non in fase di sperimentazione, r(58) = -0,25, p =.057. Secondo le traiettorie visualizzato in quel momento, i partecipanti al gruppo di sforzo sembravano essere che meno distribuiti nell'ambiente virtuale. Insieme, questi risultati suggeriscono che l'eccitazione superiore e abilità spaziale può essere collegate al comportamento di navigazione più efficiente.

Figure 1
Figura 1 : Fotografie di NeuroLab presso ETH Zürich. (un) vista la sperimentatore e partecipante durante il test. Lo sperimentatore può monitorare i progressi del partecipante in tempo reale. (b) vista del primo piano del partecipante navigare attraverso l'ambiente virtuale, mentre sono la raccolta di dati fisiologici. Clicca qui per visualizzare una versione più grande di questa figura.

Figure 2
Figura 2 : Diagramma che rappresenta il posizionamento degli elettrodi ECG tre. Questa cifra è stata di schiuma (Free Open Access il) forma modificata37che è pubblicato sotto una Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License. L'immagine è stato modificato per evidenziare gli elettrodi necessari per un sistema di 3 elettrodi. Questi elettrodi devono essere collocati tra le costole sulla parte superiore destra dell'addome (UR), parte superiore sinistra dell'addome (UL) e al basso ventre sinistro (LL) Clicca qui per visualizzare una versione più grande di questa figura.

Figure 3
Figura 3 : Screenshots da una navigazione sperimentare nel NeuroLab. (un) Screenshot dal joystick video di formazione. Partecipanti è stato chiesto di riprodurre i movimenti del joystick dal video nell'angolo in alto a destra. labirinto di formazione (b) Screenshot dal joystick. I partecipanti spostato attraverso un labirinto seguendo le frecce di galleggiamento e raccogliendo gemme. (c) Screenshot dalla fase di apprendimento dell'attività di navigazione. I partecipanti potrebbero premere il grilletto sul joystick per poter chiamare una mappa dell'ambiente virtuale. Sul lato destro dello schermo è visualizzato un elenco di percorsi di destinazione. (d) Screenshot dal testing fase dell'attività di navigazione. Partecipanti è stato chiesto di trovare le stesse posizioni in un ordine particolare, mentre un orologio movimento e movimento ricompensa erano visibili. Clicca qui per visualizzare una versione più grande di questa figura.

Figure 4
Figura 4 : Rappresentante risultati da un esperimento di navigazione in NeuroLab utilizzando dispositivi fisiologici ed EVE framework. (un) A grafico che rappresenta la relazione tra lo stress nel gruppo di controllo e acquamarina in rosa salmone (gruppo) e media frequenza cardiaca (dopo le correzioni per baseline valori38). Frequenza cardiaca media è significativamente più alto per il gruppo di sforzo del gruppo di controllo. (b), uno scatter plot che rappresenta la relazione tra SBSOD Punteggio e il tempo trascorso di apprendimento (in nero) e test (in grigio). C'è una relazione negativa significativa fra Punteggio SBSOD e tempo trascorso di apprendimento e una tendenza analoga per test del tempo trascorso. ambiente (c), una mappa virtuale che visualizza aggregati i dati del percorso dallo stress (acquamarina) e gruppi di controllo (rosa salmone). Colorazione più scura indica che una proporzione elevata dei percorsi seguiti lungo quel percorso sono da un determinato gruppo. Per le aree vuote, la proporzione di percorsi presi era simile per i due gruppi. Posizioni di obiettivo sono anche contrassegnati con puntini neri. Come illustrato, il gruppo di sforzo era più probabile che il gruppo di controllo per spostare lungo percorsi più diretti tra le posizioni di obiettivo. Clicca qui per visualizzare una versione più grande di questa figura.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Nel presente documento, abbiamo descritto un protocollo per lo svolgimento di esperimenti in VR con fisiologiche dispositivi utilizzando il framework di EVE. Questi tipi di esperimenti sono unici a causa di considerazioni hardware aggiuntivo (ad es., dispositivi fisiologici e altre periferiche), le fasi preparatorie per la raccolta dei dati fisiologici utilizzando VR e requisiti di gestione dei dati. Il presente protocollo fornisce i passaggi necessari per gli sperimentatori che intende raccogliere dati da più periferiche contemporaneamente. Ad esempio, l'uso di dispositivi fisiologici richiede pulizia e applicare gli elettrodi in posizioni specifiche sul corpo del partecipante (ad es., il petto e dita) in modo tale da non interferire con altre periferiche (ad es., il joystick). La tempistica di tali misure dovrà tener conto per la potenziale deriva in segnali fisiologici e finestra appropriata all'interno del quale i dati sono affidabili. Considerazione dello sperimentatore di temporizzazione è anche fondamentale per passaggi preparatori all'interno di ogni sessione sperimentale. Ad esempio, i partecipanti devono completare una fase della linea di base (ad es., guardando un video di natura) in ordine per lo sperimentatore per tenere conto le differenze individuali nella reattività fisiologica, come pure una fase di formazione con l'interfaccia di controllo affinché lo sperimentatore di districare la loro capacità di manovrare da loro processo decisionale spaziale in VR16,17. Inoltre, la sincronizzazione e la memorizzazione di questi dati più complesse con il numero di origini dati. Il framework di EVE descritto nel presente protocollo fornisce una soluzione per gli studi con diverse origini dati in VR. Inoltre, la flessibilità del quadro vigilia permette ai ricercatori di modificare il disegno sperimentale secondo le loro domande di ricerca e aggiungere nuove periferiche quali inseguitori dell'occhio e l'elettroencefalografia.

Tuttavia, esistono alcune limitazioni di questo approccio. In primo luogo, lavorare con il quadro di EVE richiede una certa conoscenza di informatica e competenze di programmazione di base. In secondo luogo, l'interpretazione dei dati fisiologici si basa su una lunga tradizione di ricerca empirica che dovrà essere considerata durante la progettazione e l'analisi di questi tipi di studi. Conoscenza di questa letteratura è fondamentale dato che dati fisiologici possono essere facilmente fraintesi (ad es., lo stress e l'eccitazione di confusione). In terzo luogo, molti esperimenti in VR sono suscettibili alle critiche per quanto riguarda la validità esterna per quanto riguarda l'interfaccia virtuale ambiente e controllo. Ad esempio, desktop VR spesso impiega joystick palmare e non fornisce feedback propriocettivo realistico durante la deambulazione. Rispetto agli studi in ambienti reali, ambienti virtuali tendono a portare alla sottovalutazione delle distanze39 e meno precisione spaziale l'aggiornamento senza feedback propriocettivo (senza girare fisicamente)40. Tuttavia, percezione della distanza stima e girare in VR può essere migliorata con feedback visivo esplicito41,42.

La ricerca precedente ha dimostrato che esperimenti in VR ancora possono riprodurre realistici spaziale18,39 e sociale36,43,44 comportamento. Inoltre, VR consente maggiore controllo sperimentale e variazioni sistematiche che sarebbero difficile in scenari reali45. Quadri come EVE possono anche facilitare lo sviluppo di un programma di ricerca utilizzo VR fornendo opportunità per riprodursi ed estendendo il lavoro precedente. Ad esempio, i ricercatori possono modificare leggermente un esperimento esistente per includere ulteriori questionari o una diversa struttura di prova. Alcuni vantaggi aggiuntivi del quadro EVE sono gestione efficiente dei dati, la disponibilità di tutorial online e il potenziale per gli altri a contribuire al suo sviluppo. Infatti, il quadro di EVE è disponibile gratuitamente come un progetto open-source che favorisce la collaborazione.

Studi in corso in questo laboratorio stanno studiando l'impatto delle caratteristiche ambientali sulla percezione e risposte fisiologiche dei partecipanti con diversi background socio-economico e l'influenza degli ambienti congestionati il fisiologico risposte dei partecipanti immersi in una folla virtuale. In futuro, questo protocollo può includere multi-utente, tecnologia che consentirà ai partecipanti alle posizioni fisiche diverse di interagire virtualmente di rete. Infine, il quadro di EVE viene attualmente ampliato per includere pacchetti di analisi dei dati di là di semplice diagnostica e la visualizzazione di dati spaziali.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Gli autori non hanno nulla a rivelare.

Acknowledgments

L'ambiente virtuale è stato gentilmente fornito da VIS giochi (http://www.vis-games.de) per condurre una ricerca in realtà virtuale.

Materials

Name Company Catalog Number Comments
Alienware Area 51 Base Dell  210-ADHC Computation
138 cm 4K Ultra-HD LED-TV Samsung UE55JU6470U Display
SureSigns VS2+ Philips Healthcare 863278 Blood Pressure
PowerLab 8/35 AD Instruments PL3508 Skin Conductance
PowerLab 26T (LTS) AD Instruments ML4856 Heart Rate
Extreme 3D Pro Joystick Logitech 963290-0403 HID

DOWNLOAD MATERIALS LIST

References

  1. Gallistel, C. R. The Organization of Learning. , MIT Press. Cambridge, MA. (1990).
  2. Waller, D., Nadel, L. Handbook of Spatial Cognition. , American Psychological Association. Washington D.C. (2013).
  3. Denis, M. Space and Spatial Cognition: A Multidisciplinary Perspective. , Routledge. Abingdon, Oxon. (2017).
  4. Epstein, R. A., Patai, E. Z., Julian, J. B., Spiers, H. J. The cognitive map in humans: spatial navigation and beyond. Nature Neuroscience. 20, 1504 (2017).
  5. O'Keefe, J., Nadel, L. The Hippocampus as a Cognitive Map. , Clarendon Press. Oxford. (1978).
  6. Kuipers, B. J. Modelling spatial knowledge. Cognitive Science. 2, 129-153 (1978).
  7. Heppenstall, A. J., Crooks, A. T., See, L. M., Batty, M. Agent-Based Models of Geographical Systems. , Springer. Netherlands. Dordrecht. (2012).
  8. Kuliga, S. F., Thrash, T., Dalton, R. C., Hölscher, C. Virtual reality as an empirical research tool - Exploring user experience in a real building and a corresponding virtual model. Computers, Environment and Urban Systems. 54, 363-375 (2015).
  9. Credé, S., Fabrikant, S. I. Let's Put the Skyscrapers on the Display-Decoupling Spatial Learning from Working Memory. Proceedings of Workshops and Posters at the 13th International Conference on Spatial Information Theory (COSIT 2017). , 163-170 (2018).
  10. Hodgson, E., Bachmann, E. R., Vincent, D., Zmuda, M., Waller, D., Calusdian, J. WeaVR: a self-contained and wearable immersive virtual environment simulation system). Behavior Research Methods. 47 (1), 296-307 (2015).
  11. Nilsson, N., et al. 15 Years of Research on Redirected Walking in Immersive Virtual Environments. IEEE Computer Graphics and Applications. , 1-19 (2018).
  12. Razzaque, S., Kohn, Z., Whitton, M. C. Redirected walking. Proceedings of EUROGRAPHICS. , 105-106 (2001).
  13. Hodgson, E., Bachmann, E. Comparing Four Approaches to Generalized Redirected Walking: Simulation and Live User Data. IEEE Transactions on Visualization and Computer Graphics. 19 (4), 634-643 (2013).
  14. Nescher, T., Huang, Y. -Y., Kunz, A. Planning redirection techniques for optimal free walking experience using model predictive control. 2014 IEEE Symposium on 3D User Interfaces (3DUI). , 111-118 (2014).
  15. Razzaque, S., Swapp, D., Slater, M., Whitton, M. C., Steed, A. Redirected walking in place. Eurographics workshop on virtual environments. , 123-130 (2002).
  16. Meilinger, T., Knauff, M., Bulthoff, H. Working Memory in Wayfinding-A Dual Task Experiment in a Virtual City. Cognitive Science: A Multidisciplinary Journal. 32 (4), 755-770 (2008).
  17. Grübel, J., Thrash, T., Hölscher, C., Schinazi, V. R. Evaluation of a conceptual framework for predicting navigation performance in virtual reality. PLOS ONE. 12 (9), 0184682 (2017).
  18. Weisberg, S. M., Schinazi, V. R., Newcombe, N. S., Shipley, T. F., Epstein, R. A. Variations in Cognitive Maps: Understanding Individual Differences in Navigation. Journal of experimental psychology. Learning, memory, and cognition. , (2014).
  19. Wiener, J. M., Hölscher, C., Büchner, S., Konieczny, L. Gaze behaviour during space perception and spatial decision making. Psychological research. 76 (6), 713-729 (2012).
  20. Hassabis, D., Chu, C., Rees, G., Weiskopf, N., Molyneux, P. D., Maguire, E. A. Decoding Neuronal Ensembles in the Human Hippocampus. Current Biology. 19 (7), 546-554 (2009).
  21. Maguire, E. A., Nannery, R., Spiers, H. J. Navigation around London by a taxi driver with bilateral hippocampal lesions. Brain. 129, 2894-2907 (2006).
  22. Marchette, S. A., Vass, L. K., Ryan, J., Epstein, R. A. Anchoring the neural compass: coding of local spatial reference frames in human medial parietal lobe. Nature neuroscience. 17 (11), 1598-1606 (2014).
  23. Vass, L. K., et al. Oscillations Go the Distance: Low-Frequency Human Hippocampal Oscillations Code Spatial Distance in the Absence of Sensory Cues during Teleportation. Neuron. 89 (6), 1180-1186 (2016).
  24. Sharma, G., Gramann, K., Chandra, S., Singh, V., Mittal, A. P. Brain connectivity during encoding and retrieval of spatial information: individual differences in navigation skills. Brain Informatics. 4 (3), (2017).
  25. Richardson, A. E., VanderKaay Tomasulo, M. M. Influence of acute stress on spatial tasks in humans. Physiology & Behavior. 103 (5), 459-466 (2011).
  26. Duncko, R., Cornwell, B., Cui, L., Merikangas, K. R., Grillon, C. Acute exposure to stress improves performance in trace eyeblink conditioning and spatial learning tasks in healthy men. Learning & memory (Cold Spring Harbor, N.Y.). 14 (5), 329-335 (2007).
  27. Klopp, C., Garcia, C., Schulman, A. H., Ward, C. P., Tartar, J. L. Acute social stress increases biochemical and self report markers of stress without altering spatial learning in humans. Neuro endocrinology letters. 33 (4), 425-430 (2012).
  28. Guenzel, F. M., Wolf, O. T., Schwabe, L. Sex differences in stress effects on response and spatial memory formation. Neurobiology of Learning and Memory. 109, 46-55 (2014).
  29. van Gerven, D. J. H., Ferguson, T., Skelton, R. W. Acute stress switches spatial navigation strategy from egocentric to allocentric in a virtual Morris water maze. Neurobiology of Learning and Memory. 132, 29-39 (2016).
  30. Grübel, J., Weibel, R., Jiang, M. H., Hölscher, C., Hackman, D. A., Schinazi, V. R. EVE: A Framework for Experiments in Virtual Environments. Spatial Cognition X: Lecture Notes in Artificial Intelligence. , 159-176 (2017).
  31. Hegarty, M., Richardson, A. E., Montello, D. R., Lovelace, K., Subbiah, I. Development of a self-report measure of environmental spatial ability. Intelligence. 30, 425-447 (2002).
  32. Ziegler, M. G. Psychological Stress and the Autonomic Nervous System. Primer on the Autonomic Nervous System. , 189-190 (2004).
  33. Michaelis, J. R., Rupp, M. A., Montalvo, F., McConnell, D. S., Smither, J. A. The Effect of Vigil Length on Stress and Cognitive Fatigue. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 59 (1), 916-920 (2015).
  34. Helton, W. S. Validation of a Short Stress State Questionnaire. Proceedings of the Human Factors and Ergonomics Society Annual Meeting. 48 (11), 1238-1242 (2004).
  35. Wolbers, T., Hegarty, M. What determines our navigational abilities. Trends in Cognitive Sciences. 14 (3), 138-146 (2010).
  36. Moussaïd, M., et al. Crowd behaviour during high-stress evacuations in an immersive virtual environment. Journal of The Royal Society Interface. 13 (122), (2016).
  37. Cadogan, M. Lead positioning. , Available from: https://lifeinthefastlane.com/ecg-library/basics/lead-positioning/ (2017).
  38. Wilder, J. The law of initial value in neurology and psychiatry. The Journal of Nervous and Mental Disease. 125 (1), 73-86 (1957).
  39. Loomis, J., Knapp, J. Visual Perception of Egocentric Distance in Real and Virtual Environments. Virtual and Adaptive Environments. , 21-46 (2003).
  40. Richardson, A. R., Waller, D. The effect of feedback training on distance estimation in virtual environments. Applied Cognitive Psychology. 19 (8), 1089-1108 (2005).
  41. Klatzky, R. L., Loomis, J. M., Beall, A. C., Chance, S. S., Golledge, R. G. Spatial updating of self-position and orientation during real, imagined, and virtual locomotion. Psychological Science. 9, 293-298 (1998).
  42. Bakker, N. H., Werkhoven, P. J., Passenier, P. O. Calibrating Visual Path Integration in VEs. Presence: Teleoperators and Virtual Environments. 10 (2), 216-224 (2001).
  43. Thrash, T., et al. Evaluation of control interfaces for desktop virtual environments. Presence. 24 (4), (2015).
  44. Kinateder, M., Warren, W. H. Social Influence on Evacuation Behavior in Real and Virtual Environments. Frontiers in Robotics and AI. 3, 43 (2016).
  45. Loomis, J. M., Blascovich, J. J., Beall, A. C. Immersive virtual environment technology as basic research tool in psychology. Behavior Research Methods, Instruments & Computers. 31 (4), 557-564 (1999).

Tags

Comportamento problema 138 Scienze Cognitive realtà virtuale ambienti virtuali sensori fisiologici cognizione spaziale navigazione
Esperimenti di realtà virtuale con misure fisiologiche
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Weibel, R. P., Grübel, J.,More

Weibel, R. P., Grübel, J., Zhao, H., Thrash, T., Meloni, D., Hölscher, C., Schinazi, V. R. Virtual Reality Experiments with Physiological Measures. J. Vis. Exp. (138), e58318, doi:10.3791/58318 (2018).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter