Waiting
Login processing...

Trial ends in Request Full Access Tell Your Colleague About Jove
Click here for the English version

Behavior

Utilizzando misure di elettroencefalografia e registrazione Video di alta qualità per l'analisi di percezione visiva del contenuto multimediale

Published: May 26, 2018 doi: 10.3791/57321

Summary

Vi presentiamo il rilevamento, acquisizione e analisi dei tassi di eyeblink durante la visione di contenuti multimediali.

Abstract

Questo articolo Esplora un metodo per rilevare le differenze nella percezione visiva in esseri umani. Il metodo utilizzato è basato sulla funzione psicologica (o "cognitiva") di ammiccamento dell'occhio. Ammiccamento dell'occhio dei partecipanti vengono rilevati e acquisito durante la visione di video appositamente creati per l'indagine. La rilevazione e l'acquisizione di ammiccamento dell'occhio sono effettuati con l'aiuto di un dispositivo 20 canali elettroencefalografiche (EEG) wireless. L'international che System di 10-20 per il posizionamento dell'elettrodo è seguito. Una telecamera di video ad alta definizione (HD) viene utilizzata per registrare le espressioni facciali dei partecipanti, per finalità di contrasto. Invece di utilizzare pre-esistente di contenuti multimediali, contenuti video appositamente sono stato creato seguendo criteri specifici di interesse per questa indagine, con stimoli consentendo i ricercatori di gestire i parametri precisi di interesse. In caso contrario, i risultati potrebbero essere contaminati con variabili incontrollate. La sincronizzazione della presentazione di stimoli dei video con le registrazioni di EEG deve essere fatto in millisecondi. Analisi dei dati raccolti viene effettuata con software robusto per lavorare con matrici di grande. Differenze statisticamente significative nel tasso di eyeblink legate alla professionalizzazione di media e di stile di modifica sono trovate con le procedure sperimentali segnalate.

Introduction

Lo scopo di questo metodo

Questo metodo propone un doppio protocollo per la rilevazione di ammiccamento dell'occhio. L'obiettivo è quello di analizzare la percezione visiva di visualizzatori di contenuto multimediale, creato appositamente per questa indagine, utilizzando sistemi di registrazione video HD e le registrazioni di EEG.

La spiegazione razionale dietro lo sviluppo e/o utilizzo di questo metodo

Ogni eyeblink nasconde flusso visivo per 150-400 ms1,2. Lampeggia significa che è fisiologica3,4,5 e psicologico6,7 funzioni. La connessione tra tasso di attenzione ed eyeblink è stata studiata e dimostrata in diversi studi8. Un maggiore livello di attenzione diminuisce eyeblink tasso e secondo studi precedenti, gli esseri umani condividono un meccanismo per controllare i tempi di lampeggi che cerca il momento migliore per evitare la perdita di informazioni visive importanti9. Così, analizzando eyeblink comportamento degli spettatori quando guardando schermi potrebbe fornire informazioni per quanto riguarda il livello di attenzione per i contenuti multimediali.

Un metodo per la rilevazione del tasso spontaneo eyeblink è utilizzando elettrodi EEG per registrare l'attività elettrica. Ammiccamento dell'occhio possa essere facilmente individuati da prefrontale ed electrooculogram elettrodi collegati ad un sistema di registrazione EEG. Nella maggior parte delle analisi EEG, ammiccamento dell'occhio è considerati artefatti. Per questo motivo, molti pacchetti di software progettati per l'analisi dei dati EEG hanno eyeblink rilevatori10. Il vantaggio dell'utilizzo di EEG per la rilevazione di ammiccamento dell'occhio è l'alta risoluzione temporale (nell'ordine di millisecondi) e la possibilità di registrare effetti cervello delle diverse narrazioni e tagli nei film sincronizzati con quelli ammiccamento dell'occhio - una questione aperta per ulteriori Studio. Registrazione volti dei partecipanti con una telecamera HD può essere anche utile per corrispondenza/contrasto scopi9.

I vantaggi rispetto ai metodi alternativi con riferimenti a studi pertinenti

Esistono diversi metodi per il conteggio degli occhi lampeggia. Alcuni strumenti dedicati per la rilevazione lampeggia sono bobine magnetiche, fasci di luce a infrarossi (IR), rilevatori di movimento optoelettronici con analisi del movimento dell'occhio come tecniche di eye tracking e diverse tecniche basate su segnali bioelettrici, ad es., elettrooculografia (EOG), elettromiografia (EMG) ed EEG. Un'altra opzione più precisa, ma che richiede tempo manualmente conta lampeggia da una registrazione video frame-by-frame11. Le tecnologie oggi possono essere classificate in due gruppi: a) contatto privo di registrazione che include due modalità, la rilevazione di lampeggio diretto utilizzando computer vision e rilevamento blink non in linea utilizzando eye tracking e b) contatto-base registrazione utilizzando segnali biologici attraverso EOG ed EEG dispositivi12,13.

Il sistema di eye tracking è una tecnologia ampiamente utilizzata, che vanno dal tradizionale design passivo basato su immagine agli approcci vicino-infrarosso-base attivi pricipalmente usati oggi con una fotocamera ad alta risoluzione. Quest'ultimo sfrutta le proprietà riflettenti della pupilla sotto illuminazione IR14. Il concetto alla base di metodi moderni di eye tracking è allievo centro corneale riflessione (PCCR), che coinvolge una fotocamera il centro della pupilla, dove la luce si riflette dalla cornea di verifica. Tuttavia, c'è una mancanza di algoritmi di rilevamento blink pubblicato per protocolli di eye tracking. Inoltre, anche se i diversi modelli di eye tracking sul mercato forniscono software integrato con blink detection, il codice sorgente non è sempre fornito dai produttori, che lo rende difficile da modificare o sapere come gli algoritmi di lavoro12. Inoltre, durante gli esperimenti con eye tracking ci sono eventi che causano perdita di dati, come il tracking ritardi e significativo testa o lo sguardo di movimenti. La zona degli occhi è molto piccola in cattura video, che è un problema per il calcolo della durata del batter, e che a volte presenta vari tipi di artefatti15.

In questo esperimento, vengono utilizzati metodi EEG ed EOG. EEG non è solitamente utilizzato da solo per rilevare ammiccamento dell'occhio. Tuttavia, analizzando ammiccamento dell'occhio registrato con elettrodi EEG è una procedura standard per lo studio degli spostamenti della palpebra. Questa procedura consente ai ricercatori di avere informazioni di esattamente quando ammiccamento dell'occhio si svolgono. Il modello più comune di segnale per la rilevazione lampeggia è quella dei punti di picco, che rappresenta le risposte di movimento verticale. Ci sono parecchi picco rilevamento algoritmi applicabili a crudo EEG, dominio del tempo, o segnali di frequenza-dominio. Processi coinvolti nella identificazione del picco sono rilevamento di picco, estrazione di caratteristiche e classificazione. Ammiccamento dell'occhio hanno un notevole effetto sui canali frontali del segnale EEG. In genere, ammiccamento dell'occhio è rilevati in EEG utilizzando una soglia di ampiezza pre-determinato16. Gli algoritmi del software di analisi utilizzati in questo esperimento si basano sulla deviazione standard dei segnali e quadratico medio (RMS) del segnale EEG pre-filtrato; sono open source e disponibile per la comunità scientifica17. Tuttavia, alcuni movimenti di occhio non comportino ammiccamento dell'occhio possono provocare l'attività elettrica che può essere fonte di confusione. Per questo motivo, un secondo metodo - registrazione facce degli spettatori con una videocamera HD - permette ai ricercatori di abbinare ammiccamento dell'occhio contando manualmente. Con tale metodo doppia, l'investigatore realizza una matrice di ammiccamento dell'occhio che possa essere facilmente analizzati con strumenti statistici.

Di conseguenza, il metodo proposto esegue una triangolazione di dati con due diverse fonti per convalidare l'ammiccamento dell'occhio rilevati. Questo metodo si basa su Nakano et al indicazioni9 per conferma. Allo stesso tempo, permette anche ai ricercatori di raccogliere informazioni di attività cerebrale e la banda di frequenza per ulteriori analisi. L'esperimento descritto qui è parte di una più ampia indagine futura gli effetti dei tagli di stile di editing su aree prefrontali e occipital del cervello.

Determinare che se il metodo è appropriato per un'indagine

Questo protocollo sperimentale consente ammiccamento dell'occhio degli spettatori, mentre la visione di contenuti video per essere studiato sotto tre condizioni sperimentali. In primo luogo, tasso di eyeblink viene rilevata utilizzando due tecniche complementari: EEG e video HD registrati. Qui, usiamo un EEG wireless con 20 canali. In secondo luogo, specifici stimoli adattati all'esperimento vengono creati, cosicché il ricercatore può gestire tutte le variabili del contenuto visivo. Qui, tre video con lo stesso stile di editing video narrativo, ma diverso sono stati creati. La narrazione ha consistito di un uomo che entrato in una stanza, seduti a una scrivania, manipolato con tre palle, aperto un computer portatile, visto le informazioni in alcuni libri, digitato qualcosa sul computer portatile, chiuso, mangiato una mela, visto direttamente nella fotocamera e uscì dalla stanza. Gli stimoli dei video tre ultimi 198 s ciascuno. Il primo era un film One-Shot; il secondo è stato modificato secondo le regole classiche di stile hollywoodiano con 33 diversi colpi; e il terzo è stato modificato seguendo le regole di MTV-stile con 79 colpi. Uno stimolo di quarto è stato anche presentato in cui la narrazione era identica, ma il formato è una rappresentazione reale con un attore invece di un video. Questo stimolo non video quarto non è stato utilizzato in uno studio iniziale delle differenze di stile di editing, ma è stato utilizzato in un'indagine per diversa per confrontare eyeblink-tasso differenze tra rappresentazione reale e schermato media8. In terzo luogo, diversi gruppi di partecipanti sono selezionati a seconda della loro precedente esperienza nell'analisi visiva dei video. Lo scopo è quello di determinare le differenze nei tassi di eyeblink di gruppi tematici guardando gli stessi stimoli visivi. In questo caso, 40 soggetti hanno preso parte all'inchiesta. Metà di loro erano professionisti dei media (16 maschi e 4 femmine; età 30-56 anni, con un'età media di 44,15 ±7.15 anni) e il resto erano professionisti non multimediale (15 maschi e 5 femmine; età 28-56 anni, con un'età media di ± 43.25 8,59 anni). Professionisti dei media sono stati scelti con il criterio di più di 6 anni di esperienza nel prendere le decisioni relative al editing di contenuti multimediali nel loro lavoro quotidiano.

Subscription Required. Please recommend JoVE to your librarian.

Protocol

Tutti i metodi descritti qui sono stati approvati dalla Commissione etica per la ricerca con gli animali e gli esseri umani (CEEAH) dell'Universitat Autònoma de Barcelona.

1. creazione e presentazione di stimoli visivi

  1. Creare gli stimoli dei video secondo gli obiettivi desiderati.
    1. Decidere quali variabili sono di interesse per gli stimoli dei video.
      Nota: ad esempio, nella presente inchiesta, la principale variabile di interesse è lo stile di modifica.
      1. Decidere la durata, il contenuto e lo stile del video basato sull'interesse dell'esperimento. Per determinare di tutte queste variabili, è necessario considerare quanti video il partecipante sta a guardare e per quanto tempo il partecipante sarà a guardare lo schermo, valutare se la narrazione del video soddisfa l'interesse e decidere lo stile di visualizzazione del video.
    2. Scrivere la sceneggiatura, prestando attenzione alle variabili selezionate.
    3. Registrare i video con una videocamera di alta qualità e modificare il video come necessario. Cercare un aiuto professionale, se necessario.
  2. Progettare un contesto appropriato per la presentazione di stimoli.
    1. Decidere dove l'acquisizione dei dati si svolgerà e progettare uno spazio confortevole per visualizzare gli stimoli. I partecipanti dovrebbero sentirsi a proprio agio.
    2. Selezionare uno schermo di alta qualità per la presentazione del video. Maggiore è la qualità dello schermo, il migliore.
    3. Se ci sono dei video diversi film che sarà presentato, selezionare un metodo per la randomizzazione della loro presentazione.
      Nota: È conveniente randomizzare presentazione di stimoli attraverso i soggetti per evitare risultati inconcludenti a causa dell'ordine in cui i partecipanti percepiscono uno stimolo.
    4. Scegli un pacchetto di software per presentare i video.
      Nota: Ci sono varie opzioni che permettono al ricercatore di visualizzare diversi stimoli con temporizzatori Inter-trial e istruzioni o anche una presentazione randomizzata. Quando si sceglie il software, è fondamentale considerare la sua capacità per la sincronizzazione con dispositivi di acquisizione dati. Poiché questo protocollo analizza tasso eyeblink dei partecipanti, la sincronizzazione tra la presentazione visiva di stimoli visivi e il dispositivo di EEG è fondamentale.

2. selezione dei partecipanti

  1. Stabilire un criterio per scegliere i partecipanti. Quando una variabile specifica sta per essere analizzato, è necessario un gruppo di controllo. Annotare il criterio e consultarsi con i colleghi per migliorare il disegno di studio.
  2. Selezionare i partecipanti e chiedere l'approvazione da un comitato etico che segue regolamenti e linee guida pertinenti.
    Nota: La maggior parte delle università e centri di ricerca hanno un comitato etico. Per richiedere l'approvazione, sarà necessario comunicare loro gli obiettivi di indagine. Requisiti comuni includono spiegando i metodi di ricerca, i benefici dell'indagine alla società, come si otterranno il consenso informato, se i partecipanti saranno essere ricompensati finanziariamente, e come i dati raccolti dai partecipanti saranno gestiti. Prendere tempo per progettare questa richiesta. È molto importante ottenere l'approvazione di un comitato etico per condividere i risultati con la comunità scientifica. Alcuni documenti che possono essere utili a questo proposito sono la dichiarazione di Helsinki, il codice di Norimberga e il Belmont Report.
  3. Progettare un modulo di consenso informato per i partecipanti e seguire i criteri del comitato etico.
  4. Spiegare l'esperimento a tutti i potenziali partecipanti. Lasciate che il partecipante conoscere tutte le informazioni importanti, ma evitare di informazioni che non sono importante o può influenzare i risultati dell'esperimento.
    Nota: per esempio, in un protocollo di rilevamento del eyeblink, il partecipante non può essere detto che ammiccamento dell'occhio stanno per essere rilevato, come questo potrebbe modificare il tasso di eyeblink naturale. Chiedere per la loro approvazione a partecipare. Darà ogni partecipante il documento di consenso informato e consentire loro abbastanza tempo per leggerlo, per capire il testo e, infine, di firmarlo.
  5. Fissare un appuntamento con ogni partecipante per condurre l'esperimento. Dare al partecipante le seguenti istruzioni: per arrivare riposati e con recentemente lavato i capelli; prodotti chimici come lacca per capelli, ecc., dovrebbero essere evitati perché possono influenzare le registrazioni di EEG. Dare al partecipante tutte le necessarie informazioni di contatto.

3. set-up preparazione

  1. Preparare la sessione sperimentale ben prima dell'arrivo del partecipante. Provare la sessione con un collega. Nel caso in cui qualcosa di non corretto viene rilevato, apportare le modifiche corrispondenti alla sessione sperimentale.
    1. Preparare le connessioni tra tutti i dispositivi che stanno per essere utilizzati e controllare la loro sincronizzazione (stimoli visivi presentazione e acquisizione dati).
      Nota: La connettività tra hardware e software è fondamentale. È opportuno eseguire prove per confermare la sincronizzazione. Discutere con il fabbricante o sviluppatore di software, se necessario.
  2. Rendere i soggetti a sentirsi a proprio agio nella stanza sperimentale: Benvenuti al partecipante e preparare uno spazio per loro cose (borse e altri).
  3. Spiegare l'intero protocollo al partecipante: dove il partecipante sarà seduto, quanti stimoli visivi stanno per essere mostrato e la lunghezza della sessione. Spiegare che la cooperazione del partecipante è estremamente importante.
  4. Poiché un sistema di registrazione EEG wireless sta per essere utilizzato, di spiegare quanto sia difficile queste registrazioni sono e che al fine di ottenere adeguati segnali elettrofisiologici con artefatti Bassi, è possibile che il partecipante non deve muoversi inutilmente.

4. acquisizione dati

  1. Pulire la superficie della pelle del partecipante per rimuovere eventuali tracce di sporco o residui di prodotti per capelli.
  2. Misurare la testa del partecipante. Misurare la distanza tra il nasion e l'inion e segnare il punto a metà strada come un vertice.
  3. Preparare gli elettrodi nel tappo EEG utilizzando il sistema di 10-20.
  4. Mettere il tappo sul tema dopo il marchio in modo che corrisponda il vertice centrale punto zero (Cz) della PAC.
  5. Applicare il gel conduttivo con l'aiuto di una siringa per elettrodi; Assicurarsi che il tappo si adatta bene sulla testa del soggetto.
  6. Posizionare l'elettrodo di riferimento e l'elettrodo EOG sulla testa del soggetto.
  7. Assicurarsi che il partecipante è comodamente seduto e preparato per la sessione.
  8. Fuoco una videocamera HD sul fronte del partecipante in primo piano. Questo utilizzerà per rilevare manualmente ammiccamento dell'occhio dei partecipanti.
  9. Verifica che tutti i dispositivi siano sincronizzati.
  10. Verificare che la casella di controllo di EEG sia collegata correttamente al computer i dati di registrazione.
  11. Controllare che il segnale per ciascun elettrodo sia corretto; in caso contrario, verificare per l'elettrodo problematico.
    Nota: Alcuni motivi comuni per un segnale negativo da un elettrodo sono una mancanza di gel conduttivo dell'elettrodo, una cattiva posizione dell'elettrodo sulla testa, o una cattiva connessione del cavo dell'elettrodo con la sua scatola di controllo.
  12. Quando tutto è pronto, iniziare l'esperimento di registrazione (e la riproduzione del video).

5. post-sperimentale sessione

  1. Rimuovere il cappuccio dalla testa del partecipante e, se possibile, fornire al partecipante un questionario sugli argomenti di interesse.
  2. Salvare tutti i dati in un disco rigido esterno.
    Nota: Si raccomanda di eseguire il backup dei dati. Una buona opzione sarebbe quella di salvare i dati su due dischi rigidi esterni e conservarli in luoghi diversi. Nel progettare la procedura migliore, è importante considerare il protocollo per l'archiviazione di dati approvati dal comitato etico.
  3. Pulire gli elettrodi e il tappo; la maggior parte gli elettrodi devono essere puliti immediatamente dopo l'uso.
    1. Pulire gli elettrodi e tappo con abbondante acqua sotto un rubinetto e senza prodotto chimico (salvo altrimenti dal produttore del dispositivo). Asciugare accuratamente gli elettrodi per evitare la corrosione. Se questo protocollo non è sufficiente per pulire il coperchio, di solito può essere lavato in lavatrice (vedere le istruzioni del produttore).

6. analisi dei dati

  1. Organizzare i dati di rilevamento eyeblink.
    1. Importare il file di EEG in un pacchetto di software adatto per l'analisi dei dati.
    2. Selezionare l'area di EEG di interesse basato sui trigger di sincronizzazione utilizzati con il software di presentazione di stimoli visivi. Filtrare i dati e applicare un filtro eyeblink per vedere quante e quando vengono generati ammiccamento dell'occhio.
      Nota: Più i pacchetti di software libero e commerciale hanno filtri per rilevare ammiccamento dell'occhio in EEG.
    3. Selezionare il video HD dei volti dei partecipanti e abbinare manualmente ammiccamento dell'occhio con quelli che si trovano nei dati EEG.
    4. Creare una matrice di foglio di calcolo con l'elenco definitivo di ammiccamento dell'occhio di ogni partecipante e calcolare la tariffa al minuto, mentre il soggetto è stato a guardare gli stimoli.
  2. Effettuare analisi statistiche.
    1. Consente di importare la matrice il corrispondente software per l'analisi statistica.
    2. In un programma di software statistico, progettare l'analisi desiderata a contrastare le ipotesi iniziali e completarle.

Subscription Required. Please recommend JoVE to your librarian.

Representative Results

Utilizzando la procedura presentata qui, il tasso di eyeblink 40 partecipanti mentre guardando tre diversi film video è stato analizzato. Per un'analisi comparativa su professionalizzazione di media, la metà dei partecipanti sono stati i professionisti dei media. Essi sono stati selezionati sulla base del criterio di almeno 6 anni di esperienza di lavoro nel prendere le decisioni relative al editing di contenuti multimediali e audiovisivi tagli. Per un'analisi comparativa su modifica gli stili, gli tre stimoli video sono stati creati con esattamente la stessa narrazione ma un diverso stile di modifica. Uno era un film One-Shot con un solo colpo aperto e senza movimenti di macchina. Un altro era un film di Hollywood-style con 33 colpi e una media tiro lunghezza di 5,9 s, come pure la continuità durante i colpi, con relazioni di contenuto, ritmo, spazio e tempo, secondo Hollywood classica le regole di stile di editing. Infine, il terzo video era un film di MTV-stile con 79 colpi e una media girato lunghezza di 2,4 s. In quest'ultimo caso, c'era la discontinuità del contenuto, ritmo, spazio e tempo tra gli scatti.

Secondo i risultati raccolti (Figura 1), l'editing stile tasso eyeblink interessati spettatori (X2(2) = 7.2, p = 0.027, Test di Friedman). Con lunghezze inferiori dei colpi e più tagli imprevisti, c'era un basso tasso di eyeblink spontanea nei visualizzatori.

L'inchiesta ha accertato che professionalizzazione media colpisce eyeblink tasso. Abbiamo trovato differenze statisticamente significative tra i due gruppi (Mann-Whitney U = 86, n = 20, p = 0,002, Test di Mann-Whitney Rank Sum) quando si confrontano gli stimoli tutti insieme. Professionisti dei media non hanno un più alto tasso di eyeblink che i professionisti dei media. Questa differenza è visto per ogni stile di modifica analizzati: nel film One-Shot (Mann-Whitney U = 86,5, n = 20, p = 0,002, Test di Mann-Whitney Rank Sum); nel film hollywoodiani (Mann-Whitney U = 90, n = 20, p = 0,003, Test di Mann-Whitney Rank Sum); e nel film di MTV-editing-style (Mann-Whitney U = 94.5, n = 20, p = 0,004, Test di Mann-Whitney Rank Sum). Professionisti dei media mostrano una maggiore omogeneità nella eyeblink tasso di professionisti non multimediale, come la deviazione standard del loro tasso di eyeblink è molto inferiore, indipendentemente dal fatto lo stile di modifica analizzato.

Figure 1
Figura 1 . Tasso di eyeblink in diversi stili di editing e in diversi gruppi. Tasso di lampeggio spontaneo (SBR) al minuto (min-1) nei visualizzatori durante la visione di diversi stili di editing. Definiscono le estremità delle caselle 25th e 75th percentili, con una linea presso la mediana e barre di errore definendo il 10th e 90th percentili; non riempite cerchi rappresentano i punti dati. Tasso di eyeblink visualizzatori diminuisce come l'editing del contenuto multimediale diventa più caotico. Lo stile di modifica del MTV provoca un tasso inferiore eyeblink lo stile Hollywood-editing o il film One-Shot. Professionisti dei media hanno un tasso inferiore eyeblink non multimediale professionisti. Questo accade per ogni stile di editing. Questi dati sono stati presi e modificati da riferimento 3. Clicca qui per visualizzare una versione più grande di questa figura.

Subscription Required. Please recommend JoVE to your librarian.

Discussion

Un metodo per analizzare la percezione visiva del contenuto multimediale con la creazione di video appositamente è descritto qui. Molti altri studi tentano di analizzare la percezione di contenuti multimediali in contesti narrativi con film pre-esistenti. Il presente metodo si propone di creare contenuti visivi con una costruzione narrativa seguendo i criteri di interesse e si basa sul suggerimento che il tasso di eyeblink è collegato al attenzione9 dello spettatore. Per questo motivo, lo studio rileva ammiccamento dell'occhio dei partecipanti durante la visione di contenuti multimediali e confronta il loro tasso in condizioni diverse (lo stile di modifica e la professionalizzazione di media).

L'idea che il tasso eyeblink è collegato a cognitive attività è stato sviluppato nel corso di diversi studi durante questi ultimi decenni18,19,20. Eyeblink è anche utile come un marcatore attentional21. Una diminuzione del tasso di eyeblink è stata collegata con un aumento di attenzione9,22,23. In questa indagine, utilizzando misurazioni EEG e video di alta qualità di registrazione per l'analisi di percezione visiva del contenuto multimediale, abbiamo trovato che lo stile della redazione utilizzabili dai creatori di gestire attenzione3 degli spettatori. Questo era già stata proposta dal curatore cinema Walter Murch, che, durante la modifica di pellicole, sospettati che ammiccamento dell'occhio può avere una funzione di indicatore di comprensione e punteggiatura nei film, legate alla audiovisivi tagli24. Questo dovrebbe essere di interesse in contesti di produzione audiovisiva. Il fatto che lo stile di modifica è un elemento che può influenzare il tasso di visualizzatori eyeblink integra un lavoro precedente, che ha rilevato che la narrazione di un contenuto multimediale interessato eyeblink tasso9 visualizzatori. Un più alto bisogno di attenzione è creato dallo stile MTV-editing, dove i tagli si verificano più spesso che in altri due stili di editing e provoca una diminuzione del tasso di eyeblink. Questo è in accordo con precedenti lavori studiando eyeblink inibizione e memoria operativa25 e in cui lampeggia l'inibizione è stata proposta come un meccanismo per evitare la perdita di informazioni da un'attività con un maggiore livello di domanda7. Vale la pena di affermare che in altre piattaforme non audio-visivi, come la carta, il formato di presentazione non pregiudica la frequenza e il posizionamento di lampeggia26.

Le indagini precedenti avevano trovato quel professionalizzazione è una variabile che dà luogo a differenze percettive, anche modificazioni cerebrali, nel, ad esempio, gli atleti27, architetti28, musicisti29o ballerini30 . Qui, abbiamo trovato che i media risultati di professionalizzazione nel fare diminuire il tasso di eyeblink mentre sono guardato contenuti video, indipendentemente dalla modifica stile8. Poiché eyeblink ha anche la funzione fisiologica di bagnare l'occhio, la diminuzione del tasso di eyeblink professionisti dei media può essere di interesse per il controllo di rischio e prevenzione in questo gruppo professionale.

Fasi critiche all'interno del protocollo

La metodologia proposta prevede le seguenti fasi critiche: (i) la selezione dei partecipanti poiché un'insufficiente descrizione dei criteri utilizzati può condurre ai misunderstandings in possibili repliche dell'esperimento. Per evitare tali problemi, è opportuno annotare in modo esplicito in dettaglio i criteri che vengono utilizzati nell'esperimento. (ii) la progettazione e la creazione degli stimoli dei video. Tradizionalmente, l'analisi del contenuto multimediale è stato fatto con narrazioni pre-esistenti (film, pubblicità o programmi televisivi). Tuttavia, la metodologia proposta si basa sulla preparazione del contenuto multimediale per essere analizzati. Poiché non è facile creazione di video professionali, ricercatori potrebbero essere necessario l'aiuto di un professionista produttore audiovisivo. Pertanto, questo è un passo fondamentale nell'ambito del protocollo, dove il ricercatore potrebbe essere necessario lavorare con professionisti di fuori del laboratorio. È importante includere le variabili di interesse nella progettazione del contenuto multimediale. (iii) la sincronizzazione tra stimolo presentazione e acquisizione dati. A seconda l'hardware e il software utilizzato dal ricercatore (ad esempio il software per la presentazione degli stimoli e che utilizzato per la registrazione EEG), la sincronizzazione tra loro può essere fonte di confusione. Ogni produttore ha i propri protocolli di gestione di ingressi e uscite per la connettività. In caso di dubbio, il ricercatore potrebbe essere necessario parlare con loro.

Significato della tecnica rispetto ai metodi esistenti/alternativa

Uso dell'approccio proposto doppia per l'analisi di ammiccamento dell'occhio consente ai ricercatori in contrasto con i risultati. Mentre il segnale di EEG possa classificare i movimenti oculari quali eyeblink, contrastando i risultati con un video HD registrato dei volti dei partecipanti è possibile evitare errori nei risultati. Questo approccio raccoglie anche dati relativi all'attività elettrica del cervello per ulteriori analisi.

Limiti della tecnica

Diversi gruppi di soggetti possono presentare differenze significative nei loro tassi di eyeblink. Una limitazione di questa tecnica è che, pur ottenendo questionari dettagliati da parte dei partecipanti, possono perdere informazioni importanti. Per questo motivo, è necessario stabilire attentamente i criteri per la selezione di soggetti per quanto riguarda come loro situazione professionale o sociale possono influenzare i loro tassi di eyeblink. Questa limitazione potrebbe causare conclusioni erronee, come un'interpretazione errata del eyeblink modelli collegati a gruppi tematici.

Subscription Required. Please recommend JoVE to your librarian.

Disclosures

Gli autori non hanno nulla a rivelare.

Acknowledgments

Il presente studio è stato sostenuto da un Ministero spagnolo dell'economia e competitività (BFU2014-56692-R e BFU2017-82375-R) sovvenzioni.

Materials

Name Company Catalog Number Comments
EEG Device Neurolectrics Enobio 20 EEG/EMG system 
Ag/AgCl Electrodes Neuroelectrics [NE022b] GelTrode
Recording EEG software Neuroelectrics NicOffline software
HD-video camera Sony Corporation  Sony HDR-GW55VE
Syringe Monoject Monoject 412, curved tip syringe, 50/box
Saline electrode EMG gel Signa-Gel X32-204: Signa Gel
Visual Stimuli Presentation Software Paradigm Stimulus Presentation Perception Research System Incorporated
EEG software analysis Centre National de la Recherche Scientifique and Montreal Neurological Institute Brainstorm3
EEG software analysis The MathWorks Inc. MATLAB 2013b
TV for video presentation Panasonic Corporation PanasonicTH- 42PZ70EA  - 50"
PC for presenting stimuli MacBook Air Year 2013, running Mac OSX Mountain Lion
PC for recording stimuli MacBook  Year 2009 running Windows 7 With a bootcamp partition of the disk for providing Windows OS
Statistical Analysis Systat Software Inc. Sigmaplot 11.0 

DOWNLOAD MATERIALS LIST

References

  1. Shapiro, K. L., Raymond, J. E. The attentional blink: temporal constraints on consciousness. Attention and Time. , 35-48 (2008).
  2. VanderWerf, F., Brassinga, P., Reits, D., Aramideh, M., Ongerboer de Visser, B. Eyelid movements: behavioral studies of blinking in humans under different stimulus conditions. Journal of Neurophysiology. 89 (5), 2784-2796 (2003).
  3. Andreu-Sánchez, C., Martín-Pascual, M. Á, Gruart, A., Delgado-García, J. M. Eyeblink rate watching classical Hollywood and post-classical MTV editing styles, in media and non-media professionals. Scientific Reports. 7, 43267 (2017).
  4. Bour, L. J., Aramideh, M., de Visser, B. W. Neurophysiological aspects of eye and eyelid movements during blinking in humans. Journal of Neurophysiology. 83 (1), 166-176 (2000).
  5. Delgado-García, J. M., Gruart, A., Múnera, A. Neural organization of eyelid responses. Movement disorders: official journal of the Movement Disorder Society. 17 Suppl 2, S33-S36 (2002).
  6. Wiseman, R., Nakano, T. Blink and you'll miss it: the role of blinking in the perception of magic tricks. PeerJ. (4), e1873 (2016).
  7. Fogarty, C., Stern, J. A. Eye movements and blinks: their relationship to higher cognitive processes. International Journal of Psychophysiology official journal of the International Organization of Psychophysiology. 8, 35-42 (1989).
  8. Andreu-Sánchez, C., Martín-Pascual, M. Á, Gruart, A., Delgado-García, J. M. Looking at reality versus watching screens: Media professionalization effects on the spontaneous eyeblink rate. PLoS ONE. 12 (5), (2017).
  9. Nakano, T., Yamamoto, Y., Kitajo, K., Takahashi, T., Kitazawa, S. Synchronization of spontaneous eyeblinks while viewing video stories. Proceedings. Biological sciences / The Royal Society. 276, 3635-3644 (2009).
  10. Tadel, F., Bock, E., Mosher, J. C., Baillet, S. Detect and remove artifacts. , http://neuroimage.usc.edu/brainstorm/Tutorials/TutRawSsp (2015).
  11. Jiang, X., Tien, G., Huang, D., Zheng, B., Atkins, M. S. Capturing and evaluating blinks from video-based eyetrackers. Behavior Research Methods. 45 (3), 656-663 (2013).
  12. Pedrotti, M., Lei, S., Dzaack, J., Rotting, M. A data-driven algorithm for offline pupil signal preprocessing and eyeblink detection in low-speed eye-tracking protocols. Behavior Research Methods. 43 (2), 372-383 (2011).
  13. Adam, A., Ibrahim, Z., Mokhtar, N., Shapiai, M. I., Mubin, M. Evaluation of different peak models of eye blink EEG for signal peak detection using artificial neural network. Neural Network World. 26 (1), 67-89 (2016).
  14. Zhu, Z., Ji, Q. Robust real-time eye detection and tracking under variable lighting conditions and various face orientations. Computer Vision and Image Understanding. 98, 124-154 (2005).
  15. Lalonde, M., Byrns, D., Gagnon, L., Teasdale, N., Laurendeau, D. Real-time eye blink detection with GPU-based SIFT tracking. Proceedings - Fourth Canadian Conference on Computer and Robot Vision, CRV 2007. , 481-487 (2007).
  16. Chang, W., Cha, H., Kim, K., Im, C. Detection of eye blink artifacts from single prefrontal channel electroencephalogram. Computer Methods and Programs in Biomedicine. 124, 19-30 (2016).
  17. Tadel, F., Bock, E., Mosher, J. C., Baillet, S. Brainstorm3: Function process_evt_detect.m. , https://github.com/brainstorm-tools/brainstorm3/blob/master/toolbox/process/functions/process_evt_detect.m#L297 (2018).
  18. Hall, A. The origin and purposes of blinking. The British Journal of Ophthalmology. 29 (9), 445-467 (1945).
  19. Nakano, T., Kitazawa, S. Eyeblink entrainment at breakpoints of speech. Experimental Brain Research. 250, 577-581 (2010).
  20. Siegle, G. J., Ichikawa, N., Steinhauer, S. Blink before and after you think: Blinks occur prior to and following cognitive load indexed by pupillary responses. Psychophysiology. 45, 679-687 (2008).
  21. Shultz, S., Klin, A., Jones, W. Inhibition of eye blinking reveals subjective perceptions of stimulus salience. Proceedings of the National Academy of Sciences of the United States of America. 108 (52), 21270-21275 (2011).
  22. Wong, K. K. W., Wan, W. Y., Kaye, S. B. Blinking and operating cognition versus vision. BritishJournal of Ophthalmology. 86, 479 (2002).
  23. Leal, S., Vrij, A. Blinking during and after lying. Journal of Nonverbal Behavior. 32 (2008), 187-194 (2008).
  24. Murch, W. In the blink of an eye: A perspective on film editing. , Silman-James Press. (1995).
  25. Holland, M. K., Tarlow, G. Blinking and thinking. Perceptual and Motor Skills. 41 (2), 503-506 (1975).
  26. Orchard, L. N., Stern, J. A. Blinks as an index of cognitive activity during reading. Integrative Physiological and Behavioral Science. 2, 108-116 (1991).
  27. Faubert, J. Professional athletes have extraordinary skills for rapidly learning complex and neutral dynamic visual scenes. Scientific Reports. 3 (1154), 1-3 (2013).
  28. Kirk, U., Skov, M., Schram Christensen, M., Nygaard, N. Brain correlates of aesthetic expertise: A parametric fMRI study. Brain and Cognition. 69, 306-315 (2008).
  29. Lotze, M., Scheler, G., Tan, H. R., Braun, C., Birbaumer, N. The musician's brain: functional imaging of amateurs and professionals during performance and imagery. Neuroimage. 20 (3), 1817-1829 (2003).
  30. Calvo-Merino, B., Glaser, D. E., Grèzes, J., Passingham, R. E., Haggard, P. Action observation and acquired motor skills: an FMRI study with expert dancers. Cerebral cortex. 15 (8), 1243-1249 (2005).

Tags

Comportamento problema 135 Eyeblink percezione visiva EEG modificando gli stili professionalizzazione di media neuroscienze cognitive
Utilizzando misure di elettroencefalografia e registrazione Video di alta qualità per l'analisi di percezione visiva del contenuto multimediale
Play Video
PDF DOI DOWNLOAD MATERIALS LIST

Cite this Article

Martín-Pascual, M. Á.,More

Martín-Pascual, M. Á., Andreu-Sánchez, C., Delgado-García, J. M., Gruart, A. Using Electroencephalography Measurements and High-quality Video Recording for Analyzing Visual Perception of Media Content. J. Vis. Exp. (135), e57321, doi:10.3791/57321 (2018).

Less
Copy Citation Download Citation Reprints and Permissions
View Video

Get cutting-edge science videos from JoVE sent straight to your inbox every month.

Waiting X
Simple Hit Counter