Methodenartikel

Blik in actie: Head-mounted Eye Tracking van kinder dynamische visuele aandacht tijdens naturalistische gedrag

DOI:

10.3791/58496

14 november 2018

In dit artikel

Samenvatting

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Jonge kinderen niet passief observeren van de wereld, maar eerder actief verkennen en zich met hun omgeving. Dit protocol biedt leidende beginselen en praktische aanbevelingen voor het gebruik van hoofd gemonteerde oog trackers opnemen zuigelingen en peuters dynamische visuele omgevingen en visuele aandacht in het kader van natuurlijke gedrag.

Samenvatting

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Jonge kinderen visuele omgevingen zijn dynamisch, veranderen van elk-moment-zoals kinderen fysiek en visueel ruimten en objecten verkennen en interactie met mensen om hen heen. Hoofd gemonteerde eye tracking biedt een unieke kans te vangen kinderen dynamische egocentrisch uitzicht en hoe zij verdelen visuele aandacht in deze weergaven. Dit protocol biedt leidende beginselen en praktische aanbevelingen voor onderzoekers met behulp van hoofd gemonteerde oog trackers in zowel laboratorium en meer naturalistische instellingen. Hoofd gemonteerde eye tracking is een aanvulling op andere experimentele methoden door het verbeteren van de mogelijkheden voor het verzamelen van de gegevens in een meer ecologisch geldig context door grotere draagbaarheid en vrijheid van de bewegingen van het hoofd en lichaam ten opzichte van schermgebaseerde eye tracking. Dit protocol kan ook worden geïntegreerd met andere technologieën, zoals het volgen van beweging en hartslag-controle, om te voorzien in een hoge dichtheid multimodale dataset natuurlijke gedrag, leren en ontwikkeling dan voorheen mogelijk te onderzoeken. Dit Groenboek illustreert de soorten gegevens die zijn gegenereerd uit hoofd gemonteerde eye tracking in een studie die is ontworpen om te onderzoeken van de visuele aandacht in een natuurlijke context voor peuters: vrijstromend speelgoed spelen met een ouder. Succesvol gebruik van dit protocol zal het toestaan van onderzoekers voor het verzamelen van gegevens die kunnen worden gebruikt voor het beantwoorden van de vragen niet alleen over visuele aandacht, maar ook over een breed scala van andere perceptuele, cognitieve en sociale vaardigheden en hun ontwikkeling.

Inleiding

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

De laatste decennia hebben gezien groeiende interesse in de ontwikkeling van baby- en kindervoeding visuele aandacht bestuderen. Deze belangstelling heeft voor een groot deel voortvloeide uit het gebruik van tijdmetingen kijken als een primaire middel om te beoordelen van andere cognitieve functies in kinderschoenen en heeft zich ontwikkeld tot de studie van de zuigeling visuele aandacht in zijn eigen recht. Hedendaagse onderzoek van baby- en kindervoeding visuele aandacht meet hoofdzakelijk oogbewegingen tijdens schermgebaseerde eye-tracking taken. Kinderen zitten in een stoel of ouder schoot voor een scherm terwijl hun oogbewegingen worden gecontroleerd tijdens de presentatie van statische beelden of gebeurtenissen. Dergelijke taken, ontbreken echter te vangen van de dynamische aard van natuurlijke visuele aandacht en de middelen waarmee kinderen natuurlijke visuele omgevingen worden gegenereerd - actieve exploratie.

Baby's en peuters zijn actieve wezens, verplaatsen van hun handen, hoofd, ogen en organen om te verkennen van de objecten, mensen en ruimten om hen heen. Elke nieuwe ontwikkeling in het lichaam morfologie, motorische vaardigheid en gedrag - kruipen, lopen, oppakken van objecten, met de sociale partners - gaat vergezeld van de daarmee gepaard gaande wijzigingen in de vroege visuele omgeving. Omdat bepaalt wat baby's doen wat ze zien en wat ze zien voor wat zij in visueel begeleide actie doen serveert, wordt bestuderen de natuurlijke ontwikkeling van de visuele aandacht best uitgevoerd in de context van natuurlijke gedrag1.

Hoofd gemonteerde oog trackers (ETs) zijn uitgevonden en gebruikt voor volwassenen voor decennia2,3. Pas onlangs zijn technologische vooruitgang hoofd gemonteerde eye-tracking technologie geschikt voor baby's en peuters. Deelnemers zijn uitgerust met twee lichtgewicht camera's op het hoofd, een scène camera naar buiten geconfronteerd met die het eerste persoon perspectief van de deelnemer vangt en een eye camera geconfronteerd met naar binnen die het oog beeld vastlegt. Een kalibratieprocedure biedt trainingsgegevens aan een algoritme dat de kaarten zo nauwkeurig mogelijk de veranderende standpunten van de leerling en het hoornvlies reflectie (CR) in de afbeelding van de ogen aan de overeenkomstige pixels in de afbeelding van de scène die waren visueel wordt bijgewoond. Het doel van deze methode is om te vangen beide de natuurlijke visuele omgevingen van zuigelingen en zuigelingen actieve visuele verkenning van deze omgevingen als zuigelingen zet vrij. Dergelijke gegevens kunnen helpen om vragen niet alleen over visuele aandacht, maar ook over een breed scala van perceptuele, cognitieve en sociale ontwikkelingen,4,5,6,7,8te beantwoorden. Het gebruik van deze technieken heeft getransformeerd afspraken van gezamenlijke aandacht7,8,9, aanhoudende aandacht10, veranderende visuele ervaringen met leeftijd en motorische ontwikkeling4 , 6 , 11en de rol van visuele ervaringen in woord leren12. De huidige papier biedt leidende beginselen en praktische aanbevelingen voor het uitvoeren van hoofd gemonteerde eye-tracking experimenten met baby's en peuters en illustreert de soorten gegevens die kunnen worden gegenereerd vanaf hoofd gemonteerde eye tracking in een natuurlijke context voor peuters: vrijstromend speelgoed spelen met een ouder.

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Protocol

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Deze tutorial is gebaseerd op een procedure voor het verzamelen van gegevens van hoofd gemonteerde eye-tracking met peuters goedgekeurd door de institutionele Review Board aan de Indiana University. Geïnformeerde toestemming van de ouders is verkregen vóór de peuters deelname aan het experiment.

1. voorbereiding van de studie

  1. Eye-Tracking apparatuur. Selecteer een van de verschillende hoofd gemonteerde eye-tracking systemen die commercieel beschikbaar zijn, ofwel een zo specifiek voor kinderen op de markt gebracht of wijzigen van het systeem te werken met een op maat gemaakte baby Pet, bijvoorbeeld zoals in de figuren 1 en 2. Zien erop toe dat de eye-tracking systeem de noodzakelijke functies heeft voor het testen van zuigelingen en/of peuters door deze stappen te volgen:
    1. Selecteer een scène-camera die is instelbaar op het gebied van positionering en heeft een breed genoeg hoek te vangen een gezichtsveld die geschikt is voor het aanpakken van de onderzoeksvragen. Selecteer om te registreren de meeste van peuter van activiteiten in de omgeving van een gratis spelen zoals hier beschreven, een camera die een diagonale ten minste 100 graden gezichtsveld registreert.
    2. Selecteer een oog-camera die is instelbaar op het gebied van positionering en heeft een infrarood LED ofwel gebouwd in de camera of grenzend aan de camera en gepositioneerd op een zodanige wijze dat het oog hoornvlies dit licht zullen reflecteren. Merk op dat sommige eye-tracking modellen hebben vaste positionering, maar modellen die flexibele aanpassingen veroorloven worden aanbevolen.
    3. Kies een eye-tracking-systeem zo onopvallend en lichtgewicht mogelijk om de grootste kans dat baby's / peuters zullen tolereren dragen van de apparatuur.
      1. Het systeem in een GLB insluiten door de scène en eye camera's aansluiten met een Velcro band die wordt aangebracht aan de andere kant van de Velcro genaaid op het GLB, en positionering van de camera's uit het midden van de weergave van de peuter.
        Opmerking: Systemen die zijn ontworpen om te worden vergelijkbaar met glazen zijn niet optimaal. De morfologie van de peuter het gezicht is anders dan die van een volwassene en onderdelen die op de peuter de neus of oren rusten kunnen afleiden en ongemakkelijk voor de deelnemer.
      2. Als de ET is aangesloten op een computer, de kabels te bundelen en houden hen achter de rug van de deelnemer om te voorkomen dat afleiding of trippende. Ook gebruiken een op zichzelf staand systeem waarop gegevens worden opgeslagen op een tussenliggend apparaat, zoals een mobiele telefoon, die kan worden geplaatst op het kind, waarmee een grotere mobiliteit.
    4. Selecteer een kalibratie softwarepakket dat voor off line kalibratie toelaat.
  2. Opnameomgeving.
    1. Gaan in hoeverre waarnaar het kind wordt verplaatst in de ruimte tijdens het verzamelen van gegevens. Als één standpunt verdient, vermeld dit bij de verzorger van het kind zodat ze kunnen helpen het kind blijven op de gewenste locatie. Verwijder alle potentiële afleiders uit de ruimte met uitzondering van die het kind met communiceren moet, binnen handbereik moet.
    2. Gebruikmaken van een derde persoon camera om mee te helpen in de latere codage van het gedrag van kinderen alsmede over het identificeren van de momenten wanneer het ET kan worden verplaatst. Als het kind in de ruimte verplaatsen zal, overweeg dan extra camera's ook.

2. Verzamel de Eye-Tracking-gegevens.

  1. Personeel en activiteit. Hebben twee onderzoekers presenteren, een interactief werken met en het kind, en één om te plaatsen en plaatsen de ET bezetten.
    1. Volledig deelnemen aan het kind een activiteit die van het kind handen in beslag neemt, zodat het kind niet tot verplaatsen oplopen of de ET grijpen terwijl het wordt geplaatst op hun hoofd. Speelgoed dat handmatige acties en kleine boeken die het kind kan houden terwijl de experimentator of de ouder leest het kind aanmoedigen te overwegen.
  2. Plaats van de ET op het kind. Omdat peuters tolerantie van het dragen van de hoofd gemonteerde ET varieert, volg deze aanbevelingen ter bevordering van succes bij het plaatsen en onderhouden van de ET op het kind:
    1. In de tijd voorafgaand aan de studie, door verzorgers hebben hun kind slijtage te vragen een cap of muts, vergelijkbaar met wat wordt gebruikt met de ET, thuis om hen gewend aan het hebben van iets op hun hoofd.
    2. In de studie, hebben verschillende soorten caps beschikbaar waarnaar het ET kan worden bevestigd. Caps aanpassen door de aankoop van verschillende maten en stijlen voor caps, zoals een bal-cap die achteruit kan worden gedragen of een muts met dierlijke oren, en het toevoegen van Velcro waarnaar de eye-tracking systeem, voorzien van de andere kant van de Velcro, kan worden aangesloten. Overwegen ook hoeden om gedragen te worden door de verzorger en de onderzoekers, aan te moedigen van het kind belangstelling en bereidheid om ook het dragen van een cap.
      1. Alvorens het GLB op het kind, hebben een experimentator desensibiliseren de peuter aan raakt aan het hoofd door het licht aanraken van het haar meerdere malen als de aandacht en de belangstelling van de peuter is gericht op een stuk speelgoed.
    3. Als u wilt plaatsen de ET op het kind, worden achter of aan de kant van het kind (Zie Figuur 2). Plaats de ET op het kind, wanneer hun handen zijn bezet, zoals wanneer het kind een speeltje in elke hand houdt.
      1. Als het kind naar de experimentator plaatsen de ET kijkt, zeggen "Hallo" en laat het kind weten wat gebeurt er tijdens de procedure om snel de ET op hoofd van het kind. Vermijd ook langzaam terwijl de plaatsing van de ET, die kan leiden tot de nood van het kind en kan leiden tot slechte plaatsing als het kind grotere kans heeft om hun hoofd te verplaatsen of te bereiken voor de ET.
      2. Ter vermindering van de tijd de camera aanpassen na plaatsing, alvorens de ET te plaatsen op de deelnemer, het instellen van de camera's in hun verwachte positie wanneer op het hoofd van het kind (Zie de punten 2.3.1 en 2.3.2).
  3. Positie van de ET scène en Eye camera. Zodra de ET op hoofd van het kind, aanpassingen aan de positie van de scène en eye camera's terwijl het toezicht op deze camera video-feeds:
    1. Positie van de laag op het voorhoofd om beste scène-camera bij benadering van het kind gezichtsveld (Zie Figuur 1B); Hiermee centreert u de cameraweergave scène op wat het kind tijdens de studie kijken zal.
      1. Houd in gedachten dat handen gehouden objecten zal altijd zeer dicht bij het kind en zijn laag in de scène cameraweergave, terwijl verder objecten op de achtergrond en hoger in de cameraweergave scène zal worden. Plaats de camera van de scène tot beste vangst het type weergave meest relevant zijn voor de onderzoeksvraag.
      2. De positie van de camera scène testen door het aantrekken van het kind aandacht aan specifieke locaties in hun gezichtsveld met behulp van een klein speelgoed of laser pointer. Zorgen deze locaties bekijkt op de verwachte afstand van de regio's die van belang tijdens de studie (Zie Figuur 3).
      3. Tilt voorkomen door te controleren dat horizontale oppervlakken plat in de scène camera weergegeven worden. Mark de rechtop oriëntatie van de camera van de scène te verzachten van de mogelijkheid van de camera krijgen per ongeluk omgekeerd tijdens herpositionering, maar er rekening mee dat extra stappen tijdens post-processing de beelden naar de juiste stand kunnen herstellen indien nodig.
    2. Hoge kwaliteit blik om gegevens te verkrijgen, plaats de camera van de ogen voor het detecteren van zowel de leerling als het hoornvlies reflectie (CR) (Zie Figuur 2).
      1. Plaats van de oog-camera, dus het is gecentreerd op de leerling van het kind, met geen occlusie door wangen of wimpers gedurende de eye's volledige scala van beweging (Zie Figuur 2C-F voor voorbeelden van goede en slechte ogen beelden). Om te helpen met dit, plaatst u de eye camera onder het oog, in de buurt van de Wang, wijzen omhoog, houden de camera uit het midden van de weergave van het kind. Uitwijkmogelijkheid, plaats de eye camera hieronder en aan de buitenkant van het oog, wijzen naar binnen.
      2. Zorg ervoor dat de camera dicht genoeg bij het oog dat de beweging een relatief grote verplaatsing van de pupil in het oog camera beeld produceert.
      3. Tilt voorkomen door ervoor te zorgen dat de hoeken van het oog in het oog-beeld kunnen vormen van een horizontale lijn (Zie Figuur 2C).
      4. Zorg ervoor dat het contrast van de leerling ten opzichte van de iris relatief hoog zodat de leerling nauwkeurig onderscheiden van iris worden kan (Zie Figuur 2C). Om te helpen met dit, aanpassen of de positie van de LED-licht (als naast de eye camera) of de afstand van de camera van de ogen van het oog (als de LED niet onafhankelijk van elkaar regelbaar is). Bij verhoogde leerling detectie, plaatst u de LED-licht in een hoek en niet meteen in het oog. Er zeker van te zijn dat eventuele aanpassingen van de LED-licht nog steeds een duidelijke CR produceren (Zie Figuur 2C).
  4. Punten verkrijgen tijdens de studie voor off line kalibratie.
    1. Zodra de scène en oog beelden zijn zo hoge kwaliteit als kunnen ze, verzamelen ijkgegevens door de aandacht van het kind op verschillende locaties in hun gezichtsveld.
      1. Verkrijgen van meetpunten op verschillende oppervlakken met iets dat duidelijk de aandacht van het kind naar een kleine, heldere punt in hun gezichtsveld leidt (Zie Figuur 3). Bijvoorbeeld, gebruiken een laserpointer tegen een effen achtergrond, of een oppervlak met kleine onafhankelijk-activated LED-verlichting.
      2. Het beperken van de aanwezigheid van andere interessante doelen in de weergave van het kind om ervoor te zorgen dat het kind kijkt aan de doelstellingen van de kalibratie.
    2. Afwisselend aandacht te vestigen op verschillende locaties waarvoor grote hoekige verplaatsingen van het oog.
      1. Betrekking hebben op het gezichtsveld even en niet te snel verplaatsen tussen de punten, die helpen zal bij het vinden van duidelijke saccades van het kind tijdens off line kalibratie om te concluderen dat toen ze keek naar de volgende locatie.
      2. Als het kind onmiddellijk er niet naar de nieuwe locatie van de gemarkeerde ziet, krijgen hun aandacht naar de locatie door de laser wiebelen, draaien uit/aan de LEDs of aanraken van de locatie met een vinger.
      3. Als haalbaar is, krijgen meer kalibratiepunten dan nodig voor het geval dat sommige blijken te zijn later onbruikbaar.
    3. Er zeker van te zijn dat het kind lichaamshouding tijdens de kalibratie overeenkomt met de positie die wordt gebruikt tijdens de studie.
      1. Bijvoorbeeld, verzamelen geen kalibratiepunten wanneer het kind zit als de verwachting is dat het kind later permanent zal worden.
      2. Zorgen ervoor dat de afstand tussen het kind en de doelstellingen van de kalibratie is gelijkaardig aan de afstand tussen het kind en de regio's die tijdens het onderzoek van belang zal zijn.
      3. Plaats kalibratiepunten zeer dicht bij het lichaam van het kind niet als tijdens het experiment, het kind zal vooral kijken naar objecten die verder weg bent. Als men geïnteresseerd is in zowel de nabije en de verre objecten, kunt u overwegen verkrijgen van twee verschillende sets van kalibratiepunten die later kan worden gebruikt voor het maken van unieke kalibraties voor elke kijkafstand (zie punt 3.1 voor meer informatie).
        Opmerking: Verrekijker eye tracking is een ontwikkelende technologie13,14 dat beloften advances in blik in detail bijhouden.
    4. Verzamelen om ruimte voor drift of beweging van de ET tijdens de studie, de kalibratiepunten aan zowel het begin en het einde van de studie minimaal. Als haalbaar is, verzamelen aanvullende meetpunten op gezette tijden tijdens de sessie.
  5. De ET en Third-Person Video-Feeds controleren tijdens de studie.
    1. Als de ET bumped of uitgelijnd als gevolg van andere bewegingen/acties krijgt, nota nemen van wanneer in de studie dat dit gebeurde omdat het misschien nodig code van de gedeelten van de studie van voor en na de bult/afwijking apart te kalibreren (zie punt 3.1.1).
    2. Indien mogelijk, de studie na elke hobbel/afwijking om de positie van de scène en eye camera's (zie sectie 2.3) te onderbreken, dan nieuwe punten voor de kalibratie te verkrijgen (zie punt 2.4).

3. na de studie, kalibreer de ET-gegevens met behulp van kalibratiesoftware.

Opmerking: Een verscheidenheid van kalibratie softwarepakketten zijn commercieel verkrijgbaar.

  1. Kunt u overwegen meerdere kalibraties maken. Kalibratiepunten aan verschillende video segmenten te maximaliseren van de nauwkeurigheid van de blik-track door het niet voeren van het algoritme onjuist onjuiste gegevens aanpassen
    1. Als de ET gewijzigd positie op elk gewenst moment tijdens de studie, Maak aparte kalibraties voor de gedeelten voor en na de wijziging in ET positie.
    2. Indien geïnteresseerd in aandacht voor objecten op zeer verschillende bekijken afstanden, Maak aparte kalibraties voor de gedeelten van de video waar het kind is op zoek naar objecten op elke kijkafstand. Houd er rekening mee dat de verschillen in het bekijken van afstand kunnen worden geproduceerd door verschuivingen in de visuele aandacht van het kind tussen zeer nauwe en variëren van verre objecten, maar ook door veranderingen in lichaamshouding van het kind ten opzichte van een object, zoals het verschuiven van zitten tot staan.
  2. Uitvoeren van iedere kalibratie. Stellen de toewijzing tussen scène en oog door het creëren van een aantal kalibratiepunten - punten in het beeld van de scène waarnaar het kind blik duidelijk tijdens dat frame gericht was. Opmerking dat de kalibratiesoftware kunt extrapoleren en interpoleren van het punt van blik (POG) in alle frames uit een reeks van kalibratiepunten gelijkmatig verspreid over het beeld van de scène.
    1. De kalibratiesoftware helpen bij het opsporen van de leerling en CR in elk frame van de eye camera video om ervoor te zorgen dat de geïdentificeerde POG betrouwbaar is. In gevallen waar de software niet wordt gedetecteerd door de CR betrouwbaar en consequent, gebruikt u de leerling enige (notitie, echter dat de kwaliteit van de gegevens als gevolg lijden zal).
      1. Verkrijgen van een goede oog-beeld in de eye camera frames door aanpassing van de drempels van de kalibratie software van verschillende detectie parameters, die kunnen bestaan uit: de helderheid van het beeld van het oog, de grootte van de leerling de software verwacht, en een selectiekader ingesteld dat de grenzen van waar de software er voor de leerling ziet. Tekenen van het selectiekader zo klein mogelijk en tegelijkertijd te garanderen dat de leerling blijft binnen het vak in het oog van volledig gamma van motie. Wees ervan bewust dat een grotere selectiekader dat omvat ruimte die de leerling nooit inneemt de kans op detectie van valse leerling verhoogt en kan leiden tot kleine bewegingen van de leerling minder nauwkeurig worden gedetecteerd.
      2. Let erop dat zelfs na het aanpassen van de software verschillende detectie drempels, de software soms nog steeds verkeerd de leerling of CR vinden kan; bijvoorbeeld, als de leerling van de dekking van de wimpers.
    2. Het vinden van goede kalibratiepunten, gebaseerd op de scène en eye camera-frames. Merk op dat de beste kalibratiepunten verstrekt aan de software die waarin de leerling en CR zijn correct gedetecteerd zijn, het oog is stabiel gefixeerd op een duidelijk herkenbaar punt in de ruimte in het beeld van de scène, en de punten zijn gelijkmatig verspreid over het gehele bereik van het beeld van de scène.
      1. Zorg ervoor dat leerling detectie correct voor elk frame waarin een kalibratiepunt is uitgezet, zodat zowel geldige x-y scène coördinaten en geldig x-y leerling-coördinaten in het algoritme worden gevoed.
      2. Tijdens de eerste pas op kalibratie, identificeren kalibratiepunten op momenten wanneer het kind duidelijk naar op zoek is naar een verschillend punt in de afbeelding van de scène. Houd er rekening mee dat deze punten opzettelijk gemaakt door de experimentator tijdens het verzamelen van gegevens, bijvoorbeeld met een laserpointer kunnen worden (Zie Figuur 3A-B), of kunnen zij punten uit de studie waarin de POG gemakkelijk te identificeren (Zie is Figuur 3C), zolang de leerling is correct gedetecteerd voor die frames.
      3. Vind je momenten van blik naar meer extreme x-y scène afbeelding coördinaten, scannen door de eye camera frames momenten met nauwkeurige leerling detectie vinden wanneer het kind de oog op de meest extreme x-en y-positie is.
    3. Meerdere "passen" voor elke kalibratie aan iteratief slijpen op de meest nauwkeurige kalibrering mogelijk doen. Merk op dat veel softwareprogramma's na het voltooien van een eerste "pass" op kalibratie, de verwijdering van punten eerder gebruikt zonder verlies van de huidige track (bijvoorbeeld draadkruis) zal toestaan. Selecteer een nieuwe set kalibratiepunten te trainen van het algoritme vanaf nul, maar met de extra hulp van de POG track gegenereerd door de eerdere kalibratie-pas, zodat naar de nauwkeurigheid van de kalibratie geleidelijk te verhogen door het geleidelijk "opruimen" geen geluid of onjuistheden geïntroduceerd door eerdere passeert.
  3. Beoordelen van de kwaliteit van kalibratie door het observeren van hoe goed de POG komt overeen met de bekende blik locaties, zoals de puntjes geproduceerd door een laserpointer tijdens de kalibratie, en weerspiegelt de richting en de omvang van de kind saccades. Vermijd het gebruik van punten te beoordelen van de kwaliteit van de kalibratie die werden ook gebruikt als punten tijdens het kalibratieproces.
    1. Onthoud dat omdat kinderen hoofden en ogen zijn meestal op elkaar afgestemd, kinder visuele aandacht meestal op het midden van de afbeelding van de scène gericht is en een nauwkeurige track dit weerspiegelen zal. Om te beoordelen de centeredness van het spoor, het uitzetten van de frame-voor-frame x-y POG coördinaten in het beeld van de scène gegenereerd door de kalibratie (Zie Figuur 4). Bevestigen dat de punten zijn meest dichte in het midden van de afbeelding van de scène en gedistribueerde symmetrisch, behalve in gevallen waar de camera scène was niet gecentreerd in het midden van het kind in gezichtsveld bij Oorspronkelijk geplaatst.
    2. Merk op dat sommige kalibratiesoftware lineaire en/of homography fit scores die kalibratie nauwkeurigheid weerspiegelen zal genereren. Houd in gedachten dat deze scores nuttig tot op zekere hoogte, zijn omdat, als ze arm zijn, de track zal waarschijnlijk ook slecht. Echter, gebruik geen fit scores als de belangrijkste maatregel van de nauwkeurigheid van de kalibratie zoals ze weerspiegelen de mate waarmee de gekozen kalibratiepunten instemmen met zichzelf, die geen informatie over de pasvorm van deze punten naar de grond waarheid locatie van de POG geeft.
    3. Vergeet niet dat er momenten in de studie dat de doelstelling van blik eenvoudig te herkennen is, en daarom kan worden gebruikt als waarheid van de grond. Nauwkeurigheid in graden van visuele hoek berekenen door het meten van de fout tussen bekende blik doelstellingen en het dradenkruis POG (fout in pixels van het videobeeld kan worden ongeveer geconverteerd naar graden op basis van kenmerken van de lens van de camera van de scène)4.

4. code regio's van belang (ROIs).

Opmerking: ROI-codering is de evaluatie van POG gegevens om te bepalen welke regio een kind is visueel aanwezig zijn bij tijdens een bijzonder moment. ROI kan worden gecodeerd met hoge nauwkeurigheid en hoge resolutie van de frame-voor-frame POG gegevens. De output van deze codering is een stroom van gegevenspunten - één punt per videoframe - die de regio van POG na verloop van tijd geven (Zie Figuur 5A).

  1. Voorafgaand aan begin ROI codering, een lijst samenstellen van alle ROIs die moet worden gecodeerd op basis van de onderzoeksvragen. Wees ervan bewust dat maakt onnodig tijdrovend codering codering ROIs die niet nodig zijn om het onderzoek te beantwoorden vragen.
  2. Beginselen van ROI codering.
    1. Vergeet niet dat succesvolle codering de coder's veronderstellingen vereist over waar het kind moet worden op zoek, en in plaats daarvan zorgvuldig te hebben onderzocht van elk frame oog beeld, beeld van de scène, en berekende POG afstaan. Bijvoorbeeld, zelfs als een object wordt vastgehouden door het kind en erg groot in het beeld van de scène voor een bepaald frame is, niet afleiden dat het kind dat object op dat moment kijkt tenzij ook aangegeven door de positie van de ogen. Merk op dat ROIs welke regio het kind is foveating, maar niet vangen de volledige visuele informatie het kind neemt aangeven aan.
    2. Gebruik de afbeelding van het oog, de scène image en POG track om te bepalen welke ROI is visueel wordt bijgewoond aan.
      1. De POG track gebruiken als een gids, niet als grond-waarheid. Hoewel de POG track de exacte locatie keek geeft op door het kind voor elk frame ideaal duidelijk, weet dat dit niet altijd het geval door de 2 dimensionale (2D) aard van de scène afbeelding ten opzichte van het 3D-karakter van de echte wereld door het chil bekeken worden d en variatie in de nauwkeurigheid van de kalibratie tussen deelnemers.
        1. Vergeet niet dat de berekende POG koers een schatting op basis van een kalibratie-algoritme is en dat betrouwbaarheid van het spoor POG voor een bepaald frame dan ook afhangt van hoe goed de leerling en CR worden gedetecteerd; Als een of beide worden niet gedetecteerd of onjuist zijn, zal de track POG niet betrouwbaar.
          Opmerking: Het dradenkruis zal gebeuren dat consequent uit-target door een vaste afstand. Nieuwere software kan toestaan dat een computationeel corrigeren voor deze discrepantie. Anders kan een opgeleide onderzoeker de correctie handmatig doen.
      2. Verkeer van de leerling in de oog-afbeelding gebruiken als de primaire cue die de ROI kan zijn gewijzigd.
        1. Blader door frames één voor één het oog beeld kijken. Wanneer een zichtbare beweging van het oog optreedt, moet u controleren of het kind hun POG naar een nieuwe ROI of geen gedefinieerde ROI verschuift.
        2. Merk op dat niet alle oogbewegingen een verandering in de ROI aangeven. Als de ROI vormt een groot gebied van de ruimte (bijvoorbeeld een up-close-object), in gedachten houden dat kleine oog verkeer kan weerspiegelen een kijken naar een nieuwe locatie binnen de dezelfde ROI. Vergeet ook niet dat oogbewegingen optreden kunnen als het kind een enkele bewegende ROI tracks, of als een kind die in beweging is hun hoofd ook hun ogen beweegt om de blik op de dezelfde ROI.
        3. Merk op dat met sommige ETs de oog-afbeelding een gespiegeld beeld van het kind de oog, in welk geval is als het oog naar links die moet overeenkomen met tot een verschuiving in de scène naar rechts verplaatst.
    3. Omdat de POG track alleen als een gids dient, maak gebruik van de beschikbare contextuele informatie zo goed als leidraad codering besluiten.
      1. Integreer informatie uit verschillende bronnen of frames bij het coderen van de ROI. Hoewel de ROI is afzonderlijk gecodeerd voor elk frame, gebruikmaken van frames voor en na het huidige frame om contextuele informatie die helpen kan bij het bepalen van de juiste ROI te verkrijgen. Bijvoorbeeld, als de POG track afwezig of niet geschikt zijn voor een bepaald frame als gevolg van slechte leerling detectie is, maar het oog bewoog niet op basis van de voorgaande en volgende frames waarin de leerling was correct gedetecteerd door, dan negeren de POG track voor dat frame en code van de ROI-ba sed op de omringende frames.
      2. Aanbrengen overige besluiten specifieke onderzoeksvragen van de gebruikers.
        1. Bijvoorbeeld, het maken van een protocol voor hoe ROI wanneer twee ROIs dicht bij elkaar zijn, in welk geval het moeilijk om te bepalen welke is de "juiste" ROI kan zijn. In gevallen waar het kind lijkt te worden op de kruising van de twee ROIs fixering, besluiten of code beide ROIs gelijktijdig of aan het formuleren van een set van beslissingsregels voor hoe om te selecteren en toewijzen van slechts één van de categorieën van de ROI.
        2. Als extra voorbeeld, wanneer een object van belang wordt gehouden zodat een hand is het object occluding, beslissen of de POG code als een ROI voor de hand, of als een ROI voor het gehouden-object.
  3. Code van ROI voor betrouwbaarheid. Implementeren van een betrouwbaarheid codering procedure na de aanvankelijke ROI protocol codering is voltooid. Er zijn vele verschillende types van betrouwbaarheid codering procedures beschikbaar; Kies de meest relevante procedure op basis van de specifieke onderzoeksvragen.

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Resultaten

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

De hier besproken methode werd toegepast op een vrijstromend speelgoed spelen context tussen peuters en hun ouders. De studie werd ontworpen om de natuurlijke visuele aandacht in een rommelige omgeving onderzoeken. Dyads kregen de opdracht om te spelen vrij met een set van 24 speelgoed gedurende zes minuten. Peuters visuele aandacht werd gemeten door de codering van het begin en offset van kijkt op specifieke regio's van belang (ROIs)--elk van de 24 speelgoed en van de ouder gezicht-- en ...

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Discussie

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Dit protocol biedt leidende beginselen en praktische aanbevelingen voor de tenuitvoerlegging van hoofd gemonteerde eye tracking met zuigelingen en jonge kinderen. Dit protocol is gebaseerd op de studie van natuurlijke peuter gedrag in het kader van ouder-peuter gratis spelen met speelgoed in een laboratorium-omgeving. In-House eye-tracking apparatuur en software werden gebruikt voor kalibratie en gegevens codering. Dit protocol is echter bedoeld als algemeen toepasbaar voor onderzoekers met behulp van een verscheidenheid...

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Openbaarmakingen

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

De auteurs verklaren dat zij geen concurrerende of conflicterende belangen hebben.

Dankbetuigingen

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Dit onderzoek werd gefinancierd door de National Institutes of Health subsidies R01HD074601 (CY), T32HD007475-22 (J.I.B., D.H.A.) en F32HD093280 (L.K.S.); National Science Foundation verlenen BCS1523982 (L.B.S., CY); en door de Indiana University door het opkomende gebied onderzoeksinitiatief - leren: hersenen, Machines en kinderen (L.B.S.). De auteurs danken de vrijwilligers van het kind en ouder die heeft deelgenomen aan dit onderzoek en die ermee ingestemd om te worden gebruikt in de cijfers en filmen van dit protocol. Wij waarderen ook de leden van de computationele cognitie en leren laboratorium, vooral Sven Bambach, Anting Chen, Steven Elmlinger, Seth Foster, Grace Lisandrelli en Charlene Tay, voor hun hulp bij de ontwikkeling en honen van dit protocol.

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Materialen

Lijst van materialen gebruikt in dit artikel
NaamBedrijfCatalogusnummerOpmerkingen
Head-mounted eye trackerPupil LabsWorld Camera en Eye Camera

Referenties

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,
  1. Tatler, B. W., Hayhoe, M. M., Land, M. F., Ballard, D. H. Eye guidance in natural vision: Reinterpreting salience. Journal of Vision. 11 (5), 1-23 (2011).
  2. Hayhoe, M. Vision using routines: A functional account of vision. Visual Cognition. 7 (1-3), 43-64 (2000).
  3. Land, M., Mennie, N., Rusted, J. The Roles of Vision and Eye Movements in the Control of Activities of Daily Living. Perception. 28 (11), 1311-1328 (1999).
  4. Franchak, J. M., Kretch, K. S., Adolph, K. E. See and be seen: Infant-caregiver social looking during locomotor free play. Developmental Science. 21 (4), 12626(2018).
  5. Franchak, J. M., Kretch, K. S., Soska, K. C., Adolph, K. E. Head-mounted eye tracking: a new method to describe infant looking. Child Development. 82 (6), 1738-1750 (2011).
  6. Kretch, K. S., Adolph, K. E. The organization of exploratory behaviors in infant locomotor planning. Developmental Science. 20 (4), 12421(2017).
  7. Yu, C., Smith, L. B. Hand-Eye Coordination Predicts Joint Attention. Child Development. 88 (6), 2060-2078 (2017).
  8. Yu, C., Smith, L. B. Joint Attention without Gaze Following: Human Infants and Their Parents Coordinate Visual Attention to Objects through Eye-Hand Coordination. PLoS One. 8 (11), 79659(2013).
  9. Yu, C., Smith, L. B. Multiple Sensory-Motor Pathways Lead to Coordinated Visual Attention. Cognitive Science. 41, 5-31 (2016).
  10. Yu, C., Smith, L. B. The Social Origins of Sustained Attention in One-Year-Old Human Infants. Current Biology. 26 (9), 1-6 (2016).
  11. Kretch, K. S., Franchak, J. M., Adolph, K. E. Crawling and walking infants see the world differently. Child Development. 85 (4), 1503-1518 (2014).
  12. Yu, C., Suanda, S. H., Smith, L. B. Infant sustained attention but not joint attention to objects at 9 months predicts vocabulary at 12 and 15 months. Developmental Science. , (2018).
  13. Hennessey, C., Lawrence, P. Noncontact binocular eye-gaze tracking for point-of-gaze estimation in three dimensions. IEEE Transactions on Biomedical Engineering. 56 (3), 790-799 (2009).
  14. Elmadjian, C., Shukla, P., Tula, A. D., Morimoto, C. H. 3D gaze estimation in the scene volume with a head-mounted eye tracker. Proceedings of the Workshop on Communication by Gaze Interaction. , Association for Computing Machinery. New York. 3(2018).
  15. Castellanos, I., Pisoni, D. B., Yu, C., Chen, C., Houston, D. M. Embodied cognition in prelingually deaf children with cochlear implants: Preliminary findings. Educating Deaf Learners: New Perspectives. Knoors, H., Marschark, M. , Oxford University Press. New York. (2018).
  16. Kennedy, D. P., Lisandrelli, G., Shaffer, R., Pedapati, E., Erickson, C. A., Yu, C. Face Looking, Eye Contact, and Joint Attention during Naturalistic Toy Play: A Dual Head-Mounted Eye Tracking Study in Young Children with ASD. Poster at the International Society for Autism Research Annual Meeting. , (2018).
  17. Yurkovic, J. R., Lisandrelli, G., Shaffer, R., Pedapati, E., Erickson, C. A., Yu, C., Kennedy, D. P. Using Dual Head-Mounted Eye Tracking to Index Social Responsiveness in Naturalistic Parent-Child Interaction. Talk at the International Congress for Infant Studies Biennial Congress. , July (2018).
  18. Holmqvist, K., Nyström, M., Andersson, R., Dewhurst, R., Jarodzka, H., Van de Weijer, J. Eye tracking: A comprehensive guide to methods and measures. , Oxford University Press. (2011).
  19. Saez de Urabain, I. R., Johnson, M. H., Smith, T. J. GraFIX: a semiautomatic approach for parsing low- and high-quality eye-tracking data. Behavior Research Methods. 47 (1), 53-72 (2015).
  20. Franchak, J. M. Using head-mounted eye tracking to study development. The Cambridge Encyclopedia of Child Development 2nd ed. Hopkins, B., Geangu, E., Linkenauger, S. , Cambridge University Press. Cambridge, UK. 113-116 (2017).
  21. Yonas, A., Arterberry, M. E., Granrud, C. E. Four-month-old infants' sensitivity to binocular and kinetic information for three-dimensional-object shape. Child Development. 58 (4), 910-917 (1987).
  22. Smith, T. J., Saez de Urabain, I. R. Eye tracking. The Cambridge Encyclopedia of Child Development. Hopkins, B., Geangu, E., Linkenauger, S. , Cambridge University Press. Cambridge, UK. 97-101 (2017).

Toegang beperkt. Log in of start een proefperiode om deze inhoud te bekijken.

Herprints en machtigingen

Toestemming aanvragen om de tekst of afbeeldingen van dit JoVE-artikel te hergebruiken

Toestemming aanvragen

Trefwoorden

Kinderontwikkelingspelen met speelgoedkalibratieprocedurecodering van regio van interessemultimodale gegevensverzamelingecologische validiteitontwikkelingsonderzoek

Gerelateerde artikelen