$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
L’art numérique interactif englobe un large éventail de modalités, allant des installations spatiales immersives aux plateformes interactives à écran 1,2. Si les installations entièrement immersives représentent la frontière de cette évolution, l’art interactif à l’écran reste un médium fondamental qui nécessite d’urgence des méthodologies d’évaluation rigoureuses et standardisées avant une expansion spatiale sans contraintes. Cette modalité redéfinit efficacement le rôle du public, passant de l’observation passive à la co-création active, où la participation façonne directement le sens del’œuvre 3. Les cadres classiques de la psychologie de l’art, notamment le Modèle intégré de perception de l’art de Vienne (VIMAP), offrent une perspective sophistiquée pour comprendre l’interaction entre le contrôle cognitif descendant et le traitement perceptif ascendant lors des rencontres esthétiques. Cependant, bien que ces modèles fournissent une base solide pour l’observation statique, étendre leurs applications les plus récentes aux environnements numériques interactifs nécessite des techniques de mesure avancées. Traduire ces concepts théoriques en applications interactives nécessite des métriques physiologiques en temps réel pour capturer objectivement la boucle de rétroaction continue entre l’entrée de l’utilisateur et la réponse du système. Par conséquent, la transition de la vision statique à l’interaction active introduit une complexité significative dans l’évaluation de l’expérience utilisateur. Les méthodes d’évaluation courantes dans le domaine reposent principalement sur des questionnaires post-événement, des entretiens rétrospectifs et des observations sur site concernant les habitudes de visionnage, la séquence et le temps de permanence destéléspectateurs 4. Ces éléments sont souvent complétés par des indicateurs comportementaux grossiers comme la durée totale du séjour et la fréquence desclics 5. Bien que ces méthodes soient efficaces pour capturer les préférences générales et la satisfaction globale, elles ont fondamentalement du mal à suivre les changements d’attention en temps réel, au niveau micro, qui se produisent pendant l’expérience. Contrairement aux questionnaires rétrospectifs qui reposent sur un rappel différé et sont donc sujets à des biais cognitifs, le cadre proposé de suivi oculaire fournit des données physiologiques continues en temps réel et objectives. De plus, comparée à des métriques comportementales grossières telles que le temps total de séjour ou les fréquences de clics superficielles, cette méthodologie activée par le regard capture des processus cognitifs au micro-niveau — tels que les moments d’hésitation, les stratégies de recherche visuelle et les réactions perceptuelles immédiates au retour du système. Ce faisant, elle fournit des preuves exploitables et granulaires pour la conception d’interactions itératives que les méthodes d’évaluation traditionnelles manquentfondamentalement 6. Cette technologie offre des métriques au niveau des processus pour comprendre l’allocation de l’attention, le maintien et le déplacement dans l’art interactif, fournissant des métriques physiologiques objectives de l’état cognitif de l’utilisateur 7,8,9. En analysant quand, où et pendant combien de temps un utilisateur regarde des éléments spécifiques, les chercheurs peuvent fournir un soutien objectif à l’optimisation des expositions et à la conception interactive. Cependant, la mise en œuvre du suivi oculaire dans le contexte d’expériences artistiques numériques interactives présente de multiples défis techniques et méthodologiques non triviaux qui le distinguent des tests d’utilisabilité standards ou de la visualisation statique d’images.
Les environnements interactifs impliquent souvent des médias dynamiques, plusieurs sources d’information et des tâches complexes en plusieurs étapes. Les stimuli visuels ne sont pas fixes ; ils évoluent en fonction des informations de l’utilisateur. Les changements constants dans les stimuli visuels et le retour du système provoquent des déplacements rapides d’attention entre les objets en mouvement et les zones d’interface. Ce dynamisme rend la segmentation et l’interprétation métrique traditionnelles, statiques, basées sur l’interface, sujettes à ladistorsion 10,11. Par exemple, une zone d’intérêt (AOI) pertinente à un moment peut disparaître ou changer de sens sémantique le suivant, rendant les cartes thermiques statiques insuffisantes.
De plus, les interactions dans le monde réel impliquent fréquemment des comportements physiques naturels tels que des mouvements de tête, des occlusions et des distances variables par rapport à l’écran, entraînant une dérive decalibration 12,13. Ces fluctuations de la qualité du suivi introduisent des valeurs manquantes et du bruit, réduisant la comparabilité entre sujets et la stabilité des tests statistiques. Les protocoles standards de laboratoire exigent souvent une stabilisation rigide (par exemple, des repose-menton) qui nuit à l’expérience naturaliste requise pour l’appréciation de l’art14. Par conséquent, un protocole efficace doit équilibrer un contrôle de qualité rigoureux des données avec la validité écologique de la posture de l’utilisateur. En utilisant le suivi oculaire à distance basé sur l’écran, le cadre proposé permet des micromouvements naturels et non contraints du torse et de la tête, servant de base pragmatique pour capturer des réactions esthétiques sans contraintes physiques gênantes.
De manière cruciale, la synchronisation temporelle entre les données de mouvement oculaire et les journaux d’interaction impacte directement l’interprétation causale. Dans une tâche de visionnage statique, le déclenchement du stimulus est le seul marqueur temporel pertinent. Dans l’art interactif, chaque toucher, geste ou déclencheur de regard initie une nouvelle référence temporelle à un événement. Sans un benchmark temporel unifié et un mécanisme d’alignement des événements, il devient difficile de déterminer si les changements d’attention sont déclenchés par un retour d’information du système ou par des stratégies d’explorationindividuelles 15. Pour évaluer de manière exhaustive l’art numérique, les chercheurs s’appuient généralement sur deux sources de données distinctes : les journaux d’interaction (capturant les entrées des utilisateurs et les états du système) et les signaux physiologiques (comme le suivi du regard pour attirer l’attention visuelle). Cependant, ces modalités sont souvent analysées isolément. Les intégrer tôt dans le pipeline analytique est conceptuel et pratiquement vital car ils sont intrinsèquement complémentaires : les journaux d’interaction fournissent le « déclencheur » contextuel précis (le quoi et le quand du retour système), tandis que les données de regard continu révèlent la « réaction » cognitive correspondante (le lieu et le comment de l’allocation de l’attention). Sans un temps unifié, un repère et un alignement multimodal des événements, il devient difficile de déterminer si un déplacement d’attention est déclenché par un retour d’information du système (par exemple, un effet d’entraînement visuel) ou par des stratégies d’exploration individuelles. En fusionnant ces flux de données, ce cadre offre l’avantage théorique de fermer la boucle causale entre les caractéristiques de conception interactive et la cognition utilisateur.
Par conséquent, faire progresser la recherche sur le suivi oculaire pour l’art interactif nécessite plus que de simplement capturer des points de fixation ; Cela nécessite un contrôle qualité rigoureux, un alignement synchronisé et des flux de travail de traitement des données reproductibles. Les limites des solutions existantes soulignent encore cette motivation pour la recherche. Les études existantes de suivi oculaire dans des contextes artistiques se concentrent principalement sur des tâches de visualisation statique ou traitent les descriptions textuelles et les guides touristiques comme des variables externes, manquant d’intégration avec des mécanismes interactifs16,17. Bien que les preuves suggèrent que les méthodes de présentation de l’information et les stratégies de guidage peuvent modifier significativement les voies d’attention et les points focales des spectateurs, la plupart des résultats restent au niveau des corrélations à intervention unique, sans expliquer comment les boucles de rétroaction interactives façonnent les stratégies d’attention au cours de l’expérience.
Inversement, alors que les pratiques artistiques interactives ont développé des systèmes prototypes utilisant le regard comme entrée naturelle d’interaction — mettant l’accent sur la transformation des spectateurs passifs en participants actifs — ces efforts se concentrent souvent sur des démonstrations d’installation ou une validationtechnique 18,19. Ils manquent fréquemment de métriques d’attention unifiées, de paradigmes expérimentaux reproductibles et de modèles de recherche en boucle fermée qui établissent des liens testables entre la dynamique de l’attention et les résultats expérientiels. Cet écart entrave le développement de principes de conception transférables capables de prédire de manière fiable comment un choix de conception spécifique (par exemple, la vitesse d’une transition visuelle) impactera le sentiment d’immersion ou d’ergonomie de l’utilisateur.
De manière cruciale, la littérature existante manque d’un cadre cohérent qui aligne fondamentalement l’attention visuelle avec les systèmes interactifs en temps réel. Bien que les avancées en cartographie AOI dynamique et synchronisation regard-événement aient été explorées dans des contextes généraux de l’IHM, elles sont rarement intégrées à l’environnement fluide et très variable de l’art numérique. La lacune fondamentale en recherche réside dans l’incapacité des évaluations monomodales actuelles à expliquer la boucle causale entre le retour du système et la cognition de l’utilisateur. En intégrant rapidement des données multimodales — en particulier en fusionnant des coordonnées continues du regard avec des journaux d’interaction précis en millisecondes — les chercheurs peuvent transcender les métriques d’utilisabilité de base. Cette intégration offre le bénéfice théorique d’attribuer directement des changements d’attention spécifiques au niveau micro (par exemple, stratégies de recherche vs. concentration stabilisée) à des choix spécifiques de conception d’interaction, transformant le flux expérientiel d’un sentiment subjectif en un état cognitif quantifiable.
Pour combler ces lacunes, ce protocole propose un cadre de mesure de l’attention piloté par le suivi oculaire, spécifiquement limité à l’art numérique interactif basé sur écran. Bien que le pipeline technique sous-jacent partage des similitudes structurelles avec les tests génériques d’interaction homme-machine (HCI), ce cadre intègre de manière unique des tâches esthétiques non utilitaires (par exemple, l’exploration visuelle libre des médias génératifs) aux actions orientées vers des objectifs. Cette intégration distingue explicitement la nature fluide et exploratoire de l’appréciation de l’art de l’approche utilitariste standard de l’évaluation logicielle. Théoriquement, cette étude se situe à l’intersection de l’art numérique interactif, de la IHM et de l’analyse par suivi oculaire. Il répond à la fois au défi persistant de caractériser objectivement le flux expérientiel continu dans l’évaluation de l’art numérique et à la détermination de la corrélation entre l’entrée interactive et la sortie attentionnelle.
Le périmètre de la recherche positionne cette étude non seulement sur le contexte expérientiel de l’art numérique interactif, mais aussi sur l’intégration des données de suivi oculaire avec des journaux d’interaction afin d’établir une chaîne systématique de preuves — de l’entrée expérientielle aux indicateurs d’attention et, en fin de compte, aux variables de résultats. Au niveau du système, nous établissons un pipeline de données reproductible qui intègre la capture des mouvements oculaires, l’enregistrement des journaux d’interaction et la synchronisation temporelle dans une architecture unifiée. Ce cadre standardise le prétraitement, la cartographie régionale et la génération de métriques d’attention tout en fournissant des structures de données traçables et des scripts analytiques.
Le cadre conceptuel (Figure 1) explique comment la conception d’interaction influence les résultats subjectifs en modifiant les processus d’attention visuelle des spectateurs. La logique de base traite les éléments d’interaction (tels que la latence de rétroaction et l’intensité de guidage) comme des entrées contrôlables, la dynamique de l’attention visuelle comme des variables clés du processus, et les résultats de l’expérience (immersion, utilisabilité, satisfaction) comme des sorties. Les différences individuelles sont prises en compte comme facteurs modérateurs. Pour la conception expérimentale, des tâches interactives sont développées pour équilibrer exploration libre et objectifs orientés vers des buts. Au niveau de la modélisation, nous corrélons la dynamique de l’attention avec les variables de résultat afin d’examiner les mécanismes par lesquels les éléments de design d’interaction influencent l’expérience utilisateur à travers l’attention visuelle. Ce protocole fournit des étapes méthodologiques détaillées pour reproduire ce cadre, garantissant que l’interaction complexe entre utilisateur, système et art puisse être mesurée avec rigueur scientifique.