$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Интерактивное цифровое искусство охватывает широкий спектр модальностей — от иммерсивных пространственных инсталляций до интерактивных платформ наэкранах 1,2. Хотя полностью иммерсивные установки представляют собой рубеж этой эволюции, интерактивное искусство на экране остаётся основополагающим средством, которое срочно требует строгих, стандартизированных методологий оценки перед неограниченным расширением пространства. Эта модальность фактически переопределяет роль аудитории от пассивного наблюдения к активному совместному творчеству, где участие напрямую формирует смысл произведенияискусства 3. Классические рамки в арт-психологии, в частности Венская интегрированная модель восприятия искусства (VIMAP), предлагают сложную призму для понимания взаимодействия между когнитивным контролем сверху вниз и перцептивной обработкой снизу вверх во время эстетических встреч. Однако, хотя эти модели обеспечивают прочную основу для статических наблюдений, расширение их последних приложений в интерактивных цифровых средах требует продвинутых методов измерения. Преобразование этих теоретических конструкций в интерактивные приложения требует физиологических метрик в реальном времени для объективного фиксирования непрерывной обратной связи между вводом пользователя и системным ответом. В результате переход от статического просмотра к активному взаимодействию вносит значительную сложность при оценке пользовательского опыта. Современные основные методы оценки в этой области в основном основаны на пост-мероприятиях, ретроспективных интервью и наблюдениях на месте о привыках просмотра, последовательности и времени пребывания узрителей 4. Они часто дополняются грубыми поведенческими показателями, такими как общая продолжительность пребывания и частотакликов 5. Хотя такие методы эффективно фиксируют общие предпочтения и общее удовлетворение, они по сути испытывают трудности с отслеживанием микроуровневых сдвигов внимания в реальном времени, происходящих во время процесса. В отличие от ретроспективных опросников, основанных на задержке памяти и, следовательно, подверженных когнитивным искажениям, предлагаемая система отслеживания глаз предоставляет непрерывные, в реальном времени и объективные физиологические данные. Кроме того, по сравнению с грубыми поведенческими показателями, такими как общее время пребывания или поверхностные частоты кликов, эта методология, основанная на взгляде, фиксирует микроуровневые когнитивные процессы — такие как моменты колебаний, визуальные стратегии поиска и мгновенные перцептивные реакции на системную обратную связь. Таким образом, она предоставляет практические, детализированные доказательства итеративного проектирования взаимодействия, которых традиционные методы оценки принципиальноне имеют 6. Эта технология предлагает процессные метрики для понимания распределения, поддержания и смещения внимания в интерактивном искусстве, предоставляя объективные физиологические показатели когнитивного состояния пользователя 7,8,9. Анализируя, когда, где и как долго пользователь смотрит на конкретные элементы, исследователи могут объективно поддерживать оптимизацию выставок и интерактивный дизайн. Однако внедрение отслеживания взгляда в контексте интерактивного цифрового художественного опыта создаёт множество нетривиальных технических и методологических задач, отличающих его от стандартного тестирования удобства использования или статического просмотра изображений.
Интерактивные среды часто включают динамические медиа, несколько источников информации и сложные многоступенчатые задачи. Визуальные стимулы не фиксированы; они развиваются в зависимости от ввода пользователя. Постоянные изменения визуальных стимулов и системной обратной связи вызывают резкие переключения внимания между движущимися объектами и зонами интерфейса. Эта динамика делает традиционную, статичную, интерфейсную сегментацию и метрическую интерпретацию склонными кискажениям 10,11. Например, область интереса (AOI), релевантная в один момент, может исчезнуть или изменить своё семантическое значение в следующий, делая статические тепловые отображения недостаточными.
Кроме того, реальные взаимодействия часто связаны с естественными физическими действиями, такими как движения головы, окклюзия и разные расстояния от экрана, что приводит к дрейфукалибровки 12,13. Эти колебания качества отслеживания приводят к отсутствующим значениям и шуму, снижая межсубъектную сопоставимость и стабильность статистического тестирования. Стандартные лабораторные протоколы часто требуют жёсткой стабилизации (например, подбородка), что снижает натуралистический опыт, необходимый для восприятияискусством 14. Поэтому эффективный протокол должен балансировать между строгим контролем качества данных и экологической достоверностью позы пользователя. Используя дистанционное отслеживание глаз на основе экрана, предлагаемая структура позволяет естественные, свободные микродвижения торса и головы, служа прагматичной базой для захвата эстетических реакций без навязчивых физических ограничений.
Критически важно, что временная синхронизация данных о движении глаз и журналов взаимодействия напрямую влияет на причинную интерпретацию. В статической задаче просмотра начало стимула является единственным релевантным временным маркером. В интерактивном искусстве каждое прикосновение, жест или триггер взгляда запускает новую отсылку к временному событию. Без единого механизма временного ориентира и выравнивания событий становится трудно определить, вызваны ли изменения внимания системной обратной связью или обусловлены отдельными стратегиями исследования15. Для всесторонней оценки цифрового искусства исследователи обычно опираются на два отдельных источника данных: журналы взаимодействия (фиксирующие пользовательские входы и состояния системы) и физиологические сигналы (например, отслеживание взгляда для визуального внимания). Однако эти методы часто анализируются отдельно. Интеграция их на раннем этапе аналитического процесса жизненно важна с точки зрения и практической точки зрения, поскольку они по своей сути дополняют друг друга: журналы взаимодействия обеспечивают точный контекстуальный «триггер» (что и когда происходит системная обратная связь), а данные непрерывного взгляда раскрывают соответствующую когнитивную «реакцию» (где и как распределяется внимание). Без единого согласования времени, бенчмарка и мультимодального события становится сложно определить, вызвано ли смещение внимания системной обратной связью (например, визуальный эффект ряби) или вызвано индивидуальными стратегиями исследования. Объединяя эти потоки данных, эта структура обеспечивает теоретическое преимущество — замыкать причинную петлю между интерактивными дизайнерскими функциями и познаванием пользователя.
Поэтому развитие исследований отслеживания глаз для интерактивного искусства требует не только захвата точек фиксации; Это требует строгого контроля качества, синхронизированного выравнивания и воспроизводимых рабочих процессов обработки данных. Ограничения существующих решений дополнительно подчёркивают эту мотивацию к исследованиям. Существующие исследования отслеживания взгляда в художественных контекстах преимущественно сосредоточены на статических задачах просмотра или рассматривают текстовые описания и экскурсоводов как внешние переменные, не имея интеграции с интерактивнымимеханизмами 16,17. Хотя данные свидетельствуют о том, что методы подачи информации и стратегии руководства могут существенно изменять пути внимания и фокусы зрителей, большинство результатов остаются на уровне корреляций между одним вмешательством, не объясняя, как интерактивные петли обратной связи формируют стратегии внимания на протяжении всего опыта.
Напротив, хотя интерактивные арт-практики разработали прототипы систем, использующих взгляд как естественный вход взаимодействия — акцентируя внимание на превращении зрителей из пассивных наблюдателей в активных участников — эти усилия часто сосредоточены на демонстрациях инсталляций или техническойвалидации (18,19). Им часто не хватает единых метрик внимания, воспроизводимых экспериментальных парадигм и моделей исследований с замкнутым циклом, которые устанавливают проверяемые связи между динамикой внимания и результатами опыта. Этот разрыв препятствует разработке переносимых принципов дизайна, которые могут надёжно предсказывать, как конкретный выбор дизайна (например, скорость визуального перехода) повлияет на ощущение погружения пользователя или удобства использования.
Критически важно, что существующая литература не обладает цельной структурой, которая фундаментально согласовывала визуальное внимание с интерактивными системами в реальном времени. Хотя достижения в динамическом картографировании AOI и синхронизации событий взгляда изучались в общем контексте HCI, они редко интегрируются в гибкую и сильно изменчивую среду цифрового искусства. Фундаментальный пробел в исследованиях заключается в неспособности современных одномодальных оценок объяснить причинную петлю между системной обратной связью и пользовательским когнитивным мышлением. Благодаря ранней интеграции мультимодальных данных — в частности, объединению непрерывных координат взгляда с точностью до миллисекунд — исследователи могут преодолеть базовые метрики удобства использования. Такая интеграция даёт теоретическое преимущество, приписывая конкретные микроуровневые сдвиги внимания (например, стратегии поиска против стабилизированного фокуса) непосредственно с конкретными решениями в дизайне взаимодействия, превращая поток опыта из субъективного чувства в количественно измеримое когнитивное состояние.
Для устранения этих пробелов этот протокол предлагает систему измерения внимания на основе отслеживания глаз, специально ограниченную экранным интерактивным цифровым искусством. Хотя базовый технический конвейер имеет структурные сходства с универсальным тестированием взаимодействия человека и компьютера (HCI), эта структура уникально интегрирует неутилитарные эстетические задачи (например, свободное визуальное исследование генеративных медиа) наряду с целенаправленными действиями. Эта интеграция явно отличает гибкий, исследовательский характер оценки искусства от стандартного утилитарного подхода к оценке программного обеспечения. Теоретически это исследование работает на пересечении интерактивного цифрового искусства, HCI и анализа отслеживания глаз. Он решает как постоянную задачу объективной характеристики непрерывного потока опыта в цифровой оценке искусства, так и определение связи между интерактивным входом и вниманием выходом.
Область исследования ориентирована не только на опытный контекст интерактивного цифрового искусства, но и на интеграцию данных отслеживания взгляда с журналами взаимодействия для создания систематической цепочки доказательств — от опытного ввода до метрик внимания и, в конечном итоге, к переменным исхода. На уровне системы мы создаём воспроизводимый конвейер данных, который объединяет захват движений глаз, запись журнала взаимодействия и временную синхронизацию в единую архитектуру. Этот фреймворк стандартизирует предобработку, отображение регионов и генерацию метрик внимания, одновременно предоставляя отслеживаемые структуры данных и аналитические скрипты.
Концептуальная основа (рисунок 1) объясняет, как дизайн взаимодействия влияет на субъективные результаты, изменяя зрительные процессы вниманительного внимания зрителя. Основная логика рассматривает элементы взаимодействия (такие как задержка обратной связи и интенсивность руководства) как контролируемые входы, визуальную динамику внимания — как ключевые переменные процесса, а результаты опыта (погружение, удобство использования, удовлетворённость) — как выходы. Индивидуальные различия включены в качестве умеряющих факторов. Для экспериментального дизайна разрабатываются интерактивные задачи, которые балансируют свободное исследование с целенаправленными целями. На уровне моделирования мы коррелируем динамику внимания с переменными результата, чтобы изучить механизмы, с помощью которых элементы проектирования взаимодействия влияют на пользовательский опыт через визуальное внимание. Этот протокол предоставляет подробные методологические шаги для воспроизведения этой структуры, обеспечивая возможность научной строгости измерить сложное взаимодействие между пользователем, системой и искусством.