便携式跨模态偏好注视（IPL）：探究正常发育幼儿及自闭症儿童的语言理解能力
2012年12月14日
本文介绍了一种可靠的、基于家庭的评估方法，用于评估正常发育的婴幼儿以及自闭症儿童的语言理解能力。该方法通过让儿童在观看并排图片的同时聆听只与其中一张图片匹配的音频，分析其眼球注视情况。刺激材料的设计充分考虑了低龄受试者的特点。
本实验的总体目标是为发育正常的婴幼儿以及患有自闭症等特殊需求儿童提供一种基于家庭的语言理解能力评估方法。该方法首先创建适合注意力持续时间较短儿童的、具有吸引力且适宜的视听刺激材料；第二步是在儿童家中建立便携式跨通道偏好注视范式。
播放视频并记录儿童的面部表情。接下来，使用定制编码程序分析儿童面部的录像，对眼动的方向和注视持续时间进行编码。最后一步是比较基线期和测试期的注视模式。
测试过程中注视模式的变化表明，儿童理解了测试音频中的语言。最终，便携式跨通道偏好注视法可用于揭示非语言或语言能力较弱的儿童对特定语言结构及语言学习原则的掌握情况。与要求儿童说话或指向图片的现有方法相比，该技术的主要优势在于，便携式IPL依赖于儿童的眼动行为，对儿童的要求更少，因此能够帮助我们更准确地判断儿童真正掌握的语言知识。
该技术的应用前景可拓展至针对自闭症儿童的治疗或干预方案设计，因为它揭示了儿童对语言特定方面的认知情况（即他们知道或不知道的内容），从而帮助服务提供者制定更具针对性的干预措施。尽管该方法主要应用于正常发育儿童及自闭症儿童，但也可用于其他发育障碍儿童，例如患有特定性语言障碍的儿童。其便携性使得该技术可推广至远离大学或医院的农村地区儿童。
本方案中使用的视频应设计得既有趣又吸引人，同时避免让患有自闭症谱系障碍的儿童产生反感。当需要使用动画角色时，可通过Final Cut Pro或Avid Media Composer等商业非线性编辑软件，采用四到八秒的视频片段制作视频刺激材料。为降低社交和情感上的挑战性，应使用动物而非人类形象来呈现场景；此外，应采用色彩鲜艳物体的动态场景，以吸引并维持儿童的注意力。
在试次间隔期间，闪烁的红灯将吸引儿童的注意力，同时视频屏幕处于空白状态。此处前两个视频片段按顺序依次呈现，左右交替播放，并配以相同的熟悉化或教学音频。录制语音时应使用语调和时长均夸张放大的言语。
看，tuin。接下来是基线试验。这些试验将测试刺激并排呈现，但配以无指向性的音频。
测试试验最后出现，并配以能够区分两个视觉图像的测试音频。看图因。图因在哪里？
最后，在每次试验开始时，在第二音频通道上添加一个1 kHz的音调，以便在儿童家中为编码人员明确标示试验的开始和结束。首先，向儿童的家长详细说明研究流程，并签署知情同意书。强调在实验过程中，家长应尽量减少与儿童的互动，并向家长介绍MP3播放器的使用方法，以便家长在儿童坐在其膝上时进行操作。
接下来，在指定房间内安装IPL组件，使用延长线连接所有电源。将大屏幕背对主要光源放置，并将扬声器置于屏幕正后方中央位置。将两个音量旋钮均调节至中间位置。
将摄像机放置在位于调音适配器盒顶部的三脚架上，调音适配器盒应居中置于屏幕前方，然后将媒体载入摄像机。将直录设备（DTE）放置在摄像机旁边的地面上。设置投影仪。
站在距离屏幕七到十英尺的位置。然后将投影仪放置在上方。最后将笔记本电脑放在投影仪支架旁边，连接所有IPL组件。
连接笔记本电脑，使其向投影仪发送视频信号。同时，确保笔记本电脑输出两路音频信号：一路语音音频发送至扬声器，另一路音调音频发送至摄像机。
连接摄像头，使其将视频和音频信号发送至 DTE。连接完成后，启动所有组件。DTE 屏幕上应显示左侧为一种 VI 类型，其下方为计数器。
现在使用 QuickTime 在笔记本电脑上加载第一个视频。在屏幕前方、距离摄像机两英尺半到三英尺处放置一把椅子或枕头。然后请儿童坐在椅子上或家长的膝盖上。
如果儿童坐在家长的腿上，请将MP三播放器和耳机交给家长。如果儿童单独坐着，家长可坐在其旁边，并根据需要调节房间内的灯光。接下来，确保摄像机能够清晰看到儿童的面部，并在儿童移动后随时重新检查确认。
在白板上写下儿童的相关信息。然后按下DTE上的录制按钮，对白板拍摄10秒。接着，使用笔记本电脑点击“查看”，再进入全屏模式播放第一个视频。
如果儿童在观看视频过程中变得坐立不安，可总体上鼓励其继续观看影片。视频播放结束后，在 DTE 上按下停止按钮。在访问结束时，奖励儿童一份礼物以表彰其参与。
实验结束后，检查儿童的眼动是否已在DTE上完成数字化。然后将视频导入非线性编辑程序，转换为自定义编码程序所使用的BI格式，并根据每段视频的特定布局（如熟悉化或教学基线及测试试次的排列）导出至安全存储代码。逐帧浏览儿童的视频，找到显示1千赫兹音调波形的帧，该波形的出现表明正向儿童呈现视觉刺激。
然后在每次目标试验前的试验间期（inter trial interval）开始编码，当中心提示灯出现时，逐帧前进并记录每一次注视方向的变化，将其编码为向左、向右、向中心，或朝向其他任意方向。编码程序将输出若干列数字，表示每次编码输入的时间点和类型。例如，CT 3, 3, 4, 9 9 表示在试验开始时，从视频起始时刻起 3.3499 秒，儿童的目光转向了中心位置。
编码后的数组可通过定制的 MATLAB 分析程序进行分析，该程序可访问视频的特定布局，以确定视频中每次试验的匹配侧。分析程序将计算儿童在每次编码试验中的注视时长和注视方向、儿童首次注视匹配刺激的潜伏期，以及儿童在每次编码试验中注意力切换的次数。最后，我们比较儿童在对照或基线试验与测试试验中的注视情况，包括对匹配图像的注视时长、首次注视匹配图像的潜伏期、整个试验过程中对两幅图像注视的时间进程，以及注意力切换的次数。
通过PIPL测试观察到的儿童注视模式示例如下所示。在观看名词偏向视频时，21个月大、正常发育的儿童在测试阶段对匹配图像的注视时间较基线试验更长，表明他们已将新词汇与物体而非动作建立了关联。平均年龄为33个月的发育迟缓儿童也表现出类似的行为，且效应量相似。
该图展示了发育正常儿童在20至32个月龄期间多次访问时观看形状偏向视频的时间进程分析。蓝线表示对匹配项的注视。注意，在测试试次期间，蓝线的高度随年龄增长而增加，表明对形状的偏好逐渐增强。
红线表示视线移开。注意在28和32个月时，视频开始播放后红线急剧下降，表明儿童主要注视视频而非移开视线。此处显示的是平均发育年龄为41个月的儿童在观看语法启动视频时的时间进程数据。
注意，在基线试验阶段，他们对不匹配图像的注视时间更长；但在测试试验的后半段，当要求他们找出新动词所指对象时，他们则更多地按照指示注视匹配的图像。该技术为儿童发展及发育障碍领域的研究人员探索视听整合与语言发展奠定了基础，适用于学习多种语言的典型儿童，例如日语、土耳其语、法语和中文儿童，也适用于脑瘫患儿或接受过人工耳蜗植入的儿童。
当然，与幼儿（包括患有发育障碍的儿童）一起工作需要投入大量精力，具备耐心，并敏锐地关注他们的特殊需求。
概述
本研究提出了一种在家评估幼儿语言理解能力的方法，包括自闭症儿童。该方法在儿童观看与音频刺激配对的图像时利用眼球追踪分析。
关键研究组成部分
科学领域
- 神经科学
- 发展心理学
- 语言习得
背景
- 语言理解评估对早期干预至关重要。
- 传统方法通常需要言语反应，这对某些儿童来说可能具有挑战性。
- 眼球追踪可以提供对语言非语言理解的洞察。
- 该方法旨在吸引注意力跨度较短的儿童。
研究目的
- 开发一个可靠的家庭语言理解评估工具。
- 分析眼球运动作为理解语言的指标。
- 创建一种对儿童，特别是自闭症儿童要求较少的方法。
使用的方法
- 创建引人入胜的视觉和听觉刺激。
- 实施便携式跨模态优先观察范式。
- 记录并分析儿童在试验中的眼球运动。
- 比较基线和测试试验之间的观察模式。
主要结果
- 儿童的眼球追踪模式表明他们对音频中使用的语言的理解。
- 该方法对于正常发育的儿童和自闭症儿童都有效。
- 结果表明基于个人语言理解的针对性干预的潜力。
- 便携性允许在多样化的环境中进行评估，包括农村地区。
结论
- 该方法为评估幼儿语言理解提供了一个有价值的工具。
- 它强调了非语言线索在理解语言发展中的重要性。
- 未来的应用可能扩展到其他发育障碍。
常见问题
Executive Industry Relevance
Quantitative, nonverbal assessment of language comprehension in young children—including those with autism—addresses a critical gap in early discovery of neurodevelopmental phenotypes. The portable intermodal preferential looking (P-IPL) paradigm enables objective measurement of linguistic processing without requiring overt behavioral responses, supporting predictive confidence in target validation for language-related interventions. This approach enhances portfolio decision-making by revealing underlying language understanding even in minimally verbal populations.
Strategic Applications in Biopharma R&D
Early Discovery & Target Validation
- Enables interrogation of language comprehension mechanisms in neurodevelopmental disorders.
- Supports biological de-risking by isolating comprehension deficits from motor or social confounds.
- Provides functional target validation for language intervention strategies.
Screening & Assay Development
- Facilitates preparation of validated, child-friendly behavioral assays for language comprehension.
- Delivers standardized, reproducible quantitative outputs based on eye gaze metrics.
- Enables scalable screening of linguistic constructs across diverse pediatric populations.
Translational & Preclinical Research
- Aligns with disease-relevant endpoints for autism and language impairment models.
- Supports continuity from early discovery through preclinical validation of language interventions.
- Provides mechanistic de-risking for translational biomarker development in language acquisition.
Pipeline & Workflow Integration
P-IPL integrates into the discovery-to-preclinical continuum by enabling hypothesis testing of language comprehension, assay readiness for behavioral phenotyping, and quantitative analytics for cross-condition comparisons.
- Discovery Biology: Objectively tests linguistic processing hypotheses in minimally verbal children.
- Screening: Provides reproducible, quantitative eye gaze outputs for assay standardization.
- Analytics: Generates time-resolved gaze metrics for statistical comparison of baseline and test conditions.
- Translational Research: Bridges discovery findings to preclinical models of language impairment.
- Enterprise Reuse: Offers a portable, adaptable platform for repeated use across studies and populations.
Operational & Enterprise Impact
- Scientific Value: Increases predictive confidence in language comprehension endpoints and reduces mechanistic ambiguity.
- Operational Value: Standardizes behavioral assessment, enhances reproducibility, and supports remote deployment.
- Strategic Value: Informs targeted intervention design and improves risk-adjusted go/no-go decisions.
- Portfolio Impact: Enables risk-adjusted prioritization of language-focused therapeutic programs.
Implementation Considerations
- Requires expertise in behavioral coding and eye movement analysis.
- Needs portable audiovisual and data capture infrastructure for home-based assessments.
- Demands cross-team standardization of video stimuli and coding protocols.
- Adaptable to various linguistic constructs and developmental populations.
- Dependent on child engagement and tolerance of audiovisual stimuli.
