2019年9月5日
本文介绍了一种利用双模干扰任务来研究汉语口语关系从句句子在线加工的实验方案。文中描述了两个涉及听觉加工并包含句内和句外干扰因素的示例实验。该范式为探讨工作记忆的本质及其对句子加工的影响提供了方法学基础。
DMI实验范式可用于考察工作记忆在复杂句法加工中的作用,进一步评估汉语书面语加工的不对称性。将DMI范式与最后共决任务相结合,并采用Matco移动窗口技术,是一种用于实时测量口语句子跨通道加工的新方法。
与我一同演示该实验步骤的是中国台湾国立清华大学(NTIN)的大学生 Peihan Chen。在开始实验之前,需从“中央研究院语料库技术报告”(Sinica Corpus Technical Report)中选取共计 48 个双音节中文词汇,其中包括 24 个真实词汇和 24 个非词汇,用于词汇判断任务。在选择词汇时,需确保所有目标词汇均为中等使用频率。
通过使用两个单独有意义但组合后语义异常的单音节汉字来创建24个非词,避免使用具有相同偏旁的双音节汉字词。将24个非词手动组合到填充句中,将24个实词组合到目标关系从句句中。将听觉刺激材料编写为72个句子,包括24个主语空位关系从句句、24个宾语空位关系从句句和24个填充句。
然后将48个关系从句句子平均分为两组,以形成不完全的平衡设计,共组成48个试验。为实验设置软件时,打开合适的行為研究软件程序,并使用该软件对所有刺激材料进行随机化处理。随后配置软件系统,以记录参与者在词汇判断任务中的反应时、准确率,以及基于参与者键盘输入的句子理解正确情况。
在参与者做出错误的词汇判断或未作出反应后,立即在显示器屏幕上呈现相应的反馈信息。在开始双模态句内干扰任务实验之前,让参与者坐在计算机前,并为其佩戴耳机。实验人员需通过计算机屏幕上的书面说明以及口头讲解,向参与者提供实验指导。
指导受试者在通过耳机聆听句子的同时,执行词汇判断任务。要求受试者判断屏幕上显示的干扰性视觉探针是单词还是非词,并尽可能快速且准确地按下“是”表示单词,按下“否”表示非词。告知受试者,句子播放结束后将立即出现理解性问题,并提醒受试者在同时执行任务时需认真聆听听觉句子。
在给出所有指导说明后,让参与者完成一个包含反馈环节的练习部分。练习结束后,开始进行双模态句内词汇判断干扰任务,并允许参与者每完成24次试验后休息一次。对于双模态句外干扰任务实验,将听觉刺激材料设计为96个句子,其中包括24个主语空位关系从句句子、24个宾语空位关系从句句子以及48个填充句子。
将48句RC句子平均分为两组,以创建一个不完全的平衡设计,共96个试验,其中包含零位、三位和五位数字组合,每种零位、三位或五位记忆负荷均等分配至所有句子试验中。在实验软件程序中,随机将参与者分配至代表句子类型与记忆负荷这两个被试内因素组合的两种刺激集之一。指导参与者,他们需要通过耳机聆听被分割成单词的句子,并通过按压键盘启动下一个分段单词的播放,以尽可能快的速度自行控制节奏。
告知参与者,屏幕上将出现一个问号,随后会出现一个与他们刚刚听到的句子内容相关的“是/否”理解性问题,参与者应对此问题作答。当参与者按下“是”或“否”按键回答理解性问题时,系统将播放一个短暂的蜂鸣声。然后,指导参与者在听到蜂鸣声后,按照屏幕上出现的指示操作,并重复他们在听句子之前所看到的数字。
开始实验时,向参与者呈现持续1500毫秒的数字视觉图像。随后启动自定步速的听觉移动窗口任务,并指导参与者在听句子的同时,将先前呈现的视觉数字信息保留在记忆中。由于阶段回忆会增加记忆负荷,应指导参与者优先尽可能准确地记住数字,同时尽快听完句子。
在参与者完成任务的同时,将其数字回忆结果记录在评分表上。在此项具有代表性的句内实验中,ORC句型在关系从句之后的主句主语位置以及句子末尾处表现出加工优势;而SRC句型在关系从句之后的主句动词位置具有优势。
句子类型在主句动词后区域和句末区域的简单主效应显著,表明在主句动词处进行词汇判断干扰任务时,主语关系从句(SRC)句子的加工负荷较低;而宾语关系从句(ORC)句子在句子结尾处的加工负荷较低。在零位数负荷的句外干扰条件下,参与者在关系从句初始加工区域表现出对ORC句子的加工优势,而在关系从句标记DE及主句动词区域则显示出SRC的加工优势。
在三位数负荷的句外干扰条件下,参与者在主句动词前的 DE 区域附近未表现出主语或宾语缺位关系从句句子的差异。然而,参与者在 DE 区域表现出简单关系从句(SRC)句子的优势,而在主句动词区域表现出宾语关系从句(ORC)句子的优势。在五位数负荷的句外干扰条件下,参与者在主句主语区域的 DE 前及 DE 后区域均表现出整体的宾语关系从句(ORC)句子优势。
我们的结果表明,中文关系从句(RC)的加工呈现出一种动态模式,由此推测在中文关系从句加工过程中并不存在固有的加工不对称性。当前的DMI技术可拓展应用于自定步速阅读范式,以探究在存在干扰的自然阅读情境中工作记忆如何参与阅读加工过程。
查看完整文字稿并访问数千部科学视频
本研究提出了一种双模态干扰任务方案,用于探究汉语口语关系从句句子的在线加工过程。实验重点关注听觉加工以及工作记忆在句子理解中的作用。
本研究提出了一种双模干扰范式,用于探究工作记忆在复杂句法加工中的参与情况,为评估语言理解过程中的认知负荷提供了一种方法学框架。该方法能够实时测量干扰效应对句子加工的影响,从而为神经心理学和心理语言学研究中的认知资源分配模型提供依据。通过刻画次级任务如何干扰主要语言加工过程,该方法可在涉及认知终点的目标验证研究中支持机制层面的风险降低策略。
双模干扰技术适用于发现研究的连续过程,支持早期发现阶段的假设验证、筛选阶段的检测准备,以及转化研究中认知终点的验证,尤其适用于涉及工作记忆通路的靶点研究。