本文介绍了一种利用双模干扰任务来研究汉语口语关系从句句子在线加工的实验方案。文中描述了两个涉及听觉加工并包含句内和句外干扰因素的示例实验。该范式为探讨工作记忆的本质及其对句子加工的影响提供了方法学基础。
需要JoVE订阅才能观看此内容。 请登录或开始免费试用
本文介绍了一种利用双模干扰任务来研究汉语口语关系从句句子在线加工的实验方案。文中描述了两个涉及听觉加工并包含句内和句外干扰因素的示例实验。该范式为探讨工作记忆的本质及其对句子加工的影响提供了方法学基础。
工作记忆(WM)在复杂句子的理解中起着核心作用。其在口语复杂句子加工中的功能尤为显著,因为口语复杂句的加工对记忆资源的需求较高。双模干扰范式已被用于考察工作记忆系统如何参与复杂的句法加工过程。本文介绍了两个典型实验,分别涉及在句内或句外干扰条件下的听觉加工。在第一个实验中,通过视觉呈现的词汇判断任务对听觉刺激[汉语关系从句(RC)句子,包含两种句法类型:主语空位(SRC)与宾语空位(ORC)]进行干扰,并设置三个不同的干扰时间点进行操控。在第二个实验中,采用听觉窗口移动技术呈现相同的听觉刺激,通过视觉呈现的数字回忆任务在句子之外进行干扰,并设置三种不同的数字记忆负荷进行操控。通过评估次要任务对理解RC句子这一主要任务的影响,我们可以探讨有关汉语关系从句加工不对称性的争议问题。我们的结果揭示了与以往研究不同的RC加工模式。实验1未显示出SRC或ORC在加工上的明显优势;然而,在句子末尾处观察到对ORC的偏好,而在主句动词位置则发现对SRC的偏好。同样,实验2呈现出动态的加工模式:在无数字负荷条件下,SRC在关系从句标记区域表现出加工优势;但在高数字负荷干扰下,ORC在同一区域表现出加工优势。这些结果提示,在汉语关系从句的加工中并不存在明显或固有的加工不对称性。通过在句法加工过程中评估特定干扰效应的方法,这些实验展示了未来研究在探索涉及工作记忆的口语句子加工度量方面的应用前景。
工作记忆(WM)在口语句子加工过程中的作用是显而易见的:由于语音具有瞬时性,听者必须在加工完成前将各个语音成分保留在记忆中。这一方面在处理句法复杂的句子时显得尤为重要。为复杂句子中的词语建立句法关系,需要对短时记忆中保留的信息进行计算操作,从而导致更高的记忆负荷。然而,工作记忆系统如何参与口语句子加工仍存在争议。
这一争议涉及两个主要分歧:一些研究者认为,存在一个单一的工作记忆系统,用于所有言语任务1,2——换句话说,句法加工依赖于与其他一般认知过程相同记忆资源。这就是单资源模型。另一些研究者则认为,根据句子的句法结构来确定其意义涉及一个专门的工作记忆系统,该系统独立于其他言语任务所使用的系统3,4。据此观点,句法加工具有模块性。这就是独立的句子理解资源模型。
在心理语言学研究中,双模态干扰范式已被用于检验两种相互竞争的理论。基于工作记忆(WM)存储容量有限的假设5,6,该范式通过在主要任务中引入一个次要的干扰任务来增加任务复杂性。由于主要任务与次要干扰任务竞争有限的认知资源,任务难度随之增加,导致主要任务的反应时间延长。在此情况下,双模态干扰方法使得研究者能够评估当参与者同时执行两项任务时,工作记忆所承担的加工负荷及其参与程度。
包含关系从句(RC)成分的句子由于其众所周知的复杂句法结构,会导致更大的理解困难,因此常被用于研究工作记忆(WM)系统如何参与复杂句子的加工过程。然而,尽管加工复杂句子对与言语处理相关的工作记忆资源提出了更高要求,但尚不明确:在中心词前置的关系从句结构语言(如英语)中被认为导致句法移位加工代价的WM机制,是否同样反映了中心词后置关系从句语言(如汉语)的句法复杂性。本研究通过采用双模态干扰范式,对此问题提供了新的见解。
关于主语缺位和宾语缺位关系从句(SRCs 与 ORCs)加工难度的问题一直存在广泛争议。这些争议主要出现在类型学上不同的语言中。在中心词前置的语言(如英语)中,关系从句位于其所修饰的中心名词之后,普遍发现如下例1(a)所示的SRCs比下例1(b)中的ORCs更容易加工。

如示例(1)所示,在英语中,主语关系从句(SRCs)与宾语关系从句(ORCs)之间的间隙表面位置差异极小。该间隙被标记为 e1,头名词后的空位演员’(称为 填充物) 在从关系从句(RC)中移除后所留下的空位。然而,简单关系从句(SRCs)与宾语关系从句(ORCs)在关系从句结构域中空位的句法结构和功能上存在显著差异。填充词与空位之间结构依存关系的整合与消解所涉及的工作记忆负荷,是实验研究的理想对象,已被广泛用于探究工作记忆(WM)在语言加工与理解中的作用。
例如,理解并加工这些后置关系从句(RC)时,需要将中心名词“actor”在简单主语关系从句(SRC)和简单宾语关系从句(ORC)中识别为动词“criticized”的主语或宾语,并将该中心名词存储在工作记忆(WM)中,以便后续将其指派为主句中动词“admitted”的语法主语。
与前置中心语语言中普遍发现的关系从句(SRC)理解比宾语关系从句(ORC)更容易不同,对于中文这种中心语后置、关系从句位于中心名词之前语言的从句加工不对称性,研究结果存在分歧。一些研究观察到了SRC加工优势,而另一些研究则报告了相反的模式(即ORC加工优势)。后一类研究还提出,工作记忆(WM)可以调节关系从句加工的不对称性,这一点得到了自定步速阅读表现研究结果的支持7,8,9。
如上所述,关于工作记忆(WM)在(复杂)句法加工中的作用,目前存在两种相互竞争的理论模型:一种认为“句法加工是模块化的”,另一种则认为“句法加工是通用的”。为了检验这两种关于模块性的主张,研究常采用理解难度已知存在差异的复杂句子(例如英语中的主语关系从句 SRC 与宾语关系从句 ORC),在双模干扰(DMI)任务中考察工作记忆的参与程度,因为工作记忆的参与被认为与句法加工的不对称性平行。因此,通过干扰任务引入并发的记忆负荷,可揭示工作记忆对句法加工的影响。其原理在于,无论语言加工依赖单一的言语工作记忆系统,还是独立的模块化句法系统,干扰任务对系统的占用都会因工作记忆资源的限制而降低句法加工的效率。在 DMI 任务中,加工句法上更复杂的句子(如英语中的 ORC)相较于加工句法上更简单的句子(如英语中的 SRC)所表现出的加工困难程度,可为工作记忆的具体作用提供证据,并指示工作记忆参与的程度。
与英语等中心词前置语言不同,汉语关系从句呈现出中心词后置的结构,并表现出 填补材料 关系。被索引的移出成分(即空位)位于与其相关联的中心名词之前,如图2(a)(SRC)和2(b)(ORC)所示。

加工中文关系从句(RCs)引发的争议在于,主语关系从句(SRCs)并未被一致地报告为比宾语关系从句(ORCs)更容易加工,这一差异给语言加工与理解的理论带来了挑战。由于关系化标记“的”之前的前置成分必须在工作记忆(WM)中加以保存,直到空位——即被移位的中心名词“施事者”——被连接并提取为止,因此理解这一过程仍有助于深入认识工作记忆在语言加工中的作用。
本研究考察了口语关系从句(RC)的加工过程,因为听觉加工具有高度压缩性,且与工作记忆(WM)的功能密切相关。本研究采用双模态干扰范式,因为干扰是短时听觉记忆中一种已被充分证实的遗忘机制。当干扰事件发生时,存储在记忆中的表征可能被削弱并最终丢失10。通过使用在不同维度(在本研究中为语言内和非手指运动性干扰,见下文)上变化的干扰刺激,我们可以测量在不同加工阶段及不同干扰条件下整合逐步输入信息所需的认知代价。
基于“加工句法结构更复杂的句子比加工较简单的句子更易使工作记忆(WM)超负荷”这一观点,可以假设,在理解过程中操纵干扰类型会对句子加工产生影响。由此推断,加工句法上更复杂的句子,相较于加工句法上较简单的结构,将需要更长的在线听读时间(成比例或不成比例地增加),并在后续的句子理解评估中表现出更差的表现。本研究检验了这样一个假设:句子加工过程中的干扰可以作为工作记忆参与程度的指标,并将该指标的意义延伸至句法模块性问题之外;本研究提出,由于工作记忆在语言理解中的基础性作用,有关汉语关系从句(RC)加工的争议可通过工作记忆的研究得以阐明。因此,采用DMI任务研究汉语关系从句加工的重要性,为解决当前关于汉语关系从句加工不对称性的争论提供了一条有效路径。
本文介绍了两个利用句内和句外干扰研究听觉加工的示范性实验。这两个实验的目的是探讨在不同类型的干扰条件下,工作记忆在加工中文关系从句时的参与程度。
在第一个实验中,采用视觉呈现的词汇判断任务作为句内干扰任务。作为次要干扰任务,在目标关系从句句子听觉呈现过程中的三个时间点引入了词/非词词汇判断任务(LDT),从而可以在这些时间点上测量加工难度。本实验主要关注的是关系从句(RC)中的空位如何与主句(MC)中的填充词建立关联,以及这种关联是否会影响后续主句的加工。因此,所设置的三个探测位置均位于主句区域之后。示例3复制自示例(2),用箭头标示出三个探测位置,并与相应的句法连接对齐;其中3(a)表示主语关系从句(SRC),3(b)表示宾语关系从句(ORC)。

图1展示了在三个探测位置中的任意一个位置,通过词汇判断任务(LDT)干扰连续听觉RC呈现的过程。时间设计遵循了先前汉语加工研究中LDT任务的常规方案11。例如,每个视觉LDT试验以一个“+”字开始,作为屏幕中央的注视点,持续500 ms,随后呈现视觉LDT刺激,该刺激在屏幕上显示3,000 ms,并在受试者做出词汇判断后立即消失。一名典型受试者可在30–35分钟内完成实验1,包括练习阶段。

图1:伴随词汇决策任务的句内干扰程序。
请点击此处查看此图的放大版本。
三个探查位点及LDT任务:
1. 位置1(P1):突变后SMC区域
首个需测量的位置(P1)位于主句(MC)主语之后、关系从句(RC)边界之后的区域。预计在此位置会产生加工负荷。一方面,在此位置之前(SMC),关系从句(RC)区域内的主语缺位和宾语缺位结构分别形成具有对比性的动宾(VO)和主谓(SV)结构;另一方面,为了将关系从句(RC)区域内的成分与主句(MC)中的中心名词进行整合,听者必须识别空位的语法角色,并将其与即将出现的填充词中心名词联系起来。
2. 位置2(P2):VMC区后部区域
需要测量的第二个位置(P2)位于主句动词之后(VMC)。该位置也被认为会引发加工负荷。整合动词信息需要听者检索句子中的名词论元,并从前面的关系从句(RC)域或从该关系从句所修饰的中心名词中识别出主句动词的施事者。
3. 位置3(P3):句末区域
需要测量的第三个位置(P3)位于句末之后立即出现的位置。以往关于加工过程的研究提出,存在一种句末整合效应——即在句末会整合非句法信息(如语篇和语义层面的信息),以激活并完成对句子的理解12,13。因此,由于需要整合这些非句法信息,加工负荷应在句末附近增加14,15。而P3位置则被认为会表现出加工负荷的下降,因为句子的解析在此位置附近已经完成。
在第二次实验中,采用了听觉移动窗口(AMW)任务。AMW 技术被认为能够捕捉在线语言加工过程中资源分配的模式,已被广泛用于区分两种相互竞争的工作记忆(WM)理论途径16,17。人们认为,在处理即将出现的、短暂呈现的口语句子时,句外干扰会给听者带来额外的加工负担,从而延长其反应时间。在 AMW 范式下,参与者会听到被切分为单词的句子,并通过按键盘上的按键来启动下一个片段的播放。因此,按键启动下一个片段之间的停顿持续时间反映了参与者对特定语言特征的敏感程度。例如,如果句外干扰对不同句法复杂度的句子加工产生了特定影响,参与者在启动后续片段前的停顿时间将相应地更长。该实验流程在图 2中进行了示意图展示。

图 2:结合数字回忆任务的句外干扰程序。
请点击此处查看此图的放大版本。
以下方案展示了研究人员如何利用视觉呈现的词汇判断任务作为句内干扰,同时利用伴随的算术干扰负荷作为句外干扰,以探究工作记忆(WM)的参与情况以及汉语关系从句(RCs)加工的不对称性,并阐明其内在逻辑。
访问受限。请登录或开始试用以查看此内容。
这些实验的实施遵循了所有研究伦理规范。所有受试者在实验开始前均提供了知情的口头和书面同意。所有实验程序、知情同意书及实验方案均已获得中国台湾国立成功大学研究伦理委员会的批准。实验1和实验2分别基于先前的研究18,19。本文报告的代表性结果均引自这些先前发表的研究。
1. 实验1―双模态句内干扰任务
,其中偏旁部件
与水相关,出现在汉字
和
中)。2. 实验2―双模态句外干扰任务
访问受限。请登录或开始试用以查看此内容。
在双模态内侧LDT任务和跨指负荷任务中均观察到了干扰效应。考虑到实验1中的三个探测位点,内侧LDT任务的反应时结果呈现出两种关系从句(RC)类型下RC加工的动态模式。如图3所示,宾语关系从句(ORC)类型在主句主语(SMC)之后的关系从句位置(P1)以及句子末尾(P3)表现出加工优势;而主语关系从句(SRC)类型在主句谓语动词(VMC)之后的位置(P2)具有加工优势。在P2和P3位点,句型的简单主效应显著,表明在主句动词位置(P2)上,SRC在LDT干扰任务中的加工负荷较低;而在句子末尾(P3),ORC的加工负荷较低。这些结果不同于英语等中心词前置语言中RC研究普遍报告的SRC一致优势现象,也不同于以往汉语RC研究中所报告的SRC与ORC优势竞争模式。
访问受限。请登录或开始试用以查看此内容。
本研究表明,采用包含句内和句外干扰任务的双任务干扰(DMI)方法,有助于阐明工作记忆(WM)在口语句子加工中的作用,并为汉语关系从句(RC)加工的不对称性问题提供新的见解。正如预期,通过测量次级任务干扰对听者主句子加工表现的影响程度,我们可以推断汉语关系从句的加工模式,并为关于汉语主语关系从句(SRC)与宾语关系从句(ORC)加工优势的争议提供一个可行的解答。
干扰效应表明,工作记忆(WM)在口语句子加工中起着至关重要的作用——无论干扰源为何。在本研究的实验1和实验2中,句内干扰为与句子语义无关的词汇判断任务,而句外干扰则为非语言性的算术任务,涉及难度递增的数字负荷回忆。该方法基于如下假设:主任务与次任务所涉及的工作记忆,要么共享共同的认知资源1,2,23,要么通过彼此独立的系统运作3,4
访问受限。请登录或开始试用以查看此内容。
作者无任何利益冲突需要披露。
本研究由台湾地区科技主管部门 [NSC-101-2410-H-439-001] 向第一作者Tuyuan Cheng提供的资助支持。作者感谢中国台湾国立台湾大学神经科学研究所(NTIN)实验室成员Yang Ya-Hui和Chen Pei-Han在实验准备与实施过程中提供的协助。
访问受限。请登录或开始试用以查看此内容。
| 姓名 | 公司 | 目录编号 | 评论 |
|---|---|---|---|
| E-Prime | Psychology Software Tools | 专业版 2.0 | |
| 耳机 | Logitech | ||
| Praat | Praat | 5.3.43 | 用于编辑听觉声音文件的在线软件;http://www.fon.hum.uva.nl/praat/ |
| 串行反应盒 | Psychology Software Tools | ||
| 标准 PC | ASUS K42Jv 笔记本电脑 |
访问受限。请登录或开始试用以查看此内容。