이중 모달 간섭 작업을 사용하여 중국어로 음성 복잡한 문장의 온라인 구문 처리 검토

Tuyuan Cheng; Jei-Tun Wu

doi:10.3791/59660

이 콘텐츠를 보려면 JoVE 구독이 필요합니다. 로그인하거나 오늘 무료 평가판을 시작하세요.

방법 논문

이중 모달 간섭 작업을 사용하여 중국어로 음성 복잡한 문장의 온라인 구문 처리 검토

5K 조회수

⸱

DOI:

10.3791/59660

⸱

2019년 9월 5일

Tuyuan Cheng¹ , Jei-Tun Wu²

¹General Education Center, National Tainan Junior College of Nursing, ²Department of Psychology, National Taiwan University

이 논문에서

요약

여기서는 이중 모달 간섭 작업을 사용하여 중국어 음성 상대 절 문장의 온라인 처리를 검사하는 프로토콜을 제시합니다. 경내 및 외부 간섭을 가진 청각 처리를 포함하는 2개의 예시적인 실험이 기술됩니다. 패러다임은 작업 메모리의 특성과 문장 처리에 미치는 영향을 해결하는 방법론을 제공합니다.

초록

작업 메모리 (WM)는 복잡한 문장의 이해에 중심 역할을한다. 음성 복잡한 문장 처리의 기능은 말의 복잡한 문장 처리가 메모리 집약적이기 때문에 특히 분명하다. 이중 모달 간섭 패러다임은 WM 시스템이 복잡한 구문 처리에 어떻게 관여하는지 검토하는 데 사용되었습니다. 이 문서에서는 청각 처리와 관련된 두 가지 예시적인 실험을 소개합니다. 첫 번째 실험에서, 청각 자극 [음성 - 중국어 상대 절 (RC) 두 구문 유형문장: 주제 -gapped (SRC) 대 객체 gapped (ORC)] 문장 내에서 시각적으로 제시 된 어휘 결정 작업을 통해 방해하고 세 가지 간섭 타임포인트를 사용하여 조작할 수 있습니다. 두 번째 실험에서는 청각 창 이동 기술을 통해 제시된 동일한 청각 자극이 문장 을 넘어 시각적으로 제시된 디지털 리콜 작업을 통해 방해되고 세 개의 디지털 메모리 부하를 사용하여 조작됩니다. RC 문장을 이해의 주요 작업이 보조 작업에 의해 영향을받는 방법을 평가함으로써, 우리는 중국 RC 처리 비대칭에 관한 논란이 문제를 해결할 수 있습니다. 우리의 결과는 이전 연구에서 보고된 것과 비교하여 RC 처리의 다른 패턴을 드러냅니다. 실험 1은 SRC 또는 ORC에서 명확한 RC 처리 이점을 나타내지 않습니다. 그러나 ORC에 대한 기본 설정은 문장의 끝에서 관찰되며 SRC에 대한 기본 설정은 기본 동사 사이트에서 찾을 수 있습니다. 마찬가지로 실험 2는 동적 패턴을 제공합니다. 자릿수 가중에서 SRC는 RC 마커 영역에서 처리 이점을 보여줍니다. 그러나 높은 자릿수 부하 간섭 하에서 ORC는 동일한 영역에서 처리 이점을 보여줍니다. 이러한 결과는 중국 RC의 처리에 명백하거나 본질적인 처리 비대칭이 존재하지 않는다는 추측으로 이어진다. 작업 메모리와 관련된 음성 문장의 처리 메트릭을 탐색하는 응용 프로그램입니다.

서론

음성 문장 처리 중 작업 메모리(WM)의 역할은 자명합니다: 음성의 일시적인 특성으로 인해 청취자는 처리될 때까지 구성 요소 음향 형태를 메모리에 유지해야 합니다. 이러한 측면은 구문적으로 복잡한 문장을 처리하는 동안 더욱 중요해집니다. 복잡한 문장의 단어에 구문 관계를 할당하려면 짧은 시간 동안 메모리에 보존된 항목에 대한 계산 작업을 수행하여 메모리 수요가 증가합니다. 그러나 WM 시스템이 말하는 문장 처리에 어떻게 관여하는지는 논란의 여지가 있다.

이 논쟁은 두 가지 주요 불일치를 포함: 일부 연구자들은 모든 구두 작업에 사용되는 단일 WM 시스템이 존재한다고 주장^1,²—즉, 구문 처리는 더 많은 사람들이 사용하는 동일한 메모리 리소스에 의존 일반적인 인지 과정. 단일 리소스 모델입니다. 다른 사람들은 구문 구조에 따라 문장의 의미를 결정하는 것은 다른 구두 작업에 사용되는 것과는 별개로 특수 WM 시스템을^{포함한다고}주장했다^3,⁴. 이 맥락에서, 구문 처리는 모듈식이다. 이것은 별도의 문장 해석 리소스 모델입니다.