デュアルモーダル干渉タスクを使用した中国語での音声複雑な文章のオンライン構文処理の検証
2019年9月5日
ここでは、話し言葉と中国語の相対句文のオンライン処理を調べるために、デュアルモーダル干渉タスクを用いたプロトコルを紹介する。内および非指向性干渉を伴う聴覚処理を伴う2つの例例実験について説明する。パラダイムは、ワーキングメモリの性質と文処理への影響に対処するための方法論を提供します。
DMI実験パラダイムを使用して、作業メモリが複雑な構文処理にどのように関与しているかを調べることができます。そして、さらに中国のライティングコースの処理アサイムトリーを評価します。DMIパラダイムと最後の共同決定タスクとMatco移動ウィンドウの技術を組み合わせることは、リアルタイムで話された文処理のクロスを測定するための新しいアプローチです。
私と一緒に手順を実証することは、NTINの大学生であるペイハン・チェンです。実験を開始する前に、24語と24の非単語を含む合計48の二音節中国語を選択します。すべてのターゲット語が中程度の頻度であることを考慮して、Sinica Corpus技術報告書から単語を選択します。
24の非単語を、それぞれ意味のある2つの単音節文字を使用して作成し、その組み合わせは意味的にアノマルスであり、同一のラジカルを持つバイシルーラブ文字の単語を避けます。24の非単語を入力者文に手動で配置し、対象の相対句文の24語をコロケーションする。聴覚刺激を、24の主題ギャップ相対節文、24のオブジェクトギャップ相対節文、24のフィラー文を含む72の文に構成します。
その後、48の相対句文を2つのグループに均等に分割して、48の試験を形成するために不完全なカウンターバランス設計を作成します。実験用のソフトウェアをセットアップするには、適切な行動研究ソフトウェアプログラムを開き、ソフトウェアを使用してすべての刺激をランダム化します。次に、応答時間、語彙判定テストにおける参加者の応答の正確度、および参加者のキーボード入力に基づく文の理解度を記録するようにソフトウェアシステムを構成します。
参加者の誤った構文の決定や応答の欠如に関するフィードバックを、参加者の誤った応答または欠落した応答の直後にモニター画面に表示する。デュアルモーダルの心間干渉タスク実験を開始する前に、参加者をコンピュータの前に座らせ、ヘッドフォンを装備します。参加者に、コンピュータ画面上の書面による指示と、実験者による口頭での指示を与えます。
同時に語彙決定タスクを実行しながら、自分のヘッドフォンを介して再生された文章を聞くように参加者に指示します。画面上に表示される干渉するビジュアルプローブが単語か非単語かを決定し、単語に対しては「yes」を押し、単語以外の単語では可能な限り迅速かつ正確に「いいえ」を押すように指示します。理解の質問は文の直後に続くことを参加者に伝え、同時にタスクを実行しながら、聴覚文に注意深く耳を傾けるように参加者に思い出させます。
すべての指示を与えた後、参加者にフィードバックを伴う試験を含む練習セクションを完了させます。演習の後、デュアルモーダルインセンシャル字句決定テスト干渉タスクを開始し、参加者が24回の試行の間に休憩を取ることができるようにします。デュアルモーダルの内接的干渉タスク実験では、聴覚刺激を24の主題ギャップ相対節文、24のオブジェクトギャップ相対節文、48のフィラー文を含む96の文に構成します。
48のRC文を2つのグループに均等に分割し、ゼロ、3、5桁の組み合わせで96回の合計試験を行い、すべての文の試行に均等に割り当てられたゼロ、3、または5桁の負荷を持つ不完全なカウンターバランス設計を作成します。実験ソフトウェアプログラムでは、文型とメモリ負荷の被験者因子内の2つの組み合わせを表す2つの刺激セットのうちの1つに参加者を無作為に割り当てる。単語に分割された文章を聞いてヘッドフォンを通して演奏し、キーボードを押して後続のセグメントワードの演奏を開始することで、できるだけ早くペースを上げていく必要があることを参加者に指示します。
前の文で聞いたばかりの情報に関連する「はい」理解の質問が画面に表示され、質問に答える必要があることを参加者に伝えます。参加者が理解の質問に答えるために「はい」または「いいえ」キーを押すと、短いビープ音が鳴ります。次に、ビープ音の後、参加者は画面に表示される指示に従い、文章を聞く前に観察した数字を繰り返すように指示します。
実験を開始するには、参加者に 1500 ミリ秒の数字の視覚的表現を提供します。次に、セルフペースの聴取聴覚移動ウィンドウタスクを開始し、参加者に先行するビジュアルプレゼンテーションをメモリに保持するよう指示します。ステージのリコールはメモリ負荷が大きくなるので、できるだけ早く文章を聞きながら数字を正しく覚えようとする優先順位を参加者に指示します。
参加者がタスクを完了している間に、参加者の数字のリコール応答をスコア シートに記録します。この代表的な内腹腔内実験では、ORC文型は、相対節後および文末部のポストマトリクス対象において処理上の優位性を示した。一方、SRC文は、相対句の後のポストマトリックス動詞で有利でした。
文型の単純な主な効果は、ポスト行列動詞領域とポスト文領域において重要であり、SRC文が行列動詞での語彙決定妨害タスクで処理負荷が低かったことを示す。ORC文は文の終わりに低い処理負荷を持っていましたが。ゼロ桁の負荷の余接的な干渉の下で、参加者は相対節マーカーDEおよび行列動詞領域でSRC処理の利点を示した相対節の初期処理領域でORC文に対して利点を示した。
3桁の負荷の外接的干渉の下では、被写体またはオブジェクトギャップの相対句文の違いは、PRE DE領域の周りに観察されなかった。しかし、参加者は、行列動詞領域でのDEとORC文の優位性でSRC文の優位性を実証しました。5桁の負荷の外接的干渉の下で、参加者はマトリックス対象領域のプレDEおよびポストDE領域の周りに全体的なORC文の利点を示した。
我々の結果は、中国のRC処理が中国のRCの処理に本質的な処理非対称性が存在しないという推測を導く動的パターンを示していることを示している。現在のDMI技術は、自己ペースの読み取りパラダイムに拡張して、操作メモリが干渉を伴う自然な読み取りコンテキストでの読み取りの処理にどのように関与しているかを調査することができます。
完全なトランスクリプトを表示し、数千本の科学動画にアクセス
概要
この研究では、話し言葉の中国語の関係節文のオンライン処理を調査するためのデュアルモーダル干渉タスクプロトコルを提示します。実験は聴覚処理と文の理解における作業記憶の役割に焦点を当てています。
主要な研究構成要素
科学の分野
- 神経科学
- 心理言語学
- 認知心理学
背景
- 作業記憶は複雑な構文処理に不可欠です。
- DMIパラダイムは、文の処理のリアルタイム評価を可能にします。
- 中国語の処理の非対称性を理解することで、言語理論を強化できます。
- 二音節語を用いることで、語彙判定タスクの検討に役立ちます。
研究の目的
- 文の処理における作業記憶の関与を探求すること。
- 文内および文外の干渉の効果を評価すること。
- リアルタイム文の処理分析のための新しい方法論を開発すること。
使用した方法
- デュアルモーダル干渉タスクが用いられました。
- 語彙判定タスクのために48の二音節中国語が選ばれました。
- 単語はSinica Corpus技術報告書から選ばれました。
- リアルタイム処理測定にMatco移動ウィンドウ技術が使用されました。
主要な結果
- DMIパラダイムは文の処理ダイナミクスを効果的に測定します。
- 結果は作業記憶が文の理解に有意な影響を与えることを示しています。
- 結果は中国語の構文処理の理解に貢献します。
- この方法論はさらなる言語学研究に適用できます。
結論
- この研究は、言語処理における作業記憶の役割についての洞察を提供します。
- これは文の理解に関する将来の研究のための枠組みを確立します。
- DMIパラダイムは言語現象を検討するための貴重なツールです。
よくある質問
Executive Industry Relevance
This study introduces a dual-modal interference paradigm to probe working memory involvement in complex syntactic processing, offering a methodological framework for assessing cognitive load during language comprehension. The approach enables real-time measurement of interference effects on sentence processing, which can inform models of cognitive resource allocation in neuropsychological and psycholinguistic research. By characterizing how secondary tasks disrupt primary linguistic processing, the method supports mechanistic de-risking in target validation efforts where cognitive endpoints are relevant.
Strategic Applications in Biopharma R&D
Early Discovery & Target Validation
- Scientific Value: Enables interrogation of therapeutic hypotheses by measuring how cognitive load affects syntactic processing, supporting biological de-risking of CNS targets.
- Operational Value: Provides a standardized paradigm for assessing working memory engagement during complex sentence comprehension, facilitating reproducible cognitive phenotyping.
Screening & Assay Development
- Scientific Value: Prepares validated biological and behavioral systems for downstream workflows by establishing baseline working memory performance under controlled interference.
- Operational Value: Supports assay standardization through quantifiable reaction time and accuracy metrics from lexical decision and digit recall tasks, enabling cross-laboratory reproducibility.
Translational & Preclinical Research
- Scientific Value: Offers disease-relevant system alignment by modeling working memory demands in linguistic processing, relevant to neurodegenerative and neuropsychiatric conditions.
- Operational Value: Ensures translational continuity from discovery through preclinical validation by providing a behavioral readout sensitive to working memory modulation.
Pipeline & Workflow Integration
The dual-modal interference technique fits within the discovery continuum, supporting hypothesis testing in early discovery, assay readiness in screening, and cognitive endpoint validation in translational research, particularly for targets involving working memory pathways.
- Discovery Biology: Supports hypothesis testing and pathway clarification by isolating the contribution of working memory to syntactic processing under controlled interference conditions.
- Screening: Delivers assay readiness through standardized stimulus presentation and response measurement, enabling reliable detection of cognitive load effects.
- Analytics: Generates quantitative dependent variable measurements (response time, accuracy) that allow comparison of processing efficiency across sentence types and interference loads.
- Translational Research: Connects to preclinical continuity by providing a behavioral paradigm sensitive to working memory dysfunction, relevant for modeling cognitive deficits in disease.
- Enterprise Reuse: Functions as a reusable capability across projects investigating cognitive mechanisms, reducing redundant method development.
Operational & Enterprise Impact
- Scientific Value: Enhances predictive confidence in target validation by reducing mechanistic ambiguity around working memory’s role in language processing.
- Operational Value: Promotes standardization and scalability via fixed stimulus sets, interference timing, and response collection protocols.
- Strategic Value: Improves go/no-go decisions by offering quantifiable cognitive endpoints that reflect target engagement in working memory-dependent processes.
- Portfolio Impact: Enables risk-adjusted prioritization of compounds based on their effects on cognitive processing speed and accuracy under load.
Implementation Considerations
- Requires expertise in psycholinguistic experimental design and working memory theory.
- Depends on behavioral research software capable of stimulus randomization, response timing, and accuracy tracking.
- Necessitates cross-team standardization of stimulus lists, interference timing, and task instructions to ensure reproducibility.
- Involves adaptation considerations when applying the paradigm to different linguistic structures or populations beyond Chinese relative clause sentences.
- Practical limitations include dependence on participant literacy, auditory processing capacity, and attentional state, which may affect data validity.
