アイトラッキングを採用して、視覚イベントに基づく間隔比較(持続時間知覚)タスク中の眼球運動を監視するプロトコルを紹介します。目的は、持続時間知覚タスク(時間間隔の比較または識別)に対する眼球運動反応を刺激自体への反応から分離するための予備的なガイドを提供することです。
方法論記事
アイトラッキングを採用して、視覚イベントに基づく間隔比較(持続時間知覚)タスク中の眼球運動を監視するプロトコルを紹介します。目的は、持続時間知覚タスク(時間間隔の比較または識別)に対する眼球運動反応を刺激自体への反応から分離するための予備的なガイドを提供することです。
視線追跡法は、参加者が点滅する円のような視覚イベントによって定義される時間間隔を推定、識別、または比較するように求められる視覚持続時間知覚タスク中の認知処理のオンラインモニタリングを可能にする可能性があります。しかし、私たちの知る限り、この可能性を検証する試みはこれまでのところ決定的なものではなく、結果は刺激の出現後に行われたオフラインの行動決定に焦点を当てたままです。この論文では、参加者が2つの連続した間隔を見て、それが速くなる(最初の間隔が2番目の間隔より長い)か遅くなる(2番目の間隔が長い)かを決定しなければならない間隔比較タスクで、行動反応に先行する認知プロセスを調査するための視線追跡プロトコルを提示します。
私たちの主な関心事は、視覚刺激自体に対する動眼運動反応を、判断に関連する持続時間の相関から解きほぐすことでした。これを達成するために、重要なイベントに基づいて、ベースラインの開始、最初の間隔の開始、2番目の間隔の開始、および刺激の終了という3つの連続した時間枠を定義しました。次に、それぞれの伝統的な動眼運動指標(注視回数、瞳孔の大きさ)を抽出し、時間枠に関連する変化に焦点を当てて、視覚刺激に対する反応と間隔比較 自体に関連する反応を分離しました。実例の結果が示すように、アイトラッキングデータは行動結果と一致する有意差を示し、関与したメカニズムに関する仮説を提起しました。このプロトコルは初期段階にあり、多くの改善が必要ですが、現在の技術水準における重要な一歩です。
時間知覚能力は、読解力や病理学的状態に関連している可能性があるという証拠が蓄積されているため、ここ数年で研究の注目を集めています1,2,3,4,5。視覚持続時間知覚(視覚イベントによって定義される時間間隔を推定、識別、または比較する能力)は、視線追跡法が貢献できる関心のあるサブフィールドの1つです6,7。しかし、結果は、ボタンを押して経過時間を示す(推定)、時間間隔が同じか異なるか(識別)、一連の時間間隔のどれが最も長いか最も短いかを示すなど、刺激後の行動決定に焦点を当てたままです。いくつかの研究は、行動の結果をアイトラッキングデータと相関させようと試みたが8,9、両者の間に相関関係を見出すことができず、直接的な関係がないことを示唆している。
本論文では、視覚持続時間知覚課題における刺激呈示中の動眼反応を登録・解析するためのプロトコルを提示する。具体的には、参加者が 2 つの時間間隔を定義する 3 つのイベントのシーケンスを見て、スピードアップ (最初のインターバルが 2 秒より長い) か減速 (最初のインターバルが 2 秒より短い) かを判断するように求められる間隔比較タスクに言及しています。この研究で使用された時間間隔は133〜733ミリ秒で、テンポラルサンプリングフレームワーク(TSF)10の原則に準拠していました。TSFは、脳の振動活動、特にデルタ振動(1-4Hz)などの周波数帯域において、ストレスアクセントのシーケンスなどの入ってくる音声単位と同期していることを示唆しています。この同期は、音声の符号化を強化し、音声単位への注意を改善し、非定型の低周波振動を示す失読症などの状態の理解に関連する可能性のある連続的な規則性を抽出するのに役立ちます。本研究の目的とは、失読症の視覚持続時間知覚の難しさ(間隔比較課題に対する群効果)が、視覚対象そのものの処理における問題、すなわち動きと輝度のコントラストを反映しているかどうかを明らかにすることであった11。もしそうだとすれば、ディスレクシアのコントロールに対する不利は、動きのある刺激や輝度のコントラストが低い刺激(グループと刺激の種類の相互作用)で大きくなると予想されます。
最初の研究の主な結果は、刺激後の行動判断によってもたらされました。刺激呈示中に記録された瞳孔の大きさと注視回数のアイトラッキングデータを使用して、行動決定に先立つプロセスを調査しました。ただし、現在のプロトコルは、目標がそれに応じて設定されている場合、行動データ収集とは独立して使用できると考えています。また、間隔識別タスク用に調整することも可能です。時間見積もりタスクで使用するのはそれほど即時ではありませんが、その可能性を排除するものではありません。瞳孔の大きさは、他の状態の中でも特に認知的負荷12、13、14を反映しており、したがって参加者のスキルに関する情報を提供する可能性があるためです(負荷が高いほどスキルが少ない)。固視の回数に関しては、固執が多いほど、参加者の課題への関与が強いことを反映している可能性がある15,16。最初の研究では、5種類の刺激が用いられた。簡単にするために、現在のプロトコルでは 2 つだけを使用しました (ボールとフラッシュ、動きに関連するコントラストを表します)。
私たちが取り組もうとした主な課題は、動眼運動反応が動きや輝度のコントラストなどの特性に応じて変化することが知られているため、視覚刺激自体に対する反応を間隔比較に関連する反応から解きほぐすことでした17。視覚刺激は画面に現れた瞬間に処理され(第1インターバル)、第2の時間間隔が始まって初めてインターバル比較が可能になることを前提に、プレスティミュラスウィンドウ、第1インターバル、セカンドインターバル(行動反応は含まない)の3つの時間枠を定義した。最初のインターバルにおける刺激前ウィンドウからの変化を分析することにより、刺激自体に対する参加者の反応の指標が得られます。最初の間隔と2番目の間隔を比較すると、間隔比較の眼球運動の兆候が利用されます-参加者に実行を求められたタスク。
52人の参加者(25人が失読症と診断されたか、潜在的な症例としてシグナルが発せられ、27人が対照群)をコミュニティ(ソーシャルメディアや便利な電子メールの連絡先を通じて)と大学のコースから募集した。確認的な神経心理学的評価とその後のデータ分析(詳細については、ゴスワミ10を参照してください)に続いて、7人の参加者が研究から除外されました。この除外は、基準を満たさなかった失読症の4人の個人、主要な実験課題で外れ値を持つ2人の失読症の参加者、および視線追跡データがノイズの影響を受けた1人の対照参加者で構成されていました。最終サンプルは、45人の参加者、19人の失読症の成人(男性1人)、および26人の対照(5人の男性)で構成されました。参加者全員がポルトガル語を母国語とし、視力が正常または正常に矯正されており、聴覚、神経、言語障害と診断された人はいなかった。ここで説明するプロトコルは、ポルト大学の心理学教育科学部の地元の倫理委員会によって承認され(参照番号2021/06-07b)、すべての参加者はヘルシンキ宣言に従ってインフォームドコンセントに署名しました。
1. 刺激の創出
2. 実験準備
3. 装置のセットアップ

図1:視線追跡のセットアップ。 記録システムの空間配置は、刺激コンピュータ、記録コンピュータ、アイトラッカー、応答装置(ボタンボックス)、及びキーボードから構成される。参加者は刺激スクリーンから55cm離れた場所に座りました。 この図の拡大版をご覧になるには、ここをクリックしてください。
4. データ収集の準備
5. 実験の実行
6. 分析用の時間枠の作成

図2:刺激の種類 実験で使用した跳ね返るボール(左)と閃光(右)のシーケンス。破線は解析に用いた時間枠を示し、TW0は刺激期間である。TW1は、刺激が画面上に最初に現れる時間であり、参加者が刺激特性と第1の間隔の長さに関する情報を持っている最初の間隔をマークし、TW2は、参加者が第1の間隔と第2の間隔を比較して決定(減速または高速化)を詳述できる第2の間隔をマークします。 この図の拡大版をご覧になるには、ここをクリックしてください。
7. メジャーの抽出
8. アーティファクトのあるトライアルを削除する
9. 統計解析
TW関連の変化をよりよく理解するために、時間枠の相互作用(TW0とTW1、TW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1とTW1TW2)を刺激タイプとグループで表現します。 図3に示されているように、両方のTW関連比較(TW01およびTW12)は、刺激に応じて異なるレベルの変化を示し(TW x 刺激の相互作用)、Ballsは両群の閃光よりも眼球運動反応においてTW関連の変化をより多く誘発しました(TW x 刺激 x グループの相互作用なし)。これは、瞳孔の大きさと固視数の両方で発生しました。群の影響については、TW0からTW1への固視回数の変化(刺激開始に対する反応)にTW x群交互作用が見られ、失読症者は主に刺激値の低下により変化が減少した。TW、刺激、およびグループ間の相互作用は存在しなかった。これは、グループの影響がボールとフラッシュの両方で類似していることを示しています。

図3:結果 グループ(コントロール対失読症、TW x グループ)および刺激タイプ(ボール、B、vs. フラッシュ、F、TW x 刺激)の関数としての瞳孔サイズと注視回数の時間ウィンドウ関連の変化。TW 0-1は、刺激なしと刺激の可視性の対比を扱います。TW1−2は、第1および第2の間隔をアドレス間隔比較と比較する。95%信頼区間は縦棒で表されます。ボールは、TW1よりもTW0(より減少)から、TW2よりもTW1(より増加)から、両方のアイトラッキング測定と両方のグループ(TW x刺激、TW x刺激なしxグループ)で、閃光よりも多くの変化を誘発しました。TW 0-1における固視数の変化は、刺激の種類(TW x群、TW x刺激なしx群)にかかわらず、失読症患者の方が対照群よりも小さかった。 この図の拡大版をご覧になるには、ここをクリックしてください。

図4:行動の結果。 (A)グループと刺激の種類ごとのスピードアップシーケンスとスローダウンシーケンス(d-prime)の識別。(B)行動パフォーマンス(d-prime)と時間ウィンドウ関連の眼球運動の変化との間に有意な相関関係があり、どちらも刺激平均化されています。 この図の拡大版をご覧になるには、ここをクリックしてください。
重要なことに、これらの値は行動所見(図4A)と類似しており、主要な研究と一致しています:行動所見は、刺激効果(FlashesよりもBallsの方が精度が低い)とグループ効果(失読症者のパフォーマンスが悪い)を示しており、グループxの刺激の相互作用はありませんでした。さらに、5つの異なる刺激を用いた最初の研究では、すべての刺激タイプについて平均したアイトラッキングデータ(注視回数)と行動を相関させ、失読症のグループで相関関係があることを発見しました:TW1よりもTW0からの小さな変化はパフォーマンスの向上と共存していました。全体として、この結果は、これらの(成人の)失読症患者が、刺激前の期間に刺激自体への注意を意図的に制御するための代償戦略に頼っている可能性があるという仮説と一致しているように思われました(空の画面への固執が少ないほど、刺激が現れるまでに刺激に集中することを好むでしょう)。対照群ではそのような相関関係は見られず、集中力を維持するための戦略に頼る必要はない可能性が示唆された。ここで説明に用いた制限されたデータセット(BallsとFlashesの2つの刺激のみ)は、同じパターンを示しました(図4B):失読症は、対照ではなく、d-prime(行動識別指数)とTW01関連の変化との間に有意な相関を示しました。
要するに、刺激開始(TW 0-1)と間隔比較(TW 1-2)の両方に対する参加者の反応に対処したアイトラッキングの結果は、失読症の人とそうでない人でボールとフラッシュが異なる反応を引き出すという行動的証拠を再現しました(アイトラッキング測定のTW x 刺激、d-primeの刺激効果)。アイトラッキングの結果の一部は、刺激開始時(TW 0-1)の注視数の変化が失読症者の方が小さかったという点で、d-primeのグループ効果とも平行していました。さらに、刺激と集団の相互作用(失読症の逸脱度がボールと閃光で異なる)は、行動データと視線追跡データではゼロであった。最後に、行動成績と眼球運動反応との相関関係は、失読症群で有意であった。
| 順序 | 種類 | インターバル 1 | インターバル 2 | 差 |
| 1 | 加速 | 433 | 300 | 133 |
| 2 | 加速 | 300 | 167 | 133 |
| 3 | 加速 | 467 | 433 | 34 |
| 4 | 加速 | 733 | 167 | 566 |
| 5 | 加速 | 467 | 300 | 167 |
| 6 | 加速 | 433 | 134 | 299 |
| 7 | 加速 | 534 | 233 | 301 |
| 8 | 加速 | 500 | 433 | 67 |
| 9 | スピードを 落として | 300 | 433 | -133 |
| 10 | スピードを 落として | 167 | 300 | -133 |
| 11 | スピードを 落として | 433 | 467 | -34 |
| 12 | スピードを 落として | 167 | 733 | -566 |
| 13 | スピードを 落として | 300 | 467 | -167 |
| 14 | スピードを 落として | 133 | 434 | -301 |
| 15 | スピードを 落として | 233 | 534 | -301 |
| 16 | スピードを 落として | 433 | 500 | -67 |
| 平均間隔 | 377.1 | |||
| 平均差 | 212.6 | |||
| 平均差/間隔 | 294.8 | |||
表 1: インターバル期間。 ミリ秒単位のスピードアップおよびスローダウンシーケンスの刺激シーケンス。
現在のプロトコルには、視覚持続時間の知覚タスクにアイトラッキングを組み込む際の現在の障害に取り組むために重要となる可能性のある新しいコンポーネントが含まれています。ここで重要なステップは、これらの各時間枠で発生すると推定される認知プロセスに基づく時間枠の定義です。使用したシステムでは、時間枠は関心領域(これらのシステムで時間と結合される空間関連の概念)としてのみ定義できますが、他のシステムでは、試行のさまざまなセグメントをエクスポートすることでこれを行うことができます。この試行の時間的セグメンテーションに加えて、時間枠ごとのパラメーターではなく、時間枠全体の変化の分析に重点を置くことが重要です。
プロトコルの変更に関しては、主に対象地域の寸法に関連していました。私たちは、動的AOIを使用して、画面全体ではなく、それに続く刺激の周囲に空間選択を定義する最初の試みを行いました。しかし、すぐに、その地域以外の関連イベントを見逃している可能性があることに気付きました。我々の測定は刺激に焦点を合わせることとは無関係であったため(瞳孔の大きさは、閃光やボールへの注意ではなく、認知的負荷に応じて変化すると予想され、注視回数は空間探索を反映すると予想された)、関心領域として全画面を使用することにした。
現在のプロトコルは、まだ多くの改良が加えられている初期段階の提案です。改善の余地ははるかにありますが、これらのうちの2つだけを強調します。1つ目は、3つの時間枠の長さの違いに関するもので、固視数に対する時間枠効果を解釈することができません(例えば、時間枠が長いほど固視が多くなるため、TW0からTW1に減少します、 図3を参照)。この問題に対処する1つの方法は、時間単位あたりの固視数を考慮することです。
2つ目は、時間枠と推定進行中のプロセスとの対応関係に関するもので、さまざまな問題が含まれています。1つは、TW1は単なる刺激の出現ではなく、おそらく間隔比較に補助的な間隔推定(第1間隔)の明示的な形式を表しており、TW0には存在しない可能性が高いということです。同様に、時間枠をまたいだ変化は、これらの変化の一部が間隔比較タスクで予想され得るとしても、持続的な注意および作業記憶18などの一般的なプロセスにおける変化も反映し得る(作業記憶負荷はTW1からTW2よりも増加すると予想される)。これらの潜在的な交絡を減衰させる1つの方法は、純粋な持続時間の推定、持続的な注意力、および作業記憶に関連する制御タスクを導入し、実験(間隔比較)タスクとコントロールタスクの比較に基づいて視線追跡データ分析を行うことです。もう1つの問題は、TW0の持続時間がタスクと無関係であり、タスクに無関係な持続時間がパフォーマンス19に悪影響を及ぼす可能性があることが知られていることである。今後の研究は、これを改善すること、すなわち、TW0(無関係な間隔)とTW1の間に300ミリ秒の差を作り、視覚処理応答をより適切に区切ることによって、短い事象は、単に時間的近接度20,21に別の事象を追加することによって、その提示よりも早くまたは遅く知覚されるように偏る可能性があるため、焦点を当てることができる。
最後に、自発的なまばたきは、時間の知覚を歪めることによって影響を及ぼす可能性があり(まばたきが間隔に先行する場合は時間を延長し、同時に発生する場合は短縮する)、個人内のタイミング性能にばらつきをもたらす可能性がある22。この問題を最小限に抑える1つの方法は、参加者の行動判断にまばたきベースの補正係数を適用することです(たとえば、刺激の前または最中のまばたきの存在に応じて、各判断に信頼度を割り当てます。さらに、試行を確率変数として扱う統計的アプローチを取り入れることも、この問題への対処に役立つ可能性があります。
今後の研究としては、自発的なまばたき回数(EBR)と時間知覚との関連が重要な課題となる。EBRは、中枢ドーパミン機能(DA)23の非侵襲的間接マーカーであることが知られており、最近では、ERBが高いと時間知覚の低下と関連していました。この研究は、インターバルタイミングにおけるドーパミンの含意を示唆し、ドーパミン測定値24の代理としてのERBの使用を指摘している。もう一つの重要なトピックは、私たちが分析した(変化に関連する)指標の機能的意味であり、これは私たちのパラダイムの文脈ではまだ決定されていません。元の研究では、現在の単純化されたデータセットと同様に、TW0からTW1への瞳孔サイズの増加は、認知負荷の増加という考えと一致していましたが、この測定値に対するグループ効果がないため、それ以上の検討はできません。1つのパターンは、時間枠をまたいだ小さな変化が行動パフォーマンスの向上と相関している(ボールよりもフラッシュが良く、失読症のd-primeは小さな変化に関連している)が、さらなる研究が必要である。
その限界にもかかわらず、現在のプロトコルは、私たちの知る限り、アイトラッキングと行動データ(同じ効果プロファイル)で並列の結果を示し、2つの間の相関関係のいくつかの証拠を示した最初のものです。
著者には開示すべき利益相反はありません。
この研究は、助成金UIDB/00050/2020の下でポルトガル科学技術財団の支援を受けました。およびPTDC / PSI-GER / 5845/2020。APCは、PTDC/PSI-GER/5845/2020(http://doi.org/10.54499/PTDC/PSI-GER/5845/2020)の助成金の下、ポルトガル科学技術財団から全額出資されました。
| 名前 | 会社 | カタログ番号 | コメント |
|---|---|---|---|
| Adobe Animate | Adobe | これは、フラッシュアニメーション映画、GIF、および漫画をデザインするためのツールです。 | |
| EyeLinkデータビューア | EyeLinkアイトラッカーで取得した視線データを視覚化・分析するための包括的なソリューションを提供する堅牢なソフトウェアです。Windows、macOS、およびLinuxプラットフォームでアクセスできます。高度な機能を備えたData Viewerは、EyeLinkの視線データの視覚化、グループ化、処理、レポート作成を容易にします。 | ||
| アイトラッキングシステム | SR Research | EyeLink 1000 Portable Duo | ポータブルデュオカメラ、ラップトップPCホスト、レスポンスデバイスを搭載しています。EyeLinkは、SR Research Experiment Builder、Data Viewer、WebLink、および多くのサードパーティー製刺激提示ソフトウェアおよびツールと統合されています。 |
| Samsung | Syncmaster | の監視 957DF | 19インチのフラットモニターです |
| SRリサーチ 実験ビルダー | SRリサーチ | 、心理学や神経科学におけるコンピュータベースの実験を開発するために設計された、高度でユーザーフレンドリーなドラッグ&ドロップ式グラフィカルプログラミングプラットフォームです。Pythonを基盤として、このプラットフォームはWindowsとmacOSの両方と互換性があり、EyeLinkの視線追跡機能と非視線追跡機能の両方を含む実験の作成を容易にします。 |
このJoVE記事のテキストまたは図の再利用許可をリクエスト
許可をリクエスト