Name: 结合电玩与高密度的脑电图和红外视线跟踪基于行为的实验 (视频) | JoVE Journal
Uploaded: 2010-12-16T17:00:00.000+00:00
Duration: 13 min 40 s
Description: 学习在电子游戏中同时进行高密度脑电图记录与红外视线跟踪的方法，用于认知神经科学研究。该技术通过游戏化任务降低被试焦虑并提升参与度，适用于儿童与临床人群的长期实验。

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

本项目由自闭症之声（Autism Speaks）试点研究资助项目 #2597 和美国国家科学基金会教师早期职业发展奖 #BCS-0846892 资助。

<ol><li>Bell, A. J., Sejnowski, T. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((An+information+maximisation+approach+to+blind+separation+and+blind+deconvolution%5BTitle%5D)+AND+%22Neural+Computation%22%5BJournal%5D)">An information maximisation approach to blind separation and blind deconvolution.</a> Neural Computation. 7, 1129-1159 (1995).</li>
<li>Belmonte, M. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Shifts+of+visual+spatial+attention+modulate+a+steady-state+visual+evoked+potential%5BTitle%5D)+AND+%22Cognitive+Brain+Research%22%5BJournal%5D)">Shifts of visual spatial attention modulate a steady-state visual evoked potential.</a> Cognitive Brain Research. 6, 295-307 (1998).</li>
<li>Belmonte, M. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Abnormal+attention+in+autism+shown+by+steady-state+visual+evoked+potentials%5BTitle%5D)+AND+%22Autism%22%5BJournal%5D)">Abnormal attention in autism shown by steady-state visual evoked potentials.</a> Autism. 4, 269-285 (2000).</li>
<li>Benton, A. L., Sivan, A. B., Hamsher, K., Varney, N. R., Spreen, O. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aBenton%2C+AL+%22Contributions+to+Neuropsychological+Assessment%22">Contributions to Neuropsychological Assessment</a>. , Oxford University Press. New York. (1994).</li>
<li>Berka, C., Levendowski, D. J., Cvetinovic, M. M., Petrovic, M. M., Davis, G., Lumicao, M. N., Zivkovic, V. T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Real-time+analyses+of+EEG+indexes+of+alertness%2C+cognition+and+memory+acquired+with+a+wireless+EEG+headset%5BTitle%5D)+AND+%22International+Journal+of+Human-Computer+Interaction%22%5BJournal%5D)">Real-time analyses of EEG indexes of alertness, cognition and memory acquired with a wireless EEG headset.</a> International Journal of Human-Computer Interaction. 17, 151-170 (2004).</li>
<li>Bradley, M. M., Miccoli, L., Escrig, M. A., Lang, P. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+pupil+as+a+measure+of+emotional+arousal+and+autonomic+activation%5BTitle%5D)+AND+%22Psychophysiology%22%5BJournal%5D)">The pupil as a measure of emotional arousal and autonomic activation.</a> Psychophysiology. 45, 602-607 (2008).</li>
<li>Brookings, J. B., Wilson, G. F., Swain, C. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Psychophysiological+responses+to+changes+in+work-load+during+simulated+air+traffic+control%5BTitle%5D)+AND+%22Biological+Psychology%22%5BJournal%5D)">Psychophysiological responses to changes in work-load during simulated air traffic control.</a> Biological Psychology. 42, 361-377 (1996).</li>
<li>Castel, A. D., Pratt, J., Drummond, E. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+effects+of+action+video+game+experience+on+the+time+course+of+inhibition+of+return+and+the+efficiency+of+visual+search%5BTitle%5D)+AND+%22Acta+Psychologica%22%5BJournal%5D)">The effects of action video game experience on the time course of inhibition of return and the efficiency of visual search.</a> Acta Psychologica. 119, 217-230 (2005).</li>
<li>Chaytor, N., Schmitter-Edgecombe, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+ecological+validity+of+neuropsychological+tests%3A+a+review+of+the+literature+on+everyday+cognitive+skills%5BTitle%5D)+AND+%22Neuropsychology+Review%22%5BJournal%5D)">The ecological validity of neuropsychological tests: a review of the literature on everyday cognitive skills.</a> Neuropsychology Review. 13, 181-197 (2003).</li>
<li>Dalton, K. M., Nacewicz, B. M., Johnstone, T., Schaefer, H. S., Gernsbacher, M. A., Goldsmith, H. H., Alexander, A. L., Davidson, R. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Gaze+fixation+and+the+neural+circuitry+of+face+processing+in+autism%5BTitle%5D)+AND+%22Nature+Neuroscience%22%5BJournal%5D)">Gaze fixation and the neural circuitry of face processing in autism.</a> Nature Neuroscience. 8, 519-526 (2005).</li>
<li>Delorme, A., Makeig, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((EEGLAB%3A+an+open+source+toolbox+for+analysis+of+single-trial+EEG+dynamics%5BTitle%5D)+AND+%22Journal+of+Neuroscience+Methods%22%5BJournal%5D)">EEGLAB: an open source toolbox for analysis of single-trial EEG dynamics.</a> Journal of Neuroscience Methods. 134, 9-21 (2004).</li>
<li>Ebisawa, Y. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Improved+video-based+eye-gaze+detection+method%5BTitle%5D)+AND+%22IEEE+Transactions+on+Instrumentation+and+Measurement%22%5BJournal%5D)">Improved video-based eye-gaze detection method.</a> IEEE Transactions on Instrumentation and Measurement. 47, 948-955 (1998).</li>
<li>Feng, J., Spence, I., Pratt, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Playing+an+action+video+game+reduces+gender+differences+in+spatial+cognition%5BTitle%5D)+AND+%22Psychological+Science%22%5BJournal%5D)">Playing an action video game reduces gender differences in spatial cognition.</a> Psychological Science. 18, 850-855 (2007).</li>
<li>Ferree, T. C., Luu, P., Russell, G. S., Tucker, D. M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Scalp+electrode+impedance%2C+infection+risk%2C+and+EEG+data+quality%5BTitle%5D)+AND+%22Clinical+Neurophysiology%22%5BJournal%5D)">Scalp electrode impedance, infection risk, and EEG data quality.</a> Clinical Neurophysiology. 112, 536-544 (2001).</li>
<li>Golan, O., Baron-Cohen, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Systemizing+empathy%3A+teaching+adults+with+Asperger+syndrome+or+high-functioning+autism+to+recognize+complex+emotions+using+interactive+media%5BTitle%5D)+AND+%22Development+and+Psychopathology%22%5BJournal%5D)">Systemizing empathy: teaching adults with Asperger syndrome or high-functioning autism to recognize complex emotions using interactive media.</a> Development and Psychopathology. 18, 591-617 (2006).</li>
<li>Graner Ray, S., S, <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Gender+inclusive+game+design%3A+Expanding+the+market%5BTitle%5D)+AND+%22%22%5BJournal%5D)">Gender inclusive game design: Expanding the market.</a> , Charles River Media. Hingham, Massachusetts. (2004).</li>
<li>Green, C. S., Bavelier, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Action+video+game+modifies+visual+selective+attention%5BTitle%5D)+AND+%22Nature%22%5BJournal%5D)">Action video game modifies visual selective attention.</a> Nature. 423, 534-537 (2003).</li>
<li>Green, C. S., Bavelier, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Enumeration+versus+multiple+object+tracking%3A+the+case+of+action+video+game+players%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Enumeration versus multiple object tracking: the case of action video game players.</a> Cognition. 101, 217-245 Forthcoming.</li>
<li>Green, C. S., Bavelier, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Effect+of+action+video+games+on+the+spatial+distribution+of+visuospatial+attention%5BTitle%5D)+AND+%22Journal+of+Experimental+Psychology+Human+Perception+and+Performance%22%5BJournal%5D)">Effect of action video games on the spatial distribution of visuospatial attention.</a> Journal of Experimental Psychology Human Perception and Performance. 32, 1465-1478 (2006).</li>
<li>Green, C. S., Bavelier, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Action-video-game+experience+alters+the+spatial+resolution+of+vision%5BTitle%5D)+AND+%22Psychological+Science%22%5BJournal%5D)">Action-video-game experience alters the spatial resolution of vision.</a> Psychological Science. 18, 88-94 (2007).</li>
<li>Hafed, Z. M., Clark, J. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Microsaccades+as+an+overt+measure+of+covert+attention+shifts%5BTitle%5D)+AND+%22Vision+Research%22%5BJournal%5D)">Microsaccades as an overt measure of covert attention shifts.</a> Vision Research. 42, 2533-2545 (2002).</li>
<li>Lieberman, H. R., Pentland, A. P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Microcomputer-based+estimation+of+psychophysical+thresholds%3A+the+best+PEST%5BTitle%5D)+AND+%22Behavior+Research+Methods+and+Instrumentation%22%5BJournal%5D)">Microcomputer-based estimation of psychophysical thresholds: the best PEST.</a> Behavior Research Methods and Instrumentation. 14, 21-25 (1982).</li>
<li>Luck, S. J. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aLuck%2C+SJ+%22An+Introduction+to+the+Event-Related+Potential+Technique%22">An Introduction to the Event-Related Potential Technique</a>. , MIT Press. Cambridge, Massachusetts. (2005).</li>
<li>Lykken, D. T., Venables, P. H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Direct+measurement+of+skin+conductance%3A+a+proposal+for+standardization%5BTitle%5D)+AND+%22Psychophysiology%22%5BJournal%5D)">Direct measurement of skin conductance: a proposal for standardization.</a> Psychophysiology. 8, 656-672 (1971).</li>
<li>Makeig, S., Delorme, A., Westerfield, M., Jung, T., Townsend, J., Courchesne, E., Sejnowski, T. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Electroencephalographic+brain+dynamics+following+manually+responded+visual+targets%5BTitle%5D)+AND+%22PLoS+Biology%22%5BJournal%5D)">Electroencephalographic brain dynamics following manually responded visual targets.</a> PLoS Biology. 2, e176-e176 (2004).</li>
<li>Makeig, S., Jung, T., Bell, A. J., Ghahremani, D., Sejnowski, T. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Blind+separation+of+auditory+event-related+brain+responses+into+independent+components%5BTitle%5D)+AND+%22Proceedings+of+the+National+Academy+of+Sciences+of+the+United+States+of+America%22%5BJournal%5D)">Blind separation of auditory event-related brain responses into independent components.</a> Proceedings of the National Academy of Sciences of the United States of America. 94, 10979-10984 (1997).</li>
<li>Makeig, S., Westerfield, M., Jung, T. P., Enghoff, S., Townsend, J., Courchesne, E., Sejnowski, T. J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Dynamic+brain+sources+of+visual+evoked+responses%5BTitle%5D)+AND+%22Science%22%5BJournal%5D)">Dynamic brain sources of visual evoked responses.</a> Science. 295, 690-694 (2002).</li>
<li>Morgan, S. T., Hansen, J. C., Hillyard, S. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Selective+attention+to+stimulus+location+modulates+the+steady-state+visual+evoked+potential%5BTitle%5D)+AND+%22Proceedings+of+the+National+Academy+of+Sciences+of+the+United+States+of+America%22%5BJournal%5D)">Selective attention to stimulus location modulates the steady-state visual evoked potential.</a> Proceedings of the National Academy of Sciences of the United States of America. 93, 4770-4774 (1996).</li>
<li>Pentland, A. P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Maximum+likelihood+estimation%3A+the+best+PEST%5BTitle%5D)+AND+%22Perception+and+Psychophysics%22%5BJournal%5D)">Maximum likelihood estimation: the best PEST.</a> Perception and Psychophysics. 28, 377-379 (1980).</li>
<li>Plaisted, K., Swettenham, J., Rees, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Children+with+autism+show+local+precedence+in+a+divided+attention+task+and+global+precedence+in+a+selective+attention+task%5BTitle%5D)+AND+%22Journal+of+Child+Psychology+and+Psychiatry%22%5BJournal%5D)">Children with autism show local precedence in a divided attention task and global precedence in a selective attention task.</a> Journal of Child Psychology and Psychiatry. 40, 733-742 (1999).</li>
<li>Posner, M. I. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Orienting+of+attention%5BTitle%5D)+AND+%22Quarterly+Journal+of+Experimental+Psychology%22%5BJournal%5D)">Orienting of attention.</a> Quarterly Journal of Experimental Psychology. 32, 3-25 (1980).</li>
<li>Smith, M. E., McEvoy, L. K., Gevins, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Neurophysiological+indices+of+strategy+development+and+skill+acquisition%5BTitle%5D)+AND+%22Cognitive+Brain+Research%22%5BJournal%5D)">Neurophysiological indices of strategy development and skill acquisition.</a> Cognitive Brain Research. 7, 389-404 (1999).</li>
<li>St John, M., Kobus, D. A., Morrison, J. G. A multi-tasking environment for manipulating and measuring neural correlates of cognitive workload. Proceedings of the 2002 IEEE 7th Confer-ence on Human Factors and Power Plants, 15-19 Sept. 2002, Scottsdale, Arizona, , IEEE. New York. (2002).</li>
<li>St John, M., Kobus, D. A., Morrison, J. G., Schmorrow, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Overview+of+the+DARPA+augmented+cognition+technical+integration+experiment%5BTitle%5D)+AND+%22International+Journal+of+Human-Computer+Interac-tion%22%5BJournal%5D)">Overview of the DARPA augmented cognition technical integration experiment.</a> International Journal of Human-Computer Interac-tion. 17, 131-149 (2004).</li>
<li>Thorell, L. B., Lindqvist, S., Nutley, S. B., Bohlin, G., Klingberg, T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Training+and+transfer+effects+of+executive+functions+in+preschool+children%5BTitle%5D)+AND+%22Developmental+Science%22%5BJournal%5D)">Training and transfer effects of executive functions in preschool children.</a> Developmental Science. 12, 106-113 (2009).</li>
<li>Valla, J. M., Ganzel, B. L., Yoder, K. J., Chen, G. M., Lyman, L. T., Sidari, A. P., Keller, A. E., Maendel, J. W., Perlman, J. E., Wong, S. K. L., Belmonte, M. K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((More+than+maths+and+mindread-ing%3A+sex+differences+in+empathising%2Fsystemising+covariance%5BTitle%5D)+AND+%22Autism+Research%22%5BJournal%5D)">More than maths and mindread-ing: sex differences in empathising/systemising covariance.</a> Autism Research. , Forthcoming (2010).</li>
<li>Witkin, H. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Individual+differences+in+ease+of+perception+of+embedded+figures%5BTitle%5D)+AND+%22Journal+of+Personality%22%5BJournal%5D)">Individual differences in ease of perception of embedded figures.</a> Journal of Personality. 19, 1-15 (1950).</li>
<li>Witkin, H. A., Lewis, H. B., Hertzman, M. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aWitkin%2C+HA+%22Personality+through+Perception%22">Personality through Perception</a>. Machover, K., Meissner, P. B., Wapner, S. , Greenwood Press. Westport, Connecticut. (1954).</li>
<li>Wimmer, H., Perner, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Beliefs+about+beliefs%3A+Representation+and+constraining+function+of+wrong+beliefs+in+young+children%27s+understanding+of+deception%5BTitle%5D)+AND+%22Cognition%22%5BJournal%5D)">Beliefs about beliefs: Representation and constraining function of wrong beliefs in young children's understanding of deception.</a> Cognition. 13, 103-128 (1983).</li>
<li>von Ahn, L. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Games+with+a+purpose%5BTitle%5D)+AND+%22Computer%22%5BJournal%5D)">Games with a purpose.</a> Computer. 39, 92-94 (2006).</li>
</ol>

未声明任何利益冲突。

或许，整合性研究面临的最重要障碍，是单个实验受试者（尤其是来自临床人群的受试者）在合理预期下能够持续参与实验而不至于疲劳的时间有限。遗憾的是，从研究者的角度来看，刺激材料控制得越严格，从受试者的角度来看，实验往往就越显得重复且乏味。近年来，关于神经精神障碍的行为学研究突显了动机、行为定势以及任务指导在建立认知策略和决定行为表现方面的重要性（例如 Plaisted et al. 1999；Dalton et al. 2005）。鉴于这些考虑，我们将实验刺激嵌入到一个视频游戏的情境中，以吸引并维持受试者的兴趣，同时在受试者玩游戏的过程中透明地收集行为数据，并与生理记录同步。这种具有吸引力且生态效度高的实验形式，相较于传统重复性的试验区块，具有诸多实际优势。事实上，注意力转换的不同水平与需求，以及多模态整合，在视频游戏情境中自然呈现；诸如点运动相干性与嵌入图形等心理物理学测量指标，可轻松实现为例如视窗中星场的移动，或在杂乱环境中检测特定物体。此外，视频游戏所具有的策略性和对抗性特征，为探索更高层次的认知指标（如对游戏相关叙事的理解，以及对计算机生成对手的社会归因）提供了天然的机会。视频游戏可引发注意力与感知...

<table><tbody><tr><td>128通道BioSemi ActiveTwo测量系统</td><td>BioSemi</td><td></td><td>&lt;a href=&quot;http://www.biosemi.com">http://www.biosemi.com&lt;/a&gt;</td></tr><tr><td>32通道A组 + CMS/DRL</td><td>BioSemi</td><td>P32-ABC-ACMS</td><td></td></tr><tr><td>32通道B组</td><td>BioSemi</td><td>P32-ABC-B</td><td></td></tr><tr><td>32通道C组</td><td>BioSemi</td><td>P32-ABC-C</td><td></td></tr><tr><td>32通道D组</td><td>BioSemi</td><td>P32-ABC-D</td><td></td></tr><tr><td>EX1-EX8电极</td><td>BioSemi</td><td>8 x TP PIN</td><td></td></tr><tr><td>128通道帽</td><td>BioSemi</td><td>CAP M 128</td><td></td></tr><tr><td>EyeLink 1000红外眼动仪</td><td>SR Research Ltd.</td><td></td><td></td></tr><tr><td>EyeLink 1000远程摄像头升级组件</td><td>SR Research Ltd.</td><td>n/a</td><td>支持目标贴纸追踪</td></tr><tr><td>SignaGel电极凝胶</td><td>Parker Laboratories Inc.</td><td>n/a</td><td></td></tr><tr><td>0.05% KCl电解质（NaCl）凝胶</td><td>N/A</td><td>n/a</td><td>购自复合药房</td></tr><tr><td>Intensity Pro</td><td>Blackmagic Design</td><td></td><td></td></tr></tbody></table>

结合计算机游戏型行为实验与高密度脑电图及红外眼动追踪

Combining Computer Game-Based Behavioural Experiments With High-Density EEG and Infrared Gaze Tracking

实验范式的有效性取决于其刺激的时间安排及其他参数是否得到明确设定和控制，同时也取决于其能否在生态效度较高的条件下产生与认知加工相关的数据。这两个目标常常相互冲突，因为控制严密的刺激往往过于重复，难以维持被试的动机。采用脑电图（EEG）的研究尤其容易受到生态效度与实验控制之间这一两难困境的影响：为了在生理信号的平均值中获得足够的信噪比，需要在长时间的记录过程中进行大量重复试验，这限制了被试群体的范围，仅能纳入那些具备完成重复性任务所需能力和耐心的个体。这一限制严重阻碍了研究者对年幼儿童群体以及与焦虑增强或注意力异常相关的临床群体的探究。即使是成年非临床被试，也可能无法达到其典型的任务表现水平或认知参与程度：一个缺乏动机、仅将实验任务视为苦差事的被试，在行为、认知乃至神经层面，都与一个内在动机强烈且积极参与任务的被试截然不同。越来越多的文献表明，将实验嵌入视频游戏中，可能为解决实验控制与生态效度之间的矛盾提供一条可行路径。游戏的叙事背景为任务的发生提供了更为真实的情境，从而增强了任务的生态效度（Chaytor &amp; Schmitter-Edgecombe, 2003）。此外，这种情境本身也能激发被试完成任务的动机。在我们的游戏中，被试需执行各种任务，例如收集资源、抵御海盗、截获通信或促进外交关系。在此过程中，他们同时完成一系列认知任务，包括Posner注意力转移范式（Posner, 1980）、运动抑制的“执行/不执行”测试、心理物理学中的运动相干性阈值任务、嵌入图形测验（Witkin, 1950, 1954）以及心理理论任务（Wimmer &amp; Perner, 1983）。游戏软件会自动将游戏中的刺激以及被试的动作和反应记录在日志文件中，并发送事件编码以与生理数据记录设备同步。因此，该游戏可与EEG或fMRI等生理测量手段结合使用，也可与逐时刻的眼动追踪技术联合应用。眼动追踪可用于验证被试对行为任务（如注视点固定）的依从性及其对实验刺激的外显注意力，同时也能通过瞳孔扩张反映其生理唤醒水平（Bradley et al., 2008）。当采样频率足够高时，眼动追踪还有助于通过微扫视评估隐性注意力——微扫视是幅度极小、不足以将新物体投射至中央凹的眼动，但其起始速度迅速，且角距离与峰值速度之间的关系与跨越更大距离的扫视相同。微扫视的方向分布与（其他方式难以察觉的）隐性注意方向相关（Hafed &amp; Clark, 2002）。

本文描述了在基于计算机游戏的认知任务期间记录高密度脑电图（EEG）和眼动数据的操作步骤。使用电子游戏来呈现认知任务可在不牺牲实验控制的前提下提高生态效度。

实验范式的价值在于其刺激的时间及其他参数能够被明确设定和控制，并且在于它们……

本视频演示了一种在受试者执行嵌入于电脑游戏中的引人入胜且生态效度高的认知任务时，同步获取眼动追踪和高密度脑电图（EEG）记录的操作流程。首先，将电极固定在受试者头部。随后，对眼动追踪摄像头进行校准。受试者在进行游戏的同时记录脑电图（EEG）和注视数据。通过游戏事件诱发出事件相关电位和事件相关谱扰动。该技术相较于现有方法（例如ePrime或Presentation等刺激呈现软件）的主要优势在于，将实验嵌入计算机游戏中，能够通过脱离明确的测试情境来缓解受试者的操作焦虑，并有助于受试者在整个较长的实验过程中保持积极性和任务参与度。涵盖多种认知任务。这些特性对于儿童和临床人群尤为重要，因为在这些人群中，注意力和动机可能成为复杂或长时间实验过程中的障碍。我叫Keith Yoder，是博蒙特实验室的研究助理。今天协助我的是大卫·波斯特（David Post），他是人类发展系的一名实验室技术员，同时也是UAUA的研究生。我们将使用一个128通道的Bios系统，一种半主动双测量系统，以及SR Research公司生产的iLink 1000型红外眼动追踪仪。在开始结合电脑游戏与脑电图（EEG）的实验之前，应在被试到达前约一小时对电极进行平衡，以确保各电极的偏移量处于±20微伏（µV）的范围内。对于脑电图实验，可通过将电极浸入盐水中5到10分钟来实现电极平衡，盐水的配制比例为每升蒸馏水中加入一茶匙食盐。切勿将电极在任何液体中浸泡超过10分钟。从盐浴中取出电极后，在受试者到达前，使用装有蒸馏水的喷雾瓶冲洗电极。打开眼动追踪相机的转换盒及计算机，以实现眼动追踪与脑电图（EEG）的同步记录；务必在眼动追踪相机上使用16毫米长的镜头。该系统使用四台计算机，分别为一台专用的眼动追踪计算机、一台专用的脑电（EEG）采集计算机、一台专用的刺激呈现计算机，以及一台用于视频采集和数据分析的计算机。另配备两个转换器盒，用于处理眼动追踪计算机和刺激呈现计算机的VGA输出信号，并将拼接后的视频信号发送至视频采集计算机。通过这种方式，视频采集计算机可以记录受试者所看到的游戏画面，画面上叠加有代表当前注视点的光标以及时间戳。该叠加视频将被保存至视频采集计算机的磁盘文件中。接下来，让我们查看脑电图（EEG）的设置。通过测量受试者眉毛至枕外隆突处的头围，开始准备脑电图（EEG）实验，并选择合适尺寸的电极帽。将电极帽戴在受试者头部，确保标签位于帽外，并贴于受试者颈部。调整帽的位置，直到A1电极相对于鼻根、枕外隆突和左右耳廓处于中心位置，且帽的中线与受试者头部的中线对齐。鼻根是指鼻梁与眉间之间的凹陷处。枕外隆突是头后部中线上可触及的骨性突起，耳廓是指耳道开口前方延伸的软骨部分。当帽盖就位后，将粘合环贴到电极的塑料外壳上，即 ex five 和 ex six。将环的开口与电极 pellet 对齐。取下粘附环的纸制背衬，并在电极接触处涂抹导电凝胶。将EX六电极置于受试者右侧乳突，EX五电极置于受试者左侧乳突。使用钝头注射器将导电凝胶注入帽内每个电极 holder 中。轻轻晃动注射器尖端以分开受试者的头发。然后像装饰蛋糕一样，同时下压活塞并将其从头部拉开。填充至凝胶与塑料外壳顶部齐平为止。务必注意不要过度填充。凝胶量宁可不足，也不要过多，因为过量的凝胶可能在电极位点之间渗出，导致电极桥接。一旦电极发生桥接，将无法补救。但要取下帽套时，需让受试者先清洗并擦干头发，然后重新开始操作：将电极导线的插头挂在肩上，传感器端握在一只手中，轻轻将每个电极放入电极帽中对应的插槽内。操作时仅可触碰电极的塑料外壳，务必小心避免压折导线。切勿触碰电极尖端，这一点至关重要。与皮肤、衣物或除导电凝胶以外的任何材料接触都会降低电极的质量。在X一至X四处放置导电凝胶，并使用粘附环将其固定在受试者面部。将X一和X二分别置于受试者左右外眼角水平方向约一厘米处。将电极 X3 和 DX4 置于受试者左右眼下方约一厘米处的颧骨上。轻柔地将电极导线收集到受试者头部后方，并将 C-M-S-D-R-L 导线松散地缠绕在其他导线周围。为形成马尾状，使用魔术贴绑带在马尾的顶部和底部固定导线，并用医用胶带将马尾状导线固定在受试者衬衫背面。务必确保这些导联留有足够的余量，以便受试者的颈部能够舒适地向前屈曲。现在通过向每个电极涂抹氯化钾溶液来准备皮肤电反应（GSR）电极。使用医用胶带将GSR电极固定在受试者非优势手的第二和第三手指上，或固定在实验过程中不会被使用的任意一只手的手指上。为了在所有电极就位的情况下记录行为反应，让受试者坐在一个不可后仰的固定椅子上。在刺激呈现显示器前方，将所有电极插入转换盒，并检查脑电采集计算机，确保各电极的偏移量在正负40微伏范围内。如果某个电极偏移量过大或信号噪声严重，应轻轻将其从帽套上取下。向电极套管中加入更多凝胶并更换电极。如果某个电极持续存在问题，或某个电极受到脉冲伪迹污染，则应利用周围电极对该通道信号进行插值处理。记录结束后，通过在受试者眼睛内侧、眉弓上方粘贴一个目标贴纸，设置视线追踪系统。在刺激呈现计算机上启动弹出式校准应用程序。开始一个新会话，并将类型下拉菜单更改为 CMD。输入相应命令后，按下发送按钮，以开启来自弹出式校准应用程序启动相机设置的事件记录。调整摄像头位置，使目标贴纸和受试者的 I 居中，以实现自动阈值。在刺激呈现计算机的键盘上按下 A 键。通过旋转摄像头镜头来调节焦距，直到需要追踪的 I 清晰为止。通过在刺激呈现计算机的键盘上按下 C 键，开始对受试者进行眼动追踪系统的校准。屏幕上将随机出现九个不同位置的圆点。受试者应在圆点出现时注视该点，而不是预判下一个圆点可能出现的位置。为了验证校准效果，请按 V 键。点将再次以随机顺序出现。如果校准准确，受试者的视线将准确映射到每个验证点上。如果校准失败，请确保瞳孔和角膜反射的阈值设置适当。可在屏幕左上角的岛屿主机计算机的相机设置界面中调整瞳孔和角膜阈值，点击瞳孔和角膜的上下箭头可分别增加或降低相应阈值。通过点击500赫兹按钮，确保采样率设置为500 Hz。在刺激呈现计算机上将弹出式校准应用程序最小化，然后通过右键单击任务栏中的 iLink 图标并选择“Start recording”来开始记录眼动数据。在视频采集计算机上使用 Black Magic Media Express 软件开始视频录制。随后，通过单击暂停按钮在脑电采集计算机上开始脑电记录。现在进行刺激呈现时，计算机会启动一个名为 Polus 的游戏，该游戏为确保生态效度而专门设计，在不牺牲实验控制的前提下实现自然情境模拟。在游戏中，受试者必须救援一艘正在遭受攻击的货船。通过引入虫洞实现一个“go/no-go”任务：虫洞中会随机出现友方角色（帮助玩家）或敌方角色（伤害玩家）。此外，在另一款游戏中，受试者还需通过操控飞船穿越漂移的星域，完成点运动相干性任务。受试者必须使用雷达屏幕，在经过修改的波斯纳任务中收集小行星，小行星可能出现的四个扇区以不同的基本频率闪烁。通过分析脑电图（EEG）频谱成分的变化，可根据标记每个扇区的频率振幅来评估注意力水平。另一项游戏要求受试者通过识别面部所表达的情绪，协助达成银河系条约。五个面孔中的每一个都必须放置在游戏板上的空位上，以形成一行或一列三个表达相同情绪的面孔。第四个游戏实现了心理理论的莎莉-安妮测试。观看船长莎莉将她的货物放置在四个星球中的一个上。角色安妮由一名太空海盗扮演，该海盗将货物运送到另一个星球。最后，一名舰队司令同时观察船长和海盗的行动，并将有关海盗行为的信息传递给船长。玩家必须据此为船长和海盗分别规划拦截航线，推断双方将前往何处寻找货物，从而在多个实验条件下实现一级和二级心理理论的对比。人机交互领域的最新研究结果表明，游戏情境能够有效建立并维持个体在任务中的动机，而这些任务若脱离游戏背景则可能显得缺乏吸引力。在单次实验过程中，受试者可以完成大量重复的认知任务，而不会感到疲劳。这一点尤为重要，因为为了获得足够的脑电图（EEG）平均试次数，受试者需要为每种刺激条件积累约一百次有效试验。对于听觉刺激，请将刺激呈现计算机上的无源扬声器更换为有源扬声器。然后插入并打开放大器电源，将音量调至60级。当受试者完成游戏后，需达到80分贝声压级的最大声音水平，此步骤必不可少。通过按下图形界面中的停止按钮，退出游戏并停止数据记录。在每个用于视频采集、眼动追踪和脑电图（EEG）采集的计算机上，关闭 EEG 转换盒，并断开与该盒连接的所有导联。取下粘性环并将其放入温热的蒸馏水中。使用装有蒸馏水的喷雾瓶清除电极上残留的凝胶，并用温自来水和肥皂清洗电极帽上的凝胶。接下来，我们将展示一些典型的脑电图（EEG）结果。这是一张从前额中线电极Fz获得的与事件相关的谱扰动图。在此游戏中，“出现敌方”对应于敌方飞船的出现或“go”条件，而“出现友方”则对应于在“no-go”条件下友方飞船的出现。通常情况下，典型发育儿童表现出的伽马频段脑电图功率显著高于自闭症谱系障碍儿童。进行此操作时，应注意避免触碰电极触点、压损导线或使用过多凝胶。

combining-computer-game-based-behavioural-experiments-with-high

Research

科研

JoVE Journal

Neuroscience

神经科学

结合电玩与高密度的脑电图和红外视线跟踪基于行为的实验

眼动监测（或称眼动追踪）能够揭示眼睛在空间中的注视位置、注视时间以及持续时长。在此，我们演示如何利用眼动追踪技术，在无需言语或其他明确报告的情况下，研究多种受试人群的记忆完整性。...

眼动监测记忆

该视频展示了一种通过同步眼动追踪和单神经元记录来鉴定目标选择性神经元的实验方法。实验中，要求一名人类受试者在显示的一组物体中识别出目标物体，同时对其眼动进行追踪。与此同时，通过植入大脑的电极记录单个神经元的放电频率。将两组记录的数据进行关联分析，以评估是否存在目标选择性神经元。...

同步眼动追踪与单神经元记录以鉴定目标选择性神经元

近年来，关于社会排斥的研究迅速增长。随着该领域的扩展，迫切需要开发出复杂的方法，以在社会排斥过程中同时测量神经和行为结果。本方案利用事件相关脑电位，在计算机化社交互动期间记录持续的神经活动。...

在持续进行的计算机化社会互动中测量神经与行为活动：事件相关脑电位的研究

本文介绍了一种新型低成本人机交互界面，用于交互式中风后平衡康复系统。该系统集成了现成的低成本传感器，以实现自主驱动的电刺激治疗模式。该概念验证软件界面已在健康志愿者中进行了演示。...

一种集成低成本传感器与神经肌肉电刺激系统的用于卒中后平衡康复的人机界面

幼儿并非被动地观察世界，而是主动探索并积极与周围环境互动。本方案提供了使用头戴式眼动仪记录婴儿和幼儿在自然行为情境下动态视觉环境及视觉注意力的指导原则和实用建议。...

动态行为中儿童动态视觉注意的头戴式眼动追踪研究

我们介绍了一种在人类中进行单神经元记录的同时结合眼动追踪的方法。我们展示了该方法的有效性，并说明了如何利用这一方法获取编码视觉搜索目标的人类内侧颞叶神经元。...

癫痫患者中同步进行的眼动追踪与单神经元记录

使用多模态传感器是理解社交互动在教育环境中作用的一种有前景的方法。本文描述了一种利用移动眼动仪捕捉共处一地的成对个体之间共同视觉注意的实验方法。...

使用移动眼动仪捕捉联合视觉注意的方法学

眼动追踪是一种无创的信息加工研究方法。本文介绍了如何利用眼动追踪技术研究飞行时间较短的飞行员（即飞行时长&lt;350小时）在飞行模拟紧急任务中的注视行为。...

在复杂航空任务中进行眼动追踪以探究信息处理机制

我们采用脑磁图（MEG）和脑电图（EEG）来绘制参与简单感觉刺激处理的脑区。...

同步 MEG 与 EEG 的功能定位映射

本文介绍了在小鼠颅骨上植入超薄聚酰亚胺基微电极阵列（PBM-array）以获取小鼠模型高密度脑电图（EEG）的手术步骤及操作要点。...

基于聚酰亚胺的微电极对自由活动小鼠进行高密度脑电图记录

学习在电子游戏中同时进行高密度脑电图记录与红外视线跟踪的方法，用于认知神经科学研究。该技术通过游戏化任务降低被试焦虑并提升参与度，适用于儿童与临床人群的长期实验。

结合计算机游戏型行为实验与高密度脑电图及红外眼动追踪

探索更多视频