本方案描述了一种随机化工作流程,该流程采用由人工智能驱动的音乐教育平台,结合心率变异性(HRV)指导的微干预措施和基于可视化的反馈,以提高本科钢琴专业学生在乐理学习方面的效果,并降低其状态焦虑水平。
本方案描述了一种随机化工作流程,该流程采用由人工智能驱动的音乐教育平台,结合心率变异性(HRV)指导的微干预措施和基于可视化的反馈,以提高本科钢琴专业学生在乐理学习方面的效果,并降低其状态焦虑水平。
人工智能(AI)在音乐教学中的应用日益广泛,但能够同时评估知识获取与焦虑调节的可重复性工作流程仍然有限。本方案描述了一种随机对照工作流程,用于在常规钢琴工作室课程中实施基于人工智能的音乐教育平台,并评估其对本科钢琴专业学生的影响。受试者经过筛选后被随机分配至人工智能驱动平台组或传统教学组,接受为期2周(共12次、每次30分钟)的干预。结局指标包括结构化的音乐理论/分析测试,以及状态-特质焦虑量表-状态分量表(STAI-S;20个条目,4点计分;总分范围20–80)。在5分钟静坐休息和5分钟标准化练习期间记录心率变异性(HRV);主要指标包括相邻正常R-R间期差值均方根(RMSSD;反映短期迷走神经活性)、正常R-R间期标准差(SDNN;反映总体变异性)以及高频(HF)功率(与副交感神经相关的频谱成分)。该方案使教师和研究人员能够部署该平台,并遵循标准化流程,涵盖受试者筛选、随机分组执行、平台设置与配置、HRV传感器放置与数据采集、伪迹处理与HRV计算、所有结局指标的施测与评分,以及最终数据导出、文件命名和安全存储,以供统计分析。数据分析采用独立样本t检验和协方差分析(ANCOVA),以基线值作为协变量。代表性结果表明,与对照组相比,人工智能驱动组在调整后的后测理论成绩更高(偏η2 = 0.206),干预后状态焦虑更低(t(38) = −3.486,p = 0.001;Cohen’s d ≈ 1.10),HRV模式提供了生理学背景支持,次要认知负荷结果亦显示外在负荷降低。
在当代高等音乐教育中,教学目标已不仅限于知识传授,还包括学生的心理健康以及作为表演者的可持续发展。钢琴专业学生通常在评审团、比赛、试镜和公开独奏会等持续的评估压力下进行训练,而焦虑可能干扰注意力控制,降低表演质量1。
音乐表演焦虑(MPA)和与考试相关的焦虑在音乐学院和大学样本中经常被报告,不同群体和测量方法的研究均记录了较高的患病率2。除了主观上的痛苦外,焦虑还与生理唤醒、注意力分散以及自我效能感降低相关,这些因素可能导致在评估情境下出现音高或节奏不稳定以及表现不一致的情况3。
人工智能(AI)的最新进展为此类情境下的精准支持提供了可行路径。由人工智能驱动的个性化教学能够根据学习者不断变化的需求,动态调整教学内容的难度、进度和反馈,从而减少对“一刀切”式教学模式的依赖,在工作室教学中尤为如此4。与此同时,情感计算技术可通过多模态线索(例如面部表情、语音和生理信号)推断学习者瞬时的情绪状态,使系统能够对练习过程中焦虑水平的波动做出响应5。
该领域的一个关键生理指标是心率变异性(HRV),它通常被用作与自主神经调节和应激反应性相关的无创性指标6。当融入教学过程中时,基于HRV的提示可支持即时的微干预措施(例如,短暂的节律性呼吸或正念提示),旨在降低练习过程中急性状态焦虑7。
第二个设计支柱是基于可视化的反馈。通过仪表板展示学习进展曲线、错误位置图或基于心率变异性(HRV)的指标,可以使练习行为和认知-情感负荷更加透明,从而增强自我监控以及师生共同调节能力8。从学习科学的角度来看,这些设计选择符合认知负荷理论,该理论强调通过简化的呈现方式、内容分段和反馈设计来减少外在负荷,同时通过相关认知加工支持图式构建9。
尽管基于人工智能的音乐学习工具发展迅速,但在高等教育音乐教学领域,将人工智能驱动的个性化、生理监测(HRV)和可视化反馈整合于单一平台,并在随机化条件下评估完整工作流程的研究仍然较少10。此外,许多研究报告侧重于结果,却未明确说明传感器记录、伪迹处理和数据导出等可拍摄、参数级别的具体操作步骤,限制了研究的可重复性和跨机构复制。本研究通过提供一套逐步操作方案,填补了这一空白:该方案用于在工作室教学常规中部署人工智能驱动的音乐教育平台,并评估其对音乐理论/分析成绩及状态焦虑(STAI-S)的影响,同时在标准化的静息和练习阶段记录HRV指标,以提供生理学背景信息。
访问受限。请登录或开始试用以查看此内容。
该研究方案已获得荆楚科技大学艺术学院机构审查委员会的批准(批准号:JCTU-ARTS-2025-013)。所有参与者在入组前均已签署知情同意书。
参与者的注册
在每位潜在参与者接受关于研究目的、流程、潜在风险与获益、保密性以及数据处理安排的书面和口头说明后,于入组前获取其签署的知情同意书。将签署的同意书与研究数据分开保存在上锁的文件柜中,或保存在仅限主要研究者和一名指定的数据管理员访问的加密数字档案中。在研究记录中登记每位参与者的批准编号、批准日期和同意日期,以支持透明报告和研究可重复性11。若机构政策或期刊指南有要求,应在适当的试验注册平台中注册研究方案,并在研究记录中登记注册编号和注册日期12。
参与者资格与招募
筛选并招募参与者
从音乐学院或大学音乐专业中招募40名年龄在18至22岁之间的本科钢琴专业学生,力求性别比例大致均衡,目标偏差不超过60:40。确认每位候选人均已完成至少6个月的正规钢琴学习,能够熟练阅读五线谱,并具备足以完成基线测试的初级音乐理论知识。邀请有意向的候选人参加筛选访问,并在筛选前至少24小时提供书面研究信息,说明所需投入的时间、数据收集流程以及保密保护措施。
应用纳入标准
向每位候选者施用广泛性焦虑障碍-7(GAD-7)量表,并根据量表使用手册进行评分13。进行一次简短的半结构化访谈,持续5–8分钟,以确认候选者能够理解指导说明、耐受实验流程,并能参加所有实验环节。仅当候选者满足以下全部标准时方可纳入:年龄18–22岁,接受过至少6个月的正规钢琴训练,GAD-7评分在5至14分之间,表明存在轻度至中度焦虑14,愿意完成所有干预和评估流程,并签署书面知情同意书。
应用排除标准
排除目前患有严重精神障碍或正在接受精神科治疗,可能影响参与或结果有效性的候选人。排除在过去三个月内参加过类似人工智能驱动的音乐训练研究的候选人,此类研究定义为涉及算法驱动练习指导或自动反馈、且持续≥3次的干预性研究。排除不熟悉目标曲目的候选人,即在使用乐段进行15分钟标准化熟悉后仍无法达到稳定基线表现者。排除存在重大运动、视觉或听觉障碍的候选人,此类障碍可能影响钢琴演奏或心率变异性(HRV)记录。考虑排除存在可能显著影响HRV测量质量的疾病或因素的候选人(例如已知的心律失常、植入式起搏器,或显著影响自主神经功能的药物),并在适用情况下于筛选记录中注明排除理由15。所有纳入与排除决定,包括排除的具体原因,均应记录在以匿名参与者ID标识的筛选日志中,并将该日志与结果数据分开保存。
随机化与分配隐藏
随机化序列的制备
使用统计软件生成1:1的区组随机化序列,将参与者分配至实验组(人工智能驱动平台)或对照组(传统教学)。预设区组随机化的区组大小为4,并在随机化记录中注明所用软件名称、版本及固定的随机种子值20250113,以确保可重复性16。确保生成随机序列的研究人员不参与参与者的评估、结局评分或教学工作。将每份分组信息打印在相同规格的纸条上(约5 cm × 2 cm),并将每张纸条放入依次编号、不透明且密封的信封中。在审核日志中记录信封制备的详细信息(日期、制备人、信封总数 = 40),并将审核日志与结局数据分开保存。
分配隐藏的实施方法
将密封的信封存放在只有负责分配的人员才能进入的安全地点。在每位受试者基线评估会话结束时,按编号顺序取出下一个信封。在受试者在场的情况下打开信封,并将信封中显示的分组信息记录到分配日志中(包括受试者编号、信封编号、日期/时间、分配人员签名)。所有未使用的信封应始终保持密封,直至使用时再开启,以确保分配隐藏的完整性。
保持评估者的盲法状态
为每位参与者分配一个匿名编号,编号格式为 P001–P040,不得包含分组信息。所有音频和视频记录仅以参与者编号及时间点(干预前或干预后)进行标记。向评估者提供一组去标识化且经过交叉平衡的录音资料,其中不得包含任何关于分组的信息,并在共享前清除文件的元数据。
曲目与设定
目标曲目的选择
以莫扎特《G大调钢琴奏鸣曲》K.283第二乐章(行板)作为统一的训练与评估曲目。使用第1至32小节作为标准化的训练与评估片段,并确认该片段的长度与难度适合中级水平的钢琴专业学生,能够在各训练阶段实现稳定的节拍目标和一致的乐句划分要求17。
物理环境的标准化
所有实验均应在安静、光照和温度稳定(保持在22 ± 1 °C)的录音室内进行。将一台重锤键数字钢琴或具有类似键盘触感的原声钢琴固定放置于房间内的同一位置,并在每次实验中保持琴凳高度一致。将麦克风置于距离乐器0.8 m处,固定高度为1.2 m,以45°角对准音板或键盘区域,以确保清晰拾音且不产生削波。将摄像机安装在三脚架上,距离演奏者1.8 m,高度为1.4 m,以在所有实验中一致的角度完整捕捉双手及上半身动作。
每次测试前对设备进行校准
设置并测试节拍器音量,确保受试者能清晰听到,但不会在音频录制中占据主导地位,目标是在操作台位置达到约 60–65 dB 的播放水平。调整音频接口或录音设备的录音增益,以避免削波,同时保持较高的信噪比,强音段落的峰值电平目标控制在 −12 dB 至 −6 dB 之间。检查摄像机取景和对焦,确保键盘、双手及上半身始终处于画面中。通过观察实时显示并确认至少 30 秒内 R–R 间期检测稳定(或 ECG 波形稳定),验证 HRV 设备的连接状态和信号质量。若出现音频削波,应将输入增益降低 3–6 dB,重复进行 10 秒测试录音,并在峰值电平保持低于削波阈值后方可继续。若 R–R 检测不稳定,应通过收紧胸带并润湿接触垫(或根据制造商指导重新放置 ECG 电极)以增强皮肤接触,重复 30 秒信号检查,仅在获得稳定信号轨迹后方可继续。
结局指标
知识与分析能力(主要认知结局)
设计两套平行形式的结构化音乐理论与作品分析测试卷(A卷和B卷),在内容领域和难度上保持匹配18。测试包含20个题目,涵盖目标曲目及相关材料的和声(8题)、节奏分段(4题)、动机识别(4题)以及曲式分析(4题)。在每次评估时点,将参与者单独安排在安静房间内,根据预设的时间表发放A卷(基线测试)或B卷(后测)。指导参与者在30分钟内完成测试,不得使用乐器、教科书或电子辅助工具。测试结束后收回答卷,并记录完成时间(单位:分钟)。使用标准化答案评分,计算总正确率得分(0–100分)作为主要认知结局指标,每题赋5分。将总分和完成时间存储于参与者的匿名编号下。
表现评分量规(次要技能结局)
使用标准化的乐器、麦克风位置和摄像角度,在干预前和干预后分别录制每位参与者目标片段的音视频表现。采用包含四个维度的表现评分量规:旋律流畅性、节奏准确性、协调性与技巧,以及表现力诠释。每个维度按1–5分进行评分,总分为4至20分。使用详细的评分量规文档以及一组6个预试验录音(来自非研究学生的3个基线录音和3个干预后录音),对至少两名独立评分员进行培训,直至在所有维度上达成可接受的一致性。向评分员提供仅以匿名编号和时间点标识的全部录音,不提供分组信息。要求评分员独立评估录音,并将评分记录于安全的评分表或数据库中。若某一维度的评分差异超过2分,应通过讨论予以解决;若无法达成共识,则引入第三位评分员进行评判。在正式评分前,使用6个预试验录音计算组内相关系数(ICC)以评估评分者间信度,并确认ICC至少达到0.8019。在补充表1中汇总基线和干预后各组的量规评分结果(总分及四个维度得分),并在补充表2中报告评分者间信度统计结果(含95%置信区间的ICC)。
状态焦虑与心率变异性(次要情感/生理结局指标)
在干预前和干预后均施用状态-特质焦虑量表-状态分量表(STAI-S;20 个项目,4 点式李克特量表,总分 20–80)20指导参与者根据以下内容进行回应 你现在的感觉如何 并回答所有条目。检查每份问卷是否有遗漏的回应,如有需要,在参与者离开前请其补全遗漏的项目。根据量表使用手册计算STAI-S的总分。若为可视化或探索性分析而使用经过验证的10条目子集或改编格式,需记录改编内容与条目选择规则,提供依据和参考文献,并在结果中报告完整量表及子集的Cronbach’s α系数。21指导受试者在进行心率变异性(HRV)记录前至少2小时内避免剧烈运动、摄入咖啡因和进食油腻食物,并在每次就诊前至少12小时内禁酒;通过口头确认其依从性,并在会话记录中以“是/否”形式记录依从情况22使用以下任一方式记录心率变异性(HRV):(i) 胸带式心电图(ECG)传感器,或 (ii) 三导联心电图系统。所有记录均采用心电图衍生的R–R间期,采样频率为1000 Hz,并在实验记录日志中注明记录方式(ECG)、采样频率(1000 Hz)及记录日期/时间。进行胸带式记录时,将胸带置于剑突水平位置,确保与皮肤紧密接触;进行心电图记录时,按标准II导联配置放置电极,并在开始记录前确认R波检测稳定。进行静息HRV记录时,让受试者舒适就座,双脚平放于地面,双手置于大腿上;指导其保持安静清醒状态,尽量减少身体活动且不说话,持续5分钟;在静息60秒稳定期后开始记录,并分析随后连续300秒的数据片段。
进行心率变异性(HRV)练习时,指导受试者以每分钟76次的固定节拍和中强(mezzo-forte)的固定力度目标朗读指定段落,持续5分钟;使用节拍器保持节奏,并在开始30秒后启动分析,对随后的270秒时间段进行分析。每次记录结束后,将原始R–R间期序列导出为逗号分隔值文件(CSV),文件至少包含两个字段(时间戳,单位为ms;R–R间期,单位为ms),并使用记录软件结合目视检查对信号轨迹进行检查,以识别信号丢失、伪影和异位搏动。
应用预设的人工伪迹校正工作流程,并在实验记录日志中记录每个片段校正后的心跳比例23。
伪迹检测规则:若某个R–R间期与前5个正常间期中位数的偏差超过20%,或绝对R–R值超出300–2000 ms范围,则将其标记为伪迹。校正方法:在剔除异位搏动后,利用相邻正常间期的三次样条插值法替换被标记的间期。
质量控制阈值:若校正后的心跳比例超过5.0%,或出现任何持续超过5秒的信号丢失,则需重复该段记录。
使用分析软件版本 1.3.0 计算时域指标,包括 RMSSD 和 SDNN,并将输出结果存储在与参与者 ID、时间点和片段类型(静息或练习)相关联的结构化结果文件(CSV)中。使用 Welch 周期图法计算频域指标,其中高频(HF)功率采用 0.15–0.40 Hz 频段,窗长为 120 秒,重叠率为 50%,加汉明窗(Hamming window),并对插值后的 R–R 间期序列以 4 Hz 进行重采样;HF 功率以 ms2 表示,并在进行推断性分析前对 HF 值进行对数转换。可选地,计算低频(LF)功率(0.04–0.15 Hz)及 LF/HF 比值,并以描述性方式报告,同时给予适当谨慎的说明24。
认知负荷(探索性次要结局)
在测试后施用由 Leppink 及其同事开发的多维认知负荷问卷25。该问卷包含 10 个条目,构成三个子量表:外在负荷(3 个条目)、内在负荷(3 个条目)和相关负荷(4 个条目),每个条目采用 7 点李克特量表评分,范围从 1(非常不同意)到 7(非常同意)。对每个子量表,计算对应条目的平均值得到介于 1 至 7 之间的子量表得分;缺失值视为无效,计分时要求所有条目均完整作答。解释如下:较高的外在负荷表示更多的无关信息加工,较高的内在负荷反映任务本身更高的固有复杂性,较高的相关负荷代表更强的有效、促进图式构建的努力程度。若使用非英文版本,需由两名独立的双语专家进行翻译和回译,并在 10 名非研究对象的钢琴专业学生中对翻译后的工具进行预试验,同时计算各子量表的 Cronbach’s α 系数;以 α ≥ 0.70 作为可接受的信度标准26。在结果部分报告各子量表的 α 值,并对三个子量表分别进行分析,采用 Holm–Bonferroni 法对多重比较进行校正,设定族系误差率 α = 0.0527。如有需要,可将全部 10 个条目的算术平均值作为综合认知负荷指数。
基线(前测;第1周)
在基线测试开始时确认受试者的入选资格并获取知情同意,为其分配一个匿名编号。在基线数据表中记录人口统计学信息和训练史,包括年龄、性别、钢琴学习年限以及每周常规练习时长。在安静环境中实施知识与分析测试(A卷),严格执行30分钟时间限制,并记录受试者编号对应的总分和完成时间。连接心率变异性(HRV)传感器,记录5分钟静息状态下的HRV数据段,随后记录5分钟标准化练习过程中的HRV数据段,练习内容为目标乐段,节拍为每分钟76拍,力度目标为中强(mezzo-forte)。
采集过程中监测信号质量,若伪影过多,应调整绑带张力或电极位置后重新采集相关片段;当校正心跳比例超过5.0%或连续信号丢失超过5秒时需重复采集,并在实验记录中注明重复情况及原因。在补充表3中汇总HRV数据质量指标(校正心跳比例、重复采集片段及排除情况)。施测STAI-S量表,并根据评分标准计算总分(20–80分)。使用预设的乐器、麦克风和摄像设备录制目标片段的基线音视频表现,确保画面构图和音频电平一致。使用以下文件命名规范,将所有数据文件(测试数据、HRV记录、问卷和表演视频)以匿名化参与者编号和“pre”时间点标识进行标注,并存储于安全、受访问控制且有备份的目录中:P###_TP(pre/post)_MOD(test/HRVrest/HRVprac/STAI/perf)_YYYYMMDD_HHMM28。
干预阶段(第2–3周)
安排
在为期2周的时间内,为实验组每位参与者安排12次由人员监督的30分钟干预 session。每位参与者的 session 应尽量安排在每天相对固定的时间段内,相对于该参与者首次 session 的开始时间,时间浮动范围控制在±2小时之内。每次 session 均需记录开始时间和结束时间,以减少并量化心率变异性(HRV)和焦虑水平的昼夜节律变化。在依从性记录表中记录出勤情况、缺席或重新安排 session 的原因,以及任何方案偏离情况。通过确认参与者是否遵守了录制前的限制要求(包括咖啡因、剧烈运动、大量进食和酒精),以标准化每次 session 前的状态,并将依从情况记录为“是/否”;若为“否”,需附简要说明29。
实验组:AI 辅助平台(图1)
每次实验开始时,指导参与者使用匿名的参与者编号登录 AI 平台,并确认界面中未显示任何个人身份信息。在交互式乐谱界面中加载莫扎特奏鸣曲选段,核对所显示的曲目、选段范围(第1–32小节)和难度设置是否正确。配置平台以记录音符级和小节级的练习遥测数据,包括音高准确率(%)、起音时间偏差(ms)、相对于节拍器的节奏漂移(%)、小节级错误位置以及每个循环片段的重复次数;将遥测数据更新间隔设为200 ms,小节级数据聚合间隔设为1个小节。运行一段45秒的校准演奏,以确认平台能够捕捉音符事件并将检测到的音符与乐谱位置对齐;若出现以下任一情况,则需重复校准:在任意连续10个音符窗口内,起音时间中位数偏差超过80 ms,或连续2个小节均出现小节级对齐错误。
启用个性化训练模块,使其能够接收会话内的表现特征,并使用固定规则生成分段级目标:选择综合误差得分最高的两个小节,其中综合误差得分 = 0.5 × 音高错误率 + 0.3 × 绝对时序偏差 + 0.2 × 速度漂移;在会话日志中记录所选小节及前三大误差来源。指导参与者练习指定的片段,同时交互式乐谱实时高亮显示音符,支持对困难段落进行循环播放,并以目标速度(76 bpm)及降低后的速度(60 bpm)播放目标片段的 MIDI 示范音频,以提供学习支架。按照固定结构分配会话时间,并记录各阶段实际用时:3 分钟登录/校准,21 分钟针对性片段练习,5 分钟与对话伙伴进行反思(第 7.3 节),以及 1 分钟收尾/导出和记录备注30。
会话练习助手
通过安全的 API 连接激活由大语言模型(LLM)驱动的会话练习助手,并在研究日志中记录模型版本为 LLM-PracticePartner v2.1(构建版本 2025-01-15),推理端点类型为 cloud,访问控制方法为基于令牌的身份验证。配置该助手使用固定的系统提示,将其输出限制在与练习相关的内容范围内(包括措辞、音色调性意图、踏板使用决策、错误诊断及下一步建议),并禁用任何请求个人数据的功能。
在每次目标练习段结束后,提示参与者描述其分句处理选择、音色意图、踏板决策、感知到的困难程度以及在0–10分自评量表上的焦虑水平,并将这些回应以结构化字段形式记录在当次训练日志中。配置协作方使用固定的生成参数,针对每个短片段返回简要的特定建议:最大回复长度为80词,每片段最多2轮交互,温度值0.2,回复超时时间为2秒;记录每次会话中的交流轮数和总对话时长。确保对话时间始终服从于演奏练习,将每次会话的总对话时间上限设为6分钟,并在达到该上限后禁用后续提示以强制执行此限制。
隐私与安全:使用匿名化 ID 存储对话日志,通过 TLS 1.2 或更高版本在传输过程中加密,使用 AES-256 对静态数据进行加密,仅限授权人员访问,原始转录记录的保留期限设为 24 个月,并在数据管理计划中记录每位参与者的转录数据删除日期31。
多模态情绪识别与微干预
启用多模态情绪识别模块,并在会话日志中记录输入模态及其采样/更新频率:面部视频为每秒30帧,语音音频为16 kHz单声道,心率变异性(HRV)流通过心电图衍生的R–R间期以1 Hz频率更新。根据预设的触发逻辑定义压力升高状态,并记录确切参数。
HRV触发条件:在练习过程中,RMSSD值至少低于参与者个体基线标准差1个单位,并在连续60秒内持续低于该阈值,计算基于每1秒更新的滚动30秒时间窗。
表现触发条件:运行错误率在至少连续60秒的时间窗内,超过该参与者此前三个会话平均错误率至少20%,其中运行错误率基于每5个音符更新一次的滚动20个音符时间窗计算得出。
多模态确认规则:触发条件需满足以下之一:仅HRV触发,或表现触发同时至少伴随一个来自面部或语音特征的支持性线索;支持性线索定义为:面部效价评分在连续至少10秒内,较该参与者当次会话内的基线下降至少0.30;或语音抖动(jitter)在连续至少10秒内,较该参与者当次会话内的基线相对增加至少15%;基线值均根据会话最初2分钟的数据计算得出。
明确多模态融合采用基于规则的阈值判定还是训练所得的分类器。本实验方案采用基于规则的阈值判定,并将所有阈值记录在平台配置文件中32。编程设定系统在达到压力阈值时暂停练习,并从预设的微干预措施库中触发一项微干预。在会话日志中记录干预类型、开始时间、持续时间及完成状态。
节律性呼吸:通过屏幕计时器和音频提示,以每分钟6次呼吸的固定节律进行90秒的脚本化呼吸训练33。
简短正念提示:75秒的引导性注意力指导,采用固定措辞,以屏幕文字配合音频解说呈现。
低唤醒背景音乐:在实验台位置以55–60 dB的固定响度目标播放一段预设的低唤醒音乐片段,持续90秒,音乐片段标识符在会话日志中记录为Track-LA-01。
微干预结束后,恢复中断的段落,并在基于心率变异性(HRV)触发的情况下,将重新参与阶段的前60秒速度降低8%;若运行错误率在至少连续30秒内恢复至参与者此前三个会话平均错误率的10%范围内,则恢复至目标速度。
质量控制:记录每次会话中触发次数、完成的微干预次数以及中止的干预次数,并为每位参与者计算依从性比率,即完成的触发次数除以总触发次数。
通过使用预设标准总结假阳性与假阴性事件,验证触发机制的性能。
假阳性:当参与者在下一次提示时报告低焦虑水平(≤2/10),且随后60秒内的实时错误率保持在该参与者此前三个会话平均错误率的10%范围内时,却发生了触发。
假阴性:在无触发的时段内,参与者在下一次提示时报告高焦虑水平(≥7/10),且实时错误率至少在60秒内超过该参与者此前三个会话平均错误率的20%,或尽管心率变异性(HRV)已满足HRV触发标准,但仍未发生触发。
在补充表434中汇总每位参与者及每次实验的假阳性与假阴性计数及发生率。在补充表4中以描述性方式报告综合认知负荷指数。
记录与依从性
将平台配置为以结构化记录形式记录所有练习事件及输出内容,并关联至匿名化 ID、会话编号以及 ISO 8601 格式的时间戳。必填字段包括目标小节、循环次数、准确率指标、速度偏移、对话次数及总对话时长(秒)、触发事件、干预类型及持续时间(秒),以及教师所做的任何手动覆盖操作。每日 20:00 导出会话级别的汇总数据,并将原始日志和汇总表格均存储于安全服务器中,每日凌晨 02:00 自动执行备份。所有导出文件采用标准化的命名规范,格式为 StudyID_Group_ID_Session##_YYYYMMDD_HHMM,并保存为非专有格式:日志使用 CSV 格式,音频记录使用 WAV 格式,视频记录使用 MP4 格式,会话报告使用 PDF 格式。在研究日志中记录导出路径、使用 SHA-256 生成的文件校验和以及备份确认信息,以支持可追溯性35。
对照组:传统教学法
在2周内为对照组每位参与者安排十二次由教师指导的30分钟课程,总指导接触时间与实验组相同36。使用与实验组相同的曲目、教学内容和教师,以控制教师和教材因素的影响37。每次课程采用标准的课堂教学法,包括教师示范、口头讲解以及针对该乐段的专项练习。家庭练习任务采用常规的口头或书面说明进行布置,不提供人工智能生成的提示或分析数据,并将家庭练习任务定义为每天一次、每次20分钟、专注于第1至32小节的自主练习。不对对照组参与者提供个性化分析数据、自动提示、仪表盘或微干预措施。为每位对照组参与者提供一份简短的纸质或电子练习记录表,指导其记录额外的非监督练习的日期及大致持续时间(以分钟为单位)。在干预结束时回收记录表,并将目标乐段的总非监督练习时间录入研究数据库。
视觉反馈与自我调节通路(实验组)
启用图形化反馈系统,将练习行为、情绪波动和生理负荷关联在共享的时间轴上38。基于多模态输入计算情绪热图,包括语音特征、心率变异性(HRV)趋势,以及表现行为中的异常情况,如错误率激增或节奏不稳39。设置每日汇总,标记“热点”区域,定义为任一30秒区间内错误率处于该次会话的前20%且至少存在一个压力指标(满足HRV触发条件或达到多模态确认标准),并记录这些被标记的热点区域以供后续会话参考40。生成HRV趋势图,总结每次会话三个固定时段的RMSSD和高频(HF)功率:练习前(前60秒)、练习中期(第3–4分钟)和练习后(最后60秒),并在所有受试者中使用一致的单位和坐标轴刻度41。识别RMSSD或HF功率的显著下降,定义为相对于该次会话练习前时段下降至少15%,并与标记的热点区域相对应,将此类模式视为平台引导干预的候选对象;记录是否触发并完成了干预措施42。
使用各组内参与者在每个会话中的会话级均值及95%置信带,绘制音高准确性、节奏准确性、音乐完整性以及错误率在多次会话中的进展曲线43。将表现进展曲线与情绪热图叠加,以支持对情绪-表现耦合关系及元认知调控的反思44。提供教师仪表板,显示个体和群体层面的相同信息,在每次会话结束后的5分钟内更新仪表板,并标出焦虑情绪或表现不稳定性的峰值45。利用仪表板信息指导教师在教学笔记中记录个性化的教学干预措施,包括暂时降低速度、逐步暴露于困难乐段、增加口头鼓励,或针对已识别的问题区域进行简短的一对一指导46。
干预后测试阶段(后测;第3周结束时)
在第3周结束时安排干预后评估,并尽可能与基线条件保持一致,包括房间、设备以及测试时间(与基线测试开始时间相差不超过±2小时)。连接HRV传感器,记录5分钟静息状态下的HRV数据段,随后记录5分钟标准化练习状态下的HRV数据段,传感器放置位置、采样设置及伪迹处理规则均与基线阶段相同,并采用相同的节拍目标(每分钟76次)和中强力度(mezzo-forte)动态目标47。
在与基线测量相同的条件和时间限制下进行知识与分析测试(B卷),并记录总分和完成时间48。施测状态-特质焦虑量表-状态焦虑子量表(STAI-S),并根据评分标准计算总分(20–80分)49。使用与基线测量相同的麦克风和摄像设备、乐器及拍摄构图,录制一段干预后的音视频表演片段50。施测认知负荷问卷,并记录外在负荷、内在负荷和相关负荷三个子维度的得分51。
对于实验组,使用固定的访谈提纲和一致的引导方式,围绕平台可用性以及对焦虑调节和学习效果的主观感受,进行一次时长约6–8分钟的简短半结构化访谈52。在获得同意后对访谈内容进行录音,并逐字转录以供定性分析。
统计分析
在招募受试者之前,使用 GPower(版本 3.1 或更高)进行事前功效分析,并记录检验家族为 F 检验,统计检验方法为协方差分析(ANCOVA):固定效应、主效应和交互作用。指定 ANCOVA 模型包含两个组,以基线评分为协变量,α = 0.05,期望功效 = 0.80,并根据既往文献和可行性限制,假设主要认知结局的效应量 f = 0.30。如果假设的效应量以偏 η2 表示,则使用预设的换算公式 f = √(η2 / (1 − η2)) 转换为 Cohen’s f,并记录计算方法53。
记录计算所得的所需样本量,并确认 n = 40 是否达到或接近在给定假设下的目标值;将功效分析的输出文件保留在研究记录中。使用 SPSS 26.0 或同等软件进行分析,并在分析日志中记录软件名称及版本。连续性结果以均值 ± 标准差形式汇总,分类变量以频数和百分比形式汇总。
采用协方差分析(ANCOVA),以基线值为协变量,通过组间比较后测结果来评估主要疗效,并报告校正均值、偏η2及95%置信区间54。在适当情况下使用独立样本t检验进行组间比较,组内变化采用配对t检验;当数据不满足假设条件时,使用非参数检验替代方法。检验正态性和方差齐性;对偏态分布的心率变异性频谱指标在分析前进行对数转换,并报告转换细节。
当使用稳健的方法时,应明确说明具体方法及其原理。报告双尾 p 值时设定 α = 0.05,并为假设检验提供效应量(Cohen’s d、偏 η2)和 95% 置信区间。在实验组中进行探索性分析,考察平台使用指标(平台总使用时长、微干预次数、依从率)与认知、情感及心率变异性(HRV)结果之间的关联。
数据质量与安全
每次心率变异性(HRV)记录期间,应通过实时显示检查生理信号是否存在伪迹或R–R间期检测不稳定的情况。若HRV片段信号质量不佳,需在调整胸带张力或电极位置后重新采集;当校正心跳比例超过5.0%或连续信号丢失超过5秒时,也应重复记录,并在会话日志中记录重复情况及疑似原因。每次访视开始时校准音频电平和节拍器设置,以避免削波,并确保各次记录间的响度具有可比性,目标峰值电平控制在−12 dB至−6 dB之间。
监测受试者是否出现不良事件、过度疲劳或与练习及传感器相关的不适,并将事件记录在安全日志中。若受试者报告过度疲劳、焦虑或不适,应增加额外休息时间或缩短当次实验时长,并将此类调整记录为方案偏离。记录所有方案偏离情况(如遗漏的实验环节、不完整的HRV记录、重大偏差等),并在敏感性分析中考虑这些偏离因素。
数据处理与盲法
为每位参与者分配一个唯一的匿名编号,并使用该编号标记所有录音、问卷和数据文件。根据机构数据保护政策,将所有数据存储在访问受控的驱动器上,并每天凌晨 02:00 自动备份一次。在加密的安全位置保存一份独立的关联文件,用于记录参与者编号与个人身份信息的对应关系,仅限授权人员访问。为保持评估者的盲态,提供经过匿名化处理且时间顺序随机化的音视频片段,并不告知其分组信息。
在开始评分前完成评分量表的制定,并提供书面说明和示例录音55。在全面评分前,先对6个录音样本组成的试点子集重新检验评分者间信度,并确认组内相关系数(ICC)≥ 0.80。
至少应报告以下功能参数:HRV 采样频率 = 1000 Hz,面部视频采集 = 每秒 30 帧,分辨率为 1920 × 1080,语音音频采集 = 16 kHz 单声道,平台遥测数据更新间隔 = 200 ms。
时间安排与依从性
将符合方案的依从性阈值定义为在第2至第3周期间完成至少12次监督训练中的10次,每次完成的训练定义为在计划的30分钟时间段内,有至少27分钟的主动参与的监督训练。在依从性记录表中记录每位受试者完成的监督训练次数及总监督训练分钟数,并将监督训练分钟数依从性计算为总监督分钟数除以计划的360分钟,以百分比表示。记录受试者自我报告的额外练习时间,并将每日分钟数及2周干预期内的总分钟数录入数据库,对任何单日超过120分钟的数值进行标记以待核实。
对于实验组,从平台日志中记录每次会话中由系统触发的微干预的数量、类型、开始时间和持续时间,并计算干预暴露指数,即每次会话中干预总持续时间(以秒为单位)。所有随机化参与者均应纳入意向性治疗分析;对于缺失的后测结果,问卷结果采用末次观测值结转法处理,当无法重新录制时,表现记录采用完整案例分析;分析日志中需记录所采用的数据处理规则。进行仅包含符合方案阈值参与者的敏感性分析,并额外进行一项敏感性分析,排除被归类为重大方案偏离的会话,重大方案偏离定义为:心率变异性(HRV)记录片段缺失,或会话时间缩短超过5分钟。
访问受限。请登录或开始试用以查看此内容。
对音乐理论认知的影响
如表1所示,实验组(M = 72.45,SD = 6.83,n = 20)与对照组(M = 71.30,SD = 7.14,n = 20)在前测中无显著差异,t(38) = 0.625,p = 0.604,表明主要认知终点指标具有基线可比性。干预后,以预测试成绩为协变量的协方差分析(ANCOVA)显示,实验组的校正后后测平均值高于对照组(校正后M = 84.95 vs. 78.75;表2)。组间差异具有统计学意义,F(1, 37) = 9.842,p = 0.003,偏η2 = 0.206。图2总结了后测各领域表现,显示实验组在和声/调性、动机识别、节奏/节拍分割以及目标导向策略等分项上的得分均更高。
这些结果支持了本研究的目标,即在标准化的两周教学安排下,使用人工智能辅助平台相较于传统教学方式,可提高音乐理论与分析的表现水平。
访问受限。请登录或开始试用以查看此内容。
这项随机研究评估了一种由人工智能驱动的音乐教育平台,该平台整合了个性化的练习分析、多模态情绪识别与即时微干预,以及基于可视化的反馈。与传统教学相比,实验组在音乐理论与分析表现上取得了中等到较大的提升(偏η2 = 0.206),状态焦虑显著降低(t = −3.486,p = 0.001;d ≈ 1.10),并伴随更优的认知负荷特征(外在负荷更低,内在负荷略有下降,相关负荷呈上升趋势)。这一整体模式符合教学设计原则,即通过内容分段、示例讲解和及时反馈来简化呈现方式、搭建任务复杂度支架,并促进图式构建56。
本研究提出了一种可重复、可录像记录的实验方案,该方案通过一个由人工智能驱动的平台,围绕分段式学习目标、交互式乐谱记谱法以及基于生理学原理的微观干预措施来组织钢琴理论学习,并在随机化条件下对该方案进行评估。该方案旨在可融入常规的琴房课堂教学流程,同时保留学习行为(分段目标、练习遥测数据及反馈)和调控行为(触发事件及微观干预实施)的可追溯性,这两类可追溯性对于研究的重复与拓展均至关重要。
访问受限。请登录或开始试用以查看此内容。
作者声明不存在竞争性财务利益。
感谢参与的学生和工作室指导教师所付出的时间与投入,同时感谢植物园技术团队在仪器使用和场地安排方面提供的协助。
访问受限。请登录或开始试用以查看此内容。
| 姓名 | 公司 | 目录编号 | 评论 |
|---|---|---|---|
| 由人工智能驱动的音乐教育平台(研究构建版本) | 内部 / 机构 | 平台构建编号:v2.1(构建版本 2025-01-15) | 交互式评分 + 实践遥测 + 仪表盘 + 基于规则的触发引擎;遥测更新间隔 = 200 ms;日志可导出为 CSV 格式。 |
| 酒精棉片(皮肤准备) | NA(任何医疗供应商) | NA | 为改善电极/绑带接触和信号稳定性;如有,记录批号。 |
| 胸带式心电图心率变异性传感器(1000 Hz) | Polar Electro | Polar H10;货号 92075957 | 心电图衍生的R波–R 间期;采样频率 = 1000 Hz(根据您的方案);用于 5 分钟静息和 5 分钟标准化练习阶段。 |
| 认知负荷量表(Leppink,10项) | NA(出版来源) | NA | 7点李克特量表;计算3个子量表;若翻译:翻译–反向翻译 + 预试验 n=10;报告Cronbach系数’s α 按子量表。 |
| 用于平台操作和日志记录的计算机 | NA | NA | 任何现代笔记本电脑或台式机;记录操作系统版本;确保时间同步以保证日志时间戳准确。 |
| 数据存储(加密驱动器 / 安全服务器) | NA | NA | 访问控制;自动备份;文件命名: “P###_TP(治疗前/治疗后)_MOD(模块)…)_YYYYMMDD_HHMM”;存储原始数据及衍生数据。 |
| 心电图电极凝胶 / 导电凝胶(可选) | NA(任何医疗供应商) | NA | 若信号质量不稳定时使用;在实验记录中记录是否使用。 |
| 外置麦克风(若使用麦克风+音频接口而非录音机) | Audio-Technica | AT2020 | 可选的便携式录音设备替代方案;保持麦克风距离为0.8米;避免削波;记录增益设置。 |
| HRV 处理软件 | Kubios(或同等产品) | NA | 必须支持伪迹检测与插值、RMSSD/SDNN、Welch法HF(0.15–0.40 Hz,采用120秒时间窗、50%重叠率、汉明窗,4 Hz重采样;记录所用软件名称/版本。 |
| 节拍器 | Korg | MA-2 BLBK | 用于标准化练习节奏(76 bpm),并在不同训练阶段保持时间一致性。 |
| 便携式音频录音机(声音采集) | 缩放 | H1n | 以 16 kHz 单声道录制语音音频(若采样率更高则进行降采样);存储为 WAV 格式;保持麦克风位置固定。 |
| 功效分析软件 | G*Power | 3.1(或更高版本) | 用于先验功效分析;在功效分析输出文件中记录检验家族/模型设置。 |
| 实践伙伴大语言模型(LLM)服务 | 机构/安全 API 提供商 | LLM-PracticePartner v2.1(版本 2025-01-15) | 端点类型:云端;基于令牌的身份验证;仅存储匿名化ID;将提示/输出日志记录为加密文本。 |
| 问卷:GAD-7 | NA(许可/出版来源) | NA | 使用经过验证的语言版本;按手册进行评分;在研究文件夹中保留副本;按匿名编号存储应答数据。 |
| 问卷:STAI-S(20 项) | NA(授权方/出版方) | NA | 使用官方/验证过的语言版本;共20种–80;若为图表展示10项子集,需在结果部分说明选择规则及可靠性。 |
| 统计分析软件 | IBM | SPSS Statistics 26.0 | 用于协方差分析(ANCOVA)和t检验;在分析日志中记录确切的版本/构建号。 |
| 三脚架/相机支架 | 曼富图(或同等品牌) | NA | 任何稳定的三脚架均可使用;需在各次实验中固定距离和高度(例如,1.8 m 距离,1.4 m 高度)。若已确定型号,请将 NA 替换为本实验室使用的型号’型号。 |
| USB音频接口(如果使用麦克风+接口) | Focusrite | Scarlett 2i2(第3代) | 可选;目标记录峰位于之间 −12 dB 和 −强音段落期间衰减6 dB(根据您的方案文本)。 |
| 视频摄像机(1080p,30 fps) | 罗技 | C920;货号 960-001055 | 面部视频采集 = 1920×1080,30 帧/秒(按方案规定);确保不显示任何可识别信息。 |
| 带重锤键盘的数码钢琴(或原声钢琴) | NA | NA | 推荐使用88键配重键盘;所有实验环节应保持使用同一乐器;需记录乐器型号及键盘触感类型。 |
访问受限。请登录或开始试用以查看此内容。
申请许可以重复使用本 JoVE 文章的文本或图表
申请许可