2.12: 心理学实验的可靠性

1.定义的关键变量。

1. 创建操作定义 （即，到底什么的研究员手段，概念清楚地描述） 不适当的内容。
2. 请参阅定义由电视父母指导组织和联邦通信委员会批准。
3. 不适当的内容是任何原油或粗鲁的行为 （例如，厕所幽默），描写的口头或身体的侵略 （例如，名字被叫，击中，等）、 坏的语言 （例如，骂人的话） 或对使用毒品、 暴力或性的引用。

2.创建编码类别从业务定义的不适当的内容。

1. 为研究参与者 （这里称为评级） 设计一个系统的过程来确定目标、 不恰当行为的实例 （见表 1）。

表 1。如何记录实例的不恰当行为的例子。此日志可以在.评分系统使用

3.指示评分分别观看同一集里的海绵宝宝和提供编码计数。

4.指示评分分别观看卡尤同样的事件和提供编码计数。

5.比较来看是否评级来与每个节目的类似评级的评级。

1. 可靠性是一贯测量变量的能力 — — 不合适的内容。
2. 间的评分者信度是为更多人来衡量变量和他们的测量必须在协议的能力。

科学研究使用精确的方法来收集数据，但获取测量值的差异通常存在。

任何实验测量都可以评估可靠性，今天，我们将看看卡通片中不当行为的测量。

当观众就同一节目中多集的不适当内容数量达成一致时，他们的判断被认为是高度可靠的。在这种情况下，由于观察者之间的一致性，评估可以扩展到不同的节目，这称为评分者间可靠性。

此视频演示了如何设计和执行，以及如何分析和解释一个实验，该实验检查一个卡通是否比另一个卡通包含更多的不适当内容。

为了检查可靠性和评分者间可靠性，本实验中使用了主体内设计。参与者被要求观看两集不同的动画片？海绵宝宝和卡尤。

在观看卡通片的这种背景下，因变量是参与者观察到的不当行为的数量。这些行为包括：任何粗鲁和粗鲁的行为、不良语言、言语和身体攻击性，以及提及毒品和色情内容。

如果对特定卡通片的不适当内容进行评分存在可靠性，则参与者将始终如一地对该卡通片在不同剧集中进行评分。

此外，如果多个参与者对他们计算的不适当实例的数量达成一致，则存在评分者间可靠性。

因此，建立评分者间可靠性使研究人员能够使用相同的参与者来更有力地比较多个条件之间的数据。

要进行这项研究，请准备四个剪辑：来自两个不同卡通片的两个不同剧集，海绵宝宝和卡尤。

为了让参与者能够系统地识别不当行为的实例，请创建一个编码表，其中包含类别、具体示例和空间来计算每次出现的情况。

让参与者坐在屏幕前，递给他们四张编码表。指导参与者分别观看两集海绵宝宝。

当参与者观看每一集时，指导他们识别每一次发生的不当行为。

使用相同的编码方案，指示参与者观看 Caillou 的两集并对其进行评分。

分析参与者的可靠性？卡通内容的评级，比较卡通不同剧集中每个参与者之间的编码表。对主工作表上的所有响应求和。

绘制剧集和卡通中每个评分者的不当行为总数的图表。

请注意，在两个不同卡通片的评分中观察到了高可靠性，因为海绵宝宝的得分一直高于 Caillou。

然而，与 SpongeBob 相比，Caillou 中不适当内容的评分具有更强的评分者间可靠性。评分者间可靠性的降低在海绵宝宝第 2 集的评分中更为明显。

现在您已经熟悉了内容分析上下文中的可靠性，您可以将此方法应用于其他研究领域。

许多心理学实验通过利用认知评估和调查来收集信息，其中每个项目之间的可靠性在参与者之间必须一致。

神经生理学测量的可靠性，如脑电图或眼动追踪，对于进行可重复的实验至关重要。这种可靠性使研究人员能够在多个受试者的大脑功能和疾病状态之间建立关联。

此外，研究人员必须确保实验中的某些测量值随时间保持一致。例如，可靠地进行体重测量以比较锻炼前后的数据。

您刚刚观看了 JoVE 关于在心理学实验中确定可靠性的介绍。现在您应该很好地理解了如何量化心理结构（例如不当行为）、设计实验以及最后如何从结果中评估可靠性。

感谢观看！？