Overview
출처: 게리 레반도프스키,데이브 스트로메츠, 나탈리 시아로코-몬머스 대학교 의 연구소
과학적으로 무언가를 공부하기 위해, 연구원은 그것을 정량화하는 쪽을 결정해야 합니다. 그러나 심리적 구조는 측정하고 정량화하는 데 어려울 수 있습니다. 이 비디오는 콘텐츠 분석의 컨텍스트에서 신뢰성을 검사합니다.
저널 소아과의 최근 연구에 따르면 빠르게 진행되는 만화를 본 4세 어린이는 게임에서 규칙을 따르고, 성인의 지시를 듣고, 느린 진행 중인 만화를 본 다른 아이들에 비해 만족을 늦추는 등 인지 작업에 더 나쁜 성과를 보였습니다. 1 만화의 속도 외에도 만화의 콘텐츠는 젊은 시청자에게 해로운 영향을 미칠 수 있습니다.
이 비디오는 간단한 2 그룹 디자인을 사용하여 신뢰성 문제를 예시하여 만화 스폰지 밥 스퀘어 팬츠가 만화 카일루보다 더 부적절한 콘텐츠를 가지고 있는지 여부에 대한 질문을 검토합니다.
Procedure
1. 주요 변수를 정의합니다.
- 부적절한 콘텐츠에 대한 운영정의(즉,연구원이 개념에 의해 의미하는 바를 정확하게 설명)를 만듭니다.
- 조직 TV 부모 지침에 의해 생성 되고 연방 통신 위원회의 승인을 받은 정의를 참조하십시오.
- 부적절한 내용은 조잡하거나 무례한 행동(예 :화장실 유머), 언어 적 또는 신체적 침략묘사(예 :이름 부르기, 타격 등),나쁜 언어(예 :저주 단어), 또는 약물 사용, 폭력 또는 성별에 대한 참조입니다.
2. 부적절한 콘텐츠의 운영 정의에서 코딩 범주를 만듭니다.
- 연구 참가자를 위한 체계적인 프로세스(여기에 평가자로 지칭)를 설계하여 표적적이고 부적절한 동작의 인스턴스를 식별합니다(표 1참조).
| 코딩 범주 | 테마 및 모범 | 세다 |
| 원유 행동 | 화장실 유머 의도적으로 역겨운 행동 |
|
| 무례한 행동 | 다른 사람을 방해 가난한 매너 |
|
| 언어 | 저주 단어 사용 | |
| 언어적 침략 | 모욕 소리 이름 호출 |
|
| 물리적 침략 | 타격 밀기/밀기 일인가 |
|
| 약물 참조 | 구두(암시적 진술/대화) 비언어적 (약물 사용을 모방) |
|
| 성적 참조 | 구두(암시적 진술/대화) 비언어적 (성행위를 모방) |
표 1. 부적절한 동작의 인스턴스를 기록하는 방법의 예입니다. 이 로그는 요금자 간에 체계적으로 사용할 수있습니다.
3. 평가자가 스폰지 밥 스퀘어 팬츠의 동일한 에피소드를 별도로 보고 코딩 수를 제공하도록 지시합니다.
4. 평가자가 Caillou의 동일한 에피소드를 별도로 보고 코딩 수를 제공하도록 지시합니다.
5. 등급을 비교하여 각 쇼에 대해 평가자가 비슷한 등급을 내왔는지 확인합니다.
- 신뢰성은 변수와 부적절한 콘텐츠를 일관되게 측정하는 기능입니다.
- 인터 레이터 신뢰성은 두 명 이상의 사람이 변수를 측정하고 측정이 일치하는 기능입니다.
과학적 연구는 데이터를 수집하기 위해 정확한 방법을 사용하지만 측정을 얻는 데 가변성이 종종 존재합니다.
모든 실험 측정에 대한 신뢰성을 평가할 수 있으며, 오늘날 만화에서 부적절한 행동을 측정할 수 있습니다.
시청자가 동일한 프로그램 내에서 부적절한 자료의 양에 동의할 때, 여러 에피소드에서 그들의 판단은 매우 신뢰할 수 있는 것으로 간주됩니다. 이 경우 평가는 인터 레이터 신뢰성이라고 하는 관찰자 간의 일관성 때문에 서로 다른 쇼에서 확장될 수 있습니다.
이 비디오는 한 만화가 다른 만화보다 더 부적절한 콘텐츠를 가지고 있는지 여부를 조사하는 실험뿐만 아니라 디자인 및 수행 방법뿐만 아니라 분석 및 해석 방법을 보여줍니다.
신뢰성과 인터레이터 의 신뢰성을 검사하기 위해 이 실험에서 피험자 내 설계가 사용됩니다. 참가자들은 스폰지 밥 스퀘어 팬츠와 카일루라는 두 가지 만화의 두 에피소드를 시청하도록 요청받습니다.
만화 시청의 맥락에서, 종속 변수는 참가자가 관찰하는 부적절한 행동의 수입니다. 여기에는 조잡하고 무례한 행동, 나쁜 언어, 언어적, 신체적 침략, 약물 및 성적 콘텐츠에 대한 언급 등이 포함됩니다.
특정 만화의 부적절한 콘텐츠 점수에 신뢰성이 있는 경우 참가자는 해당 만화를 다양한 에피소드에서 일관되게 평가합니다.
또한 여러 참가자가 계산하는 부적절한 인스턴스 수에 동의하는 경우 인터레이터 신뢰성이 존재합니다.
따라서, 인터 레이터 신뢰성을 확립하면 연구원은 동일한 참가자를 사용하여 여러 조건 간의 데이터를 보다 강력하게 비교할 수 있습니다.
연구를 수행하기 위해, 네 개의 클립을 준비: 두 개의 서로 다른 만화에서 두 개의 서로 다른 에피소드, 스폰지 밥 네모 바지와 카일루.
참가자가 부적절한 동작의 인스턴스를 체계적으로 식별할 수 있도록 범주, 구체적인 예제 및 공간이 있는 코딩 시트를 만들어 각 발생을 계산합니다.
참가자가 화면 앞에 앉아 있는 가운데 코딩 시트 4장을 건네주면 됩니다. 참가자에게 스폰지밥 스퀘어팬츠의 두 에피소드를 별도로 시청하도록 지시합니다.
참가자가 각 에피소드를 시청할 때 부적절한 행동의 모든 발생을 식별하도록 지시합니다.
동일한 코딩 체계를 사용하여 참가자에게 Caillou의 두 에피소드를 보고 평가하도록 지시합니다.
참가자의 만화 콘텐츠 등급의 신뢰성을 분석하려면 각 참가자 간의 코딩 시트를 만화의 다양한 에피소드에서 비교합니다. 마스터 시트의 모든 응답을 합산합니다.
에피소드와 만화에서 각 평가자의 부적절한 동작 수를 그래프로 기록합니다.
스폰지 밥은 지속적으로 Caillou보다 높은 점수로, 두 개의 서로 다른 만화의 점수에서 높은 신뢰성이 관찰되었다는 점에 유의하십시오.
그러나, 스폰지밥에 비해 Caillou에서 부적절한 콘텐츠의 점수에서 더 강한 인터 레이터 신뢰성이 발견되었다. 스폰지 밥의 에피소드 2의 점수에 감소 인터 레이터 신뢰성이 더 분명했다.
콘텐츠 분석의 맥락에서 신뢰성에 익숙해지면 이 방법을 다른 연구 영역에 적용할 수 있습니다.
많은 심리적 실험은 각 항목 간의 신뢰성이 참가자 간에 일치해야 하는 인지 평가 및 설문 조사를 활용하여 정보를 수집합니다.
EEG 또는 아이트래킹과 같은 신경 생리학적 조치의 신뢰성은 반복 가능한 실험을 수행하는 데 필수적입니다. 이 신뢰성은 연구원이 여러 과목에 걸쳐 뇌 기능과 질병 상태 사이의 연결을 만들 수 있습니다.
또한 연구원은 실험에서 특정 측정이 시간이 지남에 따라 일관되도록 해야 합니다. 예를 들어, 체중 측정은 운동 루틴 전후의 데이터를 비교하기 위해 안정적으로 수행됩니다.
당신은 단지 심리적 실험에서 신뢰성을 결정하는 JoVE의 소개를 보았다. 이제 부적절한 행동과 같은 심리적 구조를 정량화하고, 실험을 설계하고, 결과에서 신뢰성을 평가하는 방법을 잘 이해해야 합니다.
시청해 주셔서 감사합니다!
Subscription Required. Please recommend JoVE to your librarian.
Results
결과는 평가자가 높은 인터 레이터 신뢰성을 나타내는 각 만화 에피소드 내에서 자신의 등급에 높은 수준의 동의 또는 일관성을 가지고 있음을 나타냅니다(그림 1). 또한 스폰지 밥 스퀘어 팬츠 에피소드는 Caillou보다 더 부적절한 콘텐츠를 갖는 신뢰성이나 일관성이 있다. 결과는 또한 평가자 사이 개별적인 편견을 밝혔습니다. 예를 들어, Rater 3은 다른 2명의 평가자보다 스폰지밥에서 더 부적절한 콘텐츠를 보고했으며, 평가자 1은 다른 평가자보다 Caillou에서 더 적은 것으로 보고되었습니다.
그림 1. 에피소드 1(위) 및 2(아래)에 대한 평가자와 만화에 의한 부적절한 콘텐츠의 인스턴스입니다.
Subscription Required. Please recommend JoVE to your librarian.
Applications and Summary
연구원은 점점 텔레비전의 콘텐츠를 분석하는 쪽으로 그들의 관심을 돌리고 있다, 특히 그것은 아이 들에 관한. 이 현재 실험 에 앞서 설명 한 바와 같이, 저널 소아과의 최근 연구는 그것을 보는 아이들에 있는 상대적으로 가난한 인지 능력에 스폰지 밥 SquarePants 만화의 빠른 속도를 상관.
우리의 실험의 결과가 믿을 수 있는 것처럼 보이기 때문에, 미래 연구는 스폰지 밥에 있는 부적당한 내용의 상대적인 양이 또한 (또는 또는 대안적으로) 보는 후에 아이들의 더 낮은 인지 성과에 책임 있는지 여부를 검토할 수 있었습니다.
신뢰성의 가장 중요한 응용 프로그램 중 하나는 설문 조사 도구의 사용에. 연구원은 참가자가 지속적으로 특정 규모의 항목의 각 답변을 해야합니다. 즉, 5항목의 삶의 만족도 측정에서 참가자는 질문 3, 4, 5와 다소 유사한 방식으로 항목 1과 2에 답해야 합니다. 또한, 연구원은 실험에 있는 그들의 측정이 시간이 지남에 따라 일관되다는 것을 확인하고 싶습니다. 따라서 연구원이 자극에 대한 관심을 나타내기 위해 동공 팽창을 사용하는 경우, 연구원은 학생 팽창이 관심의 일관된 지표인지 확인해야합니다.
Subscription Required. Please recommend JoVE to your librarian.
References
- Lillard, A. S., & Peterson, J. The Immediate Impact of Different Types of Television on Young Children's Executive Function. Pediatrics. 128(4):644-9. doi: 10.1542/peds.2010-1919 (2011).
