방법 논문

국제 중국어 교실에서 다문화 커뮤니케이션을 위한 과제 기반 학습 구현

DOI:

10.3791/71324

2026년 7월 10일

이 논문에서

요약

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 파일럿 프로토콜은 대학 수준의 국제 중국어 교실에서 과제 기반 학습과 발표-실습-생산의 군집 무작위 비교를 설명하며, 실용적 수행, 문화 간 민감성, 구어 유창성, 말하기 불안에 대한 실현 지향적 대표성을 제공합니다.

초록

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

국제 중국어 프로그램은 학습자들이 언어적으로 정확할 뿐만 아니라 실용적으로도 적절한 방식으로 문화 간 상호작용을 관리하도록 점점 더 요구하고 있습니다. 이 파일럿 방법 기사는 대학 수준의 국제 중국 교실에서 과제 기반 학습과 프레젠테이션-실습-생산을 비교하는 교실 프로토콜을 제시합니다. 이 프로토콜은 매칭된 교육 내용, 잠긴 교육 및 평가 자료, 마스크드 등급, 재현 가능한 유창성-정확성-복잡도 추출, 스크립트화된 클러스터 분석 워크플로우를 결합하여 방법론적 투명성을 향상시키도록 설계되었습니다. 완전한 수업은 두 가지 교육 조건 중 하나에 반 단위로 배정되며, 결과는 기초선, 시험 직후, 추적 관찰에서 구두 담화 완성 과제, 영상 역할극 평가, 문화 간 민감성 및 외국어 말하기 불안 평가 설문지, 그리고 음성 기반 유창성, 정확성, 복잡성 지수를 통해 수집됩니다. 중국어 능력 시험 3단계 이상의 성인 학습자 48명과 48명의 완전한 반을 대상으로 한 단일 사이트 시범 시범 실행에서, 이 워크플로우는 세 평가 모두에서 분석 가능한 교실, 평가, 설문지, 언어 데이터를 생성했습니다. 기술적 파일럿 결과물에서는 과제 기반 조건에서 화용적 적합성, 문화 간 민감성, 분당 단어 수에서 더 큰 향상이 관찰되었으며, 말하기 불안도 감소했습니다. 이 프로토콜은 매우 소규모의 군집 표본에서 시범 시범 시범 시행되었고, 교수 및 교사 수준의 혼란에 취약하기 때문에, 이러한 결과는 비교 효과에 대한 강력한 증거보다는 실현 가능성 지향적 대표성 산출물로 의도되었습니다. 이 프로토콜은 국제 중국어 및 관련 제2외국어 환경에서 향후 다중 클래스 또는 다중 사이트 구현, 적응 및 개선을 위한 재현 가능한 틀을 제공합니다.

서론

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 프로토콜은 강력한 비교 주장을 뒷받침하기 위한 효능 시험보다는 대학 수준의 국제 중국어 교실에서 다문화 커뮤니케이션을 위한 과제 기반 교수법을 시행하고 평가하기 위한 시범 프로토콜을 제시합니다. 국제 중국어 프로그램에서는 학습자들이 문법적으로 허용되는 발화 이상의 것을 점점 더 기대받고 있습니다. 또한 사회적·문화적으로 민감한 상황에서 적절한 대응을 기대하며, 성공적인 상호작용은 실용적 선택, 관계적 위치 선정, 시간 압박 속에서 언어 조정 능력에 달려 있습니다 1,2,3. 성인 대학 학습자들에게 이는 지속적인 교수적 도전으로 남아 있는데, 어휘와 문법의 발전이 자발적 문화 간 상호작용에서 반드시 맥락에 적합한 수행으로 이어지지 않기 때문입니다.

과제 기반 학습은 의미 중심 활동을 수업의 중심에 두고 학습자가 의사소통 필요에 대응해 언어 자원을 동원할 기회를 제공하기 때문에 이 도전에 적합한 접근법으로 자주 제안되어 왔습니다. 반면, 제시-실천-생산은 일반적으로 명시적 발표에서 통제된 실천, 그리고 제한된 생산으로 전환되며, 이는 형식 중심 학습을 지원할 수 있지만 교차문화 커뮤니케이션에서 요구되는 우발적 실용적 결정을 일관되게 이끌어내지는 못할 수 있다 5,6. 동시에, 이 영역에서의 성과는 단일 결과 유형만으로는 이해할 수 없습니다. 화용적 적절성, 상호작용 수행, 학습자 보고된 문화 간 지향, 말하기 관련 불안, 그리고 말하기 기반 유창성, 정확성, 복잡성은 각각 학습자가 문화 간 의사소통 과제에 참여하는 방식의 서로 다른 측면을 포착합니다 7,8.

교수과정 비교에 대한 지속적인 관심이 있었음에도 불구하고, 이전 교실 연구들은 해석과 재현이 종종 어렵게 남아 있었습니다. 작업 절차가 항상 충분히 상세하게 설명되는 것은 아닙니다; 교육 내용은 주에 따라 다를 수 있으며; 문화 간 상황은 때때로 느슨하게 운영되기도 하며; 채점, 평가자 교육, 데이터 처리 단계가 종종 과소보고됩니다. 그 결과, 관찰된 차이는 수업 순서뿐만 아니라 과제 설계, 교사 전달, 측정 절차 또는 분석 선택의 변동도 반영할 수 있습니다 9,10. 이러한 우려는 특히 교실 단위 배분이 유일한 실질적 선택지인 온전한 교실 연구에서 중요한데, 이는 교사 영향, 수업 효과, 오염 위험을 초래하여 특히 클러스터 수가 매우 적은 단일 현장 파일럿에서 해소하기 어려울 수있습니다.

따라서 본 프로토콜의 기여는 방법론적입니다. 이 도구는 조건 간 매칭된 의사소통 시나리오와 목표 표현, 고정된 교육 및 평가 자료, 보정된 블라인드 루브릭 기반 채점, 음성 기반 유창성-정확성-복잡도 특성의 재현 추출, 그리고 단일 청취 가능한 교실 설계 내에서 스크립트화된 클러스터 분석 워크플로우를 결합합니다12,13. 문화 간 의사소통은 구두 담화 완료 과제와 사회적 상호작용 문제에 대응하도록 요구하는 영상 역할극 시나리오를 통해 실질화되며, 문화 간 민감성과 말하기 불안은 고정된 점수 규칙이 있는 구조화된 설문지를 통해 측정됩니다. 이 조합은 단일 교육 영향 지표에 의존하기보다는 학습자 성과의 상호 보완적 측면을 포착하기 위한 것입니다14.

현재 구현은 한 기관, 중국어 능력 시험 3단계 이상의 성인 대학 학습자, 그리고 4개의 완전한 학급으로 제한되어 있으므로, 프로토콜의 시범 실현 가능성 적용으로 해석되어야 합니다. 이러한 조건에서는 해결되지 않은 교사 및 학급 수준의 혼란을 배제할 수 없으며, 조건 간 차이는 비교 효과의 강력한 증거보다는 기술적 대표성 산출물로 간주되어야 합니다15. 이러한 한계 내에서 프로토콜은 교실 전달, 평가, 평가, 전사, 음성 특징 추출, 군집 종단 분석을 투명하고 재현 가능한 틀로 제공하도록 설계되었으며, 이는 향후 국제 중국어 교육 및 관련 제2외국어 환경에서 다학급 또는 다중 장소 연구에서 다정하게 다듬어질 수 있습니다16.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

프로토콜

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 연구는 윈난 경영대학 윤리위원회의 규정에 따라 승인 번호 [승인 번호] YCBM-25168]. 등록 전에 각 예비 참가자에게는 연구 목적, 교실 절차, 오디오 비디오 녹화, 비식별화, 자발적 참여, 학업 불이익 없는 철회 권리가 명시된 서면 안내문이 제공되었습니다. 연구 참여와 촬영에 관한 서면 동의서가 연구 특정 절차를 수행하기 전에 확보되었습니다17. 프로토콜 내 연구 도구들은 재료표에 나열되어 있습니다.

1. 수업, 성과, 평가 일정을 설정하세요

  1. 대상 대상 집단과 교육 환경을 정의하세요
    1. 명확한 구두 의사소통 목표를 가진 대학 수준의 국제 중국어 수업에 등록된 성인 비원어민 중국어 학습자를 식별합니다.
    2. 할당 단위로 온전한 클래스를 사용하세요. 정규 학기 일정 내에서 주 1회 세션과 50분 수업으로 구성된 6주 간 교차문화 커뮤니케이션 모듈을 하나 시행하세요.
    3. 파일럿 실행에서는 4개의 완전한 클래스를 포함하고, 각 클래스당 12명의 학습자를 포함시켜 48명의 학습자를 계획한 샘플을 산출합니다.
    4. 같은 수석 강사가 두 조건을 고정된 수업 계획과 표준화된 시간 방식으로 가르치세요. 두 교육 부서를 평일에 다르게 배치하고, 개입 기간 내내 수업 명단을 고정하며, 지정된 교실 세션 외에 해당 교실 전용 교재 배포를 금지하여 환경 간 오염을 줄이세요.
  2. 1차, 지지, 2차 결과를 정의하세요
    1. 실용적 수행을 주요 교실 수행 영역으로 정의하세요. 두 가지 보조 도구를 사용하여 평가합니다: 구두 담화 완성 과제(ODCT)와 영상 역할극 평가입니다.
    2. 각 시점마다 5개의 ODCT 프롬프트를 투여하세요. ODCT는 네 가지 미리 정해진 영역(화용적 적합성(0-10), 사회문화적 정렬(0-5), 담화 완전성(0-5), 언어 통제(0-5))를 사용하여 0-25 복합 척도로 점수를 매깁니다. 네 개의 도메인 점수를 합산하여 총 ODCT 점수를 얻습니다. 보조 파일 1에 고정된 ODCT 프롬프트를 제공하세요.
    3. 각 시점마다 한 쌍 또는 삼인회당 한 번씩 촬영된 역할극 과제를 실시하세요. 역할극을 네 가지 미리 정해진 영역(상호작용 적합성(0-10), 반응성 및 수리(0-5), 관계적 자세 관리(0-5), 언어 통제(0-5))를 사용하여 별도의 0-25 복합 척도에 점수를 매깁니다. 최종 점수를 두 명의 마스크드 평가자의 평균으로 계산합니다. 두 점수가 3점 이상 차이가 나면 세 번째 마스크드 등급을 얻고 두 점수의 평균으로 최종 점수를 계산합니다.
    4. 문화 간 민감도를 측정하며, 중국-영어 이중 언어 종이 형태로 24문항을 5점 리커트 척도에 반영하고 총 점수 범위는 24-120입니다.
    5. 말하기 불안을 측정하는 것은 짧은 형식의 외국어 교실 불안 척도로, 동일한 중국-영어 이중 언어 형식으로 8문항을 5점 리커트 척도로 채점하고 총 점수 범위는 8-40이며, 점수가 높을수록 말하기 불안이 더 심함을 나타냅니다.
    6. 지원 음성 생성 결과를 역할극 녹음에서 도출된 유창성-정확성-복잡도 지수로 정의하는데, 여기에는 분당 단어, 분당 0.25초 이상의 무음 정지, 최소 한 가지 형태-구문 오류를 포함한 T-단위 비율, 평균 절 길이 등이 포함됩니다.
    7. 문화 민감도 척도의 경우, 2개 이상의 문항이 답변되지 않으면 총 점수를 누락으로 간주하세요. 그렇지 않으면 누락된 항목을 해당 척도에서 완료한 항목에 대한 응답자의 평균 점수로 대체하세요. 짧은 형식의 외국어 교실 불안 척도에서는 2개 이상의 문항이 답하지 않으면 총 점수를 누락으로 간주하세요. 그렇지 않으면 빠진 항목을 해당 척도에서 완료한 항목에 대한 응답자의 평균 점수로 대체하세요.
    8. 연령, 성별, 모국어 그룹, 중국어 능력 시험 수준, 중국어 사용 환경 노출 여부를 포함한 교육 조건별로 기본 학습자 프로필을 요약하세요. 이 변수들을 표 1 에 기술적으로 보고하여 4개 클러스터 파일럿에서 기준선 동등성을 주장하기보다는 코호트 구성을 문서화하세요.
  3. 평가 시점을 정하고 연구 흐름을 그려내세요
    1. 평가 시점을 세 가지로 설정하세요: 기준선(T0, 첫 번째 개입 수업 3일 전), 검사 직후 측정(T1, 마지막 수업 후 5일 이내), 추적관찰(T2, 정확히 28일 후).
    2. 각 시점마다 ODCT를 먼저 실시하고, 촬영된 롤플레잉을 그 다음에, 설문지를 마지막으로 실시하세요. 이 순서는 모든 클래스에서 동일하게 유지하세요.
    3. 스크리닝, 동의, 학급별 배정, 결과별 완료, 제외, 탈락, 최종 분석 등을 연구 전반에 걸쳐 기록하여 전체 참가자 흐름을 그림 118에 투명하게 제시할 수 있도록 합니다.

2. 재료 잠금, 클러스터 랜덤화 실행, 마스킹 강제

  1. 교수 및 평가 자료 동결
    1. 고정된 교수법 및 평가 자료는 첫 번째 개입 수업 전에 잠긴 학습 폴더에 보관하세요.
    2. 첫 수업 전에 잠긴 학습 폴더를 읽기 전용으로 설정하고, 데이터 수집 내내 변경하지 마세요.
    3. 수정이 어쩔 수 없을 때만 새 폴더 버전을 생성하세요. 모든 변경 사항, 날짜, 이유, 책임자를 평문 변경 로그에 기록하세요.
    4. 워크플로우에서 사용된 정확한 소프트웨어 버전을 기록하세요. 여기에는 Praat v6.4.58, ELAN v7.0, Audacity v3.7.7, R v4.5.2, tidyverse v2.0.0, lme4 v1.1-38, emmeans v2.0.1, lmerTest v3.2-0 등이 포함됩니다.
  2. 고정된 시드로 클래스 수준 할당을 생성합니다
    1. 할당 전에 온전한 각 클래스에 고유 식별자(C1-C4)를 할당하세요.
    2. R v4.5.2에서 고정된 무작위 시드 20260301을 사용해 할당 시퀀스를 생성합니다. 파일럿에는 네 개의 완전한 클래스만 있으니 차단이나 계층화 없이 단순한 1:1 무작위 할당을 사용하세요.
    3. 연구 코디네이터에게 할당 순서를 생성하게 하세요. 이 코디네이터가 교실 수업, 평가, 식별된 자료의 채점에 관여하지 않도록 하세요. 같은 코디네이터가 기본 명단을 정한 후, 첫 개입 수업이 시작되기 전에 수업을 배정하게 하세요.
    4. 할당 날짜와 시간, 시드 값, 무작위화 방법, R 버전, 시퀀스 생성기 이름, 클래스를 할당한 사람 이름, 그리고 sessionInfo() 출력을 기록하세요.
  3. 접근을 제한하고, 오염을 최소화하며, 상태 라벨을 가리세요
    1. 할당 파일 접근을 연구 코디네이터에게 제한하고, 모든 식별 해제된 데이터셋과 분리하여 보관하세요.
    2. 두 분야 모두 같은 수석 강사를 사용하되, 두 병을 다른 평일에 배치하고, 해당 세션 중에만 인쇄물을 배포하며, 교실 외 시간에 해당 병 관련 파일을 유통하지 않도록 하세요.
    3. 학습자들에게 T2 데이터 수집이 완료될 때까지 학습 자료, 스크린샷, 역할극 프롬프트를 다른 반 학생들과 공유하지 말라고 지시하세요.
    4. 식별 해제된 데이터를 처리하는 평가자 및 직원의 상태 라벨은 파일명, 평가표, 전사본, 분석 데이터셋에서 중립적인 상태 코드를 사용하여 가립니다.
    5. 명세서, 평가표, 성적 기록, 분석 파일에서 중립적인 식별자(class_id, student_id, pair_id)를 사용하세요. 연결 파일은 별도의 안전한 기관 저장소에 보관하세요.
      주의: 평가자가 할당 파일, 주간 수업 계획, 또는 수업 조건을 직접 드러내는 원시 파일 이름에 접근하지 못하게 하십시오.

3. 온전한 학급을 모집하고 맞춤형 교육을 제공한다

  1. 온전한 클래스를 모집하고 허가를 받으세요
    1. 학생에게 연락하기 전에 강의 코디네이터와 수석 강사의 허가를 받으세요.
    2. 구두 의사소통을 공식 수업 목표로 포함하고 같은 학기 내에 6주 모듈을 완수할 수 있는 완전한 수업을 모집하세요.
  2. 상영 자격 및 서면 동의 수집
    1. 나이, 성별, 모국어, 중국어 능력 시험 수준, 그리고 지난 2년간 중국어권 지역에서 머문 시간을 기록하는 선별 및 동의서를 시행합니다.
    2. 중국어 능력 시험 3단계 이상에 도달한 성인 비원어민 중 최근 2년 동안 3개월 이상 중국어권 지역에 거주하지 않은 학생도 포함합니다.
    3. 롤플레잉 녹화가 프로토콜의 필수 요소이므로 촬영에 동의하지 않는 학습자는 제외합니다.
  3. 기본 특성 구축 및 문서화
    1. 각 동의한 참가자에게 student_id를 할당하고, 연결 파일을 식별 해제된 데이터셋과 별도로 저장하세요.
    2. 기본 파일에 학습자당 한 행씩 입력하며, 상태, class_id, 연령, 성별, 모국어 그룹, 중국어 능력 시험 수준, 중국어 사용 환경 노출 여부를 입력하세요.
    3. 지침 조건별로 기초 특성을 기술적으로 기록하여 표 1에 나중에 보고할 수 있도록 합니다. 이를 계급 수준의 혼란이 제거되었다는 증거로 해석하지 마십시오.
  4. 조건별로 맞는 강의 계획서를 준비하세요
    1. 동일한 의사소통 시나리오, 의사소통 기능, 목표 표현을 사용하여 과제 기반 학습과 발표-실습-생산을 위한 병행 주간 강의계획서를 만듭니다.
    2. 양쪽 모두에서 같은 6개의 주간 주제를 사용하세요: 교실 내 의견 차이, 교사 상담, 동료 협력, 호스트-가족 상호작용, 인턴십 소통, 공익 서비스 상호작용.
    3. 주간 수업 일정, 목표 표현 매핑, 역할극 시나리오의 독자 대상 버전을 보 충 파일 1에서 수집하세요.
  5. 고정된 작업 주기를 사용하여 작업 기반 학습 수업을 제공합니다
    1. 시나리오와 의사소통 목표를 중국어로 5분간 소개하세요.
    2. 소규모 그룹으로 5분간 계획 단계를 진행하세요.
    3. 주요 과제 단계는 18분 동안 2인 또는 3인조로 진행하며, 교사의 개입은 과제 지침 설명에 한정됩니다.
    4. 20분간 반성과 피드백 단계를 진행하며, 언어 선택, 상호작용 전략, 실용적 적절성, 그리고 수리에 초점을 맞추세요.
    5. 여섯 개의 과제 기반 수업에서 동일한 달성된 타이밍을 사용하세요, 불가피한 차이가 없는 한 말이죠. 충실도 로그에 편차가 있으면 기록하세요.
  6. 프레젠테이션-실습-제작 수업을 내용과 타이밍에 맞춰 제공합니다
    1. 예시 대화나 투사 자료를 사용해 목표 표현과 문장 패턴을 16분 동안 제시하세요.
    2. 16분간 통제된 연습을 실시하며, 목표 형태의 정확한 제작에 집중합니다.
    3. 동일한 주간 시나리오와 목표 표현을 사용하여 16분간 제한 생산을 수행하세요.
    4. 전체 수업 시간, 주제 범위, 시나리오 내용을 해당 과제 기반 수업과 맞추세요. 모든 편차를 충실도 로그에 기록하세요.
  7. 각 수업 후 수업 진실도를 기록하세요
    1. 각 수업 후에는 날짜, 클래스, 시나리오 라벨, 각 단계의 실현 지속 시간, 계획된 구조에서 벗어난 모든 부분(시나리오, 목표 표현, 시간 할당의 예기치 않은 변경을 포함)을 기록하세요.
    2. 충실도 기록은 처리된 연구 기록 아래에 스프레드시트에 저장하세요.
    3. 만약 주요 충실도 편차가 발생하면, 세션을 연구 파일에 유지하고, 충실도 로그에 표시하며, 세션을 사후에 삭제하지 않고 최종 보고서에서 편차를 설명하세요.
      참고: 일반적인 충실도 편차에는 교실 중단으로 인한 작업 시간 단축, 임시 장비 재배치, 계획된 피드백 단계 누락 등이 포함됩니다. 이 사건들을 조용히 삭제하기보다는 기록하고 해석하세요.

4. 평가 수행, 미디어 기록 및 성과 점수 매점

  1. 각 시점마다 ODCT를 시행합니다
    1. 고정된 프롬프트 세트를 사용해 ODCT 프롬프트를 종이에 하나씩 제시하세요.
    2. 프롬프트당 30초의 계획 시간을 허용하고, 프롬프트당 음성 응답 한 번을 녹음하며, T0, T1, T2 전반에 걸쳐 계획 시간 설정을 일정하게 유지하세요.
  2. 역할극을 관리하고 상호작용을 기록하세요
    1. 서면 시나리오와 역할 카드를 제공하고 2분간 계획할 시간을 주세요.
    2. 각 쌍이나 삼차일당 8분 상호작용을 한 번 기록하고, 목표 상호작용 시간을 시간대에 걸쳐 일정하게 유지하세요.
    3. 각 역할극을 사회적 선택의 문제(예: 의견 차이, 요청 완화, 얼굴 관리, 명확화, 또는 서로 다른 기대 하에서의 수리)를 포함하는 문화 간 소통 시나리오로 정의하세요.
  3. 기록을 표준화하고 미디어 매니페스트를 만드세요
    1. 공부 내내 같은 디지털 비디오 카메라와 같은 외부 마이크를 사용하세요.
    2. 모든 세션을 1920 × 1080 해상도, 30프레임/초, 48 kHz 오디오 샘플링으로 녹음하세요. 첫 녹음일 이후로는 입력 게인 설정을 그대로 유지하세요.
    3. 외부 마이크를 스피커에서 약 60cm 떨어진 쌍 또는 트라이어드 테이블 중앙에 놓고, 스터디 녹음 체크리스트에 세팅을 기록하세요.
    4. 각 파일을 표준화된 파일 이름 인코딩 class_id, student_id 또는 pair_id, 타임포인트, 작업 유형으로 저장하세요.
    5. 모든 녹화 파일을 RAW-미디어 폴더에 저장하세요. 파일명, 파일 크기, 기술 노트, 체크섬을 나열한 매니페스트를 만들고, 모든 원본 미디어 파일에 대해 SHA-256 체크섬을 계산하세요.
      참고: 모든 파일이 읽기 가능하고 체크섬이 명세서와 일치하는지 확인한 후, raw-media 폴더를 읽기 전용으로 설정하고, processed-study 폴더에 저장된 복사본에 대해 모든 후속 처리를 수행합니다.
  4. 평가자를 훈련시키고 실용적 수행을 맹인 상태에서 평가합니다
    1. 중국어 교육이나 언어 평가 경험이 있는 2명의 1차 평가자와 1명의 예비 평가자를 모집하고, 누구도 수업 배정에 접근할 수 없도록 하세요.
    2. 12개의 ODCT 응답과 6개의 역할극 녹음으로 구성된 보정 세트를 제공하고, 시간대와 상태 코드에 걸쳐 균형을 맞추고, 공식 점수 채점이 시작되기 전에 이 세트를 선택하세요. 결과 패턴을 검사한 후에는 보정 세트를 변경하지 마십시오.
    3. R v4.5.2의 클래스 내 상관계수 ICC(2,k)를 사용하여 평가자 간 합의를 계산합니다. ICC가 최소 0.75에 도달할 때까지 보정을 반복하고, ICC 유형, 보정 세트 크기, ICC 값, 정지 결정 등을 처리된 연구 기록 아래에 저장하는 보정 로그 파일에 기록합니다19.
    4. 공식 채점 시에는 익명화된 파일을 평가자에게 무작위 순서로 할당하고, class_id, student_id, 시간, 작업 유형, rater_id, 점수 필드가 포함된 스프레드시트에 점수를 기록하세요.
    5. 두 차례의 재보정 라운드 후에도 미리 정해진 신뢰도 임계값에 도달하지 못하면, 공식 점수 매기기를 중단하고, 보정 자료를 수정하며, 훈련을 재개하고, 사건을 보정 로그에 투명하게 기록하세요.
      주의: ICC 기준에 도달하고 문서화될 때까지 공식 점수 산정을 시작하지 마십시오.
  5. 역할극 녹음을 전사하고 유창성-정확성-복잡도 지수를 계산합니다
    1. T0, T1, T2 양쪽 팔에서 분석 가능한 모든 역할극 녹음을 전사하세요. 결과 검사 후에는 사후 샘플링을 하지 마십시오.
    2. ELAN 주석을 UTF-8 탭 구분된 텍스트로 내보내 처리된 연구 성적표 폴더에 저장하세요.
    3. 모든 파일에 동일한 전사 규칙과 세분화 규칙을 적용하세요. 읽기 대상 루브릭, 설문지 채점 규칙, 전사 지침, 오류 분류법을 보조 파일 2에 정리하세요.
    4. 각 전사본을 T-단위와 절로 나누세요. 녹음 세그먼트 수, 화자 라벨, 그리고 대본에 제외되는 항목들을 확인하세요.
    5. Praat v6.4.58을 사용해 오디오 타이밍을 점검하고 일시정지 기반 측정값을 계산하며, 무음 일시정지 임계값은 0.25초로 고정됩니다.
    6. 분당 단어 수를 계산하는 고정 규칙을 사용하며, 반복된 어휘 항목은 즉시 자기 수정이 완료되기 전에 포기된 경우를 제외하고 생산된 단어로 간주합니다. 말하기 시간을 학습자의 음성 출력의 총 시간으로 정의하는데, 시험관 지시와 비과제 설정 말은 제외합니다.
    7. 분당 0.25초 이상의 무음 정지, 최소 한 가지 이상의 형태-구문 오류를 포함하는 T-단위 비율, 그리고 총 단어를 총 절수로 나눈 평균 절 길이를 계산합니다.
    8. 모든 화자 수준의 유창성, 정확성, 복잡도 기능을 하나의 장포맷 파일에 작성하고, 학습자당 시간대에 한 행씩 작성합니다.
    9. 기술적 결함이나 복구 불가능한 스피커 중복으로 녹음이 사용할 수 없을 경우, 이유를 기록하고, 파일 레코드를 명세서에 보관하며, 파생된 특징을 누락된 것으로 코딩한 뒤, 제외 내용을 그림 1 의 참가자 흐름 기록과 최종 결과 내러티브로 이어가세요.
  6. 설문지를 실시하고 결과 데이터셋을 구성합니다
    1. 구두 과제를 완료한 후 각 시점에서 문화 간 민감성 척도와 간편 외국어 교실 불안 척도를 시행합니다.
    2. 학습자가 교실을 나가기 전에 가능한 한 설문지에서 누락된 항목을 확인하세요.
    3. 설문지가 불완전할 경우, 1.2.7절 에 설명된 사전 정해진 항목 규칙을 적용하고 결과 누락 결과를 분석 로그에 문서화하세요.
    4. ODCT 점수, 역할극 점수, 유창성-정확성-복잡도 특징 파일, 설문지 점수를 하나의 장기 형식 데이터셋으로 통합하며, 학습자당 시간대에 한 행씩 할당합니다.

5. 적합 모델 및 문서 분석 결과

  1. 식별자를 검증하고 분석 준비가 가능한 데이터셋을 준비합니다
    1. 스크립트 체크를 사용해 모든 소스에서 class_id, student_id, pair_id, 타임시점의 내부 일관성을 검증합니다.
    2. 문서 제외, 누락, 사용 불가능한 녹음, 녹취록 제외, 설문지 채점 결정 등 로그 파일에 포함되어 있습니다.
    3. 분석 준비가 된 데이터셋을 CSV 파일로 저장하고, 재생에 필요한 스크립트, 매개변수, 소프트웨어 버전을 나열한 README를 포함하세요.
  2. 군집된 종단 결과에 대한 기술적 혼합 효과 모델 적합
    1. 파일럿에서 온전한 클래스가 4개만 무작위로 지정되므로, 분석을 검증보다는 실현 가능성 지향적이고 기술적인 것으로 취급하세요.
    2. 각 결과별로 R v4.5.2, lme4 v1.1-38, lmerTest v3.2-0을 사용하여 하나의 일관된 혼합 효과 모델을 적합시키고, 그룹, 시간, 그룹 × 시간에 고정 효과를, class_id 및student_id 20에 대해 무작위 인터셉트를 적용합니다.
    3. 모든 결과에 동일한 모델 형태를 사용하고, T0 측정을 종단 모델 내에서 반복되는 관찰 중 하나로 취급하며, 선택된 결과에 대해 별도의 사후 기준선 조정 모델을 적합시키지 마십시오.
    4. 모델 추정 한계 평균, 평균 차이, 95% 신뢰구간, 정확한 p 값은 기술 모델 기반 요약으로만 보고합니다. 군집 수가 매우 적기 때문에 명목상 유의성 검정을 신중하게 해석하세요.
    5. 2차 결과 계열에만 거짓 발견률 조정을 적용하고, 분석 스크립트에서 사용한 정확한 기능명과 설정을 기록합니다21.
  3. 출력 자료를 준비하여 나중에 보고할 수 있습니다
    1. 학습자 특성이 표 1에 명확히 보고될 수 있도록 기준선 데이터셋 구조, 변수 라벨, 분모를 보존하세요.
    2. 반복 측정 결과 데이터셋을 표 2 의 T0, T1, T2 전반에 걸쳐 요약할 수 있는 형태로, 표 3의 동일한 세 경우에 걸쳐 지지 음성 및 설문지 결과를 요약할 수 있도록 보존합니다.
    3. 그림 2 에서 실용적 궤적을, 그림 3에서 다중 패널 지지 결과 프로필을 시각화할 수 있도록 플롯 스크립트와 출력 라벨을 유지하며, 일관된 척도 명명과 불확실성 정의를 유지합니다.
  4. 패키지 버전 기록 및 출력 재생성
    1. 분석 시작 시 sessionInfo()와 설치된 패키지 정보를 버전 추적 파일에 작성합니다.
    2. 데이터 처리를 위해 tidyverse v2.0.0을, 추정 한계평균과 대조를 위해 emmeans v2.0.1을 로드하고, 최종 분석에 사용된 패키지 버전을 기록하세요.
    3. 저장된 스크립트를 사용해 분석 준비가 된 데이터셋에서 모든 보고 가능한 출력물을 직접 재생성하세요. 리더 대상 워크플로우 문서, 코드북, 스크립트 재고를 보조 파일 3에 모으세요.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

결과

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

연구 흐름과 코호트

모집, 선별, 서면 동의, 학급 단위 배정, 결과별 완료, 그리고 기저선(T0), 검사 직후 시점(T1), 추적 관찰(T2)에 걸친 최종 분석 세트는 그림 1에 요약되어 있습니다. 파일럿 구현에서는 48명의 학습자로 구성된 4개의 완전한 수업이 학급 수준에 배정되었으며, 2개의 수업은 과제 기반 학습(TBL, n = 24)에, 2개의 클래스는 발표-실습-생산(PPP, n = 24)에 배정되었습니다. T0에서는 48명의 학습자 모두가 구두 담화 완성 과제(ODCT), 설문지 측정, 그리고 영상 역할극 과제를 완료했습니다. T1에서는 47명의 학습자가 ODCT와 설문지를 완료했으며, 심각한 배경 소음으로 인해 1개의 녹화가 제외된 후 46개의 분석 가능한 역할극 녹화를 유지하였습니다. T2에서는 45명의 학습자가 ODCT...

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

토론

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 글은 대학 수준의 국제 중국어 수업에서 과제 기반 학습과 발표-실습-생산을 비교하기 위한 시범 교실 프로토콜을 제시합니다. 이 연구의 주요 기여는 방법론에 있습니다. 프로토콜은 두 수업 순서 간의 광범위한 비교를 제공하는 대신, 교실 환경에서 이러한 비교를 어떻게 구현할 수 있는지를 명시하며, 절차적 변동의 핵심 원인을 통제할 수 있도록 합니다. 주간 주제는 조건별로 매칭되고, 목표 표현은 사전에 정해져 있으며, 교육 및 평가 자료는 실행 전에 잠그고, 평가 순서는 세 차례에 걸쳐 일정하게 유지되며, 기록부터 분석까지의 워크플로우는 확인 및 반복이 가능한 양식으로 문서화됩니다. 교실 연구에서 이러한 설계 요소들은 사소한 기술적 추가 사항이 아닙니다. 이들은 종종 보고된 그룹 간 차이가 불균형한 재료, 이동 절차, 또는 문서화되지 않은 채점 결정의 부산물이 아니라 교육적 대조로 해석될 수 있는지 판단합니다

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

공개 사항

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

저자들은 경쟁하는 재정적 또는 비재정적 이해관계가 없다고 선언합니다.

감사의 글

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

저자들은 교실 진행 전반에 걸쳐 협력해 준 참여 학생들과 강의 강사들에게 감사를 표합니다. 저자들은 촬영 조정, 전사, 점수 편성, 데이터 정리에 도움을 준 평가자와 연구 조교들에게 감사를 표합니다. 이 작업은 특별한 자금 지원을 받지 못했습니다.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

재료

이 논문에 사용된 재료 목록
이름회사카탈로그 번호댓글
분석 스크립트 폴더이 연구버전 1.0클래스 무작위화, 일시 중지 탐지, 데이터셋 구성, 모델 적합 및 플로팅에 대한 고정 스크립트.
오디오 편집 소프트웨어Audacity Team버전 3.7.7필요할 때 오디오 검사 및 트리밍에 사용됩니다.
오디오 모니터링 헤드폰Audio-TechnicaATH-M20x녹음 검사 중 재생 품질, 클리핑 및 배경 소음을 모니터링하는 데 사용됩니다.
교실 녹음 체크리스트이 연구버전 1.0카메라 배치, 마이크 배치, 오디오 수준, 저장 용량, 방 소음 및 역할 카드 배포에 대한 세션 수준 체크리스트.
데이터 사전 / 코드북이 연구버전 1.0클래스 ID, 학습자 ID, 시점, 결과 변수, 결측치 규칙 및 파생 기능 이름을 정의합니다.
외부 마이크SonyECM-LV1교실 작업 녹음에 고정 외부 마이크로 사용됩니다.
충실도 로그 템플릿이 연구버전 1.0날짜, 클래스, 시나리오 레이블, 각 단계의 실현된 지속 시간 및 계획된 구조에서의 편차를 기록하는 데 사용됩니다.
촬영된 역할 수행 점수 매기기 척도이 연구버전 1.0역할 수행 평가를 위한 고정 0–25 점수 매기기 척도로, 이중 마스크 점수 매기기 및 심판 규칙이 포함됩니다.
문화 간 민감도 척도 양식이 연구버전 1.0영어-중국어 양문자 설문지, 24 항목, T0, T1 및 T2에서 실시됩니다.
구두 담화 완성 작업 프롬프트이 연구버전 1.0세 가지 평가 기회에 모두 사용되는 고정 5 프롬프트 세트.
음성 분석 소프트웨어Praat버전 6.4.580.25 초로 고정된 무음 일시 중지 임계값을 사용한 일시 중지 탐지에 사용됩니다.
프레젠테이션-연습-생산 수업 계획이 연구버전 1.0동일한 주제, 목표 표현 및 의사 소통 기능과 일치하는 6 주 PPP 수업 계획.
원본 미디어 저장소SanDiskSDSSDE60-1T00-G25암호화된 원본 미디어 저장소 및 체크섬 검증된 보관에 사용되는 외부 SSD.
역할 수행 시나리오 및 역할 카드이 연구버전 1.0T0, T1 및 T2에서 평가에 사용되는 고정 촬영된 역할 수행 자료.
통계 컴퓨팅 소프트웨어R Project for Statistical Computing버전 4.5.2클래스 무작위화, 군집화된 종단 모델 및 출력 생성에 사용됩니다.
작업 기반 학습 수업 계획이 연구버전 1.0PPP 조건과 동일한 주간 주제 및 목표 표현을 사용하는 6 주 TBL 수업 계획.
전사 및 주석 소프트웨어ELAN버전 7.0역할 수행 전사 및 시간 정렬 주석에 사용됩니다.
전사 지침이 연구버전 1.0전사, 발화자 라벨링, 분할 및 배제 처리에 대한 고정 규칙입니다.
삼각대 / 카메라 지원ManfrottoMKELES5BK-BH안정된 교실 카메라 배치에 사용됩니다.
비디오 카메라SonyFDR-AX43모든 세션에 걸쳐 사용되는 고정 교실 비디오 카메라입니다.
워크 스테이션 컴퓨터DellDC15250전사, 기능 추출 및 통계 분석에 사용됩니다.
단축형 외국어 교실 불안 척도 양식이 연구버전 1.0영어-중국어 양문자 설문지, 8 항목, T0, T1 및 T2에서 실시됩니다.

재인쇄 및 허가

이 JoVE 논문의 텍스트 또는 그림 재사용 허가 요청

허가 요청

태그

233233JoVETBLPPP

관련 논문