Method Article

Implementazione dell'apprendimento basato sulle attività per la comunicazione interculturale nelle classi internazionali di cinese

DOI:

10.3791/71324

July 10th, 2026

In This Article

Summary

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Questo protocollo pilota descrive un confronto randomizzato a cluster tra l'apprendimento basato sui compiti e la Presentazione-Pratica-Produzione in classi universitarie internazionali di cinese e fornisce risultati orientati alla fattibilità per le prestazioni pragmatiche, la sensibilità interculturale, la fluidità orale e l'ansia nel parlare.

Abstract

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

I programmi cinesi internazionali richiedono sempre più agli studenti di gestire le interazioni interculturali in modi che siano non solo linguisticamente accurati, ma anche pragmaticamente appropriati. Questo articolo pilota presenta un protocollo per la classe per confrontare l'apprendimento basato sulle attività con la Presentazione-Pratica-Produzione in classi universitarie di cinese internazionale. Il protocollo è progettato per migliorare la trasparenza metodologica combinando contenuti didattici abbinati, materiali di insegnamento e valutazione bloccati, valutazione mascherata, estrazione riproducibile di fluidità-accuratezza-complessità e un flusso di lavoro di analisi raggruppata. Classi intere sono assegnate a livello di classe a una delle due condizioni didattiche e i risultati sono raccolti al livello di base, post-test immediato e follow-up utilizzando un compito di completamento del discorso orale, una valutazione di ruolo filmata, questionari che valutano la sensibilità interculturale e l'ansia nel parlare una lingua straniera e indici di fluidità, accuratezza e complessità basati sul parlato. In un'implementazione pilota a sito singolo che coinvolge quattro classi intere e 48 adulti con un livello di cinese pari o superiore al livello 3 del Test di Competenza Cinese, il flusso di lavoro ha prodotto dati di classe, valutazione, questionario e parlato analizzabili in tutte e tre le occasioni di valutazione. I risultati pilota descrittivi hanno mostrato maggiori guadagni osservati nel post-test in termini di appropriatezza pragmatica, sensibilità interculturale e parole al minuto nella condizione basata sulle attività, insieme a una riduzione dell'ansia nel parlare. Poiché il protocollo è stato testato in un campione molto piccolo e raggruppato e rimane vulnerabile a fattori di confusione a livello di classe e insegnante, questi risultati sono intesi come output rappresentativi orientati alla fattibilità piuttosto che come prove robuste di efficacia comparativa. Questo protocollo fornisce un quadro riproducibile per la futura implementazione, adattamento e perfezionamento in più classi o siti in contesti di cinese internazionale e di seconda lingua correlati.

Introduction

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Questo protocollo presenta un protocollo pilota per implementare e valutare l'insegnamento basato sui compiti per la comunicazione interculturale in classi universitarie internazionali di cinese, piuttosto che un trial di efficacia inteso a supportare forti affermazioni comparative. Nei programmi internazionali di cinese, si aspetta sempre di più dagli studenti che producano più che frasi grammaticalmente corrette. Ci si aspetta anche che rispondano in modo appropriato in situazioni socialmente e culturalmente sensibili, in cui l'interazione di successo dipende dalla scelta pragmatica, dal posizionamento relazionale e dalla capacità di adattare il linguaggio sotto pressione temporale1,2,3. Per gli studenti universitari adulti, questa rimane una sfida didattica persistente poiché i progressi in vocabolario e grammatica non si trasferiscono necessariamente a un rendimento contextualmente appropriato nell'interazione interculturale spontanea4.

L'apprendimento basato sui compiti è spesso proposto come un approccio adatto a questa sfida poiché pone l'attività focalizzata sul significato al centro dell'istruzione e crea opportunità per gli studenti di mobilitare risorse linguistiche in risposta al bisogno comunicativo. Al contrario, la presentazione-pratica-produzione tipicamente passa dalla presentazione esplicita alla pratica controllata e poi alla produzione limitata, che può supportare l'apprendimento focalizzato sulla forma ma potrebbe non suscitare costantemente le decisioni pragmatiche contingenti richieste nella comunicazione interculturale5,6. Allo stesso tempo, la performance in questo dominio non può essere compresa attraverso un solo tipo di risultato. L'appropriatazza pragmatica, la performance interattiva, l'orientamento interculturale riportato dagli studenti, l'ansia legata alla parlata, e la fluidità, accuratezza e complessità basate sul parlato, catturano ciascuno aspetti diversi di come gli studenti partecipano ai compiti di comunicazione interculturale7,8.

Nonostante l'interesse sostenuto nel confrontare le sequenze didattiche, gli studi precedenti in classe sono spesso rimasti difficili da interpretare e replicare. Le procedure dei compiti non sono sempre descritte con sufficiente dettaglio; il contenuto didattico può differire tra le condizioni; le situazioni interculturali sono talvolta solo vagamente operazionalizzate; e il punteggio, la formazione dei valutatori e i passaggi di elaborazione dei dati sono spesso sotto-riportati. Di conseguenza, le differenze osservate possono riflettere non solo la sequenziazione didattica ma anche variazioni nella progettazione dei compiti, nell'insegnamento del docente, nelle procedure di misurazione o nelle scelte analitiche9,10. Queste preoccupazioni sono particolarmente importanti nella ricerca in classe intatta, dove l'allocazione a livello di classe è spesso l'unica opzione praticabile ma introduce anche effetti del docente, effetti di classe e rischi di contaminazione che possono essere difficili da dipanare, specialmente in un pilota singolo-sito con un numero molto piccolo di cluster11.

Il contributo del presente protocollo è quindi metodologico. Combina scenari comunicativi abbinati ed espressioni target tra le condizioni, materiali di insegnamento e valutazione bloccati, punteggio basato su rubrica cieco con calibrazione, estrazione riproducibile di caratteristiche di fluidità-accuratezza-complessità basate sul parlato, e un flusso di lavoro di analisi raggruppata scriptata all'interno di un singolo design di classe verificabile12,13. La comunicazione interculturale è operazionalizzata attraverso un compito di completamento del discorso orale e scenari di gioco di ruolo filmati che richiedono agli studenti di rispondere a problemi interattivi situati socialmente, mentre la sensibilità interculturale e l'ansia nel parlare sono misurate attraverso questionari strutturati con regole di punteggio fisse. Questa combinazione è intesa a catturare aspetti complementari della performance degli studenti piuttosto che affidarsi a un singolo indicatore di impatto didattico14.

Poiché l'implementazione attuale è limitata a una istituzione, studenti universitari adulti al livello 3 o superiore del Test di Cinese e quattro classi intatte, dovrebbe essere interpretata come un'applicazione pilota di fattibilità del protocollo. In queste condizioni, non possono essere esclusi confondenti a livello di docente e classe, e qualsiasi differenza tra le condizioni dovrebbe essere trattata come output descrittivi rappresentativi piuttosto che come robusta evidenza di efficacia comparativa15. Entro questi limiti, il protocollo è progettato per fornire un framework trasparente e riproducibile per la consegna in classe, la valutazione, la valutazione, la trascrizione, l'estrazione delle caratteristiche del parlato e l'analisi longitudinale raggruppata che può essere perfezionata in futuri studi multi-classe o multi-sito nell'educazione cinese internazionale e contesti correlati di seconda lingua16.

Protocol

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Lo studio è stato condotto in conformità con le normative del Comitato Etico della Yunnan College of Business Management, con numero di approvazione [Numero di approvazione YCBM-25168]. Prima dell'iscrizione, a ciascun potenziale partecipante è stato fornito un foglio informativo scritto che spiegava lo scopo dello studio, le procedure in classe, la registrazione audio-video, la de-identificazione, la partecipazione volontaria e il diritto di ritirarsi senza sanzioni accademiche. Il consenso informato scritto per la partecipazione allo studio e per la registrazione prima di eseguire qualsiasi procedura specifica dello studio è stato ottenuto17. Gli strumenti di ricerca nel protocollo sono elencati nella Tabella dei materiali.

1. Impostazione di classi, risultati e cronologia di valutazione

  1. Definire la popolazione target e l'ambiente di insegnamento
    1. Identificare studenti adulti non madrelingua cinesi iscritti a corsi di cinese internazionale a livello universitario con un obiettivo esplicito di comunicazione orale.
    2. Utilizzare classi intatte come unità di allocazione. Implementare un modulo di 6 settimane di comunicazione interculturale all'interno del normale orario semestrale, con 1 sessione a settimana e 50 minuti di lezione per sessione.
    3. Nell'implementazione pilota, includere 4 classi intatte con 12 studenti per classe per ottenere un campione pianificato di 48 studenti.
    4. Utilizzare lo stesso istruttore principale per insegnare entrambe le condizioni con piani di lezione bloccati e tempistiche standardizzate. Programmare i due bracci di insegnamento in giorni della settimana diversi, mantenere le liste delle classi fisse durante tutto il periodo di intervento e proibire la distribuzione di materiali di insegnamento specifici per braccio al di fuori della sessione di classe assegnata per ridurre la contaminazione tra le condizioni.
  2. Definire i risultati primari, di supporto e secondari
    1. Definire la prestazione pragmatica come il principale dominio di prestazione in classe. Valutarlo utilizzando due strumenti complementari: un compito di completamento del discorso orale (ODCT) e una valutazione di role-play filmata.
    2. Amministrare 5 prompt ODCT ad ogni punto temporale. Valutare l'ODCT su una scala composita 0-25 utilizzando quattro domini prespecificati: appropriatezza pragmatica (0-10), allineamento socioculturale (0-5), completezza del discorso (0-5) e controllo linguistico (0-5). Somma i quattro punteggi dei domini per ottenere il punteggio totale ODCT. Fornire i prompt ODCT fissi nel File supplementare 1.
    3. Amministrare un compito di role-play filmato per coppia o triade ad ogni punto temporale. Valutare il role-play su una scala composita 0-25 separata utilizzando quattro domini prespecificati: appropriatezza interattiva (0-10), reattività e riparazione (0-5), gestione della posizione relazionale (0-5) e controllo linguistico (0-5). Calcolare il punteggio finale come media di due valutatori mascherati. Se i due punteggi totali differiscono di più di 3 punti, ottenere una terza valutazione mascherata e calcolare il punteggio finale come media dei due totali più vicini.
    4. Misurare la sensibilità interculturale utilizzando la Scala di Sensibilità Interculturale, somministrata in un modulo cartaceo bilingue cinese-inglese con 24 voci valutate su una scala Likert a 5 punti e un punteggio totale compreso tra 24-120.
    5. Misurare l'ansia di parlare utilizzando la Scala di Ansia in Classe di Lingua Straniera in forma breve, somministrata nello stesso formato bilingue cinese-inglese con 8 voci valutate su una scala Likert a 5 punti e un punteggio totale compreso tra 8-40, dove punteggi più alti indicano una maggiore ansia di parlare.
    6. Definire i risultati di produzione del discorso di supporto come indici di fluenza-accuratezza-complessità derivati dalle registrazioni di role-play, inclusi parole al minuto, pause silenziose di 0,25 s o più al minuto, percentuale di T-unit contenenti almeno un errore morfosintattico e lunghezza media della clausola.
    7. Per la Scala di Sensibilità Interculturale, trattare il punteggio totale come mancante se più di 2 voci non sono state risposte. Altrimenti, sostituire le voci mancanti con il punteggio medio del partecipante sulle voci completate di quella scala. Per la Scala di Ansia in Classe di Lingua Straniera in forma breve, trattare il punteggio totale come mancante se più di 1 voce non è stata risposte. Altrimenti, sostituire la voce mancante con il punteggio medio del partecipante sulle voci completate di quella scala.
    8. Riassumere il profilo di base dello studente per condizione di insegnamento utilizzando età, sesso, gruppo di lingua madre, livello del Test di Competenza Cinese e precedente esposizione ad ambienti di lingua cinese. Riportare queste variabili in modo descrittivo nella Tabella 1 per documentare la composizione del gruppo piuttosto che affermare l'equivalenza di base in un pilota a quattro cluster.
  3. Fissare i punti temporali di valutazione e mappare il flusso dello studio
    1. Programmare tre punti temporali di valutazione: baseline (T0, entro 3 giorni prima della prima lezione di intervento), post-test immediato (T1, entro 5 giorni dopo l'ultima lezione) e follow-up (T2, esattamente 28 giorni dopo T1).
    2. Ad ogni punto temporale, somministrare l'ODCT per primo, il role-play filmato per secondo e i questionari per ultimi. Mantenere questo ordine identico in tutte le classi.
    3. Registrare lo screening, il consenso, l'allocazione a livello di classe, il completamento specifico dell'esito, le esclusioni, l'attrito e il set di analisi finale durante tutto lo studio in modo che il flusso completo dei partecipanti possa essere presentato in modo trasparente nella Figura 118.

2. Bloccare i materiali, eseguire la randomizzazione a cluster e applicare il mascheramento

  1. Congelare i materiali di insegnamento e valutazione
    1. Archiviare i materiali di insegnamento e valutazione fissi in una cartella di studio bloccata prima della prima lezione di intervento.
    2. Impostare la cartella di studio bloccata come di sola lettura prima della prima lezione di studio e mantenerla invariata durante la raccolta dei dati.
    3. Creare una nuova versione della cartella solo quando una revisione è inevitabile. Registrare ogni modifica, data, motivo e persona responsabile in un registro delle modifiche in formato di testo.
    4. Registrare le versioni esatte del software utilizzate nel flusso di lavoro, inclusi Praat v6.4.58, ELAN v7.0, Audacity v3.7.7, R v4.5.2, tidyverse v2.0.0, lme4 v1.1-38, emmeans v2.0.1 e lmerTest v3.2-0.
  2. Generare l'allocazione a livello di classe con un seme fisso
    1. Assegnare ad ogni classe intatta un identificatore univoco (C1-C4) prima dell'allocazione.
    2. Generare la sequenza di allocazione in R v4.5.2 utilizzando il seme casuale fisso 20

Results

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Studio di flusso e coorte

Reclutamento, screening, consenso scritto, allocazione a livello di classe, completamento specifico per esito, e l'insieme di analisi finale attraverso la linea di base (T0), post-test immediato (T1), e follow-up (T2) sono riassunti in Figura 1. Nell'implementazione pilota, 4 classi intatte comprendenti 48 studenti sono state allocate a livello di classe, con 2 classi assegnate all'apprendimento basato sui compiti (TBL, n = 24) e 2 classi assegnate alla Presentazione-Pratica-Produzione (PPP, n = 24). A T0, tutti i 48 studenti hanno completato il compito di completamento del discorso orale (ODCT), i questionari, e il compito di gioco di ruolo filmato. A T1, 47 studenti hanno completato l'ODCT e i questionari, e 46 registrazioni di gioco di ruolo analizzabili sono state mantenute dopo l'esclusione di 1 registrazione a causa di forte rumore di fondo. A T2, 45 studenti hanno completato l'ODCT e i questionari, e 44 registrazioni di gioco di ruolo analizzabili sono rimaste dopo l'esclusione di 1 ulteriore registrazione a causa di sovrapposizione degli altoparlanti non recuperabile. I dati longitudinali anonimizzati a livello di partecipante alla base di questi risultati rappresentativi sono forniti in File Supplementare 4.

Caratteristiche di base

Le caratteristiche demografiche e di apprendimento della lingua di base sono presentate in Tabella 1. Poiché solo 4 classi intatte sono state allocate in questo pilota, questi valori sono riportati per descrivere la composizione della coorte piuttosto che stabilire l'equivalenza del gruppo. Le due condizioni erano ampiamente simili in termini di età, distribuzione di genere, livello del Test di competenza cinese, e precedente esposizione ad ambienti di lingua cinese, sebbene il confondimento a livello di classe e legato all'insegnante non possa essere escluso in questo disegno.

Esiti della performance pragmatica

Gli esiti della performance pragmatica attraverso T0, T1, e T2 sono presentati nella Tabella 2. Per il punteggio composito ODCT (0-25), entrambi i gruppi hanno ottenuto punteggi più alti a T1 rispetto a T0, con un guadagno maggiore nel braccio TBL rispetto al braccio PPP (+5.04 vs. +2.50). Il gruppo TBL è aumentato da 12.46 ± 3.21 a T0 a 17.50 ± 3.18 a T1 e è rimasto sopra la linea di base a 16.92 ± 3.37 a T2. Il gruppo PPP è aumentato da 11.98 ± 2.92 a T0 a 14.48 ± 3.63 a T1 e è rimasto sopra la linea di base a 13.82 ± 3.70 a T2. Questa traiettoria è mostrata in Figura 2.

Un modello simile è stato osservato per la valutazione del gioco di ruolo filmato. Nel braccio TBL, il punteggio medio del gioco di ruolo è aumentato da 13.10 ± 2.86 a T0 a 17.84 ± 3.04 a T1 ed era 17.10 ± 3.12 a T2. Nel braccio PPP, i valori corrispondenti erano 12.88 ± 2.79, 15.26 ± 3.08, e 14.60 ± 3.17. L'aumento da T0 a T1 è stato maggiore nel braccio TBL rispetto al braccio PPP (+4.74 vs. +2.38). Anche la sensibilità interculturale è aumentata in entrambi i gruppi. Nel braccio TBL, il punteggio totale è salito da 48.96 ± 6.19 a T0 a 54.52 ± 6.36 a T1 e è rimasto a 53.60 ± 6.28 a T2. Nel braccio PPP, i valori corrispondenti erano 48.67 ± 7.39, 51.77 ± 8.09, e 50.74 ± 7.96. L'aumento da T0 a T1 è stato maggiore nel braccio TBL rispetto al braccio PPP (+5.56 vs. +3.10). Dati il design pilota e il piccolo numero di cluster, queste differenze tra i gruppi dovrebbero essere interpretate con cautela.

Risultati del discorso di supporto e del questionario

I risultati del discorso di supporto e del questionario attraverso T0, T1, e T2 sono presentati nella Tabella 3. In tutti i momenti, entrambi i gruppi hanno mostrato miglioramenti dal baseline al post-test sui risultati di supporto, con il braccio dell'apprendimento basato sui compiti (TBL) che generalmente mostrava cambiamenti osservati maggiori rispetto al braccio della Presentazione-Pratica-Produzione (PPP). Le parole al minuto sono aumentate in entrambi i gruppi, mentre le pause silenziose e la percentuale di T-unit contenenti almeno un errore morfo-sintattico sono diminuite. La lunghezza media della clausola è aumentata in tutti i momenti in entrambe le condizioni.

L'ansia da parlato, indicizzata utilizzando la scala dell'ansia in classe di lingua straniera in forma breve, è diminuita da T0 a T1 in entrambi i gruppi ed è rimasta al di sotto della linea di base a T2. La riduzione è stata maggiore nel braccio TBL rispetto al braccio PPP. Queste traiettorie sono mostrate in Figura 3.

Figura 1
Figura 1: Flusso dello studio e allocazione a livello di classe. Diagramma in stile CONSORT che riassume lo screening, il consenso scritto, l'allocazione a livello di classe all'apprendimento basato sui compiti (TBL) o Presentazione-Pratica-Produzione (PPP), e il completamento specifico per occasione del compito di completamento del discorso orale, del gioco di ruolo filmato, dei questionari e delle registrazioni di parlato analizzabili alla linea di base (T0), post-test immediato (T1), e follow-up (T2), inclusi esclusioni e abbandoni. Clicca qui per visualizzare una versione ingrandita di questa figura.

Figura 2
Figura 2: Prestazione del compito di completamento del discorso orale attraverso le occasioni. Punteggi compositi del compito di completamento del discorso orale (ODCT) (0-25) alla linea di base (T0), post-test immediato (T1), e follow-up (T2) per l'apprendimento basato sui

Discussion

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Questo articolo presenta un protocollo pilota per la classe per confrontare l'apprendimento basato su attività e l'insegnamento basato su presentazione-pratica-produzione in classi universitarie di cinese internazionale. Il suo principale contributo è metodologico. Invece di offrire un altro ampio confronto tra due sequenze di insegnamento, il protocollo specifica come tale confronto può essere implementato in condizioni di classe mantenendo sotto controllo le principali fonti di variazione procedurale. I temi settimanali sono abbinati tra le condizioni, le espressioni target sono fisse in anticipo, i materiali di insegnamento e valutazione sono bloccati prima dell'implementazione, l'ordine di valutazione è mantenuto costante in tre occasioni e il flusso di lavoro dalla registrazione all'analisi è documentato in una forma che può essere controllata e ripetuta22. Nella ricerca in classe, queste caratteristiche di progettazione non sono aggiunte tecniche minori. Spesso determinano se una differenza tra gruppi riportata può essere interpretata come un contrasto didattico piuttosto che come un sottoprodotto di materiali non uniformi, procedure mutevoli o decisioni di punteggio non documentate23.

Una seconda forza del protocollo risiede nel modo in cui viene misurata la performance comunicativa interculturale. Il design non si basa su un singolo indicatore. Invece, combina prompt di completamento del discorso orale, compiti di gioco di ruolo filmati, sensibilità interculturale riportata dagli studenti, ansia legata alla parola e indici di produzione basati sul parlato. Questa combinazione è importante perché la comunicazione interculturale non è pienamente catturata da un singolo formato. Il compito di completamento del discorso orale supporta la comparabilità tra studenti e occasioni, mentre il gioco di ruolo filmato fornisce una visione più interattiva di come gli studenti rispondono alle richieste comunicative socialmente situate. Le misure del parlato come parole al minuto, frequenza delle pause, tasso di errore e lunghezza media della clausola aggiungono ulteriori informazioni su come i cambiamenti di performance sono distribuiti tra fluidità, controllo e elaborazione strutturale24. Presi insieme, questi canali rendono possibile esaminare la performance in classe da molteplici angolazioni senza far collassare tutti i cambiamenti in un unico punteggio.

Il protocollo delinea anche esplicitamente diverse forme di controllo della qualità. L'allocazione a livello di classe è abbinata a una strategia di analisi longitudinale raggruppata. Il mascheramento degli esaminatori è associato alla calibrazione e a una soglia di affidabilità documentata. Le condizioni di registrazione sono standardizzate prima della raccolta dei dati e l'integrità dei file viene verificata prima dell'inizio dell'elaborazione a valle. La fedeltà didattica viene registrata sessione per sessione in modo che il timing realizzato e le deviazioni dalla sequenza pianificata possano essere rintracciati successivamente25. Queste misure di salvaguardia sono particolarmente importanti negli studi educativi perché l'interpretabilità dei risultati può essere indebolita da piccole, cumulative deviazioni dal protocollo anche quando il design generale dello studio appare solido. In questo senso, il presente articolo ha lo scopo non solo di descrivere ciò che è stato insegnato, ma anche di mostrare come le procedure circostanti possano essere stabilizzate sufficientemente per una successiva replicazione26.

Allo stesso tempo, l'implementazione attuale ha chiare limitazioni di design. La limitazione più importante è il numero molto piccolo di cluster. Negli studi di classe basati su cluster, la precisione statistica dipende fortemente dal numero di classi piuttosto che dal solo conteggio degli studenti. Quattro classi intatte possono supportare un'implementazione pilota, ma forniscono solo una limitata protezione contro le influenze specifiche della classe e gli effetti contestuali locali27. Questa limitazione è direttamente rilevante qui perché le risposte in classe sono modellate non solo dalla sequenza delle lezioni, ma anche da fattori come le norme di partecipazione, le dinamiche tra pari, l'atmosfera di classe e le sottili differenze nel modo in cui i compiti vengono affrontati. Il presente flusso di lavoro riduce parte di questa variazione attraverso contenuti abbinati, tempistiche fisse, valutazione standardizzata e procedure di punteggio comuni, ma non la rimuove. Qualsiasi modello tra le condizioni dovrebbe quindi essere interpretato entro questo vincolo.

Una questione correlata riguarda gli effetti degli insegnanti e della contaminazione. Il protocollo tenta di ridurre la contaminazione separando gli orari delle classi, limitando la circolazione di materiali specifici per braccio, mascherando le etichette delle condizioni durante la valutazione e l'analisi e mantenendo una struttura didattica fissa. Anche così, la contaminazione rimane una possibilità realistica ogni volta che gli studenti comunicano tra classi o quando un istruttore lavora in più di una classe. Allo stesso modo, l'uso di un singolo sito istituzionale e di una popolazione di studenti delimitata migliora il controllo durante l'implementazione pilota, ma restringe la validità esterna28. I risultati attuali, quindi, non dovrebbero essere generalizzati automaticamente oltre gli studenti universitari adulti che studiano il cinese a livello 3 o superiore del Test di competenza cinese, né dovrebbero essere ritenuti trasferibili invariati a studenti di livello inferiore, ambienti scolastici o altri programmi linguistici senza ulteriori test.

Le limitazioni di misurazione dovrebbero anche essere riconosciute direttamente. I compiti di completamento del discorso orale e i compiti di gioco di ruolo non catturano lo stesso strato di abilità. Il primo offre un controllo più stretto dell'evocazione e una comparabilità più stabile, mentre il secondo è più sensibile alla contingenza interattiva, al comportamento del partner e allo sviluppo del discorso momento per momento29. Questa differenza non è un difetto in nessuno degli strumenti, ma significa che i due formati dovrebbero essere interpretati come complementari piuttosto che intercambiabili. La stessa cautela si applica agli indici di parlato di supporto. I cambiamenti nella pausa, nella fluidità, nel tasso di errore e nella lunghezza della clausola possono chiarire come si sta evolvendo la performance, ma non dovrebbero essere letti come sostituti diretti del successo pragmatico. Il loro valore risiede nel contestualizzare la performance, non nel sostituirla30.

Da una prospettiva pratica, una caratteristica utile del protocollo è che tratta i problemi di implementazione come parte del flusso di lavoro piuttosto che come eccezioni informali. Gli studi in classe raramente procedono senza interruzioni. Le lezioni possono essere brevi, i questionari possono essere incompleti, le registrazioni possono diventare inutilizzabili, i trascrittori possono richiedere l'esclusione e gli esaminatori potrebbero aver bisogno di ricalibrazione prima che possa iniziare il punteggio formale. Specificando come tali eventi devono essere registrati, conservati e riportati, il protocollo rende più facile per gli utenti successivi riprodurre non solo il design pianificato, ma anche il modo in cui il design risponde alle contingenze di routine in classe31. Questa caratteristica è particolarmente rilevante per il lavoro in classe basato su video e audio, dove problemi tecnici apparentemente minori possono influenzare sia il punteggio che l'estrazione delle caratteristiche.

Il protocollo è anche destinato ad essere estensibile. Le implementazioni future possono rafforzare l'inferenza aumentando il numero di classi intatte, preregistrando il piano di analisi e passando a design multi-sito preservando le caratteristiche di comparabilità definite qui: contenuto abbinato, tempistiche di valutazione fisse, punteggio mascherato, regole di codifica stabili e un pipeline di elaborazione dei dati trasparente32. Lo stesso design di base può anche essere adattato oltre le classi di cinese internazionale sostituendo gli scenari, le espressioni target e le rubriche di punteggio, mantenendo allo stesso

Disclosures

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Gli autori dichiarano di non avere interessi finanziari o non finanziari in conflitto.

Acknowledgements

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Gli autori ringraziano gli studenti partecipanti e gli istruttori del corso per la loro collaborazione durante l'implementazione in classe. Gli autori ringraziano anche i valutatori e gli assistenti di ricerca per il loro supporto nella coordinazione delle riprese, nella trascrizione, nel punteggio e nell'organizzazione dei dati. Questo lavoro non ha ricevuto finanziamenti specifici.

Materials

List of materials used in this article
NameCompanyCatalog NumberComments
Analysis scripts folderThis studyVersione 1.0Script fissi per la randomizzazione delle classi, il rilevamento delle pause, la costruzione del dataset, il fitting del modello e la creazione dei grafici.
Audio editing softwareAudacity TeamVersione 3.7.7Usato per l'ispezione e il taglio dell'audio quando necessario.
Audio monitoring headphonesAudio-TechnicaATH-M20xUsato per monitorare la qualità della riproduzione, il clipping e il rumore di fondo durante i controlli di registrazione.
Classroom recording checklistThis studyVersione 1.0Checklist a livello di sessione per il posizionamento della telecamera, il posizionamento del microfono, il livello audio, la capacità di archiviazione, il rumore della stanza e la distribuzione delle schede dei ruoli.
Data dictionary / codebookThis studyVersione 1.0Definisce gli ID delle classi, gli ID degli studenti, i punti temporali, le variabili di risultato, le regole di mancanza e i nomi delle caratteristiche derivate.
External microphoneSonyECM-LV1Usato come microfono esterno fisso per la registrazione delle attività in classe.
Fidelity log templateThis studyVersione 1.0Usato per registrare la data, la classe, l'etichetta dello scenario, la durata realizzata di ogni fase e le deviazioni dalla struttura pianificata.
Filmed role-play scoring rubricThis studyVersione 1.0Rubrica fissa da 0–25 per la valutazione delle rappresentazioni, inclusa la valutazione mascherata doppia e le regole di aggiudicazione.
Intercultural Sensitivity Scale formThis studyVersione 1.0Questionario bilingue inglese-cinese, 24 voci, somministrato a T0, T1 e T2.
Oral discourse completion task promptsThis studyVersione 1.0Set di 5 prompt fissi utilizzati in tutte e tre le occasioni di valutazione.
Phonetic analysis softwarePraatVersione 6.4.58Usato per il rilevamento delle pause con la soglia di pausa silenziosa fissata a 0,25 s.
Presentation-Practice-Production lesson plansThis studyVersione 1.0Piano di lezione PPP a 6 settimane fisse corrispondenti agli stessi temi, espressioni target e funzioni comunicative della condizione TBL.
Raw media storageSanDiskSDSSDE60-1T00-G25SSD esterno usato per l'archiviazione crittografata dei media grezzi e l'archiviazione con verifica del checksum.
Role-play scenarios and role cardsThis studyVersione 1.0Materiale fisso per le rappresentazioni filmate usato per la valutazione a T0, T1 e T2.
Statistical computing softwareR Project for Statistical ComputingVersione 4.5.2Usato per la randomizzazione delle classi, i modelli longitudinali a cluster e la generazione dei risultati.
Task-based learning lesson plansThis studyVersione 1.0Piano di lezione TBL a 6 settimane fisse che utilizza gli stessi temi settimanali ed espressioni target della condizione PPP.
Transcription and annotation softwareELANVersione 7.0Usato per la trascrizione delle rappresentazioni e l'annotazione allineata nel tempo.
Transcription guidelinesThis studyVersione 1.0Convenzioni fisse per la trascrizione, l'etichettatura degli speaker, la segmentazione e la gestione delle esclusioni.
Tripod / camera supportManfrottoMKELES5BK-BHUsato per il posizionamento stabile della telecamera in classe.
Video cameraSonyFDR-AX43Videocamera fissa in classe usata in tutte le sessioni.
Workstation computerDellDC15250Usato per la trascrizione, l'estrazione delle caratteristiche e l'analisi statistica.
Short-form Foreign Language Classroom Anxiety Scale formThis studyVersione 1.0Questionario bilingue inglese-cinese, 8 voci, somministrato a T0, T1 e T2.

Reprints and Permissions

Request permission to reuse the text or figures of this JoVE article

Request Permission

Tags

BehaviorTask based learning TBLPresentation Practice Production PPPCluster randomized classroom trialCross cultural communication assessment

Related Articles