$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Deze studie werd uitgevoerd binnen de School of Humanities and Arts, Civil Aviation Flight University of China, waarbij gebruikgemaakt werd van gedeïdentificeerde onderwijsgegevens die in de cursus waren verzameld. Er werd geen direct identificeerbare persoonlijke informatie opgenomen in de analytische dataset. Alle deelnemers werden geïnformeerd over het doel en de procedures van het onderzoek, en schriftelijke geïnformeerde toestemming werd verkregen voorafgaand aan de deelname. Deelname was vrijwillig, en niet-deelname of terugtrekking uit het onderzoeksgedeelte had geen invloed op de cursusbezoek, cijfers of toegang tot regulier onderwijs. Volgens het toepasselijke onderzoekspraktijkkader van de Civil Aviation Flight University of China hoeven studies op basis van gedeïdentificeerde onderwijsdata met minimaal risico mogelijk geen formele ethische beoordeling te vereisen. Alle gedeïdentificeerde materialen werden opgeslagen in met wachtwoorden beveiligde bestanden die alleen toegankelijk waren voor het onderzoeksteam. De ethiek en de participatieflow zijn weergegeven in Figuur 1.
1. Participatiewerving en basisprofilering
In totaal werden 525 studenten gerekruteerd via universitaire Engels- of vertaalgerelateerde cursussen. Bachelor- en masterstudenten uit disciplines als taalkunde, literatuur en internationale studies werden opgenomen. Alle vrijwilligers werden gescreend voordat ze zich inschrijven. Alleen studenten die op dat moment een Engelse of vertaalcursus volgden en ten minste een gemiddelde Engelse vaardigheid hadden op basis van institutionele plaatsingsgegevens, eerdere cursussen of gelijkwaardig academisch bewijs, werden opgenomen. Studenten met aanzienlijke professionele vertaalervaring werden uitgesloten. Leeftijd, geslacht, academisch niveau, studiegebied, eerdere ervaring met AI-ondersteunde vertaalondersteuning en de basisfrequentie van het gebruik van de tool werden geregistreerd. Deelnemerskenmerken werden weergegeven in Tabel 1.
2. Instructieontwerp en interventieworkflow
Er werd een achtweekse klaslokaalinterventie geïmplementeerd waarbij conventionele vertaalinstructie de primaire onderwijsmethode bleef en AI-ondersteunde vertaalondersteuning werd gebruikt als een gestructureerde aanvullende steiger11. In week 0 werd de basisbeoordeling afgerond. Van week 1 tot week 8 werd elke week één vertaaltaak toegewezen en moesten alle deelnemers dezelfde instructievolgorde volgen. Aan het einde van week 8 werd de beoordelingsbatterij die bij de baseline werd gebruikt herhaald. Na de kwantitatieve fase werden semi-gestructureerde interviews afgenomen met een doelbewust geselecteerde subgroep. De algemene workflow is weergegeven in Figuur 2.
3. Basislijnbeoordeling
Alle basismaatregelen werden uitgevoerd in een begeleide klasomgeving onder identieke instructies en tijdsvoorwaarden. Er werd een vertaaltaak gebruikt op basis van een brontekst van ongeveer 300 woorden. Een passage met zowel letterlijke als cultureel genuanceerde segmenten werd geselecteerd zodat studenten lexicale nauwkeurigheid, syntactische controle, semantische trouw en contextueel begrip moesten aantonen12. Het gebruik van externe tools was verboden tijdens de basislijntests. Alle voltooide scripts werden geanonimiseerd voordat de muziek werd gecomponeerd. Elk script werd onafhankelijk beoordeeld door twee getrainde beoordelaars met behulp van een rubric die lexicale nauwkeurigheid, grammaticale en syntactische geschiktheid, semantische volledigheid en culturele contextualisering omvatte. Als het scoreverschil het vooraf gedefinieerde tolerantiebereik overschreed, was discussie nodig totdat een consensusscore was bereikt.
Na de vertaalopdracht werd de 10-item Perceived Stress Scale uitgevoerd en gescoord volgens de standaardprocedure, waarbij hogere scores een hogere waargenomen stress13 aanduiden. De 7-items gegeneraliseerde angststoornisschaal werd vervolgens toegepast en gescoord volgens de gepubliceerde methode, waarbij hogere scores een hogere ernst van angstaangaven met 14. Ten slotte werd een korte vertaalbetrouwbaarheidsmaat uitgevoerd met een vijfpunts Likert-formaat. Representatieve items, scorebereiken en variabelendefinities werden in Tabel 2 weergegeven.
4. Gestandaardiseerde wekelijkse integratie van AI-ondersteunde vertaalondersteuning
Tijdens elke interventieweek werd één vertaaltaak toegewezen die zo nauwkeurig mogelijk in genre en moeilijkheidsgraad werd afgestemd op de andere wekelijkse taken. Leerlingen moesten de taak elke week in dezelfde volgorde voltooien. Ten eerste werd de brontekst onafhankelijk gelezen, en werden moeilijke lexicale items, syntactische structuren of cultureel beladen uitdrukkingen gemarkeerd. Ten tweede werd een eerste versie of een korte notitie opgesteld waarin verwachte vertaalproblemen werden beschreven. Ten derde was consultatie van goedgekeurde AI-ondersteunde vertaalsystemen alleen toegestaan tijdens het opstellen en herzien. Directe indiening van onbewerkte, machine-gegenereerde uitvoer was niet toegestaan.
Studenten moesten alle behouden of afgewezen machinesuggesties elke week evalueren met dezelfde vier criteria: lexicale fit, syntactische natuurlijkheid, discourscoherentie en culturele geschiktheid. Het indienen van de gemarkeerde brontekst, de machine-ondersteunde versie en de definitieve herziene vertaling waren verplicht voor elke wekelijkse taak. Na het indienen werd er een gestructureerde peer-discussie georganiseerd met dezelfde prompts elke week, zodat studenten uitlegden waar geautomatiseerde output nuttig, misleidend, te letterlijk of contextueel ongepast was. Dit ontwerp volgde het huidige bewijs dat laat zien dat machinevertaling het meest educatief nuttig is wanneer het wordt ingebed in geleide vergelijking en revisie, in plaats van als vervanging voor menselijk oordeel15.
5. Gebruik van monitoring- en categorisatietools
Het gebruik van AI-ondersteunde tools werd gedurende de acht weken durende interventie gevolgd. Na elke wekelijkse opdracht moesten deelnemers een kort online gebruikslogboek invullen waarin werd gerapporteerd of geautomatiseerde ondersteuning werd gebruikt, welke functie deze diende, hoe vaak deze werd geraadpleegd en op welk moment het vertaalproces was begonnen. Gestandaardiseerde responscategorieën werden in week 1 gegeven zodat deelnemers gedurende het hele onderzoek dezelfde rapportagecriteria gebruikten. Aan het einde van week 8 werden de wekelijkse records geaggregeerd en werd de totale gebruiksfrequentie geclassificeerd als dagelijks, wekelijks of incidenteel gebruik. De operationele definities van deze categorieën zijn weergegeven in Figuur 3.
6. Beoordeling na interventie
Aan het einde van week 8 werd dezelfde beoordelingsbatterij als bij de baseline herhaald. Er werd een vertaaltekst na de interventie gebruikt die zo nauwkeurig mogelijk werd afgestemd op de basistekst qua lengte, genre en moeilijkheidsgraad. Toedieningscondities, timing, beoordelingscriteria en beoordelaarsworkflow werden consistent gehouden met de basisprocedures. Dezelfde Perceived Stress Scale, dezelfde schaal voor gegeneraliseerde angststoornis, en dezelfde translatiebetrouwbaarheidsmaat werden in dezelfde volgorde als bij de startlijn toegepast.
7. Kwalitatieve interviewprocedures en thematische analyse
Na de beoordeling na de interventie werden 40 studenten doelbewust geselecteerd voor semi-gestructureerde interviews, waarbij variatie in geslacht, academisch niveau en eerdere ervaring met AI-ondersteunde vertaalondersteuning werd gewaarborgd. De interviews werden face-to-face gehouden of via een goedgekeurd online vergaderformat, waarbij voor alle deelnemers dezelfde interviewgids werd gebruikt. Er werden vragen gesteld over strategieën voor het gebruik van tools, de waargenomen cognitieve last, veranderingen in het vertrouwen, evaluatie van machine-output en zorgen over overmatige afhankelijkheid. Alle interviews werden met toestemming van de deelnemer opgenomen en letterlijk getranscribeerd.
De transcripties werden geanalyseerd met thematische analyse. Twee onderzoekers werden gevraagd alle transcripties onafhankelijk te lezen, initiële codes te genereren, codeer-uitgaven te vergelijken, overlappende codes samen te voegen en kandidaatthema's te verfijnen door herhaalde herziening van de transcripties. Na de eerste coderingsfase werd de overeenstemming tussen de beoordelaars berekend en werd Cohens kappa gerapporteerd. De analytische logica volgde gevestigde procedures voor thematische analyse in kwalitatief onderzoek16.
8. Kwantitatieve en gemengde methoden analyse
Beschrijvende statistieken werden gebruikt om de kenmerken van deelnemers en de basisscores samen te vatten. Gekoppelde steekproefvergelijkingen werden gebruikt om pre-post verschillen in vertaalnauwkeurigheid, waargenomen stress, angst en vertrouwen te testen. Meerdere regressiemodellen werden gebruikt om voorspellers van de nauwkeurigheid van post-interventie vertaling te identificeren, waarbij de basisprestaties, de frequentie van het gebruik van AI-ondersteunde tools en psychologische variabelen als onafhankelijke variabelen werden ingevoerd. Chi-kwadraattests werden gebruikt om verbanden tussen gebruikscategorieën en categorische uitkomsten te onderzoeken, en Pearson-correlatiecoëfficiënten werden gebruikt om de richting en sterkte van associaties tussen vertaalnauwkeurigheid, gebruiksfrequentie, waargenomen stress, angst en vertrouwen te beoordelen. De statistische significantie werd vastgesteld op alfa = 0,05 met behulp van tweezijdig testen. De kwantitatieve en kwalitatieve bevindingen werden in de interpretatiefase geïntegreerd volgens standaard mixed-methods procedures17.