Ethische Genehmigung
Vor dem Experiment erhielten die Autoren eine Genehmigung (Genehmigungsnummer: NBCC-ETH-2026-037) der Hochschule und verteilten Einverständniserklärungen an alle studentischen Teilnehmer. Alle Studierenden wurden ausführlich über die Forschungsziele, die experimentellen Verfahren und die Regelungen zur Datennutzung informiert. Die Teilnahme war freiwillig, und die Teilnehmer konnten das Studium jederzeit abbrechen. Alle personenbezogenen Daten und schriftlichen Arbeiten wurden anonymisiert, um die Privatsphäre zu schützen, und ausschließlich für akademische Analysen verwendet. Alle 60 Teilnehmer unterschrieben das Einwilligungsformular, bevor sie an der Studie teilnahmen. Die Teilnehmer wurden aus zwei parallelen Schreibkursen für fortgeschrittene Studierende im Fach Englisch derselben hochschulischen Berufsfachschule ausgewählt und mittels Convenience-Stichprobe rekrutiert. Die Einschlusskriterien umfassten: Bestehen der CET-6-Prüfung mit einem Ergebnis > 425, keine Fehlzeiten in diesem Semester sowie durchschnittliche Ergebnisse in den letzten beiden schriftlichen Kurztests. Zu den Ausschlusskriterien gehörten: langfristige Nutzung kommerzieller KI-Schreibsoftware für Englisch außerhalb des Unterrichts und schwere Legasthenie.
Die Variabilität aller stetigen Ergebnisvariablen wurde als Mittelwert ± Standardabweichung (SD) angegeben. Alle Analysen wurden mit einer Stichprobengröße von n = 30 Teilnehmern pro Gruppe (experimentelle Gruppe vs. Kontrollgruppe), insgesamt N = 60, durchgeführt. Für longitudinale Messwiederholungsdaten wurde eine varianzanalytische Auswertung mit Messwiederholungen (RM-ANOVA) verwendet, um die Haupteffekte der Gruppe und der Zeit sowie die Gruppen-mal-Zeit-Interaktion zu untersuchen. Für post-hoc paarweise Vergleiche zu einzelnen Zeitpunkten kamen t-Tests für unabhängige Stichproben zum Einsatz. Die Kontrollgruppe erhielt traditionellen Schreibunterricht sowie ein allgemeines, kostenloses, nicht individualisiertes KI-Schreibwerkzeug (keine gestuften Aufforderungen, keine transferorientierten Vorlagen). Die Unterrichtsstunden, Schreibaufgaben, Feedbackhäufigkeit und Trainingstexte waren identisch mit denen der experimentellen Gruppe, abgesehen davon, dass die in dieser Studie verwendete individualisierte, geschachtelte Prompt-Kette und die Aufgabenbibliothek mit fünf Ebenen fehlten. Die experimentelle Gruppe nutzte auf dem DeepSeek-Modell basierende Anweisungen zur Optimierung des Schreibunterrichts, einschließlich der Anleitung durch geschachtelte Prompt-Ketten, der Ausgabe mit interkultureller Anpassung sowie des „Erzeugung-Reflexion-Neuerzeugung“-Mechanismus. Die Kontrollgruppe hingegen setzte traditionelle Lehrmethoden oder nicht optimierte KI-gestützte Werkzeuge ein. Durch den Vergleich der Unterrichtseffekte beider Gruppen wurde die Wirksamkeit der auf dem großen Sprachmodell basierenden Transfertrainingsmethode zur Verbesserung der Schreibtransferfähigkeit der Studierenden überprüft.
Gesamte Forschungsidee
Diese Studie hatte zum Ziel, die Fähigkeit der Studierenden zur Übertragung im englischen Schreiben zu verbessern und effektive methodische Gestaltungsmethoden zu entwickeln, wobei ein besonderer Schwerpunkt auf die Anpassung von DeepSeek für den Bildungseinsatz lag. Zunächst wurde eine Strategie zur Optimierung von Instruktionen vorgeschlagen, um Modellanweisungen neu zu gestalten. Dadurch wurde die Übereinstimmung der generierten Ausgaben mit mehreren Übertragungszielen im Schreibunterricht verbessert, einschließlich syntaktischer Struktur, Absatzlogik und kultureller Ausdrucksweise. Zweitens wurden die Schreibaufgaben der Lehrenden in strukturierte und zielorientierte Anweisungsvorlagen umgewandelt. Anschließend wurde eine Zuordnungsbeziehung zwischen Lehraufgaben und Modellverhalten hergestellt. Dies erhöhte die Steuerbarkeit des Modells und stellte sicher, dass die generierten Inhalte pädagogisch relevant waren. Schließlich entwickelte die Studie einen geschlossenen Übertragungstrainingprozess: „Generierung–Reflexion–Neuschreiben–Neugenerierung“. Dieser Prozess ermutigte die Studierenden, Transferstrategien zu identifizieren und unter Modellunterstützung aktiv ihren sprachlichen Ausdruck zu verfeinern. Durch wiederholte Iterationen wurden die fachsprachlichen und interkulturellen Schreibtransferfähigkeiten der Studierenden kontinuierlich gestärkt. Die Schritte zur Transformation der Satzstruktur sind in Abbildung 1A–D dargestellt.
Um die vollständige Funktionslogik des KI-gestützten Schreibtrainings-Systems zu verdeutlichen und die Reproduzierbarkeit zu verbessern, ist der gesamte Implementierungsworkflow in Tabelle 1 zusammengefasst, einschließlich der Kernabschnitte wie Rohdateneingabe, Lehrereingriffe, Prompt-Anwendung, Schüleraktivitäten, endgültige Ausgaben und entsprechende Bewertungskriterien.
Strategie zur konstruktionsbasierten Aufgabenübertragung
Diese Studie konzentrierte sich darauf, die Transferfähigkeit im englischen Schreiben zu fördern. Sie entwickelte einen Transferaufgaben-Pfad, der von oberflächlich zu tiefgreifend fortschreitet und die Studierenden systematisch dabei unterstützt, mehrstufige sprachliche Transferstrategien zu beherrschen und anzuwenden. Um die Pfadstruktur insgesamt zu beschreiben, wurde sie als vierstufiges Aufgabenset definiert:
T = {T1,T2,T3,T4} (1)
T1 steht für die satzebene Transferaufgabe, die sich auf grundlegende grammatische Strukturoperationen konzentriert, wie beispielsweise die Erweiterung kurzer Sätze, die Änderung der Satzstimme und den Austausch von Nebensätzen, um Studierenden vielfältige Methoden der Satzstruktur zu vermitteln. T2 ist die absatzebene Transferaufgabe, die Studierende anleitet, die Organisation und Verknüpfung von Informationen innerhalb eines Absatzes zu beachten, und sie darin schult, durch die Extraktion der Hauptaussage sowie durch die Anpassung der logischen Beziehungen zwischen Sätzen Klarheit der Struktur und Kohärenz des Ausdrucks des Absatzes zu verbessern. T3 repräsentiert die diskursebene Aufgabe, die sich weiter auf das gesamte logische Gerüst und den Argumentationsrhythmus eines Kapitels erstreckt und Studierende dabei unterstützt, anhand der Umstellung der Absatzreihenfolge und der Optimierung der strukturellen Nebeneinanderstellung ein englisches Textstück mit vollständigem Argumentationssystem aufzubauen. T4 ist die kulturebene Transferaufgabe, bei der Studierende implizite kulturelle Ausdrucksmerkmale im muttersprachlichen Schreiben – wie indirekte Formulierungen und semantische Andeutungen – erkennen und diese in direkte Ausdrucksweisen oder logisch explizite Formen umwandeln sollen, die der Zielsprachkultur entsprechen. Der Verlauf ihrer Entwicklung ist in Abbildung 2 dargestellt. Um die Durchführbarkeit und Evaluierbarkeit der Aufgabengestaltung zu erhöhen, definierte diese Studie jede Aufgabenebene zusätzlich als Triple-Form:
Ti = (Si,Gi,Ei) (2)
Sj repräsentiert die Eingabestichprobe der Aufgabe, Gi repräsentiert die Ziel-Transferoperation und Ei repräsentiert die unterstützenden Evaluierungskriterien. Durch diesen strukturierten Ausdruck wurde sichergestellt, dass jede Ebene der Aufgabe auf der Beherrschung der Strategie der vorherigen Ebene aufbaute und mit entsprechenden Beispielen, Zielbeschreibungen und Leistungskriterien ausgestattet war, wodurch ein Mechanismus für die schrittweise Fortschrittsentwicklung des Transferpfads bereitgestellt wurde. Bei der Konstruktion des Transfertrainingsystems wurde zur systematischen Abdeckung von Aufgabentypen und effizienten Verwaltung von Lehranforderungen eine strukturierte Aufgabenbibliothek aufgebaut, die fünf Arten von Transferzielen abdeckt, basierend auf den gemeinsamen sprachlichen Umwandlungsdimensionen beim Schreibentransfer. Die Aufgabenbibliothek wurde formal ausgedrückt als:
M = {(Dj,TDj)∣j = 1,2,3,4,5} (3)
Dj entspricht fünf Transferdimensionen: syntaktischem Transfer, strukturellem Transfer, kulturellem Transfer, Registertransfer und logischem Transfer; die Aufgabensammlung TDj , die jeder Dimension zugeordnet ist, stellt deren operationellen Teilsatz dar. Bei der Entwicklung der Aufgabenbibliothek fassten die Autoren zunächst auf der Grundlage einer großen Anzahl realer Schreibanfertigkeiten von Studierenden gemeinsame Transferprobleme und Arten sprachlicher Fehler zusammen, verbanden diese mit den tatsächlichen Unterrichtsbedürfnissen und Bewertungsstandards, unterteilten die verschiedenen Transferarten in funktionale Bereiche und legten die zentralen Trainingsziele sowie Betriebsmodi jeder Aufgabe fest. Jede Aufgabe wurde abstrakt als folgende dreigliedrige Struktur dargestellt:
Ti,j = (Si,j,Gi,j,Ci,j) (4)
Si,j steht für die Aufgabeneingabe, Gi,j ist die Transfer-Zielbeschreibung der Aufgabe, und Ci,j ist die Evaluations- und Kontroll-Dimension der Aufgabe. Bei der syntaktischen Transferaufgabe entwarf diese Studie eine Satzumstellungssequenz, die von einfach zu schwierig fortschritt und die Satzverbindung, Klauselverschachtelung, Passivumwandlung sowie verwandte Konzepte abdeckte, um die Fähigkeiten der Lernenden in Satzerweiterung und grammatikalischer Transformation zu verbessern. Die strukturelle Transferaufgabe konzentrierte sich darauf, die logische Gliederung von Absätzen zu optimieren, die Informationsorganisation zu stärken und die Fähigkeit zum logischen Aufbau durch Neuschreiben der Hauptaussage, Sortieren von Stützsätzen sowie Neugestaltung von Ursache-Wirkungs- und Beispielbeziehungen zu verbessern. Die kulturelle Transferaufgabe basierte auf einem interkulturellen Korpus und zielte auf pragmatische Abweichungen wie implizite Ausdrucksweisen und Euphemismen ab. Sie entwarf ausdrucksmäßige Umwandlungen, die dem realen Kontext nahekamen, um die Entwicklung kultureller Anpassungsfähigkeit zu fördern. Die Register-Transferaufgabe leitete die Lernenden dabei an, mündliche Ausdrucksweisen in akademische Sprache umzuwandeln und Strategien für die Registerwechsel zu beherrschen. Die logische Transferaufgabe konzentrierte sich auf den Aufbau von Schlussketten und die Sicherstellung klarer Ausdrucksweise, wobei gleichzeitig Training zur Verwendung von Konjunktionen, zur Explizitmachung logischer Beziehungen und zu Absatzübergängen durchgeführt wurde.
Anhand tatsächlicher Schreibproben von Studierenden entwickelte diese Studie einen eng an Lehraufgaben angebundenen Prozess zur Erstellung von Aufgabenstellungen, um die Relevanz der Anweisungen und die Praxistauglichkeit der generierten Inhalte zu erhöhen. Der Prozess wurde von Lehrkräften geleitet, die während des Unterrichts repräsentative Textausschnitte der Lernenden auswählten und sich dabei auf typische Transferprobleme wie redundante Sätze, ungeordnete Strukturen und unangemessene kulturelle Ausdrucksweisen konzentrierten. Anschließend kennzeichneten sie die Proben über die Systemoberfläche mit Transferarten, um die Lernziele klarzustellen. Nach Erhalt der Annotationen aktivierte das System automatisch das Modul zur Identifizierung von Transferaufgaben. Danach verglich es die Eingabe mit der vordefinierten Aufgabensammlung und der Sammlung von Aufgabenstellungs-Vorlagen. Bei diesem Abgleich wurden Faktoren wie Transferart, sprachliche Merkmale und Textstruktur berücksichtigt. Auf dieser Grundlage wählte das System die am besten geeignete Vorlage aus und generierte eine erste Aufgabenstellung. Das System unterstützte zudem eine strukturierte Verbesserungsverarbeitung. Die Annotationen der Lehrkräfte wurden in ein standardisiertes Format umgewandelt, das vom Modell leicht interpretiert werden kann. Relevante instruktionale Hinweise wurden in die Aufgabenstellung eingebettet, um dem Modell ein genaues Verständnis sowohl der Absichten der Lehrkraft als auch der Fragen der Lernenden zu ermöglichen. Um die Flexibilität und Steuerbarkeit der Anweisungen zu verbessern, enthielt das System ein Unterstützungsmodul für Lehrkräfte. Dieses Modul ermöglichte es den Lehrkräften, Aufgabenstellungen zu verfeinern, indem sie die instruktionalen Vorgaben anpassten, den Kontext modifizierten und Ton sowie Stil individuell gestalteten. Dadurch erhielten die Lehrkräfte eine größere Kontrolle über den Generierungsprozess und konnten ihn besser an unterschiedliche Unterrichtssituationen anpassen.
Optimierungsmechanismus für Deepseek-Befehle
Basierend auf den praktischen Anforderungen des Transfertrainings im englischen Schreiben entwickelte diese Studie fünf Arten von transferorientierten Prompt-Vorlagen. Diese Vorlagen wurden konzipiert, um das Generierungsverhalten des großen Sprachmodells zu steuern und zu regulieren. Die strukturelle Transfer-Vorlage konzentrierte sich auf die Absatzorganisation und die Diskursstruktur. Sie half den Studierenden, Texte umzustrukturieren, indem sie Formen wie Einleitung–Hauptteil–Schluss übernahmen und den logischen Gedankenfluss verbesserten. Die syntaktische Transfer-Vorlage betonte die Satzebene und deren Komplexität. Sie förderte den Einsatz vielfältiger grammatikalischer Strukturen, darunter Passivkonstruktionen, Parallelstrukturen und komplexe Nebensätze, um die Ausdrucksweise schriftlicher Texte zu verfeinern. Die kulturelle Transfer-Vorlage befasste sich mit der kulturellen Angemessenheit im Schreiben. Sie leitete die Studierenden dabei an, Ausdrucksweisen, die von ihrer Muttersprache und Kultur geprägt waren, in Formen umzuwandeln, die im englischsprachigen Kontext natürlicher und akzeptabler sind. Die Register-Transfer-Vorlage konzentrierte sich auf die Anpassung des Stils und die Kontrolle des sprachlichen Registers. Sie half den Studierenden, ihren Sprachgebrauch an unterschiedliche Schreibzwecke, Zielgruppen und Gattungen anzupassen. Die logische Transfer-Vorlage zielte darauf ab, die logische Organisation zu stärken. Sie förderte den gezielten Einsatz von Beziehungen wie Ursache und Wirkung, Vergleich und Gegenüberstellung sowie paralleler Entwicklung, wodurch Kohärenz und argumentative Stringenz verbessert wurden. Zusammen deckten diese fünf Vorlagen die wesentlichen Dimensionen des Schreibtransfers ab. Sie boten strukturierte didaktische Unterstützung sowohl für die Gestaltung von Lehraufgaben als auch für die modellbasierte Textgenerierung.
Jeder Vorlagentyp folgte einem einheitlichen Format, um seine Universalität und Anpassungsfähigkeit in verschiedenen Unterrichtssituationen sicherzustellen. Die Vorlage enthielt vier Kernelemente: Das erste war das Anweisungsziel, das die erforderliche Transferaufgabe eindeutig angab; das zweite war die Beispiel-Eingabe, die den Studierenden reale Sprachfragmente als Korpusgrundlage für die Wirksamkeit der Anweisung bereitstellte; das dritte war die Ziel-Ausgabe, die den Standardstil einer idealen sprachlichen Ausgabe nach der Übertragung zeigte, mit der die Studierenden vergleichen und die sie zur Modellanpassung nutzen konnten; das vierte war der Nutzungsvorschlag, der das anwendbare Sprachniveau, Textformat und die Einsatzstrategie für die Vorlage erläuterte und anpassbare Parameterhinweise enthielt, um die Steuerung der Generierung sowie die didaktische Leitfunktion zu verbessern.
Um die Gestaltungslogik und praktische Anwendung der Promptvorlagen weiter zu veranschaulichen, werden im Folgenden repräsentative Beispiele für fünf transferorientierte Prompts vorgestellt. Alle Vorlagen entsprachen dem einheitlichen Rahmen, der aus einem Instruktionsziel, einer Beispieleingabe, einer Zielausgabe und einem Nutzungshinweis bestand. Die Studierenden wurden angeleitet, einfache Sätze zu erweitern, Satzformen umzuwandeln und Nebensätze einzubetten, um die syntaktische Vielfalt zu erhöhen. Beispielsweise lautete die optimierte Ausgabe für den Studententext „I study English writing. It is very important for cross-cultural communication“: „Learning English writing plays a vital role in improving learners’ ability of cross-cultural communication“. Dieser Prompt eignete sich für ein Training auf Satzebene für Studierende im zweiten Jahr des Englischfachs auf moderatem Schwierigkeitsniveau und konzentrierte sich auf grundlegende syntaktische Umstrukturierung und Verwandlung der Satzkonstruktion. Ein weiterer Prompttyp zielte auf kulturellen Transfer ab und hatte zum Ziel, chinglish-geprägte Äußerungen, die von muttersprachlichem kulturellem Denken beeinflusst sind, zu identifizieren und die Sätze in natürliche englische pragmatische Ausdrücke umzuformulieren, die den westlichen kulturellen Normen entsprechen. Am Beispiel des Studentensatzes „Many people think you must work hard if you want to succeed“ lautete die überarbeitete Version: „People generally believe that diligence is the key to success“. Dieser Prompt wurde im Training zum Transfer auf kultureller Ebene eingesetzt und konzentrierte sich darauf, implizite chinesische Denkmuster abzubauen und ein explizites Ausdrucksvermögen im englischen Sprachkontext zu fördern.
Diese Studie entwickelte außerdem eine dreistufige, geschachtelte Prompt-Kette, die die Absatzentwürfe der Studierenden als einheitliche Eingabe entgegennahm und nacheinander in aufeinanderfolgenden Phasen abarbeitete. Die erste Phase war die semantische Neugliederung, bei der der Prompt die Teilnehmenden aufforderte, die Sätze des gegebenen Absatzes neu anzuordnen, die logische Abfolge der Ideen zu optimieren und einen vollständigen Absatz mit klaren thematischen Hauptsätzen zu bilden. Die zweite Phase war die sprachliche Überarbeitung, in der der überarbeitete Absatz in formelles akademisches Englisch umgeschrieben, umgangssprachliche Wörter ersetzt und komplexe Sätze sowie Passivkonstruktionen angemessen verwendet werden sollten. Die dritte Phase war die kulturelle Anpassung, deren Prompt die Nutzer anleitete, den Text auf kulturpragmatische Ausdrücke zu überprüfen, kulturelle Einflüsse der Muttersprache zu entfernen und den Inhalt so zu verfeinern, dass er den englischsprachigen, interkulturellen Schreibkonventionen entsprach. Die oben genannten Beispiele demonstrierten vollständig die Funktionsweisen von Einzel-Prompt-Vorlagen und geschachtelten Prompt-Ketten. Auf dieser Grundlage entwarf die Studie eine vollständige, mehrphasige Prompt-Kette, die mit der MoE-Architektur von DeepSeek kombiniert wurde.
Um die Einschränkungen von Einzelprompts hinsichtlich der Generierungssteuerung und der Tiefe der Aufgabenbearbeitung zu überwinden, entwarf diese Studie eine geschachtelte Prompt-Kettenstruktur mit phasenweiser und kontinuierlicher Ausrichtung, die eine hierarchische Steuerung und die schrittweise Generierung komplexer Transferaufgaben ermöglicht. Dieser Mechanismus zerlegte eine vollständige Transferaufgabe in mehrere Teilziele und entwarf entsprechende Prompt-Vorlagen für jedes Teilziel, die in logischer Reihenfolge der semantischen Rekonstruktion, der sprachstilistischen Anpassung und der kulturpragmatischen Adaption hintereinander geschaltet wurden, wodurch eine kontextabhängige Generierungskette entstand. Diese Studie implementierte die Optimierung der geschachtelten Prompt-Kette für DeepSeek über dessen standardmäßige offene API. Das DeepSeek-Modell verwendete von Haus aus eine Mixture-of-Experts-(MoE-)Architektur mit einem automatischen Backend-Expert-Routing-System, das als inhärentes internes Schlussfolgerungsmodul unabhängig von externen Prompts agiert. Die angepassten mehrstufigen Prompts beeinflussten lediglich die inhaltsbezogenen Merkmale der Modell-Eingaben. Entsprechend den in den optimierten Eingaben verankerten semantischen, stilistischen und kulturellen Anforderungen aktivierte der native MoE-Routing-Mechanismus des Modells während der Textgenerierung autonom die am besten geeigneten Expertenmodule. Das dreistufige Prompt-Design, das auf semantische Neugestaltung, stilistische Anpassung und kulturelle Adaption ausgerichtet war, verfeinerte lediglich die Eingabetexte, griff jedoch nicht in die interne Logik der Expertenauswahl und -zuweisung des Modells ein.
Hinsichtlich des Ablaufs erhielt das System von Lehrkräften hochgeladene Schülerarbeiten, übertrug die Zielannotationen und bestimmte automatisch, ob die geschachtelte Kettenstruktur aktiviert werden sollte. Falls aktiviert, führte das System nacheinander drei Phasen aus: Die erste Phase war die semantische Neugliederung, bei der die Strukturübertragungsvorlage aufgerufen wurde, um die Absatzorganisation und logischen Hinweise zu optimieren; die zweite Phase war die Anpassung des Sprachstils, bei der mithilfe der Sprachvorlage umgangssprachliche Ausdrücke in wissenschaftliche Schreibsprache umgewandelt wurden; die dritte Phase war die kulturelle Anpassung, bei der die Kulturübertragungsvorlage aufgerufen wurde, um Ausdrücke zu identifizieren und zu ersetzen, die nicht der Zielsprachkultur entsprachen, und um authentischere Texte zu generieren.
Jede Generierungsrunde verwendete die Ausgabe der vorherigen Runde als Eingabe und behielt den Kontextvektor-Cache bei, um semantische Kohärenz sicherzustellen. Die Lehrenden passten die Struktur der Prompt-Kette in der Systemoberfläche an, einschließlich der Vorlagenauswahl, Anpassung der Anweisungen und Neuanordnung der Reihenfolge. Das System unterstützte zudem die Funktion „Vorlagen-Kombinationspaket“, die es Lehrenden erleichterte, Aufgaben wiederverwendend oder gebündelt zuzuweisen. Außerdem verfügte das System über einen integrierten dynamischen Unterbrechungs- und Feedback-Mechanismus, der nach jeder Generierung Zwischenergebnisse bereitstellte. Die Lehrenden kommentierten diese oder passten die nachfolgenden Anweisungen in Echtzeit an, wodurch sich eine geschlossene „Generierung-Anpassung-Neugenerierung“-Lehrschleife ergab.
Modellerstellung, Bewertung
Im Prozess der Textgenerierung und -bewertung auf Grundlage des DeepSeek-Modells entwickelte diese Studie einen mehrdimensionalen automatischen Bewertungsmechanismus, um generierte Texte systematisch zu analysieren und quantitativ hinsichtlich dreier Aspekte zu bewerten: syntaktische Komplexität, strukturelle Standardisierung und Diskurskohärenz. Zur Extraktion von Textmerkmalen und zur automatisierten Bewertung verwendete die Studie den spaCy-Abhängigkeitsparser sowie das Coreferee-Coreferenzauflösungs-Modul. Der spaCy-Abhängigkeitsparser analysierte die syntaktische Struktur englischer Texte und extrahierte zentrale Indikatoren wie die durchschnittliche Satzlänge und die Anzahl verschachtelter Nebensätze, wodurch eine quantitative Analyse der syntaktischen Komplexität ermöglicht wurde. Das Coreferee-Coreferenzauflösungs-Modul, das innerhalb des spaCy-Frameworks läuft, identifizierte vorrangig interne Referenzbeziehungen im Text und bewertete die referenzielle Kohärenz des Diskurses, wodurch technische Unterstützung für die automatisierte Bewertung der Schreibqualität bereitgestellt wurde. Aufgrund von Netzwerkeinschränkungen war der Zugriff auf die genannten ausländischen Open-Source-Webseiten nicht möglich.
Zunächst bewertete das System die syntaktische Komplexität. Es extrahierte Merkmale wie durchschnittliche Satzlänge, Verschachtelungstiefe von Nebensätzen und Satzvielfalt. Diese Merkmale wurden mithilfe von Dependenzanalyse und tiefen syntaktischen Baummodellen gewonnen. Anhand der Ergebnisse beurteilte das System, ob die Studierenden erfolgreich von einfachen Satzmustern zu komplexeren Strukturen übergegangen waren. Zweitens analysierte das System die Absatzorganisation. Es kombinierte BERT-basierte Textrepräsentationen mit Klassifizierungsmodellen, um zentrale Absatzelemente zu identifizieren, darunter thematische, unterstützende und abschließende Sätze. Anschließend wurde eine Absatzstrukturkarte erstellt, um zu prüfen, ob die Organisation den Konventionen des englischen wissenschaftlichen Schreibens entsprach. Drittens bewertete das System die Textkohärenz. Es untersuchte den Gebrauch logischer Konnektoren, die semantische Konsistenz zwischen Sätzen sowie die Qualität der referenziellen Verbindungen im gesamten Text. Diese Indikatoren dienten der Beurteilung der Klarheit der logischen Argumentationsentwicklung und des fließenden Übergangs der Gedanken. Zur Messung der thematischen Kohärenz berechnete das System die semantische Ähnlichkeit anhand vektorbasierter Repräsentationen. Die referenzielle Kohärenz wurde mittels Coreferenzauflösungstechniken bewertet, die dazu beitrugen, semantische Lücken und mehrdeutige Bezüge zu verringern. Schließlich wurden die Bewertungen aus allen Dimensionen zu einem einheitlichen Bewertungsvektor zusammengeführt. Die Ergebnisse wurden standardisiert, um ein umfassendes Evaluierungssystem zu schaffen, das einen zuverlässigen Vergleich zwischen verschiedenen Schreibanlässen ermöglicht.
In der Phase der manuellen Bewertung entwickelte diese Studie ein dreidimensionales Bewertungssystem für das Schreibtransfer-Training, das die Offensichtlichkeit des Transferverhaltens, die Natürlichkeit der Ausdrucksweise und die kulturelle Anpassungsfähigkeit umfasst, um die Relevanz der Lehrerbewertung und die Wirksamkeit des Unterrichts-Feedbacks zu verbessern. Das System kombinierte seine unterstützenden Funktionen, um eine organische Verbindung quantitativer Bewertungen und qualitativer Kommentare zu erreichen. In der Dimension des Transferverhaltens beurteilten die Lehrkräfte die Nutzung von Transferstrategien durch die Schüler beim Umschreiben von Texten anhand vorgegebener Aufgabenziele. Das System bot eine nebeneinanderstehende Vergleichsansicht des Originaltextes und der generierten Version, um den Lehrkräften bei der Identifizierung zu helfen, ob Maßnahmen wie Satzumstellungen und strukturelle Neugestaltungen effektiv den geforderten Transfer-Typ widerspiegelten.
Die Bewertung des natürlichen Ausdrucks konzentrierte sich auf die Flüssigkeit und Authentizität der sprachlichen Ausgabe. Die Lehrkräfte verwendeten die vom System generierten Sprachindikatoren, um zu beurteilen, ob die Sätze den Ausdrucksgewohnheiten muttersprachlicher Englischsprecher entsprachen, und um zu prüfen, ob die grammatikalische Struktur, die Wortkombinationen und der Satzrhythmus natürlich und angemessen waren. Zudem wiesen sie mittels Anmerkungen auf Probleme hin und schlugen alternative Formulierungen vor. Die kulturelle Anpassungsfähigkeit bezog sich auf die Angemessenheit der interkulturellen Pragmatik. Die Lehrkräfte mussten ermitteln, ob der Text unangemessene Äußerungen enthielt, die durch kulturelle Übertragung aus der Ausgangssprache verursacht wurden, beispielsweise semantische Mehrdeutigkeiten, rhetorische Konflikte oder vage Werturteile. Das System stellte häufige Beispiele kulturell abweichender Wörter bereit und ermöglichte es den Lehrkräften, in Kommentaren die Grundlage für Änderungen sowie kulturelle Kontextanforderungen zu erläutern, wodurch die Studierenden bei der Verbesserung ihres Bewusstseins für kulturelle Transferleistungen und ihrer Ausdrucksgenauigkeit unterstützt wurden. Jede Dimension wurde anhand einer 5-Punkte-Skala bewertet und enthielt freie Anmerkungen sowie vorgeschlagene Ergänzungsbausteine. Die endgültigen Bewertungsergebnisse wurden als Radar-Diagramm dargestellt.
Um die Bewertungseffizienz zu verbessern und die praktische Nutzung im Unterricht zu unterstützen, wurde in dieser Studie ein kollaborativer Bewertungsmechanismus entwickelt, der die KI-basierte Punktevergabe mit der Lehrerbeurteilung kombiniert. Das System führte zunächst eine mehrdimensionale Bewertung des von DeepSeek generierten Textes durch. Wesentliche Aspekte wie syntaktische Komplexität, Absatzstruktur und Textkohärenz wurden über das automatische Bewertungsmodul analysiert. Die Ergebnisse der Bewertung wurden anschließend in Echtzeit auf der Lehrerschnittstelle angezeigt. Die Lehrkräfte überprüften die detaillierten Bewertungen für jede Dimension und passten sie bei Bedarf an, basierend auf ihrem fachlichen Urteilsvermögen und ihrem Verständnis der Transferleistungen der Schüler. Zudem fügten sie gezielte Kommentare direkt in den Text ein, um Rückmeldungen und unterrichtliche Vorschläge zu geben, die durch die automatische Bewertung möglicherweise nicht erfasst wurden. Jede Bewertungsdimension verwendete eine Fünf-Punkte-Bewertungsskala. Die Schnittstelle enthielt außerdem Freitext-Anmerkungs- und Empfehlungsmodule, um individualisierte Rückmeldungen zu erleichtern. Die Bewertungsergebnisse wurden mittels eines Radar-Diagramms visualisiert, wodurch die Lehrkräfte schnell die Stärken und Schwächen der Schüler in den verschiedenen Transferdimensionen erkennen konnten.
Darüber hinaus ermöglichte das System Lehrkräften, die Gewichtung bestimmter Dimensionen oder der Gesamtergebnisse anzupassen, um sie an die Unterrichtsziele anzupassen. Diese Funktion stellte sicher, dass die abschließende Bewertung die tatsächliche Leistung und die Lernbedürfnisse der Schüler präziser widerspiegelte. Nach Abschluss der manuellen Überprüfung integrierte das System automatisch maschinell generierte und von Lehrkräften erstellte Bewertungsdaten und erstellte anschließend einen visuellen Feedback-Bericht. Der Bericht enthielt ein Radar-Diagramm zur Übertragungsleistung und ein Versionsverlauf-Diagramm. Diese Visualisierungen verdeutlichten deutlich die Veränderungen in den Übertragungsfähigkeiten der Schüler über mehrere Runden der Texterstellung und -überarbeitung hinweg und ermöglichten so eine kontinuierliche Überwachung des Lernfortschritts.
Übertragung des Trainingsprozesses
Diese Studie entwarf einen vollständigen Transfer-Trainingsprozess. Zunächst stellte die Lehrkraft spezifische englische Schreibaufgaben basierend auf den Unterrichtszielen und dem tatsächlichen Niveau der Studierenden und klärte den Transfer-Typ sowie den Schwerpunkt des Trainings. Anschließend generierte das System automatisch entsprechende Prompt-Anweisungen basierend auf den von der Lehrkraft festgelegten Aufgaben und rief das DeepSeek-Modell auf, um einen Erstentwurf des Textes zu erstellen, der als Grundlage für das Überarbeiten und Transfer-Training der Studierenden diente. Nach Erhalt des Erstentwurfs mussten die Studierenden aktiv die im Text reflektierten Transfermerkmale identifizieren und den Inhalt gezielt umschreiben, wobei sie die erlernten Transferstrategien anwendeten, um die Angemessenheit der Satzstruktur, der Abschnittsgliederung und der kulturellen Ausdrucksweise zu verbessern. Nach Abschluss der Überarbeitung führte die Lehrkraft eine detaillierte Rückmeldung zum eingereichten Text der Studierenden durch, wobei die Wirksamkeit der Transferstrategie hervorgehoben und konkrete Verbesserungsvorschläge sowie Schreibanleitungen gegeben wurden. Basierend auf dem Feedback der Lehrkraft wurde das DeepSeek-Modell erneut aufgerufen, um eine optimierte Version zu generieren, die die Studierenden weiterhin dabei unterstützte, ihre Texte zu verfeinern und ihre Anwendung der Transferstrategien zu vertiefen. Schließlich reichten die Studierenden den endgültigen Text ein, füllten die Transfer-Kognitionstabelle aus, führten eine Selbstevaluation durch, fassten die Transfermethoden und deren Wirkung zusammen und förderten so die Verbesserung der metakognitiven Fähigkeiten sowie die Internalisierung der Schreib-Transfer-Fertigkeiten. Die für diese Studie konzipierte Transfer-Kognitionstabelle ist in Tabelle 2 dargestellt.
Alle Elemente verwendeten eine Bewertungsskala von 1–5, die von 1 (keine Beherrschung) bis 5 (vollständige Beherrschung) reichte. Die Selbstbewertungsdaten wurden nach drei Runden sequenziellen Trainings erhoben; die Bewertungsbenchmarks beziehen sich auf vordefinierte Standards für Transferoperationen in der fünfdimensionalen Aufgabenbibliothek.