Zgoda komisji etycznej
Przed rozpoczęciem eksperymentu autorzy uzyskali zgodę (Numer zgody: NBCC-ETH-2026-037) z uczelni i przekazali dokumenty świadomej zgody wszystkim uczestniczącym studentom. Wszyscy studenci zostali jasno poinformowani o celach badań, procedurach eksperymentalnych oraz zasadach wykorzystania danych. Udział w badaniu był dobrowolny, a uczestnicy mogli wycofać się z niego w dowolnym momencie. Wszystkie dane osobowe oraz prace pisemne zostały zanonimizowane w celu ochrony prywatności i wykorzystane wyłącznie do analizy akademickiej. Wszystkich 60 uczestników podpisało formularz zgody przed wzięciem udziału w badaniu. Uczestników wybrano z dwóch równoległych klas pisania w języku angielskim dla studentów drugiego roku w tej samej wyższej szkole zawodowej, stosując metodę doboru wygodnego. Kryteria włączenia obejmowały: zdanie egzaminu CET-6 z wynikiem > 425, brak nieobecności w bieżącym semestrze oraz średnie oceny z dwóch ostatnich testów pisania w ramach jednostek lekcyjnych. Kryteria wykluczenia obejmowały: długotrwałe korzystanie z komercyjnego oprogramowania AI do pisania w języku angielskim poza zajęciami oraz ciężką dysleksję.
Zmienność dla wszystkich ciągłych zmiennych wynikowych przedstawiono jako średnia ± odchylenie standardowe (SD). Wszystkie analizy przeprowadzono przy wielkości próby n = 30 uczestników na grupę (grupa eksperymentalna vs grupa kontrolna), łącznie N = 60. Dla podłużnych danych z powtarzanymi pomiarami zastosowano analizę wariancji z powtarzanymi pomiarami (RM-ANOVA), aby zbadać główne efekty grupy i czasu oraz interakcję grupa-czas. Testy t dla prób niezależnych wykorzystano do post-hoc porównań parami w poszczególnych punktach czasowych. Grupa kontrolna otrzymała tradycyjną instrukcję pisania oraz generyczne, bezpłatne, niedostosowane narzędzie AI do pisania (bez warstwowych promptów, bez szablonów zorientowanych na transfer). Liczba godzin nauczania, zadania pisemne, częstotliwość informacji zwrotnych i teksty szkoleniowe były identyczne jak w grupie eksperymentalnej, z wyjątkiem braku interwencji w postaci dostosowanego, zagnieżdżonego łańcucha promptów oraz biblioteki zadań pięcio poziomowej wykorzystanej w niniejszym badaniu. Grupa eksperymentalna korzystała z instrukcji opartych na modelu DeepSeek w celu optymalizacji nauki pisania, obejmujących wskazówki w formie zagnieżdżonego łańcucha promptów, wyniki adaptacji międzykulturowej oraz mechanizm „generowanie-refleksja-regenerowanie”. Grupa kontrolna natomiast stosowała tradycyjne metody nauczania lub niezoptymalizowane narzędzia wspomagane przez AI. Poprzez porównanie efektów nauczania w obu grupach zweryfikowano skuteczność metody treningu transferowego opartej na dużym modelu językowym w poprawie zdolności transferu pisania u studentów.
Ogólna koncepcja badawcza
Celem niniejszego badania była poprawa umiejętności transferu pisania w języku angielskim u uczniów oraz opracowanie skutecznych metod projektowania dydaktycznego, ze szczególnym uwzględnieniem adaptacji DeepSeek do celów edukacyjnych. Po pierwsze, zaproponowano strategię optymalizacji instrukcji w celu przeprojektowania promptów modelu. Poprawiło to zgodność generowanych wyników z wieloma celami transferu w nauczaniu pisania, w tym w zakresie struktury składniowej, logiki akapitów oraz ekspresji kulturowej. Po drugie, zadania pisemne przygotowane przez nauczycieli przekształcono w ustrukturyzowane i zorientowane na cel szablony promptów. Następnie ustanowiono relację mapowania między zadaniami dydaktycznymi a zachowaniami modelu. Zwiększyło to sterowalność modelu i zapewniło, że generowana treść była istotna z pedagogicznego punktu widzenia. Na koniec w ramach badania opracowano zamknięty proces treningowy transferu: „generowanie–refleksja–przepisywanie–regenerowanie”. Proces ten zachęcał uczniów do identyfikowania strategii transferu i aktywnego doskonalenia ekspresji językowej przy wsparciu modelu. Poprzez powtarzalne iteracje sukcesywnie wzmacniano międzyjęzykowe i międzykulturowe umiejętności transferu pisania u uczniów. Kroki transformacji struktury zdania przedstawiono na Rysunku 1A–D.
Aby wyjaśnić pełną logikę działania systemu szkolenia z pisania wspomaganego przez AI oraz poprawić powtarzalność, cały przebieg implementacji został podsumowany w Tabeli 1, obejmującej kluczowe etapy, takie jak dane wejściowe, interwencje nauczyciela, zastosowanie promptów, aktywności studentów, wyniki końcowe oraz odpowiadające im kryteria oceny.
Strategia konstruowania zadań zorientowanych na transfer
Niniejsze badanie skupiło się na rozwijaniu umiejętności transferu w pisaniu w języku angielskim. Opracowano ścieżkę zadań transferowych prowadzącą od poziomu powierzchownego do głębokiego, systematycznie prowadząc studentów przez proces opanowywania i praktykowania wielopoziomowych strategii transferu językowego. Aby opisać strukturę tej ścieżki jako całości, zdefiniowano ją jako czteroetapowy zestaw zadań:
T = {T1,T2,T3,T4} (1)
T1 reprezentuje zadanie transferu na poziomie zdania, które koncentruje się na podstawowych operacjach struktury gramatycznej, takich jak rozszerzanie krótkich zdań, zmiana strony oraz zastępowanie klauzul, aby pomóc studentom w opanowaniu różnorodnych metod budowy zdań. T2 to zadanie transferu na poziomie akapitu, które nakierowuje studentów na organizację i powiązania informacji w obrębie akapitu oraz uczy ich poprawy przejrzystości strukturalnej i spójności wypowiedzi poprzez wydobywanie zdań głównych i dostosowywanie logiki między zdaniami. T3 reprezentuje zadanie na poziomie dyskursu, które rozciąga się na ogólny układ logiczny i rytm argumentacji rozdziału, prowadząc studentów do konstruowania angielskiego artykułu z kompletnym systemem argumentacji poprzez dostosowanie kolejności akapitów i optymalizację relacji zestawienia strukturalnego. T4 to zadanie transferu na poziomie kulturowym, które wymaga od studentów zidentyfikowania ukrytych cech ekspresji kulturowej w pisaniu w języku ojczystym, takich jak niedosłowne sformułowania i sugestie semantyczne, oraz przekształcenia ich w formy bezpośrednie lub logicznie jawne, zgodne z kulturą języka docelowego. Proces ewolucji przedstawiono na Rysunku 2. Aby zwiększyć operacyjność i możliwość ewaluacji projektu zadań, w niniejszym badaniu zdefiniowano każdy poziom zadania jako formę trójki:
Ti = (Si,Gi,Ei) (2)
Sj oznacza próbkę wejściową zadania, Gi oznacza docelową operację transferu, a Ei oznacza wspierające kryteria oceny. Dzięki tej ustrukturyzowanej formie zapewniono, że każdy poziom zadania opierał się na opanowaniu strategii z poprzedniego poziomu i był wyposażony w odpowiednie próbki, opisy celów oraz kryteria wydajności, co zapewniło mechanizm stabilnego postępu ścieżki transferu. W procesie konstruowania systemu treningu transferowego, aby osiągnąć systematyczne pokrycie typów zadań i efektywne zarządzanie wezwaniami dydaktycznymi, w badaniu tym zbudowano ustrukturyzowaną bibliotekę zadań obejmującą pięć typów celów transferu, opartą na powszechnych wymiarach konwersji językowej w transferze pisemnym. Bibliotekę zadań sformalizowano jako:
M = {(Dj,TDj)∣j = 1,2,3,4,5} (3)
Dj odpowiada pięciu wymiarom transferu: transferowi składniowemu, strukturalnemu, kulturowemu, rejestrowemu oraz logicznemu; zbiór zadań TDj powiązany z każdym z tych wymiarów reprezentuje jego podzbiór operacji. W procesie tworzenia biblioteki zadań autorzy w pierwszej kolejności podsumowali i sklasyfikowali typowe trudności w transferze oraz rodzaje błędów językowych na podstawie licznych autentycznych próbek prac pisemnych studentów, a następnie, w połączeniu z rzeczywistymi potrzebami dydaktycznymi i standardami oceny, podzielili poszczególne typy transferu na obszary funkcjonalne oraz ustalili kluczowe cele szkoleniowe i tryby operacyjne dla każdego zadania. Każde zadanie zostało przedstawione w formie abstrakcyjnej struktury trójkowej:
Ti,j = (Si,j,Gi,j,Ci,j) (4)
Si,j reprezentuje próbkę wejściową zadania, Gi,j jest opisem celu transferu zadania, a Ci,j to wymiar oceny i kontroli zadania. W zadaniu transferu syntaktycznego w niniejszym badaniu zaprojektowano sekwencję reorganizacji zdań postępującą od prostych do trudnych, obejmującą łączenie zdań, zagnieżdżanie zdań składowych, konwersję na stronę bierną oraz pojęcia pokrewne, z целью poprawy umiejętności uczniów w zakresie rozbudowy zdań i przekształceń gramatycznych. Zadanie transferu strukturalnego koncentrowało się na optymalizacji logiki akapitów, wzmacnianiu organizacji informacji i zwiększaniu zdolności do konstrukcji logicznej poprzez przeredagowanie zdań głównych, sortowanie zdań uzupełniających oraz rekonstrukcję relacji przyczynowo-skutkowych i przykładów. Zadanie transferu kulturowego oparto na korpusie międzykulturowym i ukierunkowano na odchylenia pragmatyczne, takie jak wyrażenia niejawne i eufemizmy. Zaprojektowano konwersje wypowiedzi zbliżone do rzeczywistego kontekstu, aby promować rozwój adaptacyjności kulturowej. Zadanie transferu rejestru prowadziło uczniów przez proces przekształcania wypowiedzi mówionych w język akademicki oraz opanowanie strategii przełączania rejestrów. Zadanie transferu logicznego skupiało się na konstruowaniu łańcuchów rozumowania i zapewnianiu jasności wypowiedzi, przeprowadzając trening z zakresu stosowania spójników, eksplicytacji relacji logicznych oraz przejść między akapitami.
W oparciu o rzeczywiste próbki prac pisemnych uczniów, w niniejszym badaniu opracowano proces generowania promptów ściśle powiązany z zadaniami dydaktycznymi, mający na celu zwiększenie trafności instrukcji oraz praktyczności generowanych treści. Proces ten był prowadzony przez nauczycieli, którzy w trakcie nauczania wybierali reprezentatywne fragmenty tekstów uczniów, koncentrując się na typowych problemach z transferem, takich jak zdania redundantne, chaotyczna struktura oraz niewłaściwe wyrażenia kulturowe. Następnie, za pomocą interfejsu systemu, naniesiono adnotacje określające typy transferu w celu doprecyzowania celów szkoleniowych. Po otrzymaniu informacji z adnotacji system automatycznie aktywował moduł identyfikacji zadań transferowych. Następnie dopasował dane wejściowe do zdefiniowanej biblioteki zadań i biblioteki szablonów promptów. Proces dopasowania uwzględniał takie czynniki jak typ transferu, cechy lingwistyczne oraz struktura tekstu. Na podstawie tych czynników system wybrał najodpowiedniejszy szablon i wygenerował wstępny prompt. System wspierał również strukturalne przetwarzanie wzmacniające. Adnotacje nauczycieli zostały przekształcone w znormalizowany format, który może być łatwo interpretowany przez model. Do promptu wbudowano odpowiednie wskazówki instruktażowe, aby pomóc modelowi dokładnie zrozumieć zarówno intencje nauczyciela, jak i pytania ucznia. Aby zwiększyć elastyczność i sterowalność instrukcji, system zawierał moduł wsparcia nauczyciela. Moduł ten pozwalał nauczycielom na dopracowywanie promptów poprzez modyfikację wytycznych instruktażowych, dostosowywanie ustawień kontekstowych oraz personalizację tonu i stylu. W rezultacie nauczyciele uzyskali większą kontrolę nad procesem generowania i mogli lepiej dostosować go do różnych scenariuszy dydaktycznych.
Mechanizm optymalizacji poleceń Deepseek
W oparciu o praktyczne potrzeby treningu transferu pisania w języku angielskim, w niniejszym badaniu opracowano pięć rodzajów szablonów promptów zorientowanych na transfer. Szablony te zostały zaprojektowane w celu naprowadzania i regulowania zachowania generatywnego modelu językowego. Szablon transferu strukturalnego skupiał się na organizacji akapitów i strukturze dyskursu. Pomagał on studentom reorganizować teksty poprzez stosowanie struktur takich jak wstęp–rozwinięcie–zakończenie oraz poprawę logicznego przepływu myśli. Szablon transferu składniowego kładł nacisk na złożoność na poziomie zdań. Zachęcał do stosowania zróżnicowanych struktur gramatycznych, w tym strony biernej, konstrukcji równoległych i zdań złożonych, aby zwiększyć wyrafinowanie formy pisemnej. Szablon transferu kulturowego odnosił się do stosowności kulturowej w pisaniu. Pomagał studentom w adaptacji sformułowań pod wpływem języka ojczystego i kultury do form bardziej naturalnych i akceptowalnych w kontekstach anglojęzycznych. Szablon transferu rejestru koncentrował się na adaptacji stylu i kontroli rejestru. Pomagał studentom dostosować język do różnych celów pisania, odbiorców i gatunków. Szablon transferu logicznego miał na celu wzmocnienie organizacji logicznej. Promował efektywne wykorzystanie relacji takich jak przyczyna i skutek, porównanie i kontrast oraz rozwój równoległy, poprawiając tym samym spójność i rygor argumentacji. Razem pięć tych szablonów objęło główne wymiary transferu pisania, zapewniając ustrukturyzowane wsparcie dydaktyczne zarówno dla projektowania zadań nauczania, jak i dla generowania tekstów w oparciu o model.
Każdy typ szablonu opierał się na ujednoliconym formacie, aby zapewnić jego uniwersalność i możliwość adaptacji w różnych sytuacjach dydaktycznych. Szablon zawierał cztery kluczowe elementy: pierwszym był cel instrukcji, który jasno określał wymagane zadanie transferu; drugim był przykładowy wprowadzany tekst (sample input), który dostarczał studentom autentycznych fragmentów językowych jako korpus stanowiący podstawę dla efektywności instrukcji; trzecim był oczekiwany wynik (target output), prezentujący standardowy styl idealnego produktu językowego po transferze, służący studentom do porównania i dostrajania modelu; czwartym była sugestia użycia, wyjaśniająca poziom językowy, typ tekstu oraz strategię stosowania właściwą dla danego szablonu, a także zawierająca regulowane podpowiedzi parametrów w celu zwiększenia kontroli nad generowaniem i poprawy efektu prowadzenia dydaktycznego.
Aby dalej zilustrować logikę projektowania i praktyczne zastosowanie szablonów promptów, poniżej przedstawiono reprezentatywne przykłady pięciu promptów zorientowanych na transfer. Wszystkie szablony były zgodne z jednolitym schematem, który składał się z celu instrukcji, przykładowego wejścia, docelowego wyjścia oraz sugestii dotyczących zastosowania. Studenci byli instruowani, aby rozbudowywać proste zdania, zmieniać strony czynną i bierną oraz wplatać zdania podrzędne w celu wzbogacenia różnorodności syntaktycznej. Na przykład, dla szkicu studenckiego „I study English writing. It is very important for cross-cultural communication”, zoptymalizowany wynik brzmi „Learning English writing plays a vital role in improving learners’ ability of cross-cultural communication”. Prompt ten był odpowiedni do treningu na poziomie zdań dla studentów drugiego roku filologii angielskiej na umiarkowanym poziomie trudności, koncentrując się na podstawowej rekonstrukcji syntaktycznej i transformacji strony. Inny typ promptu był skierowany na transfer kulturowy, mający na celu identyfikację sformułowań typu „Chinglish”, będących wynikiem wpływu rodzimego myślenia kulturowego, oraz przeredagowanie zdań na naturalne angielskie wyrażenia pragmatyczne, zgodne z zachodnimi normami kulturowymi. Przyjmując jako przykład zdanie studenckie „Many people think you must work hard if you want to succeed”, wersja poprawiona brzmiała „People generally believe that diligence is the key to success”. Prompt ten zastosowano w treningu transferu na poziomie kulturowym, skupiając się na eliminowaniu ukrytych chińskich schematów myślowych i promowaniu jawnej ekspresji w kontekście języka angielskiego.
W ramach niniejszego badania opracowano również trzystopniowy zagnieżdżony łańcuch promptów, który przyjmował szkice akapitów studentów jako jednolity wsad i działał w kolejnych fazach. Pierwsza faza polegała na reorganizacji semantycznej, w której prompt wymagał od uczestnika przeorganizowania zdań w danym akapicie, optymalizacji logicznego uporządkowania myśli oraz sformułowania pełnego akapitu z wyraźnymi zdaniami wprowadzającymi. Druga faza obejmowała rewizję językową, polegającą na przeredagowaniu poprawionego akapitu na formalny angielski akademicki, zastąpieniu słownictwa potocznego oraz odpowiednim zastosowaniu zdań złożonych i struktur biernych. Trzecia faza stanowiła adaptację kulturową, w której prompt kierował użytkowników do weryfikacji ekspresji kulturowo-pragmatycznych w tekście, usunięcia interferencji kulturowej języka ojczystego oraz dopracowania treści tak, aby odpowiadała angielskim konwencjom pisania międzykulturowego. Powyższe przykłady w pełni zademonstrowały tryby działania pojedynczych szablonów promptów oraz zagnieżdżonych łańcuchów promptów. Na tej podstawie w badaniu zaprojektowano kompletny etapowy łańcuch promptów połączony z architekturą MoE modelu DeepSeek.
Aby przezwyciężyć ograniczenia jednorazowych promptów w zakresie kontroli generowania i głębokości odpowiedzi na zadania, w niniejszym badaniu zaprojektowano strukturę zagnieżdżonego łańcucha promptów o charakterystyce fazowej i ciągłej, umożliwiającą hierarchiczne prowadzenie i stopniowe generowanie złożonych zadań translacyjnych. Mechanizm ten podzielił kompletne zadanie translacyjne na kilka podcelów, dla których zaprojektowano odpowiadające im szablony promptów; zostały one połączone szeregowo w logicznej kolejności: rekonstrukcja semantyczna, dostosowanie stylu językowego oraz adaptacja pragmatyki kulturowej, tworząc łańcuch generowania z zależnością kontekstową. W badaniu zaimplementowano optymalizację zagnieżdżonego łańcucha promptów dla DeepSeek poprzez jego standardowy otwarty interfejs API. Model DeepSeek natywnie wykorzystuje architekturę Mixture of Experts (MoE) wyposażoną w automatyczny backendowy system routingu ekspertów, który działa jako wewnętrzny moduł wnioskowania niezależny od zewnętrznych promptów. Dostosowane wieloetapowe prompty modyfikowały jedynie cechy treści danych wejściowych modelu. W odpowiedzi na wymogi semantyczne, stylistyczne i kulturowe zawarte w zoptymalizowanych danych wejściowych, natywny mechanizm routingu MoE modelu autonomicznie aktywował najodpowiedniejsze moduły eksperckie podczas generowania tekstu. Trzystopniowy projekt promptów, koncentrujący się na reorganizacji semantycznej, dostosowaniu stylu i adaptacji kulturowej, służył jedynie doprecyzowaniu tekstów wejściowych i nie ingerował w wewnętrzną logikę wyboru i alokacji ekspertów modelu.
Pod względem procesu operacyjnego system otrzymywał teksty uczniów przesłane przez nauczycieli, przekazywał adnotacje docelowe i automatycznie określał, czy włączyć zagnieżdżoną strukturę łańcuchową. W przypadku jej włączenia system realizował kolejno trzy etapy: pierwszym etapem była reorganizacja semantyczna, polegająca na wywołaniu szablonu transferu struktury w celu optymalizacji organizacji akapitów i wskazówek logicznych; drugim etapem była korekta stylu językowego, wykorzystująca szablon językowy do przekształcenia wyrażeń potocznych w akademicki język pisany; trzecim etapem była adaptacja kulturowa, polegająca na wywołaniu szablonu transferu kulturowego w celu identyfikacji i zastąpienia wyrażeń niezgodnych z kulturą języka docelowego, co pozwalało na wygenerowanie bardziej autentycznego tekstu.
Każda runda generowania wykorzystywała wynik z poprzedniej rundy jako dane wejściowe oraz zachowywała pamięć podręczną wektora kontekstu, aby zapewnić spójność semantyczną. Nauczyciele dostosowywali strukturę łańcucha promptów w interfejsie systemu, w tym wybór szablonu, modyfikację instrukcji oraz korektę sekwencji. System obsługiwał również funkcję „pakietu kombinacji szablonów”, która umożliwiała nauczycielom wygodne ponowne wykorzystanie lub przypisywanie zadań w partiach. Dodatkowo system posiadał wbudowany dynamiczny mechanizm przerywania i sprzężenia zwrotnego, który dostarczał wyniki pośrednie po każdym generowaniu. Nauczyciele naniesiali adnotacje lub korygowali kolejne instrukcje w czasie rzeczywistym, tworząc zamkniętą pętlę dydaktyczną „generowanie-korekta-regenerowanie”.
Generowanie i ewaluacja modelu
W procesie generowania i oceny tekstów w oparciu o model DeepSeek, w niniejszym badaniu skonstruowano wielowymiarowy mechanizm automatycznego punktowania w celu systematycznej analizy i ilościowej oceny wygenerowanego tekstu w trzech aspektach: złożoności składniowej, standaryzacji strukturalnej oraz spójności dyskursu. W badaniu wykorzystano parser zależności spaCy oraz moduł rozszerzający do rozwiązywania koreferencji Coreferee w celu ekstrakcji cech tekstu i automatycznej oceny. Parser zależności spaCy analizował strukturę składniową angielskiego tekstu, wyodrębniając kluczowe wskaźniki, takie jak średnia długość zdania i liczba zdań wtrąconych, co umożliwiło ilościową analizę złożoności składniowej. Moduł rozszerzający Coreferee do rozwiązywania koreferencji, działający w ramach frameworka spaCy, służył przede wszystkim do identyfikacji wewnętrznych relacji referencyjnych w tekście i oceny referencyjnej spójności dyskursu, zapewniając wsparcie techniczne dla automatycznego punktowania jakości pisania. Ze względu na ograniczenia sieciowe, wspomniane zagraniczne strony z otwartym kodem źródłowym były niedostępne.
W pierwszej kolejności system ocenił złożoność składniową. Wyekstrahowano cechy takie jak średnia długość zdania, głębokość osadzania zdań podrzędnych oraz zróżnicowanie zdań. Cechy te uzyskano za pomocą analizy zależności oraz modelowania głębokich drzew składniowych. Na podstawie wyników system ocenił, czy studenci pomyślnie przeszli od prostych wzorców zdań do struktur bardziej złożonych. Po drugie, system ocenił organizację akapitów. Połączono reprezentacje tekstowe oparte na modelu BERT z modelami klasyfikacyjnymi w celu zidentyfikowania kluczowych elementów akapitu, w tym zdań wprowadzających temat, zdań pomocniczych i zdań podsumowujących. Następnie sporządzono mapę struktury akapitu, aby ustalić, czy organizacja tekstu jest zgodna z konwencjami angielskiego pisarstwa akademickiego. Po trzecie, system ocenił spójność tekstu. Zbadano użycie spójników logicznych, spójność semantyczną między zdaniami oraz jakość powiązań referencyjnych w całym tekście. Wskaźniki te posłużyły do oceny przejrzystości rozwoju logicznego i płynności wywodu. Aby zmierzyć spójność tematyczną, system obliczył podobieństwo semantyczne przy użyciu reprezentacji wektorowych. Spójność referencyjną oceniono za pomocą technik rozstrzygania koreferencji, co pomogło zredukować luki semantyczne i wieloznaczne odniesienia. Na koniec wyniki ze wszystkich wymiarów zostały zintegrowane w jednolity wektor punktowy. Wyniki zostały zestandaryzowane w celu stworzenia kompleksowego systemu oceny, umożliwiającego wiarygodne porównywanie różnych próbek tekstowych.
W fazie oceny manualnej w niniejszym badaniu opracowano trójwymiarowy system punktacji dla treningu transferu pisania, obejmujący oczywistość zachowań transferowych, naturalność wypowiedzi oraz adaptację kulturową, aby zwiększyć trafność oceny nauczycielskiej i skuteczność informacji zwrotnych w procesie nauczania. System ten łączył funkcje pomocnicze w celu organicznego powiązania punktacji ilościowej z komentarzami jakościowymi. W wymiarze zachowań transferowych nauczyciele oceniali wykorzystanie przez uczniów strategii transferu podczas przeredagowania tekstów w oparciu o określone cele zadań. System zapewniał widok porównawczy tekstu oryginalnego i wersji wygenerowanej, co pomogło nauczycielom zidentyfikować, czy operacje takie jak korekta zdań i rekonstrukcja strukturalna skutecznie odzwierciedlały wymagany typ transferu.
Ocena naturalności wypowiedzi koncentrowała się na płynności i autentyczności generowanego języka. Nauczyciele wykorzystywali wskaźniki językowe generowane przez system, aby ocenić, czy zdania były zgodne z nawykami językowymi rodzimych użytkowników języka angielskiego oraz by ocenić, czy struktura gramatyczna, kolokacje wyrazowe i rytm zdania były naturalne i odpowiednie. Wskazywali oni również problemy i sugerowali alternatywne sformułowania za pomocą adnotacji. Wymiar adaptacji kulturowej skupiał się na stosowności pragmatyki międzykulturowej. Nauczyciele musieli zidentyfikować, czy tekst zawiera niewłaściwe sformułowania wynikające z interferencji kultury języka źródłowego, takie jak wieloznaczność semantyczna, konflikty retoryczne lub niejasne oceny wartości. System dostarczał przykłady częstych błędów wynikających z odchyleń kulturowych oraz umożliwiał nauczycielom wyjaśnienie podstaw wprowadzenia poprawek i wymogów kontekstu kulturowego w komentarzach, prowadząc uczniów do zwiększenia świadomości transferu kulturowego i dokładności wypowiedzi. Każdy wymiar był oceniany w skali 5-stopniowej i obejmował wolne adnotacje oraz moduły z sugerowanymi odpowiedziami. Końcowe wyniki oceny przedstawiono w formie wykresu radarowego.
Aby zwiększyć efektywność oceny i wesprzeć praktyczne zastosowanie w klasie, w niniejszym badaniu opracowano mechanizm wspólnej oceny, łączący punktację opartą na AI z oceną nauczyciela. System przeprowadzał w pierwszej kolejności wielowymiarową ocenę tekstu wygenerowanego przez DeepSeek. Za pomocą modułu automatycznego punktowania oceniano kluczowe aspekty, takie jak złożoność składniowa, organizacja akapitów oraz spójność tekstu. Wyniki punktacji były następnie wyświetlane w czasie rzeczywistym w interfejsie nauczyciela. Nauczyciele analizowali szczegółowe oceny dla każdego wymiaru i dostosowywali je w razie potrzeby, opierając się na swojej wiedzy merytorycznej oraz rozumieniu wyników transferu uczniów. Dodawali oni również ukierunkowane komentarze bezpośrednio w tekście, aby przekazać informacje zwrotne i sugestie dydaktyczne, których automatyczna punktacja mogła nie uchwycić. W każdym wymiarze oceny zastosowano pięciostopniową skalę ocen. Interfejs zawierał również moduły adnotacji tekstowych i rekomendacji, aby ułatwić personalizację informacji zwrotnych. Wyniki oceny wizualizowano za pomocą wykresu radarowego, co pozwalało nauczycielom na szybką identyfikację mocnych i słabych stron uczniów w różnych wymiarach transferu.
Dodatkowo system umożliwiał nauczycielom dostosowanie wag poszczególnych wymiarów lub wyników ogólnych w celu ich dopasowania do celów dydaktycznych. Funkcja ta zapewniła, że końcowa ocena dokładniej odzwierciedlała rzeczywiste osiągnięcia i potrzeby edukacyjne uczniów. Po zakończeniu ręcznego przeglądu system automatycznie zintegrował dane oceniające wygenerowane przez maszynę oraz przez nauczyciela. Następnie wygenerowano wizualny raport z informacją zwrotną. Raport zawierał wykres radarowy wydajności transferu oraz wykres śledzenia wersji. Wizualizacje te w przejrzysty sposób ilustrowały zmiany w zdolnościach transferowych uczniów na przestrzeni wielu rund generowania i poprawiania tekstów, umożliwiając ciągłe monitorowanie postępów w nauce.
Proces uczenia transferowego
W niniejszym badaniu zaprojektowano kompletny proces treningu transferu. W pierwszej kolejności nauczyciel wyznaczał konkretne zadania z pisania w języku angielskim w oparciu o cele dydaktyczne oraz rzeczywisty poziom uczniów, określając typ transferu i główny punkt treningu. Następnie system automatycznie generował odpowiednie instrukcje promptów na podstawie zadań wyznaczonych przez nauczyciela i wywoływał model DeepSeek w celu przygotowania pierwszej wersji tekstu, która służyła jako materiał bazowy do przeredagowania i treningu transferu przez uczniów. Po otrzymaniu pierwszej wersji tekstu uczniowie musieli aktywnie zidentyfikować cechy transferu odzwierciedlone w tekście i w ukierunkowany sposób przeredagować treść, wykorzystując poznane strategie transferu w celu poprawy poprawności struktury składniowej, organizacji akapitów oraz ekspresji kulturowej. Po zakończeniu przeredagowania nauczyciel przeprowadził szczegółowy przegląd przesłanego tekstu, podkreślając skuteczność strategii transferu i oferując konkretne sugestie dotyczące poprawy oraz wskazówki pisarskie. Na podstawie informacji zwrotnych od nauczyciela ponownie wywołano model DeepSeek w celu wygenerowania wersji zoptymalizowanej, co dodatkowo wsparło uczniów w dopracowaniu tekstów i pogłębieniu praktyki stosowania strategii transferu. Na koniec uczeń przesyłał ostateczną wersję tekstu, wypełniał tabelę poznawczą transferu, dokonywał samooceny oraz podsumowywał metody transferu i ich efekty, co sprzyjało poprawie zdolności metapoznawczych i internalizacji umiejętności transferu pisania. Zaprojektowana na potrzeby tego badania tabela poznawcza transferu przedstawiona jest w Tabeli 2.
Wszystkie elementy oceniano w skali od 1 do 5, gdzie 1 oznacza brak biegłości, a 5 pełną biegłość. Dane z samooceny zebrano po trzech rundach sekwencyjnego szkolenia; punkty odniesienia oceny odnoszą się do zdefiniowanych wcześniej standardów operacji transferu w pięciowymiarowej bibliotece zadań.