$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
BFEN-Algorithmus-Leistungsanalyse
Die in den Experimenten bewerteten Indikatoren umfassten folgende:
Die Genauigkeit der Evaluationskorrektur (ECA) bezeichnet den Anteil der Abweichungsaufgaben, die vom Modell innerhalb der Lehrbewertungsergebnisse korrekt identifiziert und korrigiert wurden, und spiegelt damit die Gesamtwirksamkeit des Korrekturmechanismus wider. Höhere Werte deuten auf eine überlegene Korrekturgenauigkeit hin.
Die Fairness-Abweichungsrate (FDR) misst das Ausmaß der Intergruppen-Score-Unterschiede, die das Modell während des Kalibrierungsprozesses nicht eliminieren kann. Sie wird als das Verhältnis der Standardabweichung jedes sensiblen Attributs (z. B. Geschlecht, Region, Ethnie) innerhalb der Punktverteilung zur Gesamtstandardabweichung berechnet; Niedrigere Werte bedeuten geringere Unterschiede zwischen den Gruppen und eine robustere Fairness-Garantie.
Die Szenarioanpassungsrate (SAR) gibt den Prozentsatz der Korrekturaufgaben an, die das Modell erfolgreich in heterogenen Unterrichtskontexten (z. B. Naturwissenschaften vs. Geisteswissenschaften, online vs. Offline-Umgebungen) erfolgreich ausführt.
Der Fairness-Maintenance-Grad (FMD) ist definiert als eins minus das Verhältnis der Varianz der Fairness-Indikatoren zwischen sensiblen Attributgruppen nach der Korrektur zu der zuvor beobachteten Variable, was die Fähigkeit des Systems widerspiegelt, seine strukturelle Fairness während des Kalibrierungsprozesses zu erhalten.
Die Erkennungsrate für disziplinäre Merkmalsmerkmale (DFRR) berechnet den Anteil der Stichproben, in denen Kernmerkmale innerhalb der Bewertungsdaten jeder Disziplin korrekt identifiziert sind, relativ zur Gesamtgröße der Bewertungsstichprobe, und demonstriert die Fähigkeit des Modells, domänenspezifische Variationen zu erkennen und zu erfassen.
Multi-Source Data Fusion Efficiency (MDFE) bezeichnet die Durchsatzeffizienz des Modells während der Feature-Ausrichtung, Gewichtszuweisung und Abweichungskorrektur beim Fusionieren von multiquellen heterogenen Evaluationsdaten. Diese umfassende Kennzahl ist definiert als Produkt der Anzahl der pro Sekunde bearbeiteten Bewertungsproben (Proben pro Sekunde) und der Konformitätsrate der Korrekturkonsistenz (bei einem >95%-Konfidenzniveau), wobei höhere Werte auf eine effizientere und stabilere Fusionspipeline hinweisen.
Die Stabilität des Korrekturergebnisses (CRS) zeigt die Konsistenz der Kalibrierungsausgaben über mehrere unabhängige Durchläufe hinweg, quantifiziert durch den Umkehr der Standardabweichung des euklidischen Abstands zwischen den Korrekturausgängen jedes Durchlaufs unter identischen Eingaben. Höhere Werte bedeuten eine erhöhte Systemzuverlässigkeit.
Die Korrekturzeit für einzelne Daten (SDCT) stellt die durchschnittliche Rechenlatenz dar, die das Modell benötigt, um die Kalibrierung einer einzelnen Bewertungsprobe in Millisekunden (ms) abzuschließen; Niedrigere Werte deuten auf eine stärkere Echtzeit-Reaktionsfähigkeit hin.
Der korrigierte absolute Fehler (CAE) misst den mittleren absoluten Fehler zwischen den kalibrierten Vorhersagen und den Ground-Truth-Werten und stellt die Restabweichung des Modells im Vergleich zu den ursprünglichen unkalibrierten Daten dar. Niedrigere Werte bedeuten, dass die kalibrierten Ausgaben besser mit den tatsächlichen Leistungsniveaus übereinstimmen.
Der korrigierte relative Fehler (CRE) quantifiziert den durchschnittlichen absoluten Fehler zwischen den kalibrierten Vorhersagen und den Grundwahrheitswerten, ausgedrückt als Prozentsatz der Grundwahrheit, wobei niedrigere Werte eine höhere relative Kalibrierungsgenauigkeit anzeigen.
Die Korrekturgenauigkeitsrate (CAR) stellt den Anteil der Proben dar, deren absoluter Fehler nach der Kalibrierung < 0,5 relativ zur Gesamtstichprobengröße beträgt, was die Zuverlässigkeit des Modells bei der Erfüllung vordefinierter Präzisionsbedingungen demonstriert. Hohe Werte untermauern den empirischen Nutzen und die Glaubwürdigkeit der Ergebnisse.
Totalverlustwert (TL) stellt den umfassenden Optimierungszielwert dar, der aus der gewichteten Summe einzelner Teilverlustterme bei Abschluss der Aufgabe abgeleitet wird. Konkret werden sieben Metriken – DFRR, MDFE, CRS, SDCT, CAE, CRE und CAR – mittels Z-Score-Normalisierung standardisiert und entsprechend der operativen Priorität der Evaluationsaufgaben gewichtet. Gegeben der Gewichtungsvektor [0,15, 0,12, 0,1, 0,08, 0,13, 0,12, 0,1] werden diese sieben normalisierten Indikatorwerte aggregiert, um den Endverlust zu berechnen.
Die Genauigkeit der Evaluationsmerkmale-Clustering (EFCA) bewertet den Ausgleichsgrad zwischen den vom Modell generierten unüberwachten Clustering-Konfigurationen und den von Domänenexperten validierten Ground-Truth-Kategorien.
Die hochdimensionale Datenverarbeitungseffizienz (HDPE) misst die Anzahl der Proben, die einer Dimensionsreduktion und Abweichungskorrektur pro Zeiteinheit unterzogen werden, wenn hochdimensionale, spärliche Vektoren mit ≥50 Bewertungsmerkmalen verarbeitet werden. Gemessen in Proben pro Sekunde spiegeln höhere Werte eine robustere Fähigkeit wider, komplexe, groß angelegte Bewertungseingaben in Echtzeit zu verarbeiten.
Die Fairness Correction Precision (FCP) bewertet die Gleichmäßigkeit der Kalibrierungseffekte zwischen unterschiedlichen Schülerkohorten. Diese Metrik wird quantifiziert, indem der Mittelwert der Verteilung der Kolmogorov-Smirnov-Distanz für die korrigierten absoluten Fehler über die empfindlichen Attributuntergruppen berechnet wird; Niedrigere Werte bedeuten eine ausgewogenere gruppenübergreifende Leistung und eine stärkere Fairness Assurance.
Cross-Scene Correction Consistency (CSCC) quantifiziert den Verteilungsoffset von Kalibrierungsergebnissen über drei typische Szenarien – nämlich Klassenbewertung, praktische Bewertung und Online-Tests – modelliert als Wasserstein-Distanzverhältnis.
Um die Leistung des vorgeschlagenen BFEN-Lehrbeurteilungs-Kalibrierungsalgorithmus zu überprüfen, verglich die Studie ihn mit dem PRF-Algorithmus, der Hauptkomponentenanalyse (PCA) und Zufallswald (RF) kombinierte; der EAB-Algorithmus, der extreme Learning Machine (ELM) und adaptives Boosting (AdaBoost) kombinierte; und der DBLR-Algorithmus, der Deep Belief Network (DBN) und logistische Regression (LR) kombinierte. Die Experimente liefen auf einem System mit einem Intel Core i9-13900HX-Prozessor und einer NVIDIA RTX 4080 GPU, das eine hohe parallele Rechenleistung und großen Videospeicher ermöglichte, um Feature-Extraktion und Kalibrierungsberechnungen für groß angelegte Lehrbewertungsdaten effizient durchzuführen. Das Betriebssystem war Windows 11, und Python 3.9 wurde für die Programmierung verwendet. Die Algorithmen wurden mit der Scikit-learn-Bibliothek implementiert, Deep-Learning-Module wurden über das TensorFlow-Framework entwickelt, und Pandas- sowie NumPy-Bibliotheken wurden für die Datenvorverarbeitung eingesetzt. Die Entwicklungsumgebung verwendete PyCharm Professional 2023.1, und Seaborn wurde zur Visualisierung von Kalibrierungsergebnissen eingesetzt, um einen intuitiven Vergleich der Algorithmusleistung zu erleichtern. Um die Zuverlässigkeit der Daten sicherzustellen, verwendete die Studie den Global Education Monitoring Report Datensatz1 und den akademischen Leistungsdatensatz2 der spanischen Mittelstufenschüler. Der Datensatz enthält 12.486 Datensätze, die multimodale Lehrbewertungsdaten wie universitäre Lehrbewertungen, akademische Leistungen der Studierenden, Evaluationen von Studierenden und Kursfeedback abdecken und 137 Merkmale der Lehrdimension umfassen, darunter Häufigkeit der Interaktion im Klassenzimmer, zeitnahe Feedback bei Aufgaben, Konsistenz der Bewertung, Sprachinklusivität und interkulturelle Sensibilität. Die Zielvariable ist der Lehrbewertungsscore, der in dieser Studie auf einen multidimensionalen gewichteten zusammengesetzten Wert abgebildet wird, der von Experten kalibriert wird. Die Forschung integriert vier Arten von Informationsquellen: Lehrevaluationen für Studierende, Peer-Reviews, Beobachtungen im Klassenzimmer und Überprüfung von Lehrdossiers mit Gewichtungen von 0,35, 0,25, 0,25 bzw. 0,15. Die Trainings- und Validierungssätze sind chronologisch aus den beiden Datensätzen getrennt. Die Studie verwendet Daten aus September 2024 als Trainingsset und Daten von Oktober 2024 bis Juni 2025 als Validierungsset, um mit dem zeitlichen Fortschritt von Bildungsbewertungen in Einklang zu kommen. In der Vorverarbeitungsphase wird eine modalitätsspezifische Strategie angewandt, bei der strukturierte Features über Z-Score-Normalisierung standardisiert und Ausreißer Winsorized sind, während textuelle Features nach dem BERT-basierten chinesischen Modell kodiert und auf 768 Dimensionen reduziert werden. Adversariales Training wird angewendet, um die Robustheit gegen implizite Verzerrungsformen zu erhöhen und semantische Drift durch kulturelle Hintergrundunterschiede zu mildern.
Um fachübergreifende Ausbildung und Validierungsforschung zu erreichen, wird das Modell auf vier heterogene Unterrichtsszenarien übertragen: Grundbildung K-12, Berufsbildung, Weiterbildung und internationale chinesische Bildung für null oder wenige Stichprobenvalidierung. In diesen vier Szenarien führt die Studie während des Algorithmustrainings domänenadaptive Regularisierungsterme ein, um die Konsistenz der Merkmalsverteilung des Modells in verschiedenen Lehrszenarien einzuschränken. Einbettung eines leichtgewichtigen, syntaxbewussten Maskenmechanismus für kurze Satzrauschen in K-12-Szenarien; Um der Mehrdeutigkeit der beruflichen Terminologie in der Berufsausbildung entgegenzuwirken, wird ein dynamisches Domänenwörterbuch erstellt und in das Wissensdiagramm der Lehrplanübersicht integriert. Entwerfen Sie ein Lernmodul zum Vergleich von Altersgruppen, um die intergenerationelle semantische Lücke in der Fortbildung zu schließen und semantische Anker für die Evaluationsausdrücke verschiedener Altersgruppen im latenten Raum auszurichten. Um den kulturellen Last-Ausdruck in der internationalen chinesischen Bildung zu adressieren, werden sprachübergreifende Vergleichshinweise zur Feinabstimmung verwendet und so die Robustheit des Verständnisses nicht-wörtlicher Bildungskonzepte verbessert. Forschung zu fachkundigen Kalibrierungs- und Zuverlässigkeitstests strukturierter Felder in ursprünglichen Bewertungsdaten, wobei Einträge mit niedriger Zuverlässigkeit bei Krippendorffs Alphakoeffizienten unter 0,75 entfernt wurden. Doppelblinde manuelle Annotation wurde in Schülerbewertungstexten implementiert, wobei drei Experten für Bildungsmessung unabhängig voneinander die Abweichungstyp-Markierung durchführten und Cohens Konsistenz k = 0,86 in der Annotation erreichten. Schließlich wurden die kommentierten Ergebnisse mit den Anwesenheitsprotokollen der Supervision und den Schlussfolgerungen der Lehrakten-Review abgeglichen, um die endgültigen Kalibrierungsetiketten zu erstellen.
Die ausgewählten Datensätze stammen aus unterschiedlichen Populationen, Messsystemen und Bildungshintergründen. Dieses bereichsübergreifende Validierungsparadigma testete rigoros die Robustheits- und Generalisierungsgrenzen des Modells innerhalb eines authentischen Bildungsökosystems und verhinderte so Bewertungsillusionen, die durch Datenhomogenisierung verursacht wurden. Beide Repositorien enthielten umfangreiche Mengen an Lehrbewertungsunterlagen, die einen direkten Referenzwert für den Einsatz fairness-sensitiver intelligenter Bildungsalgorithmen boten. Beide Datensätze enthielten umfangreiche Daten zur Lehrbewertung und lieferten direkte Referenzwerte für die Entwicklung fairness-bewusster intelligenter Bildungsalgorithmen und die Kalibrierung der Lehrbewertung. Die Studie kalibrierte 1000 Lehrbewertungsaufzeichnungen mit den vier Algorithmen und berechnete deren ECA und Fairness FDR. Die Ergebnisse sind in Abbildung 8 dargestellt.

Abbildung 8: Vergleich der Testergebnisse zwischen ECA und FDR. (A) BFEN. (B) PRF. (C) EAB. (D) DBLR. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 8A dargestellt, erreichte BFEN zunächst einen ECA von 82,47 % und einen FDR von 5,71 % in der Bewertungs-Kalibrierungsaufgabe. Mit steigender Anzahl kalibrierter Datensätze stieg die ECA auf 98,75 % und stabilisierte sich nach der Kalibrierung von 421 Datensätzen, während die FDR auf 2,87 % sank und sich nach der Kalibrierung von 514 Datensätzen stabilisierte. Wie in Abbildung 8B dargestellt, stieg die ECA-Kurve des PRF-Algorithmus allmählich an, während die FDR-Linie langsam abnahm. Am Ende der Kalibrierungsaufgabe lag der ECA-Wert bei 92,30 % und der PDR-Wert bei 6,72 %. Abbildung 8C zeigt, dass die ECA-Kurve des EAB-Algorithmus schnell anstieg, bevor sie abflachte, während ihre FDR-Trajektorie vor der Konvergenz starke frühe Schwankungen zeigte und mit einem ECA von 84,64 % und einem FDR von 8,93 % endete. Wie in Abbildung 8D dargestellt, zeigte der DBLR-Algorithmus eine träge nach oben gerichtete ECA-Trajektorie begleitet von marginalen Schwankungen und begrenzter Kompression in seiner FDR-Linie und schloss die Kalibrierungsaufgabe mit einem ECA von 83,51 % und einem FDR von 8,42 % ab. Diese experimentellen Ergebnisse bestätigen, dass der BFEN-Algorithmus die Basisansätze sowohl bei der Genauigkeit der Evaluationskorrektur als auch bei der Fairness-Bias-Kontrolle deutlich übertrifft. Diese überlegene Verallgemeinerungsfähigkeit ist der Integration von BERT in BFEN zuzuschreiben, das tiefe semantische Merkmale aus unstrukturiertem Bewertungstext extrahiert, um versteckte Bias-Ausdrücke zu erfassen, während das RL-Modul dynamisch Fairness-Schwellenwerte und Korrekturparameter über eine multiobjektive Belohnungsfunktion optimiert, um sensible Attribute von den Endausgaben zu entkoppeln. Die Studie testete anschließend SAR und FMD für die Klassenprüfung, Abschlussprüfungen, praktische Evaluation und Online-Bewertung und bezeichnete die vier Szenarien als A, B, C und D. Die Ergebnisse sind in Abbildung 9 dargestellt.

Abbildung 9: Vergleich von SAR- und FMD-Ergebnissen in verschiedenen Szenarien. (A) SAR-Testergebnisse. (B) FMD-Testergebnisse. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 9A dargestellt, erreichte BFEN einen SAR von über 98 % in allen Unterrichtsszenarien, mit dem höchsten SAR von 99,01 % bei Klassenprüfungen. Die SAR des Vergleichsalgorithmus in verschiedenen Szenarien ist niedriger als die des BFEN-Algorithmus, wobei der DBLR-Algorithmus für das Endbewertungsszenario mit 70,23 % die niedrigste SAR für das Endbewertungsszenario aller Algorithmen hat. Wie in Abbildung 9B dargestellt, ist die FMD des BFEN-Algorithmus in verschiedenen Unterrichtsszenarien immer noch deutlich höher als die des Vergleichsalgorithmus, mit FMDs von 98,47 %, 98,05 %, 97,81 % und 97,94 % in verschiedenen Szenarien. Die FMDs des Benchmark-Algorithmus DBLR liegen bei 82,36 %, 71,74 %, 70,59 % bzw. 69,12 %. Die FMDs des EAB-Algorithmus betragen jeweils 80,79 %, 68,21 %, 67,65 % und 66,03 %, während die FMDs des PRF-Algorithmus 86,42 %, 82,17 %, 80,98 % und 78,33 % betragen. Diese Ergebnisse zeigten, dass BFEN aufgrund des iterativen Lernens von GBDT mit mehreren Entscheidungsbäumen besser abschneidete, was Fehlermuster in verschiedenen Szenarien genau erfasste und stabile sowie faire Kalibrierungsergebnisse sicherstellte. Die Studie bewertete außerdem die disziplinäre Merkmalserkennungsrate (DFRR) für Chinesisch, Mathematik und Englisch mit den vier Algorithmen. Die Ergebnisse sind in Abbildung 10 dargestellt.

Abbildung 10: Vergleich der DFRR-Testergebnisse in verschiedenen Disziplinen. (A) Trainingsset. (B) Validierung gesetzt. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 10A dargestellt, erreichte BFEN DFRR von 99,23 %, 98,94 % und 99,13 % für Chinesisch, Mathematik und Englisch im Trainingsprogramm. Abbildung 10B zeigte, dass BFEN im Validierungsset auch einen höheren DFRR erreichte als andere Algorithmen. Konkret erreichte BFENs DFRR für Chinesen 98,41 %, 10,8 % höher als DBLRs 87,61 %; für Mathematik 97,54 %, 9,07 % höher als PRFs 88,47 %; und für Englisch 98,13 %, 13,34 %, höher als EABs 84,79 %. Diese Ergebnisse bestätigten, dass BFEN sich effizient an die Kalibrierung der disziplinären Bewertung anpasste, indem es BERTs tiefe Erfassung semantischer Unterschiede mit GBDTS personalisiertem Lernen von Fehlermustern kombinierte. Um die BFEN-Leistung umfassend zu bewerten, bewertete die Studie MDFE, CRS und SDCT für die vier Algorithmen. Die Ergebnisse sind in Tabelle 1 dargestellt.
| Datensatz | Algorithmus | MDFE (%) | CRS | SDCT (s) |
| Ausbildung | BFEN | 98.42 ± 0.28*&@ | 0,975 ± 0,28*&@ | 0,78 ± 0,04*&@ |
| PRF | 83,85 ± 0,41 | 0,779 ± 0,36 | 1,32 ± 0,08 |
| EAB | 85,91 ± 0,50 | 0,806 ± 0,40 | 1.15 ± 0.07 |
| DBLR | 88,76 ± 0,47 | 0,753 ± 0,39 | 1,45 ± 0,08 |
| Validierung | BFEN | 97,58 ± 0,25*&@ | 0,968 ± 0,27*&@ | 0,86 ± 0,03*&@ |
| PRF | 81,62 ± 0,32 | 0,687 ± 0,50 | 1,51 ± 0,06 |
| EAB | 84,37 ± 0,40 | 0,749 ± 0,42 | 1,28 ± 0,05 |
| DBLR | 87,53 ± 0,30 | 0,728 ± 0,47 | 1,63 ± 0,07 |
Tabelle 1: Vergleich der MDFE-, CRS- und SDCT-Testergebnisse. "*" zeigt einen signifikanten Unterschied (p < 0,05) zwischen BFEN- und PRF-Ergebnissen an. "&" zeigt an, dass der Unterschied zwischen BFEN- und EAB-Ergebnissen signifikant war (S. < 0,05). "@" zeigt an, dass der Unterschied zwischen BFEN- und DBLR-Ergebnissen signifikant ist (p < 0,05)
Tabelle 1 zeigt, dass BFEN im Trainingsset einen MDFE von 98,42 % erreichte, was 14,57 % höher ist als PRFs 83,85 %, ein CRS von 0,975, 0,222 mehr als DBLRs 0,753, und ein SDCT von 0,78 s, 0,67 s weniger als DBLRs 1,45 s. Im Validierungsset zeigte BFEN eine überlegene Leistung, wobei MDFE, CRS und SDCT von 97,58 %, 0,968 bzw. 0,86 s besser abschnitten als Vergleichsalgorithmen. Insgesamt bestätigten die Ergebnisse die überlegene, umfassende Leistung des BFEN bei der Kalibrierung der Lehrbewertung.
GFBFEN Leistungsvalidierung des Prüfungs-Bewertungs-Kalibrierungsmodells
Basierend auf der BFEN-Leistungsvalidierung bewertete die Studie weiter die Leistung des GFBFEN-Lehrbewertungs-Kalibrierungsmodells, das auf BFEN erstellt wurde, und verglich es mit Kalibrierungsmodellen, die mit PRF-, EAB- und DBLR-Algorithmen erstellt wurden. Um konsistente Testbedingungen und Vergleichbarkeit sicherzustellen, diente der globale Bildungsüberwachungsbericht-Datensatz als Trainingsset, während der akademische Leistungsdatensatz der Universitätsstudenten als Validierungssatz diente. Die vier Modelle kalibrierten 500 Lehrbewertungsdatensätze, deren CAE und CRE berechnet wurden. Die Ergebnisse sind in Abbildung 11 dargestellt.

Abbildung 11: Vergleich der CAE- und CRE-Testergebnisse. (A) CAE-Testergebnisse. (B) CRE-Testergebnisse. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 11A gezeigt, erreichte GFBFEN zunächst einen CAE von 0,1279. Mit fortschreitender Kalibrierung sank der CAE auf 0,0641 und stabilisierte sich nach 104 Datensätzen. Die Vergleichsmodelle hatten eine höhere anfängliche und finale CAE als GFBFEN, wobei EAB die höchste anfängliche und finale CAE von 0,1858 bzw. 0,1217 aufwies. Abbildung 11B zeigte, dass die anfängliche und endgültige CRE von GFBFEN während der Kalibrierungsaufgabe niedriger blieben als die Vergleichsmodelle, mit Werten von 0,1137 bzw. 0,0912. Diese Ergebnisse zeigten, dass GFBFEN eine starke Anpassungsfähigkeit zeigte, profitierte vom Aufmerksamkeitsmechanismus von GAT, der semantische Korrelationsgraphen zwischen Merkmalen erstellte, die semantische Ausrichtung von Multiquellen-Bewertungsdaten verbesserte und die ineffektive Kalibrierung durch Merkmalsverzerrung reduzierte. Die Studie bewertete anschließend CAR für Schülerbewertungsdaten, Lehrerbewertungsdaten, Schulbewertungsdaten und Online-Bewertungsdaten, die als I, II, III und IV gekennzeichnet sind. Die Ergebnisse sind in Abbildung 12 dargestellt.

Abbildung 12: Vergleich der CAR-Ergebnisse verschiedener Bewertungsdaten. (A) GFBFEN. (B) PRF. (C) EAB. (D) DBLR. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 12A dargestellt, erreichte GFBFEN eine CAR von 99,34 %, 98,93 %, 99,01 % und 99,12 % für Schüler-, Lehrer-, Schul- und Online-Bewertungsdaten im Trainingsset. Im Validierungssatz lagen die CAR-Werte bei 97,89 %, 98,56 %, 97,57 % bzw. 98,46 %. Abbildung 12B–D zeigte, dass Vergleichsmodelle sowohl in den Trainings- als auch in den Validierungssätzen einen niedrigeren CAR aufwiesen. Darunter schnitt EAB im Validierungssatz am schlechtesten ab, mit 76,31 % für Lehrerdaten und 78,29 % für Online-Daten. Diese Ergebnisse bestätigten, dass GFBFEN die Vergleichsmodelle deutlich übertraf. Als Nächstes testete die Studie die Zielleitung in der Kalibrierungsaufgabe der Lehrbeurteilung, um die Anpassungsfähigkeit und die Stabilität des Trainings zu bewerten. Die Ergebnisse sind in Abbildung 13 dargestellt.

Abbildung 13: Modellanpassungsfähigkeit und Testergebnisse des Trainingsstabilitätstests. (A) GFBFEN. (B) PRF. (C) EAB. (D) DBLR. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 13A dargestellt, hatte GFBFEN zunächst eine TL von 0,1021 im Trainingsset. Nach 67 Iterationen sank der TL auf 0,0725 und stabilisierte sich. Im Validierungssatz sank der TL von 0,1237 auf 0,1018. Abbildung 13B–D zeigte, dass der endgültige TL von PRF im Trainingssatz 0,0824 betrug, der endgültige TL von EAB im Validierungssatz 0,1178 und der TL von DBLR in beiden Sätzen instabil und deutlich höher als bei anderen Modellen. Diese Ergebnisse zeigten, dass GFBFEN eine starke Anpassungsfähigkeit und Trainingsstabilität zeigte und von KD-basiertem Wissenstransfer profitierte, was es dem Modell ermöglichte, effektive Funktionen schnell zu erlernen, die Verlustkonvergenz zu beschleunigen und eine Verallgemeinerung über Datensätze hinweg sicherzustellen. Um die Kernleistung von GFBFEN umfassend zu validieren, testete die Studie EFCA, HDPE, FCP und CSCC für die vier Modelle. Die Ergebnisse sind in Abbildung 14 dargestellt.

Abbildung 14: Umfassende Indikatortestergebnisse für Lehrbeurteilungs- und Korrekturaufgaben. (A) GFBFEN-Testergebnisse. (B) PRF-Testergebnisse. (C) EAB-Testergebnisse. (D) DBLR-Testergebnisse. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.
Wie in Abbildung 14A–D gezeigt, hat das GFBFEN-Modell EFCA-Werte von 99,35 % bzw. 98,76 % in den Trainings- und Validierungssätzen. Die EFCA des PRF-Modells beträgt jeweils 88,53 % bzw. 87,04 %. Im Validierungsset lag die EFCA des GFBFEN-Modells 6,59 % höher als die des EAB-Modells mit 92,17 % und 11,72 % höher als die des DBLR-Modells mit 87,04 %. Darüber hinaus sind auch die HDPE-, FCP- und CSCC-Indikatoren umfassend führend: Im Validierungsset erreichte das HDPE des GFBFEN-Modells 98,05 %, das FCP 97,93 % und das CSCC 0,968, was alle die PRF-, EAB- und DBLR-Modelle übertraf. Insgesamt bestätigten diese Ergebnisse die überlegene Gesamtleistung von GFBFEN und zeigten, dass die koordinierte Optimierung von GAT-KD, AM-LSTM und BFEN durch das Modell die Kalibrierungsgenauigkeit, Effizienz und Fairness bei der Lehrbeurteilung effektiv verbesserte.
Die Forschung entwickelte schrittweise FairEduNet, BFEN, FBFEN und GFBFEN, und das finale GFBFEN umfasst Komponenten wie FairEduNet, BERT-RL, AM-LSTM und GAT-KD. Um den unabhängigen Beitrag einzelner Komponenten zu überprüfen, werden Forschungs- und Design-Ablationsexperimente durchgeführt, bei denen jede Komponente schrittweise entfernt und deren Auswirkungen auf die Gesamtleistung bewertet werden. Vergleichende Indikatoren umfassen ECA, FDR, SAR und FMD. Die Ergebnisse zeigten, dass der ECA-Wert der FairEduNet-Komponente allein 87,32 % betrug, FDR 12,45 %, SAR 89,67 % und FMD 11,89 %. Der ECA des vollständigen GFBFEN-Modells erreichte 99,21 %, der FDR fiel weiter auf 1,93 %, der SAR blieb stabil bei 99,45 %, und der FMD wurde auf 7,28 % optimiert. Nach Entfernung von BERT-RL sank ECA auf 91,04 %, der FDR-Wert lag bei 6,23 %, der SAR-Wert bei 92,33 % und FMD auf 7,85 %. Die Ablation von AM-LSTM erhöhte die SAR-Schwankungen um 14,2 %. Die Entfernung von GAT-KD führte zu einem Anstieg der FMD auf 8,36 %, und sein Unterdrückungsmechanismus der Propagation von Graphenstruktur-Bias geleitet durch Wissensdestillation war signifikant wirksam bei der Linderung impliziter Assoziationsverzerrung zwischen Populationen.
Um die Forschungsmethoden weiter zu testen, führte die Studie etablierte Fairness-Standardindikatoren ein, nämlich den Fairness Correction Benchmark (FCB), der drei Arten starrer Einschränkungen abdeckt, die in Bildungsszenarien weit verbreitet sind: (1) Der absolute Wert des durchschnittlichen Unterschieds nach der Korrektur zwischen den Gruppen beträgt ≤ 1,2 Punkte (basierend auf dem Prozentsystem); (2) Die Überlappungsrate der korrigierten Konfidenzintervalle für jede empfindliche Attributuntergruppe beträgt ≥ 95 %; (3) In jedem einzelnen Szenario muss die gemeinsam machbare Region von FDR und SAR die Pareto-Grenzen-Einschränkung erfüllen (das heißt, es ist unmöglich, SAR zu verbessern, ohne FDR zu verschlechtern, und umgekehrt). Das GFBFEN-Modell wurde in der experimentellen Bewertung mit gängigen Basismodellen wie EAB, PRF, DBLR und GBDT verglichen. Das Experiment wurde mit 421 realen Bewertungsdaten aus tatsächlichen Lehrszenarien durchgeführt und deckte drei typische Bildungsszenarien ab: Klassenzimmerbewertung, praktische Bewertung und Online-Tests. Die Ergebnisse sind in Tabelle 2 dargestellt.
| Algorithmus | Absoluter Wert des durchschnittlichen Score-Unterschieds | Konfidenzintervall-Überlappungsrate (%) | Gemeinsame zulässige Regionszufriedenheitsrate(%) | Umfassende Partitur |
| GFBFEN | 0.87 | 98.3 | 100 | 97.2 |
| EBA | 1.52 | 98.4 | 82.6 | 78.5 |
| PRF | 1.68 | 85.1 | 74.3 | 71.2 |
| DBLR | 1.45 | 87.9 | 79.8 | 75.6 |
| GBDT | 1.33 | 91.2 | 86.4 | 79.9 |
Tabelle 2: Bewertungsergebnisse der Fairness-Kriterien und praktische Anwendungsverifikation.
Wie in Tabelle 2 gezeigt, erreichte GFBFEN die vollständige Einhaltung aller vier starren FCB-Einschränkungen unabhängig voneinander, und sein umfassender Score übertraf die anderen Basismodelle deutlich um +18,7 Punkte, was die Robustheit des vorgeschlagenen mehrstufigen kollaborativen Korrekturparadigmas bestätigte. Insbesondere im Kernindikator, der die Fairness-Effizienz-Kompromissfähigkeit widerspiegelt, erreichte die gemeinsame Abdeckungsquote der zulässigen Region 100 %, was darauf hindeutet, dass das Modell über einsetzbare Pareto-optimale Entscheidungsfähigkeiten in realen Bildungsszenarien verfügt.
Fairness in der Lehrbewertung bezieht sich auf die Verwendung überprüfbarer quantitativer Einschränkungen als Maßstab, wobei individuelle Unterschiede und Bildungsgesetze respektiert werden. Die Berechnungslogik und die Schwellenwertsetzung von Gerechtigkeitsindikatoren basieren auf dem theoretischen Rahmen von Bildungsgerechtigkeit und empirischen Datenverifikationsstandards. Sie werden gemeinsam von einem Expertengremium aus fünf Wissenschaftlern überprüft, um ein hohes Maß an Einheitlichkeit zwischen theoretischer Strenge und Anpassungsfähigkeit an die pädagogische Praxis sicherzustellen. Um die Anpassungsfähigkeit des Modells unter verschiedenen Fairnessstandards weiter zu validieren, führte die Studie weitere Validierungen unter mehreren Standards durch. Konkret wurden drei Fairness-Standards zur Überprüfung ausgewählt. Standard 1 ist das Gleichgewicht der Akzeptanzrate zwischen den Gruppen basierend auf der demografischen Parität. Standard 2 ist die Gruppenübergreifende Konsistenz von wahrer positiver und falsch-positiver Rate basierend auf ausgeglichenen Odds. Standard 3 basiert auf der prädiktiven Parität zur Kontrolle des Intergruppen-Bias bei der Vorhersagegenauigkeit. Es wurde festgestellt, dass GFBFEN die starren Einschränkungsanforderungen unter allen drei Standards konsequent erfüllte. Abweichung der Standard-1-Gruppenakzeptanzrate ≤1,2 %, Standard-2-True/Fakt-Positiv-Intergruppenunterschied ≤0,85 %, Standard-3-Vorhersagegenauigkeit, Intergruppenabweichung innerhalb von ±±0,6 % kontrolliert. Im Gegensatz dazu zeigten die anderen Modelle einen Durchbruch von ≥3,7 % unter mindestens einem Kriterium, was die Verallgemeinerungskompatibilität von GFBFEN für multivariate Fairness-Paradigmen bestätigte.
DATENVERFÜGBARKEIT:
Um die Zuverlässigkeit der Daten sicherzustellen, verwendete die Studie den Global Education Monitoring Report Datensatz (https://www.education-progress.org/) und den akademischen Leistungsdatensatz der spanischen Mittelstufenschüler (https://archive.ics.uci.edu/dataset/320/student+performance). Die Trainings- und Validierungssätze sind chronologisch aus den beiden Datensätzen getrennt. Die Studie verwendet Daten aus September 2024 als Trainingsset und von Oktober 2024 bis Juni 2025 als Validierungsset und stimmt damit mit dem zeitlichen Fortschritt der Bildungsbewertungen überein.