$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
BFEN-algoritme prestatie-analyse
De indicatoren die in de experimenten werden geëvalueerd omvatten de volgende:
Nauwkeurigheid van evaluatiecorrectie (ECA) duidt het aandeel afwijkingsitems aan dat correct door het model is geïdentificeerd en gecorrigeerd binnen de resultaten van de onderwijsbeoordeling, en weerspiegelt daarmee de algehele effectiviteit van het correctiemechanisme. Hogere waarden duiden op superieure correctienauwkeurigheid.
De fairness deviation rate (FDR) meet de omvang van de intergroepsscoreverschillen die het model tijdens het kalibratieproces niet elimineert. Het wordt berekend als de verhouding van de standaarddeviatie van elk gevoelig kenmerk (bijv. geslacht, regio, etniciteit) binnen de scoreverdeling tot de totale standaarddeviatie; Lagere waarden impliceren geminimaliseerde intergroepsverschillen en een robuustere eerlijkheidsgarantie.
Scenario-adaptatiepercentage (SAR) geeft het percentage correctietaken aan dat het model succesvol uitvoert in heterogene instructiecontexten (bijv. wetenschappen versus geesteswetenschappen, online versus offline omgevingen).
De fairness maintenance degree (FMD) wordt gedefinieerd als één minus de verhouding van de variantie van fairness-indicatoren tussen gevoelige attribuutgroepen na correctie tot die waargenomen vóór correctie, wat het vermogen van het systeem weerspiegelt om zijn structurele eerlijkheid tijdens het kalibratieproces te behouden.
De herkenningssnelheid van disciplinaire kenmerken (DFRR) berekent het aandeel van de steekproeven waarin kernkenmerken correct zijn geïdentificeerd binnen de beoordelingsgegevens van elke discipline ten opzichte van de totale beoordelingssteekproefgrootte, waarmee het vermogen van het model wordt aangetoond om domeinspecifieke variaties te onderscheiden en te vangen.
Multi-source data fusion efficiency (MDFE) verwijst naar de doorvoerefficiëntie van het model tijdens feature-uitlijning, gewichtstoewijzing en deviatiecorrectie bij het fuseren van multi-source heterogene evaluatiedata. Deze uitgebreide maatstaf wordt gedefinieerd als het product van het aantal beoordelingsmonsters dat per seconde wordt verwerkt (monsters per seconde) en het compliancepercentage van correctieconsistentie (op een betrouwbaarheidsniveau van >95%), waarbij hogere waarden duiden op een efficiëntere en stabielere fusiepijpleiding.
Correctieresultaatstabiliteit (CRS) geeft de consistentie aan van kalibratie-uitgangen over meerdere onafhankelijke runs, gekwantificeerd door het omgekeerde van de standaarddeviatie van de Euclidische afstand tussen de correctie-uitgangen van elke run onder identieke inputs. Hogere waarden duiden op een verbeterde betrouwbaarheid van het systeem.
Single data correction time (SDCT) vertegenwoordigt de gemiddelde rekenlatentie die het model verbruikt om de kalibratie van een enkele beoordelingsmonster te voltooien, gemeten in milliseconden (ms); Lagere waarden duiden op een sterkere realtime responscapaciteit.
Gecorrigeerde absolute fout (CAE) meet de gemiddelde absolute fout tussen de gekalibreerde voorspellingen en de grondwaarheidswaarden, en vertegenwoordigt de restafwijking van het model ten opzichte van de oorspronkelijke niet-gekalibreerde gegevens. Lagere waarden geven aan dat de gekalibreerde uitgangen beter aansluiten bij de werkelijke prestatieniveaus.
Gecorrigeerde relatieve fout (CRE) kwantificeert de gemiddelde absolute fout tussen de gekalibreerde voorspellingen en grondwaarheidswaarden uitgedrukt als een percentage van de grondwaarheid, waarbij lagere waarden een hogere relatieve kalibratieprecisie aangeven.
De correctienauwkeurigheidsgraad (CAR) geeft het aandeel monsters aan waarvan de absolute fout na kalibratie < 0,5 bedraagt ten opzichte van de totale steekproefgrootte, waarmee de betrouwbaarheid van het model wordt aangetoond bij het voldoen aan vooraf gedefinieerde precisiebeperkingen. Hoge waarden onderbouwen het empirische nut en de geloofwaardigheid van de outputs.
Totale verlieswaarde (TL) vertegenwoordigt de uitgebreide optimalisatie-doelwaarde die is afgeleid van de gewogen som van individuele subverliestermen bij taakvoltooiing. Specifiek zijn zeven metrics—DFRR, MDFE, CRS, SDCT, CAE, CRE en CAR—gestandaardiseerd via Z-score normalisatie en gewogen op basis van de operationele prioriteit van de evaluatietaken. Gegeven de weegvector [0,15, 0,12, 0,1, 0,08, 0,13, 0,12, 0,1], worden deze zeven genormaliseerde indicatorwaarden samengevoegd om het uiteindelijke verlies te berekenen.
Nauwkeurigheid van evaluatiefeature clustering (EFCA) beoordeelt de mate van uitlijning tussen de ongecontroleerde clusteringconfiguraties die door het model worden gegenereerd en de ground-truth-categorieën die door domeinexperts worden gevalideerd.
Efficiëntie van hoogdimensionale gegevensverwerking (HDPE) meet het aantal monsters dat per tijdseenheid wordt onderworpen aan featuredimensionaliteitsreductie en deviatiecorrectie bij het verwerken van hoogdimensionale sparse vectoren met ≥50 evaluatiekenmerken. Gemeten in steekproeven per seconde weerspiegelen hogere waarden een robuuster vermogen om complexe, grootschalige beoordelingsinputs in realtime te verwerken.
Fairness correction precision (FCP) evalueert de uniformiteit van de kalibratie-effecten tussen uiteenlopende studentengroepen. Deze metriek wordt gekwantificeerd door het gemiddelde van de verdeling van de Kolmogorov-Smirnov-afstand te berekenen voor de gecorrigeerde absolute fouten over de gevoelige attribuut-subgroepen; Lagere waarden impliceren een meer evenwichtige cross-group prestaties en sterkere fairness assurance.
Cross-scene correctieconsistentie (CSCC) kwantificeert de distributie-offset van kalibratieresultaten over drie typische scenario's—namelijk klassikale beoordeling, praktische evaluatie en online testen—gemodelleerd als de Wasserstein-afstandsverhouding.
Om de prestaties van het voorgestelde BFEN-examens-kalibratiealgoritme te verifiëren, vergeleek de studie dit met het PRF-algoritme, dat principal component analysis (PCA) en random forest (RF) combineerde; het EAB-algoritme, dat extreme learning machine (ELM) en adaptive boosting (AdaBoost) combineerde; en het DBLR-algoritme, dat deep belief network (DBN) en logistische regressie (LR) combineerde. De experimenten draaiden op een systeem uitgerust met een Intel Core i9-13900HX-processor en NVIDIA RTX 4080 GPU, wat hoge parallelle rekenkracht en groot videogeheugen bood om feature-extractie en kalibratieberekeningen voor grootschalige onderwijsbeoordelingsdata efficiënt uit te voeren. Het besturingssysteem was Windows 11, en Python 3.9 werd gebruikt voor programmeren. De algoritmen werden geïmplementeerd met behulp van de Scikit-learn-bibliotheek, deep learning-modules werden ontwikkeld via het TensorFlow-framework, en Pandas- en NumPy-bibliotheken werden gebruikt voor datapreprocessing. De ontwikkelomgeving gebruikte PyCharm Professional 2023.1, en Seaborn werd toegepast voor het visualiseren van kalibratieresultaten om een intuïtieve vergelijking van algoritmeprestaties te vergemakkelijken. Om de betrouwbaarheid van de gegevens te waarborgen, maakte de studie gebruik van de Global Education Monitoring Report dataset1 en de academische prestatiedataset2 van de Spaanse middelbare scholieren. De dataset bevat 12.486 records, die multimodale evaluatiegegevens voor onderwijs omvatten, zoals beoordelingen van universitaire faculteits, academische prestaties van studenten, evaluaties van student-onderwijs en cursusfeedback, en omvat 137 onderwijsdimensiekenmerken, waaronder frequentie van interactie in de klas, tijdigheid van feedback op opdrachten, consistentie in scores, taalinclusiviteit en interculturele gevoeligheid. De doelvariabele is de onderwijsevaluatiescore, die in deze studie wordt gekoppeld aan een multidimensionale gewogen samengestelde waarde die door experts is gekalibreerd. Het onderzoek integreert vier soorten informatiebronnen: student-onderwijsevaluaties, peer reviews, observaties in de klas en beoordelingen van onderwijsdossiers, met gewichten van respectievelijk 0,35, 0,25, 0,25 en 0,15. De trainings- en validatiesets zijn chronologisch gescheiden tussen de twee datasets. De studie gebruikt gegevens van september 2024 als trainingsset en gegevens van oktober 2024 tot juni 2025 als validatieset om af te stemmen op de temporele progressie van onderwijsbeoordelingen. In de preprocessingfase wordt een modaliteitsspecifieke strategie toegepast, waarbij gestructureerde kenmerken gestandaardiseerd zijn via Z-score normalisatie en uitschieters Winsorized, terwijl tekstuele features worden gecodeerd met het BERT-base-Chinese model en teruggebracht tot 768 dimensies. Adversariale training wordt toegepast om de robuustheid tegen impliciete bias-uitingen te vergroten en semantische drift veroorzaakt door culturele achtergrondverschillen te beperken.
Om cross-domein training en validatieonderzoek te realiseren, zal het model worden overgezet naar vier heterogene onderwijsscenario's: basisonderwijs voor basisonderwijs K-12, beroepsonderwijs, voortgezet onderwijs en internationaal Chinees onderwijs voor nul of weinig steekproefvalidatie. In deze vier scenario's introduceert de studie domeinadaptieve regularisatietermen tijdens algoritmetraining om de consistentie van de featureverdeling van het model in verschillende onderwijsscenario's te beperken. Het inbedden van een lichtgewicht, syntaxisbewust maskermechanisme voor korte zinsruis in K-12 scenario's; Om de ambiguïteit van professionele terminologie in het beroepsonderwijs aan te pakken, wordt een dynamisch domeinwoordenboek opgesteld en geïntegreerd met de kennisgrafiek van het curriculum. Ontwerp een leermodule voor leeftijdsgroepvergelijking om de intergenerationele semantische kloof in permanente educatie aan te pakken, waarbij semantische ankers voor evaluatie-uitdrukkingen van verschillende leeftijdsgroepen in de latente ruimte worden uitgelijnd. Om de culturele lastuitdrukking in het internationale Chinese onderwijs aan te pakken, worden cross-language vergelijkingsprompts gebruikt om het begrip van niet-letterlijke onderwijsconcepten te versterken. Onderzoek naar expertkalibratie en betrouwbaarheidstesten van gestructureerde velden in originele evaluatierecords, waarbij laag-betrouwbaarheidsvermeldingen met Krippendorff's alfacoëfficiënt onder 0,75 worden verwijderd. Dubbelblinde handmatige annotatie werd toegepast op evaluatieteksten van studenten, waarbij 3 experts in onderwijskundige metingen onafhankelijk afwijkingstype-labeling uitvoerden, waarmee Cohens k = 0,86 consistentie in annotatie werd bereikt. Ten slotte werden de geannoteerde resultaten gekruist met de aanwezigheidsregistraties van de supervisie en de beoordeling van het onderwijsbestand om de definitieve kalibratielabels te genereren.
De geselecteerde datasets zijn afkomstig uit verschillende populaties, meetsystemen en onderwijsachtergronden. Dit cross-domain validatieparadigma testte rigoureus de robuustheid en generalisatiegrenzen van het model binnen een authentiek onderwijs-ecosysteem, waardoor evaluatieillusies veroorzaakt door datahomogenisatie werden voorkomen. Beide repositories bevatten aanzienlijke hoeveelheden onderwijsbeoordelingsrecords, die directe referentiewaarde boden voor de inzet van eerlijkheidsbewuste intelligente onderwijsalgoritmen. Beide datasets bevatten aanzienlijke gegevens over onderwijsbeoordeling, die directe referentiewaarden boden voor het ontwerp van eerlijkheidsbewuste intelligente onderwijsalgoritmen en kalibratie van onderwijsbeoordeling. De studie kalibreerde 1000 onderwijsbeoordelingsrecords met de vier algoritmen en berekende hun ECA en Fairness FDR. De resultaten zijn weergegeven in Figuur 8.

Figuur 8: Vergelijking van testresultaten tussen ECA en FDR. (A) BFEN. (B) PRF. (C) EAB. (D) DBLR. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 8A, behaalde BFEN aanvankelijk een ECA van 82,47% en een FDR van 5,71% in de beoordelingscalibratietaak. Naarmate het aantal gekalibreerde records toenam, steeg de ECA tot 98,75% en stabiliseerde deze na het kalibreren van 421 records, terwijl de FDR daalde tot 2,87% en stabiliseerde na het kalibreren van 514 records. Zoals getoond in Figuur 8B, nam de ECA-curve van het PRF-algoritme geleidelijk toe, terwijl de FDR-lijn langzaam afnam. Aan het einde van de kalibratietaak was de ECA-waarde 92,30% en de PDR-waarde 6,72%. Figuur 8C toont aan dat de ECA-curve van het EAB-algoritme snel steeg voordat deze afvlakte, terwijl het FDR-traject ernstige vroege schommelingen vertoonde vóór de convergentie, eindigend met een ECA van 84,64% en een FDR van 8,93%. Zoals weergegeven in Figuur 8D, vertoonde het DBLR-algoritme een trage opwaartse ECA-traject, vergezeld van marginale fluctuaties en beperkte compressie in zijn FDR-lijn, waarmee de kalibratietaak werd afgesloten met een ECA van 83,51% en een FDR van 8,42%. Deze experimentele bevindingen bevestigen dat het BFEN-algoritme aanzienlijk beter presteert dan de basisbenaderingen op het gebied van zowel nauwkeurigheid van evaluatiecorrectie als controle van fairness bias. Deze superieure generalisatiemogelijkheid wordt toegeschreven aan de integratie van BERT binnen BFEN, dat diepe semantische kenmerken uit ongestructureerde evaluatietekst haalt om verborgen bias-expressies vast te leggen, terwijl de RL-module dynamisch eerlijkheidsdrempels en correctieparameters optimaliseert via een multi-objectieve beloningsfunctie om gevoelige attributen los te koppelen van de uiteindelijke output. De studie testte vervolgens SAR en FMD voor klassikale beoordeling, eindexamens, praktische evaluatie en online beoordeling, waarbij de vier scenario's werden aangeduid als A, B, C en D. De resultaten zijn te zien in Figuur 9.

Figuur 9: Vergelijking van SAR- en FMD-resultaten in verschillende scenario's. (A) SAR-testresultaten. (B) FMD-testresultaten. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 9A, behaalde BFEN een SAR van meer dan 98% in alle onderwijsscenario's, met de hoogste SAR van 99,01% voor klassikale toetsen. De SAR van het vergelijkingsalgoritme in verschillende scenario's is lager dan die van het BFEN-algoritme, waarbij het DBLR-algoritme de laagste SAR heeft voor het uiteindelijke beoordelingsscenario van alle algoritmen, met een SAR van 70,23%. Zoals te zien is in Figuur 9B, is de FMD van het BFEN-algoritme nog steeds aanzienlijk hoger dan die van het vergelijkingsalgoritme in verschillende onderwijsscenario's, met FMD's van respectievelijk 98,47%, 98,05%, 97,81% en 97,94% in verschillende scenario's. De FMD's van het benchmarkalgoritme DBLR zijn respectievelijk 82,36%, 71,74%, 70,59% en 69,12%. De FMD's van het EAB-algoritme zijn respectievelijk 80,79%, 68,21%, 67,65% en 66,03%, terwijl de FMD's van het PRF-algoritme respectievelijk 86,42%, 82,17%, 80,98% en 78,33% bedragen. Deze resultaten toonden aan dat BFEN beter presteerde dan vergelijkingsalgoritmen dankzij het iteratieve leren van GBDT met meerdere beslissingsbomen, die foutpatronen over scenario's nauwkeurig vastlegden en stabiele en eerlijke kalibratieresultaten garandeerden. De studie evalueerde verder het herkenningspercentage van disciplinaire kenmerken (DFRR) voor Chinees, Wiskunde en Engels met behulp van de vier algoritmen. De resultaten zijn te zien in Figuur 10.

Figuur 10: Vergelijking van DFRR-testresultaten in verschillende disciplines. (A) Trainingsset. (B) Validatie ingesteld. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 10A behaalde BFEN een DFRR van 99,23%, 98,94% en 99,13% voor Chinees, Wiskunde en Engels in de trainingsset. Figuur 10B gaf aan dat BFEN ook een hogere DFRR behaalde in de validatieset vergeleken met andere algoritmen. Specifiek bereikte BFEN's DFRR voor Chinezen 98,41%, 10,8%, hoger dan DBLR's 87,61%; voor Wiskunde 97,54%, 9,07% hoger dan de 88,47% van PRF; en voor Engels 98,13%, 13,34%, hoger dan EAB's 84,79%. Deze resultaten bevestigden dat BFEN zich efficiënt aanpaste aan de kalibratie van disciplinaire beoordelingen door BERT's diepe vastlegging van semantische verschillen te combineren met GBDT's gepersonaliseerde leermethode van foutpatronen. Om de BFEN-prestaties volledig te beoordelen, evalueerde de studie MDFE, CRS en SDCT voor de vier algoritmen. De resultaten worden weergegeven in Tabel 1.
| Dataset | Algoritme | MDFE (%) | CRS | SDCT(s) |
| Opleiding | BFEN | 98.42 ± 0.28*&@ | 0,975 ± 0,28*&@ | 0,78 ± 0,04*&@ |
| PRF | 83,85 ± 0,41 | 0,779 ± 0,36 | 1,32 ± 0,08 |
| EAB | 85,91 ± 0,50 | 0,806 ± 0,40 | 1.15 ± 0.07 |
| DBLR | 88,76 ± 0,47 | 0,753 ± 0,39 | 1,45 ± 0,08 |
| Validatie | BFEN | 97.58 ± 0.25*&@ | 0,968 ± 0,27*&@ | 0,86 ± 0,03*&@ |
| PRF | 81,62 ± 0,32 | 0,687 ± 0,50 | 1,51 ± 0,06 |
| EAB | 84,37 ± 0,40 | 0,749 ± 0,42 | 1,28 ± 0,05 |
| DBLR | 87,53 ± 0,30 | 0,728 ± 0,47 | 1,63 ± 0,07 |
Tabel 1: Vergelijking van MDFE-, CRS- en SDCT-testresultaten. "*" duidt op een significant verschil (p < 0,05) tussen BFEN- en PRF-resultaten. "&" geeft aan dat het verschil tussen BFEN- en EAB-resultaten significant was (p < 0,05). "@" geeft aan dat het verschil tussen BFEN- en DBLR-resultaten significant is (p < 0,05)
Tabel 1 geeft aan dat BFEN een MDFE van 98,42% behaalde in de trainingsset, 14,57% hoger dan de 83,85% van PRF, een CRS van 0,975, 0,222 hoger dan de 0,753 van DBLR, en een SDCT van 0,78 s, 0,67 s. minder dan de 1,45 s. van DBLR. In de validatieset behaalde BFEN superieure prestaties, met MDFE, CRS en SDCT van respectievelijk 97,58%, 0,968 en 0,86 s, die beter presteerden dan vergelijkingsalgoritmen. Al met al bevestigden de resultaten de superieure uitgebreide prestaties van BFEN bij het kalibreren van onderwijsbeoordelingen.
GFBFEN validatie van de prestatie van het kwaliteitsmodel voor onderwijsbeoordeling
Op basis van de BFEN-prestatievalidatie evalueerde de studie verder de prestaties van het GFBFEN teaching assessment calibratiemodel dat op BFEN is opgebouwd en vergeleek dit met kalibratiemodellen die zijn opgebouwd met PRF-, EAB- en DBLR-algoritmen. Om consistente testomstandigheden en vergelijkbaarheid te waarborgen, diende de globale dataset van onderwijsmonitoring als trainingsset, terwijl de universitaire studentendataset als validatieset diende. De vier modellen kalibreerden 500 onderwijsbeoordelingsrecords, en hun CAE en CRE werden berekend. De resultaten zijn weergegeven in Figuur 11.

Figuur 11: Vergelijking van CAE- en CRE-testresultaten. (A) CAE-testresultaten. (B) CRE-testresultaten. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 11A, behaalde GFBFEN aanvankelijk een CAE van 0,1279. Naarmate de kalibratie vorderde, daalde de CAE tot 0,0641 en stabiliseerde deze na 104 records. De vergelijkingsmodellen hadden een hogere initiële en uiteindelijke CAE dan GFBFEN, waarbij EAB respectievelijk de hoogste initiële en uiteindelijke CAE had van 0,1858 en 0,1217. Figuur 11B gaf aan dat de initiële en uiteindelijke CRE van GFBFEN tijdens de kalibratietaak lager bleven dan die van de vergelijkingsmodellen, met waarden van respectievelijk 0,1137 en 0,0912. Deze resultaten toonden aan dat GFBFEN een sterke fittingcapaciteit vertoonde, profiterend van het aandachtsmechanisme van GAT, dat semantische correlatiegrafieken tussen features construeerde, de semantische uitlijning van multi-source beoordelingsdata verbeterde en ineffectieve kalibratie veroorzaakt door feature-bias verminderde. De studie evalueerde vervolgens CAR voor leerlingbeoordelingsgegevens, lerarenbeoordelingsgegevens, schoolbeoordelingsgegevens en online beoordelingsgegevens, aangeduid als I, II, III en IV. De resultaten zijn weergegeven in Figuur 12.

Figuur 12: Vergelijking van CAR-resultaten van verschillende evaluatiegegevens. (A) GFBFEN. (B) PRF. (C) EAB. (D) DBLR. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 12A behaalde GFBFEN een CAR van 99,34%, 98,93%, 99,01% en 99,12% voor leerling-, leraren-, school- en online beoordelingsgegevens in de trainingsset. In de validatieset waren CAR-waarden respectievelijk 97,89%, 98,56%, 97,57% en 98,46%. Figuur 12B–D toonde aan dat vergelijkingsmodellen een lagere CAR hadden in zowel trainings- als validatiesets. Van hen presteerde EAB het slechtst in de validatieset, met een CAR van 76,31% voor lerarendata en 78,29% voor online data. Deze resultaten bevestigden dat GFBFEN de vergelijkingsmodellen aanzienlijk overtrof. Vervolgens testte de studie de TL in de calibratietaak voor de onderwijsbeoordeling om het geschiktheidsvermogen en de stabiliteit van de training te evalueren. De resultaten zijn weergegeven in Figuur 13.

Figuur 13: Resultaten van modelfitting en trainingsstabiliteitstestresultaten. (A) GFBFEN. (B) PRF. (C) EAB. (D) DBLR. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 13A, had GFBFEN aanvankelijk een TL van 0,1021 in de trainingsset. Na 67 iteraties daalde de TL naar 0,0725 en stabiliseerde het. In de validatieset daalde TL van 0,1237 naar 0,1018. Figuur 13B–D gaf aan dat de uiteindelijke TL van PRF in de trainingsset 0,0824 was, de uiteindelijke TL van EAB in de validatieset 0,1178, en de TL van DBLR in beide sets onstabiel en aanzienlijk hoger was dan bij andere modellen. Deze resultaten toonden aan dat GFBFEN een sterke fitting-capaciteit en trainingsstabiliteit vertoonde, profiterend van kennisoverdracht gebaseerd op KD, waardoor het model snel effectieve kenmerken kon leren, verliesconvergentie kon versnellen en generalisatie over datasets kon waarborgen. Om de kernprestaties van GFBFEN volledig te valideren, testte de studie EFCA, HDPE, FCP en CSCC voor de vier modellen. De resultaten zijn weergegeven in Figuur 14.

Figuur 14: Uitgebreide indicatortestresultaten van lesgevende beoordelings- en correctietaken. (A) GFBFEN-testresultaten. (B) PRF-testresultaten. (C) EAB-testresultaten. (D) DBLR-testresultaten. Klik hier om een grotere versie van deze figuur te bekijken.
Zoals weergegeven in Figuur 14A–D, heeft het GFBFEN-model EFCA-waarden van respectievelijk 99,35% en 98,76% in de trainings- en validatiesets. De EFCA van het PRF-model bedraagt respectievelijk 88,53% en 87,04%. In de validatieset was de EFCA van het GFBFEN-model 6,59% hoger dan die van het EAB-model met 92,17% en 11,72% hoger dan die van het DBLR-model met 87,04%. Daarnaast zijn de HDPE-, FCP- en CSCC-indicatoren ook ruim voorop: in de validatieset bereikte de HDPE van het GFBFEN-model 98,05%, de FCP 97,93% en de CSCC 0,968, die allemaal beter presteerden dan de PRF-, EAB- en DBLR-modellen. Al met al valideerden deze resultaten de superieure algehele prestaties van GFBFEN, en toonden aan dat de gecoördineerde optimalisatie van GAT-KD, AM-LSTM en BFEN effectief de kalibratienauwkeurigheid, efficiëntie en eerlijkheid in het onderwijs verbeterde.
Het onderzoek heeft geleidelijk FairEduNet, BFEN, FFEN en GFBFEN opgebouwd, en de uiteindelijke GFBFEN omvat componenten zoals FairEduNet, BERT-RL, AM-LSTM en GAT-KD. Om de onafhankelijke bijdrage van individuele componenten te verifiëren, worden onderzoek- en ontwerpablatieexperimenten uitgevoerd, waarbij elk onderdeel geleidelijk wordt verwijderd en de impact ervan op de algehele prestaties wordt geëvalueerd. Vergelijkende indicatoren zijn onder andere ECA, FDR, SAR en FMD. De resultaten toonden aan dat de ECA-waarde van alleen al de FairEduNet-component 87,32% was, FDR 12,45%, SAR 89,67% en FMD 11,89%. De ECA van het volledige GFBFEN-model bereikte 99,21%, de FDR daalde verder naar 1,93%, de SAR bleef stabiel op 99,45% en de FMD werd geoptimaliseerd op 7,28%. Na het verwijderen van BERT-RL daalde ECA tot 91,04%, de FDR-waarde was 6,23%, de SAR-waarde 92,33% en FMD steeg naar 7,85%. De ablatie van AM-LSTM verhoogde SAR-fluctuaties met 14,2%. Het verwijderen van GAT-KD leidde tot een toename van FMD tot 8,36%, en het onderdrukkingsmechanisme van de propagatie van grafstructuurbias, geleid door kennisdestillatie, was significant effectief in het verminderen van impliciete associatiebias tussen populaties.
Om de onderzoeksmethoden verder te testen, introduceerde de studie vastgestelde standaardindicatoren voor eerlijkheid, namelijk de Fairness Correction Benchmark (FCB), die drie typen rigide beperkingen omvat die breed worden erkend in onderwijssituaties: (1) De absolute waarde van het gemiddelde verschil na correctie tussen groepen is ≤ 1,2 punten (gebaseerd op het percentagesysteem); (2) Het overlappingspercentage van de gecorrigeerde betrouwbaarheidsintervallen voor elke gevoelige attribuutsubgroep is ≥ 95%; (3) In elk enkel scenario moet de gezamenlijke haalbare regio van FDR en SAR voldoen aan de Pareto-grensbeperking (dat wil zeggen, het is onmogelijk SAR te verbeteren zonder FDR te verslechteren, en omgekeerd). Het GFBFEN-model werd in de experimentele evaluatie vergeleken met gangbare basismodellen, zoals EAB, PRF, DBLR en GBDT. Het experiment werd uitgevoerd op basis van 421 echte beoordelingsgegevens verzameld uit echte onderwijsscenario's, en besloeg drie typische onderwijsscenario's: klassikale beoordeling, praktische evaluatie en online toetsen. De resultaten zijn weergegeven in Tabel 2.
| Algoritme | Absolute waarde van het gemiddelde scoreverschil | Betrouwbaarheidsinterval overlappercentage(%) | Gezamenlijk haalbaar regiotevredenheidspercentage(%) | Volledige partituur |
| GFBFEN | 0.87 | 98.3 | 100 | 97.2 |
| EBA | 1.52 | 98.4 | 82.6 | 78.5 |
| PRF | 1.68 | 85.1 | 74.3 | 71.2 |
| DBLR | 1.45 | 87.9 | 79.8 | 75.6 |
| GBDT | 1.33 | 91.2 | 86.4 | 79.9 |
Tabel 2: Evaluatieresultaten van indicatoren voor eerlijkheidscriteria en verificatie van praktische toepassingen.
Zoals te zien in Tabel 2, behaalde GFBFEN volledige naleving van alle vier de starre FCB-beperkingen onafhankelijk, en de uitgebreide score presteerde aanzienlijk beter dan de andere basismodellen met een marge van +18,7 punten, wat de robuustheid van het voorgestelde meerfasige collaboratie-correctieparadigma bevestigt. Met name in de kernindicator die de afwegingscapaciteit tussen rechtvaardigheid en efficiëntie weerspiegelt, bereikte de gezamenlijke haalbare regiodekking 100%, wat aangeeft dat het model beschikt over inzetbare Pareto-optimale besluitvormingsmogelijkheden in echte onderwijssituaties.
Eerlijkheid in onderwijsevaluatie verwijst naar het gebruik van verifieerbare kwantitatieve beperkingen als maatstaf, waarbij individuele verschillen en onderwijswetten worden gerespecteerd. De berekeningslogica en het vaststellen van drempelwaarden van gelijkheidsindicatoren zijn gebaseerd op het theoretische kader van onderwijsrechtvaardigheid en empirische dataverificatiestandaarden. Ze worden gezamenlijk beoordeeld door een deskundigencommissie bestaande uit vijf wetenschappers om een hoge mate van eenheid te waarborgen tussen theoretische strengheid en aanpassingsvermogen aan de onderwijspraktijk. Om de aanpasbaarheid van het model onder verschillende eerlijkheidsnormen verder te valideren, voerde de studie verdere validatie uit onder meerdere standaarden. Specifiek werden drie fairness-standaarden geselecteerd voor verificatie. Standaard 1 is de balans tussen groepen op basis van demografische pariteit. Standaard 2 is de cross-groep consistentie van true positive-percentage en false positive-percentage gebaseerd op Equalized Odds. Standard 3 is gebaseerd op Predictive Parity om intergroepsbias in voorspellingsnauwkeurigheid te beheersen. Er werd vastgesteld dat GFBFEN consequent voldeed aan de strikte beperkingsvereisten onder alle drie de normen. Standaard 1 groepsacceptatiegraad afwijking ≤1,2%, standaard 2 echt/vals positieve intergroepverschil ≤0,85%, standaard 3 voorspellingsnauwkeurigheid intergroepafwijking gecontroleerd binnen ±±0,6%. Daarentegen toonden de andere modellen een doorbraak van ≥3,7% onder ten minste één criterium, waarmee de generalisatiecompatibiliteit van GFBFEN voor multivariate fairness-paradigma's werd geverifieerd.
BESCHIKBAARHEID GEGEVENS:
Om de betrouwbaarheid van de gegevens te waarborgen, gebruikte het onderzoek de Global Education Monitoring Report dataset (https://www.education-progress.org/) en de academische prestatiedataset van Spaanse middelbare scholieren (https://archive.ics.uci.edu/dataset/320/student+performance). De trainings- en validatiesets zijn chronologisch gescheiden tussen de twee datasets. De studie gebruikt gegevens van september 2024 als trainingsset en van oktober 2024 tot juni 2025 als validatieset, in lijn met de temporele progressie van onderwijsbeoordelingen.