$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Beschrijving van de dataset en verkennende analyse
De dataset bestaat uit meerdere bronnen om de betrouwbaarheid en nauwkeurigheid van het model te verbeteren. Merged_dataset bevat 20.620 afbeeldingen uit dataset A (3.054), dataset B (3.264), dataset C (10.000) en dataset D (4.292). Verder werden 1.425 afbeeldingen uit de Brad-dataset toegevoegd voor glioomtumorgraden (HGG, LGG). Deze diverse dataset zorgt voor een betere generalisatie, vermindert vooroordelen en verbetert de prestaties van het model. De grote dataset maakt uitgebreide evaluaties mogelijk en dus is er een grotere kans om de juiste voorspellingen te krijgen in real-world toepassingen van classificatietaken.
In dit onderzoek zijn twee verschillende datasets gebruikt. Tussen 2005 en 2010 werd de eerste overgenomen van het Nanfang Hospital and General Hospital van de Tianjing Medical University in China. T1-gewogen contrastversterkte beelden van 233 personen met tumoren, evenals glioom graad II en III, zijn opgenomen in de collectie. De dataset biedt een zeer uitgebreide verdeling van tumorcategorieën en algemene data-analyse. Voor hooggradig glioom (HGG) zijn er 1,050 afbeeldingen beschikbaar en voor laaggradig glioom (LGG) zijn er 375 afbeeldingen, wat betekent dat er meer aandacht wordt besteed aan ernstigere gevallen (HGG).
Figuur 1 toont MRI-scans die zijn onderverdeeld in drie soorten hersentumoren. Elke rij is één type tumor en er zijn drie voorbeeldafbeeldingen voor elke categorie. De scans hebben verschillende kenmerken in verschillende oriëntaties en weergaven, waaronder axiaal, sagittaal en coronaal. Glioommonsters hebben onregelmatige structuren die het hersenweefsel infiltreren. Meningeoommonsters verschijnen als gelokaliseerde massa's in de buurt van het oppervlak van de hersenen en hypofysetumormonsters bevinden zich in de buurt van het midden van de hersenen. Deze voorbeelden tonen variabiliteit in het uiterlijk van tumoren, waardoor ML-modellen kunnen worden getraind voor nauwkeurige detectie en classificatie van tumoren in medische beeldanalyse.

Figuur 1: MRI-scans van tumoren. MRI-scans van meningeoom-, glioom- en hypofysetumoren in axiale, sagittale en coronale weergaven, waarbij verschillende beeldvormingskenmerken worden benadrukt. Klik hier om een grotere versie van deze figuur te bekijken.
Glioom heeft het hoogste aantal afbeeldingen, namelijk iets meer dan 6.000. Meningeoom heeft ongeveer 6.000 afbeeldingen, terwijl Hypofyse bijna net zoveel afbeeldingen heeft als Meningeoom. Er lijkt een bijna gelijke verdeling te zijn tussen de drie categorieën, wat betekent dat elk van de tumortypen goed vertegenwoordigd is voor training of analyse. Glioom heeft de grootste mediane bestandsgrootte, hoewel meningeoom een beperkter bereik en meer uitschieters heeft. De matige variantie van de hypofyse bevat een paar duidelijke uitschieters. Elke categorie bevat een aantal echt enorme bestandsgroottes.
Figuur 2 toont de PCA van beeldkenmerken voor de drie tumortypes. Hoofdcomponent 1 legt de meeste variantie vast en scheidt de hypofyse (rechtercluster) aanzienlijk van de andere. Gliomen en meningeomen overlappen elkaar aan de linkerkant, wat aangeeft dat hun functierepresentaties vergelijkbaar zijn en dat hun scheidbaarheid is verminderd.

Figuur 2: PCA van beeldkenmerken. Analyse van de belangrijkste componenten van geëxtraheerde kenmerken die de klassen van glioom-, meningeoom- en hypofysetumoren differentiëren. Klik hier om een grotere versie van deze figuur te bekijken.
De correlatie-heatmap die in afbeelding 3 wordt weergegeven, geeft de relaties weer tussen de metadatakenmerken van afbeeldingen: File_Size, hoogte en breedte. File_Size vertoont een zeer lage correlatie met zowel de hoogte (-0,01) als de breedte (0,0039).

Figuur 3: Correlatie heatmap van metadata. Heatmap met relaties tussen metadata-attributen van afbeeldingen, zoals bestandsgrootte, hoogte en breedte. Klik hier om een grotere versie van deze figuur te bekijken.
Hoogte en breedte vertonen ook een zeer lage positieve correlatie van 0,0039. De diagonale waarden zijn 1, wat een perfecte correlatie van elke variabele met zichzelf aangeeft. Over het algemeen zijn de kenmerken meestal niet gecorreleerd, wat onafhankelijke variaties in bestandsgrootte, afbeeldingshoogte en -breedte betekent.
Methodologie en voorgestelde architectuur
Een workflow die systematisch hersentumoren detecteert, classificeert en analyseert op basis van MRI-gegevens wordt weergegeven in figuur 4. De methodologie omvat geavanceerde voorbewerking, segmentatie en DL-technieken om tot robuuste tumorvoorspelling en -classificatie te komen.

Figuur 4: Workflow van de voorgestelde methodologie. Stapsgewijze workflow voor tumordetectie, classificatie en analyse met behulp van MRI-gegevens. Klik hier om een grotere versie van deze figuur te bekijken.
Het proces begint met het integreren van een aantal datasets (aangeduid als A, B, C en D). Vervolgens worden de datasets gecombineerd tot één uitgebreide dataset om holistische gegevens te verkrijgen. Het omvat ook de Brad-dataset voor beeldsegmentatie-, clustering- en classificatiedoeleinden. De samengevoegde dataset omvat het toevoegen van alle afbeeldingen in elke dataset en gecombineerde mappen, waardoor een uitgebreide en uniforme dataset wordt gegarandeerd voor verdere analyse en ontwikkeling van multi-classificatiemodellen.
Ten tweede is de voorverwerking voltooid, wat een belangrijke stap is in het verbeteren van de kwaliteit en variabiliteit van de gegevens. Negen augmentatieprocessen worden toegepast op de originele MRI-beelden om de modelprestaties en de variëteit van de dataset te verbeteren. Het formaat van afbeeldingen wijzigen naar een gemeenschappelijke grootte harmoniseert ze, en conversie van RGB naar grijswaarden vereenvoudigt de verwerking. Horizontaal/verticaal spiegelen verbetert de robuustheid en rotatie met zoomen bootst verschillende beeldvormingsomstandigheden na. Het gebruik van Sobel-filtering verbetert de scherpte van de kenmerken en het toevoegen van ruis verbetert de variabiliteit. Onscherpe maskering verbetert de beeldscherpte en hoogte- en breedteverschuivingen voegen positievariaties toe. Elk van hen verbetert, wanneer ze worden gecombineerd, de generaliseerbaarheid en classificatienauwkeurigheid van het model. Dit alles garandeert dat het model generaliseert over een breed spectrum van beeldvormingssituaties. Er zijn in totaal 20.620 MRI-beelden en het totale aantal afbeeldingen dat na de voorbewerking is gebruikt voor modelontwikkeling levert 185.580 afbeeldingen op.
Vervolgens wordt de samengevoegde dataset gesegmenteerd met behulp van het U-Net-model, dat veel wordt gebruikt in medische beeldvorming. De architectuur is verfijnd en getraind om tumorgebieden te identificeren aan de hand van MRI-scans. Deze stap produceert gemaskeerde beelden, die de tumor markeren en irrelevante details elimineren. Het segmenteren van de afbeeldingen zorgt voor een betere gegevensinvoer voor classificatie en analyse.
In de volgende stap worden deze modellen verfijnd om afbeeldingen in verschillende klassen te categoriseren, waarbij gebruik wordt gemaakt van transfer learning om de nauwkeurigheid te verbeteren en tegelijkertijd de trainingstijd te verkorten. Voor de classificatie wordt gebruik gemaakt van een aantal voorgetrainde deep learning-modellen, elk met speciale voordelen. Vanwege het gebruiksgemak en de efficiëntie bij het categoriseren van afbeeldingen worden VGG16 en VGG19 vaak gebruikt. Met optimale rekenefficiëntie bieden EfficientNetB0 en EfficientNetB7 geavanceerde prestaties. De diepere architectuur van ResNet101 verbetert de nauwkeurigheid van de classificatie door ingewikkelde patronen effectief vast te leggen. Daarna wordt een nauwkeurige diagnose gegarandeerd door de classificatie van MRI-gegevens door de getrainde algoritmen in vier tumorclassificaties. Gliacellen zijn de bron van glioomtumoren, die de hersenfunctie aantasten. Meningeoomtumoren ontwikkelen zich in de hersenvliezen, dit zijn beschermende lagen van de hersenen en het ruggenmerg. De hypofyse is de plaats van hypofysetumoren, die de hormoonbalans en fysiologische processen beïnvloeden.
Om te helpen bij een nauwkeurige diagnose, worden clusteringstechnieken zoals K-Nearest Neighbors (KNN) gebruikt om tumorgraden te voorspellen. Graad drie en vier van hooggradig glioom (HGG) duiden op ernstige tumorontwikkeling. Graad 1 en 2 van laaggradig glioom (LGG) zijn respectievelijk langzamer groeiende, minder agressieve tumoren. Deze beoordeling is essentieel om de agressiviteit van de tumor vast te stellen en daarom directe klinische behandeling.
Ten slotte, om de doeltreffendheid van de categorisatiemodellen te beoordelen, worden ze gecontrasteerd op basis van belangrijke criteria. Hun effecten worden geëvalueerd om na te gaan of augmentatie- en segmentatiestrategieën de modelprestaties hebben verbeterd. Om betrouwbaarheid en effectiviteit te garanderen, worden ook de prestaties van een verscheidenheid aan datasets onderzocht en wordt de classificatienauwkeurigheid vergeleken met de meest geavanceerde modellen.
De workflow integreert gegevensvoorbereiding, voorverwerking, segmentatie, classificatie en beoordeling in een samenhangend kader. Het verbetert de nauwkeurigheid van de detectie en classificatie van hersentumoren door de toepassing van geavanceerde DL-methoden en rigoureuze voorbewerking. De opname van tumorclassificatie ondersteunt de klinische besluitvorming verder, waardoor dit een uitgebreid systeem voor tumoranalyse is.

Figuur 5: Raamwerk voor diep leren. Voorgesteld classificatiekader voor hersentumoren met behulp van deep learning-modellen. Klik hier om een grotere versie van deze figuur te bekijken.
Figuur 5 is een architectuur in relatie tot een medisch beeldclassificatiesysteem dat hersentumoren identificeert met behulp van geavanceerde computationele technieken zoals deep learning. Het begint met een verzameling MRI-beelden die wordt geclassificeerd. Dit zal dus de ruggengraat zijn voor het classificatieproces. Vervolgens gaan de invoergegevens naar een gegevensvoorverwerkingsmodule waarin de normalisatie, of het wijzigen van het formaat en de beeldvergroting, evenals het verwijderen van ruis, worden uitgevoerd. Voorverwerking standaardiseert invoerafbeeldingen om het meeste uit de trainingsfasen van het model te halen. De hele stap gaat over het voorbereiden op het ondergaan van volgende rekenintensieve fasen. Na de voorverwerkingsstap worden de gegevens naar de functie-extractiemodule gevoerd. Hier kan het gebruik van computationele technieken of modellen, misschien DL-modellen zoals CNN's, worden gemaakt om kenmerken in afbeeldingen te identificeren. De kenmerken die worden geëxtraheerd, kunnen patronen bevatten die wijzen op afwijkingen of tumorkenmerken. Vervolgens wordt deze set functies ingevoerd in het classificatiemodel. Aangezien dit waarschijnlijk gericht zou zijn op het onderscheiden van verschillende klassen, waaronder het al dan niet bestaan van een tumor en het type tumor, vertrouwt het model op een vrij complexe architectuur, waarschijnlijk van onder andere Inception-ResNet-v2, voor nauwkeurige voorspellingen. Het bepaalt of er al dan niet een tumor bestaat in het gescande hersenbeeld. Deze classificatiestap is in "Tumor" en "Geen tumor". Wanneer een tumor wordt gevonden, classificeert het systeem het tumortype als glioom, meningeoom of hypofyse. Elk van deze typen heeft kenmerken die het model herkent met behulp van de geëxtraheerde kenmerken. Voor de geïdentificeerde tumoren wordt vervolgens de graad van de tumor bepaald. Graden variëren van 1 tot 4, wat de ernst en progressie van de tumor aangeeft. Graad 1 is het minst agressief, terwijl graad 4 het ernstigst is. Deze classificatie helpt bij medische diagnose en behandelplanning. Uiteindelijke resultaten omvatten de afwezigheid of aanwezigheid van een tumor en het type en de graad ervan. Dergelijke output is zeer waardevol voor klinische toepassingen voor besluitvorming in de zorg en behandeling van patiënten.
Het proces vertegenwoordigt een geïntegreerde pijplijn voor medische beeldanalyse en classificatie van tumortypes. Beginnend met onbewerkte gegevens, gaat het achtereenvolgens verder door middel van voorbereidende gegevens, extractie van kenmerken en classificatie. Het systeem bepaalt of het inderdaad een tumor heeft, specificeert het type en geeft de ernst of graad aan. Deze pijplijn, die gebruik maakt van complexere vormen van berekeningen, stroomlijnt de diagnose in medische beeldvorming, zodat de beoordelingen sneller en nauwkeuriger kunnen zijn bij hersentumoren. Een modulaire workflow zorgt voor flexibiliteit, waarbij componenten afzonderlijk kunnen worden geoptimaliseerd voor betere prestaties.