Forschungsartikel

Ein generatives, KI-basiertes Framework für COVID-19-Screening anhand von Husten-Audiosignalen

DOI:

10.3791/69874

10. März 2026

In diesem Artikel

Zusammenfassung

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Diese Studie schlägt ein generatives, KI-basiertes Framework vor, das GANs, VAEs und aufmerksamkeitsbasierte tiefe Faltungsnetzwerke integriert, um COVID-19 anhand von Husten-Audiosignalen zu erkennen und so die Robustheit, Datenbilanz und die Verallgemeinerung von Datensätzen für skalierbares, nicht-invasives Screening zu verbessern.

Zusammenfassung

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Husten-Audioanalyse bietet einen praktischen Weg zur Entwicklung automatisierter Werkzeuge zur Unterstützung des COVID-19-Screenings. Trotz wachsendem Interesse bleiben viele bestehende Ansätze empfindlich gegenüber Rauschen, Klassenungleichgewicht und Datensatzvariabilität, was ihre Reproduzierbarkeit einschränkt. Diese Arbeit präsentiert eine strukturierte, generative, künstliche-Intelligenz-gesteuerte Methodik zur COVID-19-Erkennung mithilfe von Hustentonaufnahmen. Die Experimente werden mit zwei öffentlich zugänglichen Datensätzen durchgeführt, COUGHVID und Virufy, die beide beschriftete Hustenproben enthalten. Das vorgeschlagene Protokoll besteht aus aufeinanderfolgenden Vorverarbeitungsschritten, einschließlich Hustensegmentierung, Entschädigung und Signalnormalisierung. Akustische Eigenschaften werden dann durch Mel-Frequenz-Cepstralkoeffizienten, Chroma-Deskriptoren und spektrale Kontrastmerkmale erfasst. Um das Repräsentationslernen zu verbessern und Datenungleichgewichte zu mindern, wird ein hybrides generatives Framework verwendet, das Variational Autoencoders und Generative Adversarial Networks integriert, um Feature-Level-Stichproben zu synthetisieren. Die Klassifikation erfolgt anschließend mit Deep Convolutional Neural Networks und aufmerksamkeitsbasierten DCNN-Modellen. Leistungsbewertung zeigt, dass die Einbindung generativer Augmentation konsequent gegenüber nicht-generativen Baselines verbessert und eine Spitzenklassifikationsgenauigkeit von 97,2 % sowie einen AUROC von 0,953 über die bewerteten Datensätze hinweg erreicht. Diese Ergebnisse zeigen die Wirksamkeit generativer Modellierung zur Verbesserung der hustenbasierten COVID-19-Erkennung und schaffen eine reproduzierbare analytische Pipeline für zukünftige Forschung zur Überwachung der akustischen Gesundheit.

Einleitung

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die Atemakustik wird zunehmend als nicht-invasive Informationsquelle für die Gesundheitsbewertung erforscht, insbesondere im Zusammenhang mit Infektions- und Lungenerkrankungen. Fortschritte in der Signalverarbeitung und künstlicher Intelligenz (KI) haben eine automatisierte Analyse von Husten- und Atemgeräuschen ermöglicht und deren Nutzung als digitale Biomarker unterstützt. Jüngste Studien zeigen, dass Atemgeräusche, die mit Mikrofonen in Smartphones, tragbaren Geräten oder klinischen Sensoren aufgenommen werden, effektiv mit Deep-Learning-Modellen analysiert werden können, um eine COVID-19-Infektion 1,5 zu erkennen. Diese Entwicklungen unterstreichen das Potenzial des audiobasierten Screenings als schnelle, kontaktlose und skalierbare Ergänzung zu herkömmlichen diagnostischen Verfahren. Die Coronavirus-Krankheit 2019 (COVID-19), verursacht durch das SARS-CoV-2-Virus, betrifft hauptsächlich das Atmungssystem und verursacht messbare Veränderungen in der Luftstromdynamik, der Lungenfunktion und dem Verhalten der Stimmgänge. Obwohl die Reverse Transcription–Polymerase-Kettenreaktion (RT-PCR)-Tests weiterhin der Referenzstandard für die Diagnose sind, begrenzen ihre logistischen Einschränkungen und die verzögerte Bearbeitungszeit ihre Eignung für groß angelegte oder kontinuierliche Screening, was die Suche nach alternativen Ansätzen auf Basis der Atemschallanalyse motiviert.

Eine wachsende Literatur hat die KI-gesteuerte COVID-19-Erkennung mittels Husten-, Atem- und Sprachsignalen untersucht. Wie in Tabelle 1 zusammengefasst, haben frühere Studien vielfältige Datensätze, akustische Merkmalsrepräsentationen (z. B. MFCC, STFT, spektrogrammbasierte Merkmale) und Lernparadigmen untersucht, die von klassischen Machine-Learning-Modellen bis hin zu tiefen konvolutionalen, rekurrenten, aufmerksamkeitsbasierten und Transformatorarchitekturen reichen 8,9,10,11,12,13,14,15 ,16,17,18,19,20,21,22,23,24,25,26,27˒43,44,45. Mehrere Arbeiten haben vielversprechende Screening-Leistungen unter Verwendung von Crowdsourcing und klinisch gesammelten Atemaudio-Tests nachgewiesen. Im Gegensatz dazu betonten andere die Bedeutung von Transfer Learning, Datenaugmentation und erklärbarer KI zur Verbesserung von Robustheit und Vertrauenswürdigkeit. Anstatt eine detaillierte Studie für Studie zu wiederholen, bietet Tabelle 1 einen konsolidierten vergleichenden Überblick über diese repräsentativen Ansätze, der einen direkten Vergleich von Datensätzen, Methodologien und berichteten Ergebnissen ermöglicht.

Trotz dieser Fortschritte behindern mehrere Einschränkungen die Robustheit und praxisnahe Anwendbarkeit bestehender Ansätze. Aspiratorische Audiodatensätze werden häufig unter heterogenen Aufzeichnungsbedingungen erhoben, was zu erheblicher Variabilität zwischen Geräten, akustischen Umgebungen und Testpopulationen führt 2,3,4. Viele öffentlich zugängliche Datensätze basieren auf selbstgemeldetem COVID-19-Status, was Unsicherheiten bei der Label-Zuverlässigkeit7 verursacht. Darüber hinaus schränken ein ausgeprägtes Klassenungleichgewicht und die begrenzte Verfügbarkeit klinisch validierter Stichproben die Verallgemeinerungsfähigkeit diskriminierender Modelle ein, die ausschließlich auf beobachteten Daten basieren 4,5. Folglich führt die unter kontrollierten experimentellen Umgebungen gemeldete Modellleistung nicht konsequent zu einer zuverlässigen Implementierung in verschiedenen realen Szenarien.

Zusammen zeigen diese Einschränkungen eine kritische Forschungslücke: das Fehlen eines einheitlichen Rahmens, das gleichzeitig Datenknappheit, Klassenungleichgewicht und robuste Verallgemeinerungen über heterogene Datensätze hinweg adressiert. Obwohl generative Modelle wie Generative Adversarial Networks (GANs) und Variational Autoencoders (VAEs) erforscht wurden, um latente Repräsentationen zu erlernen und realistische biomedizinische Signale 6,7 zu synthetisieren, verwenden bestehende Studien diese Modelle typischerweise unabhängig und bewerten sie in einem einzigen Datensatz. Darüber hinaus ist ihre Integration mit aufmerksamkeitsverstärkten konvolutionellen Architekturen und die Bewertung unter Datensatz-übergreifenden Bedingungen weiterhin unzureichend untersucht.

Um diese Lücke zu schließen, schlägt die vorliegende Studie einen generativen, KI-unterstützten Rahmen zur Erkennung von COVID-19 durch Hustengeräusche vor, der akustische Merkmalsextraktion mit einem hybriden GAN–VAE-Modell und aufmerksamkeitsbasierten tiefen konvolutionellen neuronalen Netzen (DCNNs) integriert. Die generative Komponente mindert Klassenungleichgewicht und begrenzte Stichprobenverfügbarkeit durch strukturiertes latentes Repräsentationslernen und Generierung synthetischer Daten, während die diskriminativen Modelle die Klassifikationsrobustheit über heterogene Datensätze hinweg verbessern. Im Gegensatz zu früheren Arbeiten, die überwiegend auf Validierung innerhalb des Datensatzes basieren, wird das vorgeschlagene Framework mittels Cross-Dataset-Tests auf einem unabhängigen Datensatz bewertet, was eine rigorosere Bewertung der Verallgemeinerungsleistung ermöglicht. Das Framework ist als screeningorientierter Ansatz gedacht und nicht als eigenständiges Diagnosewerkzeug, und sein Design berücksichtigt explizit die Erfassung von Variabilität und Labelunsicherheit, um eine reproduzierbare und zuverlässige Implementierung zu unterstützen.

In diesem Zusammenhang sind die neuartigen Beiträge der vorliegenden Studie dreifach. Erstens ist ein einheitliches GAN–VAE-hybrides generatives Framework mit aufmerksamkeitsbasierten DCNN-Klassifikatoren integriert, um gemeinsam Klassenungleichgewichte, begrenzte Datenverfügbarkeit und robustes Merkmalsrepräsentationslernen im hustenbasierten COVID-19-Screening zu adressieren. Zweitens wird der vorgeschlagene Ansatz systematisch mittels Cross-Dataset-Validierung evaluiert, was eine realistischere Bewertung der Modellverallgemeinerung im Vergleich zu herkömmlichen In-Dataset-Tests bietet. Drittens präsentiert die Studie eine detaillierte Analyse der Auswirkungen generativer Augmentation unter heterogenen Aufzeichnungsbedingungen und positioniert damit das Rahmenwerk als reproduzierbaren Proof-of-Concept für skalierbares, praktisches COVID-19-Screening.

Autor(en) & JahrDatensätzeVerwendete Techniken / FunktionenModell / KlassifikatorGenauigkeit / KennzahlenEinschränkungen / Anmerkungen
Imran et al., 20208Crowdsourceter Hustendatensatz (AI4COVID-19)MFCC, Transfer Learning, domänenbewusste FunktionenRisikoaverser Multiklassifikator (DL + ML-Ensemble)Genauigkeit: 92,6 %Abhängig von der Qualität des Hustens; Begrenzte klinische Validierung
Brown et al., 20209Crowdsourced Atemgeräusche (>7.000 Nutzer)Handgefertigte Audio-Features, VGGish-EmbeddingsFlache ML-ModelleAUC > 80 %Label-Rauschen in Crowdsourcing-Daten
Laguarta et al., 202010MIT Open Voice Datensatz (5.320 Testpersonen)MFCC, akustische BiomarkerCNN (ResNet50, Transfer Learning)Sensitivität: 98,5 %, Spezifität: 94,2 %Erfordert einen großen Vortrainingsdatensatz
Quartieri et al., 202011Sprachinterviews (5 Personen, vor/nach COVID)Atemintensität, F0, CPP, FormantenStatistische EffektgrößenanalyseErreichen Sie einen AUC von über 80 % in allen AufgabenSehr kleine Stichprobengröße
Hassan et al., 202012AtemgeräuscheMerkmale der temporalen SpracheRNNHusten: 97%, Atem: 98,2%, Stimme: 88,2%Mangel an detaillierten Datensatzstatistiken
Khamparia et al., 201913ESC-10, ESC-50Spektrogramm-bildbasierte FunktionenCNN, TDSNCNN: 77 % (ESC-10), 49 % (ESC-50); TDSN: 56 % (ESC-10)Nur Umgebungsgeräusche; Geringere Leistung bei komplexen Datensätzen
Aykanat et al., 20171417.930 Lungengeräusche von 1.630 Probanden (elektronisches Stethoskop)MFCC-Merkmale, SpektrogrammbilderSVM, CNNCNN/SVM: 86 % (gesund vs. pathologisch), 76 %/75 % (Rale–Rhonchus–normal), 80 %/80 % (Einzeltyp), 62 %/62 % (alle Typen)Erfordert spezielle Hardware; nicht krankheitsspezifisch
Ponomarchuk et al., 202215Coswara, VirufyMFCC, Mel-Spektrogramm, Wavelet-FunktionenCNN, RNN, Ensemble-ModelleAUC: 0,93 (intern), 0,79 (extern)Die Verallgemeinerung über Datensätze hinweg bleibt eine Herausforderung
Feng et al., 202116Coswara, VirufySTFT, MFCCSVM (RBF), CNNGenauigkeit 81,25 % (AUC von 0,79)Datensatzabhängige Leistung
Islam et al., 202217Klinische HustenaufnahmenSpektral- und Zeit-Frequenz-MerkmaleTiefe neuronale NetzeGenauigkeit: 89,2 %Begrenzter Datensatz
Manshouri,2022 18VirufyEigenschaften der SpektralanalyseKlassische ML-KlassifikatorenGenauigkeit: 95,86 %Kleinmaßstäbliche experimentelle Studie
Huang et al., 202019Lungengeräusche von 10 COVID-19-PatientenZeit-Frequenz-AtemschallanalyseKlinische ExpertenanalyseQualitative ValidierungKleiner Datensatz; kein ML-Modell
W. D. Puja et al., 2024,20Coswara, Virufy (hust-Laut-Datensätze)STFT, Mel-Spektrogramm, MFCC, RMS-Energie, spektrale Bandbreite, spektraler Schwerpunkt, spektraler Roll-off, ZCR; CNN-basierte Tiefenfeature-Extraktion1D CNN (Feature-Extractor) + Random ForestGenauigkeit: 93 %Die Leistung hängt von der Qualität des Hustens ab; für das Screening und nicht für klinische Diagnosen konzipiert; Variabilität durch crowdsourcte Daten
Chadaga et al., 202321Crowdsourced Husten-AudioaufnahmenMel-Spektrogramm- und Zeit-Frequenz-akustische MerkmaleKonvolutionales neuronales Netzwerk (CNN)Genauigkeit: 84 %, Präzision: 85 %, Rückruf: 84 %, F1-Wert: 84 %Die Leistung wird durch Datenungleichgewichte, selbstberichtete Labels und Sensibilität gegenüber Aufzeichnungsbedingungen begrenzt
Chadaga et al., 202322Leichte bis moderate COVID-19- und andere klinische Marker für AtemwegserkrankungenAuswahl der Ausstattung (Pearson, PSO); Wichtige Marker: Eosinophil, Albumin, T. Bilirubin, ALP, ALT, AST, HbA1c, TWBCGestapeltes Ensemble; 1D CNN, LSTM, DNN, Residual-MLPGenauigkeit: 89 %Schwere Fälle ausgeschlossen; alternativ zu RT-PCR; erklärbare KI angewandt
Dar et al. 202423COVID-19-DatensatzSJHBO-Optimierung (Jaya+HBO+SO), viele spektrale MerkmaleDeep Q Netzwerk (DQN)Genauigkeit: 95,11 %, Sensitivität: 95,06 %, Spezifität: 94,69 %Hohe Komplexität; Die Abstimmung wird durch einen hybriden Optimierer verbessert
Jing Quian et al. 202024Sprachaufnahmen von COVID-19-PatientenAkustik-Ausstattungssets; Analyse der Schwere der Erkrankung, Schlafqualität, Müdigkeit und AngstSupport Vector Machines (SVM)0,69 (Schwere der Krankheit)Beschränkt auf Audio-Features; moderate Genauigkeit; Datensatzgröße nicht angegeben; Nur vier gesundheitliche Aspekte wurden berücksichtigt
Sharma, J., et al. 202025UrbanSound8K, ESC-10, ESC-50Multifunktionskanäle: MFCC, GFCC, CQT, Chromagram; Vermischungs-DatenaugmentationTiefes CNN mit räumlich separablen Faltungen und AufmerksamkeitsmodulenUrbanSound8K: 97,52 %, ESC-10: 94,75 %, ESC-50: 87,45 %Nicht an Nicht-Benchmark- oder realen Datensätzen getestet; Rechenkomplexität aufgrund tieferer CNN- und Aufmerksamkeitsmodule
Lella KK et al. 202126 Atemgeräusche; COVID-19, Asthma, gesund)Datenaufstockung; Tiefe Funktionen mit Data De-noising Auto Encoder (DDAE) statt MFCC1D Konvolutionales Neuralnetzwerk (1D CNN)~90 %Begrenzte Datensatzdetails; ~4 % Verbesserung gegenüber MFCC; Generalisierbarkeit, die nicht getestet wird
Orlandic et al., 202127HUSTEN (25.000+ Husten)MFCCs, PSD, Spektral- und ZeitmerkmaleXGBoostAUC 96,5 %, Präzision 95,5 %Selbst berichtete COVID; Experten-Labels auf Teilmenge
Zhang et al., 202343Veröffentlichte Fallberichte zu HLH nach COVID-19-Impfung (Literaturdatenbanken)Systematische Übersicht; klinische Merkmalaggregation; Molekulare AndockanalyseNicht anwendbar (klinische Übersicht)Deskriptive Statistik; Klinische ErgebnisseAnalyse seltener Ereignisse; kleine Stichprobengröße; Die Abhängigkeit von gemeldeten Fällen kann zu einem Meldefehler führen
Xu et al., 202344Berichtete Fälle von impfassoziierter VKH-Erkrankung aus der LiteraturRückblickende Fallübersicht; Klinische und bildgebende MerkmalsanalyseNicht anwendbar (klinische Beobachtungsstudie)Behandlungsreaktion und klinische GenesungsergebnisseBegrenzte Anzahl von Fällen; fehlende Kontrollgruppe; Kausale Zusammenhänge können nicht fest festgestellt werden
Hu et al., 202545Firmenebene Mutter-Tochter-Daten von SRDI-Medizinprodukteunternehmen in China (Qixinbao-Datenbank)Analyse sozialer Netzwerke; räumliche Netzwerkmetriken; Geographische DetektoranalyseNicht anwendbar (Netzwerk- und Richtlinienanalyse)Netzwerkdichte, Zentralität, DiffusionsindizesQuerschnittsdesign; gleichmäßige Gewichtung der Unternehmen; Keine direkten Leistungs- oder klinischen Ergebniskennzahlen

Tabelle 1: Zusammenfassung bestehender COVID-19-Audio-basierten Detektionsstudien. Vergleichender Überblick über frühere Husten-/Audio-Screening-Ansätze, einschließlich Datensätzen, Methoden und berichteter Leistung. Bitte klicken Sie hier, um diese Tabelle herunterzuladen.

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Protokoll

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Vorgeschlagene Methodik

Diese Studie schlägt einen generativen, KI-basierten Rahmen zur Erkennung von COVID-19 anhand von Hustensignalen vor. Das Framework integriert generative Modelle mit diskriminierenden Klassifikatoren, wobei Trainings- und Evaluationsdaten strikt getrennt bleiben. Abbildung 1 zeigt die detaillierte Architektur des vorgeschlagenen GAN–VAE–ADCNN-Frameworks und zeigt den Fluss von Audio-Vorverarbeitung und Feature-Extraktion über latentes Repräsentationslernen über einen Variational Autoencoder (VAE), synthetische Feature-Generierung mit einem Generative Adversarial Network (GAN) und die endgültige Klassifikation mit Deep Convolutional Neural Networks (DCNN) und Attention-based DCNN (ADCNN). Die Abbildung zeigt, dass generative Komponenten nur während des Trainings verwendet werden, während die Klassifikation mit diskriminativen Modellen durchgeführt wird.

figure-protocol-1
Abbildung 1: Überblick über die GAN–VAE–ADCNN-Architektur. Schematisch der vorgeschlagenen hybriden Pipeline, bei der hustenbasierte akustische Merkmale mit einem VAE codiert, durch GAN-basierte synthetische Sample-Generierung ergänzt und mit DCNN- und aufmerksamkeitsbasierten DCNN-(ADCNN)-Modellen klassifiziert werden. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.

Modellarchitektur und Implementierung

Die in diesem Rahmen verwendeten generativen und diskriminierenden Modelle wurden mit festen und reproduzierbaren Architekturen implementiert. Das GAN besteht aus einem Generator mit drei vollständig verbundenen Schichten (128, 256 und 512 Einheiten) mit ReLU-Aktivierung und einem Diskriminator mit drei vollständig verbundenen Schichten (512, 256 und 128 Einheiten) mit LeakyReLU-Aktivierung, gefolgt von einem Sigma-Ausgang.

Der VAE-Encoder besteht aus zwei vollständig verbundenen Schichten mit 256 und 128 Einheiten, gefolgt von der Schätzung des latenten Mittelwerts und der Varianz mit einer latenten Dimension von 64. Der Decoder spiegelt diese Struktur wider und wird mit einer Kombination aus Rekonstruktionsverlust und Kullback–Leibler-Divergenz trainiert, um einen strukturierten und probabilistischen latenten Raum zu lernen.

Der DCNN-Klassifikator umfasst vier Faltungsblöcke mit 3x3-Kernen sowie 32, 64, 128 bzw. 256 Filtern. Auf jeden Block folgt eine Batch-Normalisierung, eine ReLU-Aktivierung und ein 2x2-Max-Pooling. Das ADCNN erweitert das DCNN, indem es nach dem finalen Faltungsblock einen kanalweisen Aufmerksamkeitsmechanismus einführt. Alle Modelle wurden mit dem Adam-Optimierer optimiert, mit einer Lernrate von 0,0001 und einer Batchgröße von 32. Wie in Abbildung 1 gezeigt, operieren VAE und GAN nur während der Ausbildung, während DCNN und ADCNN für die Klassifizierung verwendet werden. Das vollständige Trainings- und Bewertungsverfahren ist in Algorithmus 1 zusammengefasst.

Algorithmus 1: GAN–VAE-basierter COVID-19-Nachweisrahmen

Eingabe: Vorverarbeitete Husten-Audioaufnahmen

Ausgabe: Binärklassifizierungsetikett (COVID-19 positiv/negativ)

Die Ausbildungs- und Evaluationsverfahren folgten einer festen, reproduzierbaren Pipeline. Alle Husten-Audioaufnahmen wurden auf 16 kHz neu abgetastet, Rauschunterdrückung unterzogen und die Amplitude normalisiert. Die Aufnahmen wurden in Segmente mit fester Länge unterteilt, aus denen MFCC, Chroma und spektrale Merkmale extrahiert wurden. Aus jedem Audiosegment wurden insgesamt 40 Mel-Frequenz-Cepstralkoeffizienten (MFCCs) extrahiert. Zusätzlich wurden 12 Chroma-Merkmale berechnet. Die resultierende Darstellung bildet für jedes Hustensegment einen 52-dimensionalen Merkmalsvektor. Es wurde eine Subjektebene-Aufteilung durchgeführt, um die Daten in Trainings-, Validierungs- und Testsets zu unterteilen. Der VAE wurde darauf trainiert, probabilistische latente Darstellungen zu lernen, und die daraus resultierenden latenten Vektoren wurden verwendet, um das GAN für die Generierung synthetischer Merkmalsmerkmale zu trainieren. Der Trainingsdatensatz wurde mithilfe von GAN–VAE erzeugter Stichproben erweitert, während synthetische Daten von der Validierung und Prüfung ausgeschlossen wurden. DCNN- und ADCNN-Klassifikatoren wurden mit den erweiterten Trainingsdaten trainiert, und die Endbewertung erfolgte an der ausgewiesenen Testreihe unter Verwendung standardisierter Leistungskennzahlen.

Trainingsaufbau, Datenaufteilung und Leckvermeidung

Alle Experimente wurden mit einer festen, reproduzierbaren Trainingskonfiguration durchgeführt. Die Datenaufteilung wurde auf Subjektebene vor der Audiosegmentierung durchgeführt, um Datenlecks zu verhindern. Der Datensatz wurde in Trainings-, Validierungs- und Testsets im Verhältnis 80:10:10 unterteilt, sodass alle Segmente derselben Aufzeichnung einer einzigen Teilmenge zugeordnet wurden. Der Trainingssatz wurde für Modelllernen und generative Datenerweiterung verwendet, der Validierungssatz für Hyperparameter-Tuning und frühes Stoppen, und der Testsatz wurde für die endgültige Leistungsbewertung bereitgestellt. Synthetische Proben, die vom GAN–VAE-Rahmen generiert wurden, wurden ausschließlich während der Ausbildung verwendet und streng von der Validierung und Prüfung ausgeschlossen, um eine faire Bewertung zu gewährleisten.

Die Modelle wurden für maximal 100 Epochen trainiert, mit frühzeitigem Stoppen aufgrund von Validierungsverlust und einer Geduld von 10 Epochen. Die Optimierung erfolgte mit dem Adam-Optimierer mit einer Lernrate von 0,0001 und einer Batchgröße von 32. Binäre Kreuzentropieverluste wurden für die Klassifikation angewendet, während Rekonstruktion und Adversarialverluste zum Training der VAE- bzw. GAN-Komponenten verwendet wurden. Dieses einheitliche Trainings- und Bewertungsprotokoll gewährleistet die Reproduzierbarkeit, verhindert Datenverluste und sorgt für eine strikte Trennung zwischen Trainings- und Evaluierungsphasen.

Datensatzbeschreibung

Zwei öffentlich zugängliche Husten-Audio-Datensätze – COUGHVID und Virufy – wurden verwendet, um eine großflächige akustische Vielfalt mit klinisch referenzierten Labels auszubalancieren, mit klar getrennten Rollen in Training und Evaluation.

COUGHVID ist eine durch die Crowdsourcing erstellte Sammlung von Hustenaufnahmen mit teilweisen Expertenannotationen und selbstberichteten Metadaten. Um die Datenqualität zu gewährleisten, wurden 428 Aufnahmen nach Anwendung vordefinierter Qualitätskontrollkriterien ausgewählt, darunter minimale Signaldauer, angemessenes Signal-Rausch-Verhältnis, Entfernung beschädigter oder mehrdeutiger Proben sowie das Vorhandensein identifizierbarer Hustenanfälle mit Symptommetadaten. Nach der Vorverarbeitung und Segmentierung ergaben diese Aufnahmen 1.719 Hustensegmente, die auf das WAV-Format mit einer Abtastrate von 16 kHz standardisiert wurden. COUGHVID wurde verwendet, um sowohl die generativen Modelle als auch die diskriminativen Klassifikatoren zu trainieren.

Virufy besteht aus von Ärzten überwachten Hustenaufnahmen, die als RT-PCR positiv oder negativ auf COVID-19 gekennzeichnet sind. Alle 16 verfügbaren Aufnahmen waren enthalten, was nach der Segmentierung zu 234 Hustensegmenten führte, ebenfalls standardisiert auf 16 kHz. Virufy wurde ausschließlich für externe Cross-Dataset-Bewertung zur Bewertung der Generalisierungsleistung verwendet und nicht für Training, Feinabstimmung oder generative Augmentation.

Der vorgeschlagene Rahmen sollte daher als Proof-of-Concept-Screening-Ansatz interpretiert werden, der unter kontrollierten experimentellen Bedingungen bewertet wird, und nicht als klinisch validiertes Diagnosesystem.

Datenvorverarbeitung und Segmentierung

Alle Aufnahmen wurden auf 16 kHz neu abgetastet, in Mono umgewandelt und der Stillstandsentfernung, spektraler Rauschreduktion und Amplitudennormalisierung unterzogen. Die Segmentierung erfolgte nach der Aufteilung auf Subjektebene, um Datenlecks zu verhindern. Jede Aufnahme wurde in überlappende 2–4 Segmente unterteilt, und niedrigenergetischen oder stummen Segmente wurden verworfen.

Externes Validierungsprotokoll

Die externe Validierung erfolgte durch Datensatzüberprüfung. Modelle, die mit COUGHVID trainiert wurden, wurden mit Virufy zur externen Validierung evaluiert. Dieses Protokoll bewertet die Verallgemeinerung über Datensätze, die unter verschiedenen Bedingungen gesammelt wurden, anstatt auf prospektive klinische Validierung. Abbildung 2 bietet einen protokollübergreifenden Überblick über diesen Workflow und veranschaulicht die Nutzung von Datensätzen, die Vorverarbeitung, die Feature-Extraktion, das Training von Klassifikatoren und die Evaluationsszenarien. Während Abbildung 1 sich auf die interne Modellarchitektur konzentriert, legt Abbildung 2 den Schwerpunkt auf experimentelles Design und Datenfluss über Trainings- und Testphasen hinweg.

figure-protocol-2
Abbildung 2: Arbeitsablauf des vorgeschlagenen COVID-19-Hustenscreening-Frameworks. Illustration der vollständigen Verarbeitungspipeline, einschließlich Vorverarbeitung, Merkmalsextraktion (MFCC, Chroma, spektrale Merkmale), GAN–VAE-basiertes Darstellungslernen und -augmentation (nur Training) sowie die endgültige Klassifikation unter subjektebenerder Aufteilung und Datensatz-übergreifender Bewertung. Bitte klicken Sie hier, um eine größere Version dieser Abbildung anzusehen.

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Ergebnisse

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Analyse der Datensatzzusammensetzung und der Klassenverteilung

Nach der Vorverarbeitung und Segmentierung zeigten die COUGHVID- und Virufy-Datensätze erhebliche Unterschiede sowohl in der Datensatzgröße als auch in der Segmentdichte. COUGHVID steuerte 428 von 444 Aufzeichnungen (96,4 %) und 1.719 von 1.953 extrahierten Hustensegmenten (88,0 %) bei, was seine Rolle als primärer Datensatz für Modelltraining und generative Augmentation bestätigt ...

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Diskussion

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Die Ergebnisse zeigen, dass das vorgeschlagene generative, KI-basierte Framework COVID-19 anhand von Hustensignalen über heterogene Datensätze hinweg erkennen kann. Wie in Tabelle 4 und Tabelle 6 gezeigt, erzielte das GAN–VAE-Hybridmodell die beste Leistung mit 97,2 % Genauigkeit und einem AUROC von 0,953 sowie hoher Präzision, Rückruf, F1-Wert und Spezifität, was auf eine ausgewogene Klassifikationsleistung hinweist.

Die Leis...

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Offenlegungen

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Der Autor oder die Autoren berichtete keinen potenziellen Interessenkonflikt.

Danksagungen

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

Wir sprechen den Dozenten und Forschungsmentoren der School of Computer Science and Engineering unseren aufrichtigen Dank für ihre wertvolle Führung, kontinuierliche Unterstützung und konstruktives Feedback während der Vorbereitung dieses Papiers aus.

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Materialien

Liste der in diesem Artikel verwendeten Materialien
NameUnternehmenKatalognummerKommentare
COUGHVID-Datensatz&Eakut; Cole Polytechnique Fé d&eakut; rale de Lausanne (EPFL)Öffentliche Veröffentlichung (2021)Crowdsourceter Husten-Audio-Datensatz mit selbstberichteten Metadaten und teilweisen Annotation des Arztes; hauptsächlich für Schulungen und Datenerweiterungen verwendet.
CUDA-ToolkitNVIDIA11.3GPU-Beschleunigungsrahmenwerk, das verwendet wird, um Modelltraining und Inferenz zu beschleunigen.
LibROSAOpen Source0.9Audioanalysebibliothek wird für Resampling, Segmentierung, MFCC-Extraktion und Berechnung spektraler Merkmale verwendet.
Linux-BetriebssystemKanonischUbuntu 20.04 LTSBetriebssystem, das für alle Experimente und Modelltrainings verwendet wird.
MatplotlibOpen Source3.5Visualisierungsbibliothek, die zur Darstellung von Datensatzverteilungen und Auswertungsergebnissen verwendet wird.
NumPyOpen Source1.21Numerische Bibliothek, die für Array-Manipulation und Signalverarbeitung verwendet wird.
NVIDIA GPUNVIDIATesla / RTX-KlasseGrafikverarbeitungseinheit, die zum Training von tiefen und generativen Modellen verwendet wird.
Python-ProgrammiersprachePython Software Foundation3.8Kernprogrammierumgebung, die für Datenvorverarbeitung, Feature-Extraktion, Modellentwicklung und -auswertung verwendet wird.
PyTorchMeta (Facebook AI Research)1.12Deep-Learning-Framework, das zur Implementierung von GAN-, VAE-, DCNN- und aufmerksamkeitsbasierten DCNN-Modellen verwendet wird.
Scikit-learnOpen Source1Maschinelle Lernbibliothek wird für Datenaufteilung, Klassengewichtung und Leistungsmetrikberechnung verwendet.
SciPyOpen Source1.7Wissenschaftliche Rechenbibliothek, die für Audio-Vorverarbeitung und Signaltransformationen verwendet wird.
Virufy-DatensatzVirufyÖffentliche Veröffentlichung (2021)Klinisch gesammelte Hustenaufnahmen mit RT-PCR– überprüfte COVID-19-Kennzeichnungen; ausschließlich für externe Validierung und Datensatz-Bewertung verwendet.

Referenzen

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,
  1. Aytekin, I., et al. COVID-19 detection from respiratory sounds with hierarchical spectrogram transformers. IEEE J. Biomed. Health Inform. 28 (3), 1273-1284 (2024).
  2. Walter, J. R., Lee, J. Y., Yu, L., et al. Use of artificial intelligence to develop predictive algorithms of cough and PCR-confirmed COVID-19 infections based on inputs from clinical-grade wearable sensors. Sci. Rep. 14, 8072(2024).
  3. Altae, A. A., Ehsani Rad, A., Mohebbi, K. Advanced COVID-19 detection using cough signals with space reconstruction and 3D deep convolutional neural networks. Sci. Rep. , (2025).
  4. Rao, S., Narayanaswamy, V., Esposito, M., Thiagarajan, J. J., Spanias, A. COVID-19 detection using cough sound analysis and deep learning algorithms. Intell. Decis. Technol. 15 (4), 655-665 (2021).
  5. Alkhodari, M., Khandoker, A. H. Detection of COVID-19 in smartphone-based breathing recordings: a pre-screening deep learning tool. PLoS One. 17 (1), e0262448(2022).
  6. Zhang, Y., et al. Research on a lung sound classification model based on a dual-channel CNN-LSTM algorithm. Biomed. Signal Process. Control. 94, 106257(2024).
  7. Askari Nasab, K., Mirzaei, J., Zali, A., Gholizadeh, S., Akhlaghdoust, M. Coronavirus diagnosis using cough sounds: artificial intelligence approaches. Front. Artif. Intell. 6, 1100112(2023).
  8. Imran, A., et al. AI4COVID-19: AI-enabled preliminary diagnosis for COVID-19 from cough samples via an app. Inform. Med. Unlocked. 20, 100378(2020).
  9. Brown, C., et al. Exploring automatic diagnosis of COVID-19 from crowdsourced respiratory sound data. Proc. KDD Health Day. , (2020).
  10. Laguarta, J., Hueto, F., Subirana, B. COVID-19 artificial intelligence diagnosis using only cough recordings. IEEE Open J. Eng. Med. Biol. 1, 275-281 (2020).
  11. Quartieri, T. F., Talker, T., Palmer, J. S. A framework for biomarkers of COVID-19 based on coordination of speech-production subsystems. IEEE Open J. Eng. Med. Biol. 1, 203-206 (2020).
  12. Hassan, A., Shahin, I., Alsabek, M. B. COVID-19 detection system using recurrent neural networks. Proc. CCCI. , 1-5 (2020).
  13. Khamparia, A., Gupta, D., Nguyen, N. G., et al. Sound classification using a convolutional neural network and a tensor deep stacking network. IEEE Access. 7, 7717-7727 (2019).
  14. Aykanat, M., Kilic, O., Kurt, B., et al. Classification of lung sounds using convolutional neural networks. J. Image Video Process. 65, (2017).
  15. Ponomarchuk, A., Burenko, I., Malkin, E., et al. Project Achoo: a practical model and application for COVID-19 detection from recordings of breath, voice, and cough. IEEE J. Sel. Top. Signal Process. 16 (2), 175-187 (2022).
  16. Feng, K., He, F., Steinmann, J., Demirkiran, I. Deep-learning based approach to identify COVID-19. Proc. SoutheastCon. , 1-4 (2021).
  17. Islam, R., Abdel-Raheem, E., Tarique, M. A study of using cough sounds and deep neural networks for the early detection of COVID-19. Biomed. Eng. Adv. 3, 100025(2022).
  18. Manshouri, N. M. Identifying COVID-19 by using spectral analysis of cough recordings: a distinctive classification study. Cogn. Neurodyn. 16 (1), 239-253 (2022).
  19. Huang, Y., et al. The respiratory sound features of COVID-19 patients fill gaps between clinical data and screening methods. medRxiv. , (2020).
  20. Puja, W. D., Sultana, S., Aowlad Hossain, A. B. M. COVID-19 detection from cough sound signal using random forest learning of deep spectral features. Proc. IEEE SPICSCON. , 1-4 (2024).
  21. Chadaga, K., Prabhu, S., Bhat, V., et al. COVID-19 diagnosis using clinical markers and multiple explainable artificial intelligence approaches: a case study from Ecuador. SLAS Technol. 28 (6), 393-410 (2023).
  22. Chadaga, K., Prabhu, S., Bhat, V., Sampathila, N., Umakanth, S., Chadaga, R. Artificial intelligence for diagnosis of mild-moderate COVID-19 using haematological markers. Ann. Med. 55 (1), 2233541(2023).
  23. Dar, J. A., Srivastava, K. K., Lone, S. A. Optimization-based deep learning for COVID-19 detection using respiratory sound signals. Cogn. Comput. 16 (4), 1927-1946 (2024).
  24. Qian, J., et al. An early study on intelligent analysis of speech under COVID-19: severity, sleep quality, fatigue, and anxiety. Proc. Interspeech. , (2020).
  25. Sharma, J., et al. Environment sound classification using multiple feature channels and an attention-based deep convolutional neural network. arXiv. , (2020).
  26. Lella, K. K., Pja, A. Automatic COVID-19 disease diagnosis using a 1D convolutional neural network and augmentation with human respiratory sound based on parameters: cough, breath, and voice. AIMS Public Health. 8 (2), 240-264 (2021).
  27. Orlandic, L., Teijeiro, T., Atienza, D. The COUGHVID crowdsourcing dataset, a corpus for the study of large-scale cough analysis algorithms. Sci. Data. 8, 156(2021).
  28. Lin, Y., et al. SympCoughNet: symptom-assisted audio-based COVID-19 detection. Front. Digit. Health. 7, 1551298(2025).
  29. Tena, A., Claria, F., Solsona, F. Automated detection of COVID-19 cough. Biomed. Signal Process. Control. 71, 103175(2022).
  30. Sharma, G., Umapathy, K., Krishnan, S. Audio texture analysis of COVID-19 cough, breath, and speech sounds. Biomed. Signal Process. Control. 76, 103703(2022).
  31. Hadjaidji, E., Korba, M. C. A., Khelil, K. COVID-19 detection from cough sounds using XGBoost and LSTM networks. Trait. Signal. 41 (2), 939-947 (2024).
  32. Despotovic, V., Ismael, M., Cornil, M., et al. Detection of COVID-19 from voice, cough, and breathing patterns: dataset and preliminary results. Comput. Biol. Med. 138, 104944(2021).
  33. Wang, W., Shang, Q., Lu, H. Automatic COVID-19 detection from cough sounds using multi-headed convolutional neural networks. Appl. Sci. 13, 6976(2023).
  34. Truong, T., Lenga, M., Serrurier, A., Mohammadi, S. Fused audio instance and representation for respiratory disease detection. arXiv. , (2023).
  35. Shati, A., Hassan, G. M., Datta, A. COVID-19 detection system: a comparative analysis of system performance based on acoustic features of cough audio signals. Proc. IEEE TrustCom. , 2706-2713 (2023).
  36. Pinkas, G., Karny, Y., Malachi, A., et al. SARS-CoV-2 detection from voice. IEEE Open J. Eng. Med. Biol. 1, 268-274 (2020).
  37. Hussain, S., et al. Cough2COVID-19 detection using an enhanced multi-layer ensemble deep learning framework and CoughFeatureRanker. Sci. Rep. 14, 25207(2024).
  38. Silva, L., Valadao, C., Lampier, L., et al. COVID-19 respiratory sound analysis and classification using audio textures. Front. Signal Process. 2, 986293(2022).
  39. Hamdi, S., Oussalah, M., Moussaoui, A., Saidi, M. Attention-based hybrid CNN-LSTM and spectral data augmentation for COVID-19 diagnosis from cough sound. J. Intell. Inf. Syst. 59 (2), 367-389 (2022).
  40. Banerjee, A., Nilhani, A. A residual network-based deep learning model for the detection of COVID-19 using cough sounds. Artificial Intelligence Strategies for Analyzing COVID-19 Pneumonia Lung Imaging. , IOP Publishing. (2022).
  41. Chowdhury, N. K., Kabir, M. A., Rahman, M. M., Islam, S. M. S. Machine learning for detecting COVID-19 from cough sounds: an ensemble-based MCDM method. Comput. Biol. Med. 145, 105405(2022).
  42. Chang, J., et al. UFRC: a unified framework for reliable COVID-19 detection on crowdsourced cough audio. arXiv. , (2022).
  43. Zhang, H. Q., et al. Analysis of reported cases of hemophagocytic lymphohistiocytosis after COVID-19 vaccination. Hum. Vaccin. Immunother. 19 (2), (2023).
  44. Xu, K., et al. Clinical features, diagnosis, and management of COVID-19 vaccine-associated Vogt-Koyanagi-Harada disease. Hum. Vaccin. Immunother. 19 (2), (2023).
  45. Hu, F., et al. Spatial networks of China's specialized, refined, distinctive, and innovative medical device firms based on parent-subsidiary contacts: implications for regional health policy. Front. Public Health. 13, 1676189(2025).

Zugriff eingeschränkt. Bitte melden Sie sich an oder starten Sie eine Testversion, um diesen Inhalt anzuzeigen.

Nachdrucke und Genehmigungen

Genehmigung beantragen, um den Text oder die Abbildungen dieses JoVE-Artikels zu verwenden

Genehmigung beantragen

Schlagwörter

Cough Audio AnalysisCOVID 19 ScreeningGenerative AICough Sound RecordingsMel Frequency CepstralVariational AutoencodersGenerative Adversarial NetworksDeep Convolutional NetworksAcoustic Health MonitoringSignal Denoising

Verwandte Artikel