RESEARCH
Peer reviewed scientific video journal
Video encyclopedia of advanced research methods
Visualizing science through experiment videos
EDUCATION
Video textbooks for undergraduate courses
Visual demonstrations of key scientific experiments
BUSINESS
Video textbooks for business education
OTHERS
Interactive video based quizzes for formative assessments
Products
RESEARCH
JoVE Journal
Peer reviewed scientific video journal
JoVE Encyclopedia of Experiments
Video encyclopedia of advanced research methods
EDUCATION
JoVE Core
Video textbooks for undergraduates
JoVE Science Education
Visual demonstrations of key scientific experiments
JoVE Lab Manual
Videos of experiments for undergraduate lab courses
BUSINESS
JoVE Business
Video textbooks for business education
Solutions
Language
German
Menu
Menu
Menu
Menu
Research Article
Abhinanda Ranjit Punnakkal1, Gustav Godtliebsen2, Ayush Somani1, Sebastian Andres Acuna Maldonado3, Åsa Birna Birgisdottir2,4, Dilip K. Prasad1, Alexander Horsch1, Krishna Agarwal3
1Department of Computer Science,UiT The Arctic University of Norway, 2Department of Clinical Medicine,UiT The Arctic University of Norway, 3Department of Physics and Technology,UiT The Arctic University of Norway, 4Division of Cardiothoracic and Respiratory Medicine,University Hospital of North Norway
Please note that some of the translations on this page are AI generated. Click here for the English version.
Erratum Notice
Important: There has been an erratum issued for this article. View Erratum Notice
Retraction Notice
The article Assisted Selection of Biomarkers by Linear Discriminant Analysis Effect Size (LEfSe) in Microbiome Data (10.3791/61715) has been retracted by the journal upon the authors' request due to a conflict regarding the data and methodology. View Retraction Notice
Dieser Artikel erklärt, wie man simulationsüberwachtes maschinelles Lernen zur Analyse der Mitochondrienmorphologie in fluoreszenzmikroskopischen Bildern fixierter Zellen einsetzt.
Die quantitative Analyse subzellulärer Organellen wie Mitochondrien in zellfluoreszenzmikroskopischen Bildern ist aufgrund der inhärenten Herausforderungen bei der Segmentierung dieser kleinen und morphologisch vielfältigen Strukturen eine anspruchsvolle Aufgabe. In diesem Artikel demonstrieren wir die Verwendung einer maschinellen, lerngestützten Segmentierungs- und Analysepipeline zur Quantifizierung der mitochondrialen Morphologie in fluoreszenzmikroskopischen Bildern fixierter Zellen. Das Deep-Learning-basierte Segmentierungstool wird auf simulierten Bildern trainiert und macht Ground-Truth-Annotationen für überwachtes Deep Learning überflüssig. Wir demonstrieren den Nutzen dieses Werkzeugs auf fluoreszenzmikroskopischen Bildern von fixierten Kardiomyoblasten mit einer stabilen Expression fluoreszierender Mitochondrienmarker und verwenden spezifische Zellkulturbedingungen, um Veränderungen in der mitochondrialen Morphologie zu induzieren.
In diesem Artikel demonstrieren wir den Nutzen eines physikbasierten maschinellen Lernwerkzeugs für die subzelluläre Segmentierung1 in fluoreszenzmikroskopischen Bildern von fixierten Kardiomyoblasten, die fluoreszierende Mitochondrienmarker exprimieren.
Mitochondrien sind die wichtigsten energieproduzierenden Organellen in Säugetierzellen. Insbesondere Mitochondrien sind hochdynamische Organellen und befinden sich oft in Netzwerken, die sich ständig in Länge und Verzweigung ändern. Die Form der Mitochondrien beeinflusst ihre Funktion, und Zellen können ihre mitochondriale Morphologie schnell ändern, um sich an eine Veränderung in der Umgebung anzupassen2. Um dieses Phänomen zu verstehen, ist die morphologische Klassifizierung von Mitochondrien als Punkte, Stäbchen oder Netzwerke sehr informativ3.
Die Segmentierung von Mitochondrien ist entscheidend für die Analyse der mitochondrialen Morphologie in Zellen. Aktuelle Methoden zur Segmentierung und Analyse fluoreszenzmikroskopischer Bilder von Mitochondrien beruhen auf manueller Segmentierung oder konventionellen Bildverarbeitungsansätzen. Schwellenwertbasierte Ansätze wie Otsu4 sind aufgrund des hohen Rauschpegels in Mikroskopiebildern weniger genau. Typischerweise zeigen Bilder für die morphologische Analyse von Mitochondrien eine große Anzahl von Mitochondrien, was die manuelle Segmentierung mühsam macht. Mathematische Ansätze wie MorphoLibJ5 und semi-überwachte maschinelle Lernansätze wie Weka6 sind sehr anspruchsvoll und erfordern Expertenwissen. Eine Überprüfung der Bildanalysetechniken für Mitochondrien7 zeigte, dass Deep-Learning-basierte Techniken für die Aufgabe nützlich sein können. Tatsächlich wurde die Bildsegmentierung in Alltagsbildern für Anwendungen wie das autonome Fahren durch den Einsatz von Deep-Learning-basierten Modellen revolutioniert.
Deep Learning ist eine Teilmenge des maschinellen Lernens, die Algorithmen bereitstellt, die aus großen Datenmengen lernen. Überwachte Deep-Learning-Algorithmen lernen Beziehungen aus großen Mengen von Bildern, die mit ihren Ground Truth (GT)-Etiketten versehen sind. Die Herausforderungen bei der Verwendung von überwachtem Deep Learning zur Segmentierung von Mitochondrien in fluoreszenzmikroskopischen Bildern sind zweifach. Erstens erfordert überwachtes Deep Learning einen großen Datensatz von Trainingsbildern, und im Falle der Fluoreszenzmikroskopie wäre die Bereitstellung dieses großen Datensatzes eine umfangreiche Aufgabe im Vergleich zur Verwendung leichter verfügbarer herkömmlicher kamerabasierter Bilder. Zweitens erfordern fluoreszenzmikroskopische Bilder GT-Annotationen der interessierenden Objekte in den Trainingsbildern, was eine mühsame Aufgabe ist, die Expertenwissen erfordert. Diese Aufgabe kann leicht Stunden oder Tage der Zeit des Experten für ein einzelnes Bild von Zellen mit fluoreszierend markierten subzellulären Strukturen in Anspruch nehmen. Darüber hinaus stellen Unterschiede zwischen den Kommentatoren ein Problem dar. Um manuelle Annotationen überflüssig zu machen und die überlegene Leistung von Deep-Learning-Techniken nutzen zu können, wurde hier ein Deep-Learning-basiertes Segmentierungsmodell verwendet, das auf simulierten Bildern trainiert wurde. Physikbasierte Simulatoren bieten eine Möglichkeit, den Prozess der Bildentstehung in einem Mikroskop nachzuahmen und zu steuern, wodurch Bilder bekannter Formen erstellt werden können. Unter Verwendung eines physikbasierten Simulators wurde zu diesem Zweck ein großer Datensatz simulierter fluoreszenzmikroskopischer Bilder von Mitochondrien erstellt.
Die Simulation beginnt mit der Geometriegenerierung mittels parametrischer Kurven zur Formgenerierung. Emitter werden zufällig gleichmäßig verteilt auf der Oberfläche der Form platziert, so dass die Dichte den experimentellen Werten entspricht. Eine 3D-Punktspreizfunktion (PSF) des Mikroskops wird unter Verwendung einer rechnerisch effizienten Näherung8 des Gibson-Lanni-Modells9 berechnet. Um die simulierten Bilder eng mit experimentellen Bildern abzugleichen, werden sowohl der Dunkelstrom als auch das Aufnahmerauschen emuliert, um Fotorealismus zu erreichen. Der physische GT wird in Form einer binären Karte generiert. Der Code zum Generieren des Datasets und zum Trainieren des Simulationsmodells ist verfügbar10, und der Schritt zum Erstellen dieses simulierten Datasets ist in Abbildung 1 dargestellt.
Wir zeigen den Nutzen einer auf Deep Learning basierenden Segmentierung, die vollständig auf einem simulierten Datensatz trainiert wird, indem konfokale Mikroskopiebilder von fixierten Kardiomyoblasten analysiert werden. Diese Kardiomyoblasten exprimierten einen fluoreszierenden Marker in der mitochondrialen Außenmembran, der die Visualisierung der Mitochondrien in den fluoreszenzmikroskopischen Bildern ermöglichte. Vor der Durchführung des hier als Beispiel angeführten Experiments wurde den Zellen Glukose entzogen und 7 Tage lang in Kultur an Galaktose angepasst. Der Ersatz von Glukose in den Wachstumsmedien durch Galaktose zwingt die Zellen in Kultur, oxidativer zu werden und somit für die Energieproduktion von ihren Mitochondrien abhängig zu werden11,12. Darüber hinaus macht dies die Zellen empfindlicher für mitochondriale Schäden. Mitochondriale Morphologieänderungen können experimentell durch Zugabe eines mitochondrialen Entkopplungsmittels wie Carbonylcyanid m-Chlorphenylhydrazon (CCCP) zum Zellkulturmedium13 induziert werden. CCCP führt zu einem Verlust des mitochondrialen Membranpotentials (ΔΨm) und führt somit zu Veränderungen der Mitochondrien von einer eher röhrenförmigen (stäbchenartigen) zu einer kugelförmigeren (punktartigen) Morphologie14. Darüber hinaus neigen Mitochondrien dazu, während der CCCP-Behandlung anzuschwellen15. Wir zeigen die morphologische Verteilung der Mitochondrien, wenn die galaktoseadaptierten Kardiomyoblasten mit dem mitochondrialen Entkoppler CCCP behandelt wurden. Die Deep-Learning-Segmentierungen der Mitochondrien ermöglichten es uns, sie als Punkte, Stäbchen oder Netzwerke zu klassifizieren. Wir leiteten dann quantitative Metriken ab, um die Zweiglängen und die Häufigkeit der verschiedenen mitochondrialen Phänotypen zu bewerten. Die Schritte der Analyse sind in Abbildung 2 beschrieben, und die Details der Zellkultur, der Bildgebung, der Datensatzerstellung für die Deep-Learning-basierten Segmentierung sowie der quantitativen Analyse der Mitochondrien sind unten aufgeführt.
HINWEIS: Die Abschnitte 1-4 können weggelassen werden, wenn mit vorhandenen Mikroskopiebildern von Mitochondrien mit bekannten experimentellen Bedingungen gearbeitet wird.
1. Zellkultur
2. Versuchsablauf
3. Färbung und Montage der Zellen auf den Deckgläsern
4. Mikroskopie und Bildgebung
5. Generieren simulierter Trainingsdaten
6. Deep-Learning-basierte Segmentierung
7. Morphologische Analyse: Analyse der mitochondrialen Morphologie der beiden Datengruppen "Glucose" und "CCCP"
Die Ergebnisse aus den Deep-Learning-Segmentierungen von Mitochondrien in konfokalen Bildern von fixierten Kardiomyoblasten, die fluoreszierende Mitochondrienmarker exprimieren, zeigen den Nutzen dieser Methode. Diese Methode ist mit anderen Zelltypen und Mikroskopiesystemen kompatibel und erfordert nur ein erneutes Training.
Galactose-adaptierte H9c2-Kardiomyoblasten mit fluoreszierenden Mitochondrien wurden mit oder ohne CCCP für 2 h behandelt. Die Zellen wurden dann fixiert, mit einem Kernfarbstoff angefärbt und zur fluoreszenzmikroskopischen Analyse auf Glasobjektträger montiert. Ein konfokales Mikroskop wurde verwendet, um Bilder sowohl der Kontroll- als auch der CCCP-behandelten Zellen aufzunehmen. Wir führten unsere Analyse an 12 konfokalen Bildern mit etwa 60 Zellen pro Bedingung durch. Der morphologische Zustand der Mitochondrien in jedem Bild wurde dann bestimmt und quantifiziert. Die aus dem trainierten Modell erhaltenen Segmentierungsmasken wurden skelettiert, um die Analyse der Topologie jedes einzelnen Mitochondriums für dieses Experiment zu ermöglichen. Die Zweiglänge der einzelnen Mitochondrien wurde als Parameter für die Klassifizierung verwendet. Die einzelnen Mitochondrien wurden nach folgender Regel in morphologische Klassen eingeteilt. Insbesondere wurde jedes mitochondriale Skelett mit einer Länge von weniger als 1.500 nm als Punkt betrachtet, und die längeren Mitochondrien wurden weiter in Netzwerk oder Stab kategorisiert. Wenn es mindestens eine Kreuzung gab, an der sich zwei oder mehr Zweige kreuzten, wurde dies als Netzwerk definiert; Ansonsten wurde das Mitochondrium als Stab klassifiziert. Ein Beispielbild mit den mitochondrialen Skeletten, die mit den Morphologieklassen markiert sind, ist in Abbildung 3 dargestellt.
Die Kategorisierung der mitochondrialen Morphologie in Abbildung 4A zeigt, dass es möglich ist, signifikante Veränderungen zu erkennen, wenn CCCP für 2 h angewendet wird; Dies zeigt sich am deutlichsten an der Zunahme der Punkte für die CCCP-behandelten Zellen.
Die mittlere Astlänge in Abbildung 4B ist ein weiterer Weg, um nachweisbare und signifikante Veränderungen in der Morphologie zu veranschaulichen. Sowohl Stäbchen als auch Netzwerke waren, wie erwartet, signifikant reduziert im Vergleich zur Kontrolle, wenn die Zellen mit CCCP behandelt wurden. Die signifikante Zunahme der mittleren Astlängen von Punkten wurde auch angesichts der Schwellung erwartet, die Mitochondrien erfahren, wenn sie CCCP ausgesetzt sind.

Abbildung 1: Pipeline zur Simulation fluoreszenzmikroskopischer Bilder. Die Pipeline umfasst (i) 3D-Geometriegenerierung, (ii) Emitter und photokinetische Emulation, (iii) 3D-PSF-Faltung, (iv) Rauschaddition und (v) Binarisierung. Bitte klicken Sie hier, um eine größere Version dieser Abbildung zu sehen.

Abbildung 2: Schritte der maschinellen Lernanalyse der mitochondrialen Morphologie . (1) Die zu segmentierenden Bilder werden zunächst auf Größen zugeschnitten, die für das Segmentierungsmodell akzeptabel sind. (2) Die Deep-Learning-basierte Segmentierung wird auf die Bildausschnitte angewendet. (3) Die segmentierten Outputkulturen werden auf ihre ursprüngliche Größe zurückgenäht. (4) Die montierten Segmentierungen sind skelettiert. (6) Die morphologische Analyse wird basierend auf der Topologie der Skelettierungen durchgeführt. Bitte klicken Sie hier, um eine größere Version dieser Abbildung zu sehen.

Abbildung 3: Mitochondriales Skelett überlagert mit der Segmentierungsausgabe von Mikroskopiebildern . (A) Die Segmentierungsausgabe. (B) Das geradlinige Skelett (euklidischer Abstand zwischen Start- und Endpunkt eines Zweiges) wird über die Segmentierungsausgabe gelegt. Die Farbcodierung des Skeletts stellt die Klasse der Mitochondrien dar. Netzwerke sind rot, Stäbchen sind grün und Punkte sind lila. Bitte klicken Sie hier, um eine größere Version dieser Abbildung zu sehen.

Abbildung 4: Analyse der mitochondrialen Morphologie. (A) Ein Überblick über den relativen Prozentsatz verschiedener morphologischer Kategorien basierend auf der gesamten mitochondrialen Länge. (B) Vergleich der mittleren mitochondrialen Zweiglänge zwischen den experimentellen Bedingungen und zwischen morphologischen Kategorien. Die x-Achse zeigt die morphologischen Kategorisierungen und die y-Achse die mittlere Verzweigungslänge der Mitochondrien in Nanometern (nm). Die statistische Signifikanz in Form von p-Werten wird als * p < 0,05, ** p < 0,01, *** p < 0,001 und **** p < 0,0001 angegeben. Bitte klicken Sie hier, um eine größere Version dieser Abbildung zu sehen.

Abbildung 5: Fehlerfall der Segmentierung. Eine hohe Dichte von Mitochondrien ist ein herausforderndes Szenario für das Segmentierungsmodell. Das farbige Skelett zeigt die längsten einzelnen Mitochondrien, die im Bild nachgewiesen wurden. Durch das Durchlaufen der Längenmessungen können diese Szenarien erkannt und bearbeitet werden, um die Segmentierungsergebnisse mit dem morphologischen Operator erode zu verbessern (verschlankt das detektierte Skelett). Bitte klicken Sie hier, um eine größere Version dieser Abbildung zu sehen.
Die Autoren erklären, dass es keine Interessenkonflikte im Zusammenhang mit diesem Artikel gibt.
Dieser Artikel erklärt, wie man simulationsüberwachtes maschinelles Lernen zur Analyse der Mitochondrienmorphologie in fluoreszenzmikroskopischen Bildern fixierter Zellen einsetzt.
Die Autoren würdigen das Gespräch mit Arif Ahmed Sekh. Zambarlal Bhujabal ist anerkannt für seine Unterstützung beim Aufbau der stabilen H9c2-Zellen. Wir erkennen die folgende Finanzierung an: ERC Starting Grant Nr. 804233 (an K.A.), Researcher Project for Scientific Renewal Grant Nr. 325741 (an D.K.P.), Northern Norway Regional Health Authority grant no. HNF1449-19 (Å.B.B.) und UiT's thematisches Förderprojekt VirtualStain mit Cristin Project ID 2061348 (D.K.P., Å.B.B., K.A. und A.H.).
| 12-Well-Platte | FALCON | 353043 | |
| Wässriger Glutaraldehyd EM Grade 25% | Elektronenmikroskopie Sciences | 16200 | |
| Axio Vert.A1 | Zeiss | Hellfeldmikroskop | |
| CCCP | Sigma-Aldrich | C2759 | |
| Computer | n/a | n/a | Muss unter Linux/Windows Betriebssystem mit einer NVIDIA GPU laufen mit mind. 4GB Speicher |
| Deckgläser | VWR | 631-0150 | |
| DAPI (Fleck) | Sigma-Aldrich | D9542 | |
| DMEM | gibco | 11966-025 | |
| Fötales Rinderserum | Sigma-Aldrich | F7524 | |
| Objektträger (mattierter Rand) | Epredia | AA00000112E01MNZ10 | |
| H9c2 mCherry-EGFP-OMP25 | Hauseigene stabile Zelllinie, abgeleitet aus gekaufter Zelllinie | ||
| Inkubator Thermo | Fisher Scientific | 51033557 | |
| LSM 800 | Zeiss | Konfokalmikroskop | |
| Eindeckmedium (Glas) | Thermo Fisher Scientific | P36980 | |
| Paraformaldehydlösung, 4% in PBS | Thermo Fisher Scientific | J19943-K2 | |
| Plan-Apochromat 63x Öl (M27) Objektiv mit einer NA von 1,4 | Zeiss | 420782-9900-000 | |
| Sterile Laminar-Flow-Haube | Labogene | SCANLAF MARS | |
| Trypsin | Sigma-Aldrich | T4049 | |
| Vacusafe Absaugsystem | VACUUBRAND | 20727400 | |
| ZEN 2,6 | Zeiss |