$$\rightleftharpoonup{xx}$$
$$\longleftharp{xx}$$,
$$\longrightharp{xx}$$,
Adquisición de datos
Para validar nuestra caja de herramientas, analizamos dos redes tubulares distintas en tejido hepático de ratones adultos: canalículos biliares (BC) y redes sinusoidales. Para cada estructura, se utilizó una imagen de microscopía 3D de un solo animal para el entrenamiento, mientras que dos imágenes independientes de diferentes animales se utilizaron exclusivamente para las pruebas. Todas las imágenes del hígado se adquirieron con una resolución de vóxel isotrópico de 0,3 μm/vóxel, lo que garantiza un muestreo consistente en las tres dimensiones espaciales. El conjunto de datos, publicado originalmente en Morales-Navarrete et al.9, fue curado utilizando Labkit25, proporcionando máscaras binarias de alta calidad de las estructuras tubulares utilizadas como verdad fundamental para el aprendizaje supervisado. Para la red sinusoidal, generamos dos tipos de máscaras binarias: una que delinea los bordes del tubo (representación hueca) y otra que captura el volumen tubular lleno, lo que permite diferentes estrategias de entrenamiento según la aplicación.
Además, evaluamos nuestra caja de herramientas en un conjunto de datos externo de vasos sanguíneos de todo el cerebro de Mus musculus adulto, proporcionado como parte del desafío SELMA3D 2024. Este conjunto de datos consta de imágenes de microscopía de hoja de luz 3D adquiridas en condiciones de vivienda estándar (ciclo de luz de 12 h / 12 h de oscuridad durante 3 meses) y está disponible a través de imágenes de BioStudies (S-BIAD1197)26. Se utilizaron cinco imágenes cerebrales para el entrenamiento y diecinueve para las pruebas. Las pilas anisotrópicas originales se volvieron a muestrear a dimensiones de vóxeles isotrópicos utilizando interpolación lineal en Fiji para garantizar la compatibilidad con nuestra canalización de análisis.
Preprocesamiento
Para abordar el número limitado de imágenes 3D originales, aplicamos técnicas de aumento de datos que introdujeron artefactos de imagen realistas y simularon diferentes relaciones señal-ruido que van de 15 a 1. Este enfoque fue fundamental para mejorar la generalización y la solidez de los modelos.
La imagen de prueba se subdividió en parches no superpuestos de vóxeles de 64 x 64 x 64 para evaluar el rendimiento del modelo a nivel regional y evaluar la robustez en diferentes contextos espaciales dentro del mismo volumen 3D.
Arquitectura del modelo
Implementamos y comparamos dos arquitecturas de redes neuronales convolucionales adaptadas para la segmentación 3D:
Un U-Net17 3D estándar, compuesto por bloques codificadores-decodificadores simétricos con una agrupación máxima de 2×2×2, capas convolucionales con activaciones ReLU y una convolución final de 1 x 1 x 1 seguida de una función sigmoide para la clasificación binaria.
Un Attention U-Net27, que incorpora un mecanismo de atención que resalta dinámicamente las características sobresalientes y suprime el fondo irrelevante, mejorando la segmentación de estructuras complejas y variables como las redes tubulares hepáticas.
Protocolo de entrenamiento
Ambas arquitecturas se entrenaron utilizando las bibliotecas TensorFlow y Keras en un clúster de computación de alto rendimiento equipado con 32 núcleos de CPU, 128 GB de RAM y dos GPU NVIDIA A100 SXM4 de 40 GB. La Attention U-Net requirió más tiempo de capacitación debido a su complejidad arquitectónica, especialmente cuando se utilizan los conjuntos de datos aumentados (ver Tabla 1).
Métricas de evaluación
El rendimiento del modelo se evaluó cuantitativamente en las imágenes de prueba retenidas utilizando métricas de segmentación estándar: coeficiente de dados, intersección sobre unión (IoU), puntuación F1, similitud de volumen y sensibilidad y especificidad.
Los resultados de la CB, las estructuras sinusoidales y los vasos se resumen en la Figura 2, Figura 3, Figura 4 y Figura 5. Además, la Tabla 2 presenta una comparación de rendimiento con los métodos clásicos establecidos para la segmentación tubular, incluidos Otsu y umbrales adaptativos. Nuestros modelos, en particular el Attention U-Net entrenado con datos aumentados, superaron constantemente a estos métodos tradicionales en todas las métricas.
Análisis estadístico y robustez
El análisis de imágenes completas, así como los parches de vóxeles de 64 x 64 x 64 (Tabla 3) en el conjunto de prueba, también nos permitió cuantificar la variabilidad espacial en las predicciones del modelo entre regiones. Todos los modelos demostraron una alta precisión, y el Attention U-Net mostró un rendimiento consistentemente más alto, particularmente en la puntuación F1 y el coeficiente Dice. Los resultados cualitativos, que se muestran en la Figura 2A, B, Figura 3A, B, Figura 4A, B, Figura 5A, B, así como en el Video 1, Video 2, Video 3 y Video 4, respaldan estos hallazgos, ilustrando la delineación precisa de las estructuras tubulares en la mayoría de las regiones de los datos de prueba.
Explicación de anomalías en las métricas de rendimiento
Los valores más bajos de los diagramas de caja para el análisis de parches (Figura complementaria S1, Figura complementaria S2, Figura complementaria S3, Figura complementaria S4 y Figura complementaria S5) indican la presencia de valores atípicos de rendimiento en un subconjunto de parches de prueba. Asimismo, la segmentación subóptima en los fotogramas finales de los vídeos se puede atribuir a dos factores clave:
Efectos de límite: el rendimiento de la segmentación a menudo se degrada en los bordes de la imagen, donde las estructuras parciales están subrepresentadas o capturadas de forma incompleta, lo que genera una mayor incertidumbre y una posible clasificación errónea.
Degradación de la calidad de imagen en planos z más profundos: A pesar del tamaño del vóxel isotrópico, los factores biológicos y técnicos como la atenuación de la señal, la dispersión de la luz y la reducción del contraste en la dirección z conducen a una reducción de la calidad de la imagen hacia la parte inferior del volumen. Esta degradación complica la delineación precisa de los límites y contribuye a las inconsistencias de segmentación.
Estos factores son desafíos inherentes a las imágenes biológicas 3D y son particularmente impactantes en regiones distantes del plano de imágenes o que contienen límites de estructura ambiguos.
En resumen, nuestros resultados demuestran que los modelos de segmentación basados en el aprendizaje profundo, en particular el Attention U-Net entrenado con datos aumentados, ofrecen una delineación robusta y precisa de estructuras tubulares complejas en imágenes de microscopía hepática 3D. Al aprovechar conjuntos de datos seleccionados, estrategias de aumento realistas y mecanismos de atención, los modelos lograron un rendimiento superior en comparación con los métodos clásicos como el umbral. La evaluación regional utilizando parches de vóxeles de 64³ confirmó la consistencia y generalización del enfoque en diferentes regiones de la imagen y complejidades estructurales. Si bien persisten algunas limitaciones, principalmente debido a los efectos de contorno y la degradación de la imagen del plano z, nuestro estudio destaca la efectividad de las arquitecturas basadas en la atención y proporciona una solución validada de código abierto para la segmentación tubular 3D de alta precisión en imágenes biomédicas.

Figura 1: Flujo de trabajo para la segmentación 3D de estructuras tubulares en imágenes de microscopía de fluorescencia utilizando modelos U-Net y Attention U-Net. (A) Preparación de datos: Secciones esquemáticas en 2D de imágenes de microscopía de fluorescencia 3D de tejido hepático de ratón, que muestran las imágenes originales y las máscaras binarias correspondientes. (B) Aumento de datos: Aumento basado en simulación de los datos preparados, generando imágenes con diferentes relaciones señal/ruido (por ejemplo, SNR = 15 y SNR = 1). (C) Entrenamiento de modelos: Entrenamiento basado en parches de modelos U-Net y Attention U-Net utilizando datos originales y aumentados. Se generan parches de imagen y máscara de tamaño 64 x 64 x 64 para el entrenamiento. (D) Evaluación del modelo: Las métricas de rendimiento cuantitativas, incluida la recuperación y la puntuación F1, se calculan para cada modelo para evaluar la precisión de la segmentación en los conjuntos de datos de prueba. (E) Inferencia del modelo: Aplicación del modelo entrenado en imágenes no vistas para generar máscaras de segmentación predichas. Abreviatura: SNR = relación señal/ruido. Haga clic aquí para ver una versión más grande de esta figura.

Figura 2: Evaluación de los modelos U-Net y Attention U-Net para la segmentación de la red de Canalicul biliar a partir de imágenes de microscopía de fluorescencia 3D de tejido hepático de ratón. (A) Secciones 2D representativas (sección central) de imágenes de microscopía de fluorescencia 3D, que muestran la imagen original y la máscara de verdad fundamental correspondiente para BC en tejido hepático de ratón. Las imágenes de la parte superior derecha proporcionan una vista ampliada de los recuadros resaltados en cada sección. (B) Máscaras de segmentación predichas generadas por U-Net, Attention U-Net y sus versiones aumentadas. La fila superior resalta los verdaderos positivos (estructuras segmentadas correctamente), la inferior muestra los falsos positivos (estructuras identificadas incorrectamente) y los falsos negativos (estructuras perdidas) para cada modelo. (C) Métricas de evaluación cuantitativa para cada modelo, incluida la precisión, la puntuación F1, la precisión, el recuerdo, la similitud de volumen y el coeficiente de dados. La evaluación se realizó en los parches extruidos de la imagen 3D. Las barras de error denotan desviaciones estándar en las imágenes de prueba. Barra de escala: 60 μm; Barra de escala insertada: 30 μm. Abreviatura: BC = canalículos biliares. Haga clic aquí para ver una versión más grande de esta figura.

Figura 3: Evaluación de los modelos U-Net y Attention U-Net para la segmentación de la red sinusoidal a partir de imágenes de microscopía de fluorescencia 3D del tejido hepático de ratón. (A) Secciones 2D representativas (sección central) de imágenes de microscopía de fluorescencia 3D, que muestran la imagen original y la máscara de verdad fundamental correspondiente para sinusoides en tejido hepático de ratón. Las imágenes de la parte superior derecha proporcionan una vista ampliada de los recuadros resaltados en cada sección. (B) Máscaras de segmentación predichas generadas por U-Net, Attention U-Net y sus versiones aumentadas. La fila superior resalta los verdaderos positivos (estructuras segmentadas correctamente), la inferior muestra los falsos positivos (estructuras identificadas incorrectamente) y los falsos negativos (estructuras perdidas) para cada modelo. (C) Métricas de evaluación cuantitativa para cada modelo, incluida la precisión, la puntuación F1, la precisión, el recuerdo, la similitud de volumen y el coeficiente de dados. La evaluación se realizó en los parches extruidos de la imagen 3D. Las barras de error denotan desviaciones estándar en las imágenes de prueba. Barra de escala: 60 μm; Barra de escala insertada: 30 μm. Haga clic aquí para ver una versión más grande de esta figura.

Figura 4: Evaluación de los modelos U-Net y Attention U-Net para la segmentación de la red sinusoidal a partir de imágenes de microscopía de fluorescencia 3D de tejido hepático de ratón, considerando la máscara como tubos llenos. (A) Secciones medias 2D representativas de imágenes de microscopía de fluorescencia 3D, que muestran la imagen original y la máscara de verdad fundamental correspondiente para sinusoides en tejido hepático de ratón. Las imágenes de la parte superior derecha proporcionan una vista ampliada de los recuadros resaltados en cada sección. (B) Máscaras de segmentación predichas generadas por U-Net, Attention U-Net y sus versiones aumentadas. Mientras que la fila superior resalta los verdaderos positivos (estructuras correctamente segmentadas), la inferior muestra los falsos positivos (estructuras identificadas incorrectamente) y los falsos negativos (estructuras perdidas) para cada modelo. (C) Métricas de evaluación cuantitativa para cada modelo, incluida la precisión, la puntuación F1, la precisión, el recuerdo, la similitud de volumen y el coeficiente de dados. La evaluación se realizó en los parches extruidos de la imagen 3D. Las barras de error denotan desviaciones estándar en las imágenes de prueba. Barra de escala: 60 μm; Barra de escala insertada: 30 μm. Haga clic aquí para ver una versión más grande de esta figura.

Figura 5: Evaluación de los modelos U-Net y Attention U-Net para la segmentación de la red vascular en el cerebro del ratón a partir de imágenes de microscopía de hoja de luz 3D utilizando máscaras de tubo lleno. (A) Secciones medias 2D representativas extraídas de imágenes de microscopía de hoja de luz 3D del cerebro del ratón, que muestran la imagen original y la máscara de verdad fundamental correspondiente para los vasos sanguíneos. Las vistas ampliadas de los recuadros seleccionados se muestran en la esquina superior derecha de cada panel. Máscaras de segmentación previstas generadas por U-Net, Attention U-Net y sus versiones aumentadas. La fila superior resalta los verdaderos positivos (estructuras de vasos correctamente segmentadas), mientras que la fila inferior ilustra los falsos positivos (regiones segmentadas incorrectamente) y los falsos negativos (estructuras de vasos perdidos) para cada modelo. (C) Evaluación cuantitativa del rendimiento del modelo utilizando métricas que incluyen precisión, puntuación F1, precisión, recuperación, similitud de volumen y coeficiente de dados. Las evaluaciones se realizaron en parches 3D extraídos de los volúmenes de prueba. Las barras de error representan desviaciones estándar en las 19 imágenes de prueba. Haga clic aquí para ver una versión más grande de esta figura.
Video 1: Animación Z-Stack de máscaras predichas para la red BC. El video muestra una secuencia animada a través de la pila z de máscaras de segmentación predichas para canalículos biliares en tejido hepático de ratón, generadas por U-Net, Attention U-Net y sus versiones aumentadas. Cada sección 2D resalta los verdaderos positivos (blanco), los falsos positivos (verde) y los falsos negativos (magenta) para cada modelo, moviéndose por toda la pila. Abreviatura: BC = canalículos biliares. Haga clic aquí para descargar este video.
Video 2: Animación Z-Stack de máscaras predichas para la red sinusoidal. El video muestra una secuencia animada a través de la pila z de máscaras de segmentación predichas para sinusoides en tejido hepático de ratón, generadas por U-Net, Attention U-Net y sus versiones aumentadas. Cada sección 2D resalta los verdaderos positivos (blanco), los falsos positivos (verde) y los falsos negativos (magenta) para cada modelo, moviéndose por toda la pila. Haga clic aquí para descargar este video.
Video 3: Animación Z-Stack de máscaras predichas para la red sinusoidal como tubos llenos. El video muestra una secuencia animada a través de la pila z de máscaras de segmentación predichas para la red sinusoidal como tubos llenos en tejido hepático de ratón, generados por U-Net, Attention U-Net y sus versiones aumentadas. Cada sección 2D resalta los verdaderos positivos (blanco), los falsos positivos (verde) y los falsos negativos (magenta) para cada modelo, moviéndose por toda la pila. Haga clic aquí para descargar este video.
Video 4: Animación Z-Stack de máscaras predichas para los vasos cerebrales. El video muestra una secuencia animada a través de la pila z de máscaras de segmentación predichas para los buques, generadas por U-Net, Attention U-Net y sus versiones aumentadas. Cada sección 2D resalta los verdaderos positivos (blanco), los falsos positivos (verde) y los falsos negativos (magenta) para cada modelo, moviéndose por toda la pila. Haga clic aquí para descargar este video.
Tabla 1: Tiempo de entrenamiento para modelos U-Net 3D y atención U-Net 3D en conjuntos de datos de bilis canalículos y sinusoides con y sin aumento de datos. Tiempo de entrenamiento para modelos U-Net 3D y Attention U-Net 3D en conjuntos de datos de canalículos biliares y sinusoides con y sin aumento de datos. La tabla enumera el número de parches para cada conjunto de datos y el tiempo de entrenamiento correspondiente en minutos. El aumento de datos aumenta el número de parches de 1353 a 10824, lo que lleva a un aumento significativo en el tiempo de entrenamiento. El modelo Attention U-Net requiere constantemente más tiempo de entrenamiento que el modelo U-Net, especialmente con conjuntos de datos aumentados, debido a su complejidad adicional al centrarse en las características relevantes dentro de los datos. Abreviatura: BC = canalículos biliares. Haga clic aquí para descargar esta tabla.
Tabla 2: Evaluación cuantitativa de los modelos U-Net 3D y Attention U-Net 3D en cuatro conjuntos de datos utilizando la segmentación de imágenes completas. Esta tabla informa el rendimiento de cada modelo, así como de los métodos clásicos como Otsu y el umbral adaptativo, en cuatro conjuntos de datos diferentes: canalículos biliares, redes sinusoidales (representaciones huecas y rellenas) y vasculatura de todo el cerebro, utilizando imágenes 3D completas para la evaluación. Para cada combinación de modelo y conjunto de datos, se muestra el número de imágenes de prueba, junto con las métricas de rendimiento: Exactitud, Precisión, Recuperación (sensibilidad), Especificidad, Puntuación F1, Coeficiente de dados, IoU y Similitud de volumen. Estas métricas proporcionan una evaluación integral de la calidad de la segmentación en términos de corrección de vóxeles y acuerdo volumétrico entre las predicciones y la verdad del terreno. Abreviaturas: BC = canalículos biliares; IoU = Intersección sobre Unión. Haga clic aquí para descargar esta tabla.
Tabla 3: Evaluación cuantitativa de los modelos U-Net 3D y Attention U-Net 3D en cuatro conjuntos de datos utilizando parches de 64 x 64 x 64. Esta tabla resume el rendimiento de los modelos U-Net 3D y Attention U-Net 3D en cuatro conjuntos de datos: canalículos biliares, redes sinusoidales (máscaras huecas y rellenas) y vasculatura de todo el cerebro, según la evaluación en parches de imágenes 3D de tamaño 64×64×64 vóxeles. Para cada combinación de modelo y conjunto de datos, el número de parches de prueba se enumera junto con las métricas clave de rendimiento: Exactitud, Precisión, Recuperación (sensibilidad), Especificidad, Puntuación F1, Coeficiente de dados, Intersección sobre unión y Similitud de volumen. Estas métricas a nivel de parche ofrecen información localizada sobre el rendimiento del modelo y son especialmente útiles para identificar la precisión de la segmentación espacialmente heterogénea en todos los volúmenes. Abreviaturas: BC = canalículos biliares; IoU = Intersección sobre Unión. Haga clic aquí para descargar esta tabla.
Figura complementaria S1: Rendimiento de segmentación a nivel de parche de los modelos 3D U-Net y Attention U-Net para la segmentación de canalículos biliares. Los gráficos ilustran el rendimiento cuantitativo de los modelos 3D U-Net y Attention U-Net en conjuntos de datos de canalículos biliares, evaluados utilizando parches de imágenes 3D de tamaño 64 x 64 x 64 vóxeles. Las métricas que se muestran incluyen exactitud, precisión, recuperación (sensibilidad), especificidad, puntuación F1, coeficiente de dados, intersección sobre unión y similitud de volumen. Los resultados reflejan la variabilidad entre los parches, ofreciendo información localizada sobre el rendimiento del modelo y destacando la heterogeneidad espacial dentro de los volúmenes de tejido hepático 3D. Abreviaturas: BC = canalículos biliares; IoU = Intersección sobre Unión. Haga clic aquí para descargar este archivo.
Figura complementaria S2: Rendimiento de segmentación a nivel de parche de los modelos 3D U-Net y Attention U-Net para la segmentación sinusoide. Los gráficos ilustran el rendimiento cuantitativo de los modelos 3D U-Net y Attention U-Net en conjuntos de datos sinusoides, evaluados utilizando parches de imágenes 3D de tamaño 64 x 64 x 64 vóxeles. Las métricas que se muestran incluyen exactitud, precisión, recuperación (sensibilidad), especificidad, puntuación F1, coeficiente de dados, intersección sobre unión y similitud de volumen. Los resultados reflejan la variabilidad entre los parches, ofreciendo información localizada sobre el rendimiento del modelo y destacando la heterogeneidad espacial dentro de los volúmenes de tejido hepático 3D. Abreviatura: IoU = Intersección sobre Unión. Haga clic aquí para descargar este archivo.
Figura complementaria S3: Rendimiento de segmentación a nivel de parche de los modelos 3D U-Net y Attention U-Net para sinusoides como segmentación de tubos llenos. Los gráficos ilustran el rendimiento cuantitativo de los modelos 3D U-Net y Attention U-Net en sinusoides como conjuntos de datos de tubos llenos, evaluados utilizando parches de imágenes 3D de tamaño 64 x 64 x 64 vóxeles. Las métricas que se muestran incluyen exactitud, precisión, recuperación (sensibilidad), especificidad, puntuación F1, coeficiente de dados, intersección sobre unión y similitud de volumen. Los resultados reflejan la variabilidad entre los parches, ofreciendo información localizada sobre el rendimiento del modelo y destacando la heterogeneidad espacial dentro de los volúmenes de tejido hepático 3D. Abreviatura: IoU = Intersección sobre Unión. Haga clic aquí para descargar este archivo.
Figura complementaria S4: Rendimiento de segmentación a nivel de parche de los modelos 3D U-Net y Attention U-Net para la vasculatura cerebral a partir de imágenes de microscopía de hoja de luz. Los gráficos ilustran el rendimiento cuantitativo de los modelos 3D U-Net y Attention U-Net en conjuntos de datos de vasculatura de todo el cerebro, evaluados utilizando parches de imágenes 3D de tamaño 64 x 64 x 64 vóxeles. Las métricas que se muestran incluyen exactitud, precisión, recuperación (sensibilidad), especificidad, puntuación F1, coeficiente de dados, intersección sobre unión y similitud de volumen. Los resultados reflejan la variabilidad entre los parches, ofreciendo información localizada sobre el rendimiento del modelo y destacando la heterogeneidad espacial dentro de los volúmenes de tejido hepático 3D. Abreviatura: IoU = Intersección sobre Unión. Haga clic aquí para descargar este archivo.
Figura complementaria S5: Superposición de resultados de segmentación en imágenes originales de microscopía de fluorescencia 3D de canalículos biliares. Se muestran cortes de imágenes representativas de conjuntos de datos de microscopía de fluorescencia 3D de canalículos biliares en hígado de ratón con máscaras de segmentación superpuestas en rojo. Las máscaras predichas de los modelos 3D U-Net y Attention U-Net se superponen a las imágenes originales de microscopía en escala de grises para evaluar visualmente la precisión de la segmentación. Se presentan diez imágenes de ejemplo para ilustrar la capacidad de los modelos para capturar diversas características morfológicas y manejar la variabilidad de la señal en diferentes regiones de tejido. Haga clic aquí para descargar este archivo.