На основе визуализации в светлом поле и машинного обучения можно интеллектуально контролировать и оптимизировать общий процесс дифференциации. На этапе ПСК мы разработали ML-модель, которая могла бы предсказать окончательную эффективность дифференцировки в соответствии с морфологическими особенностями исходных колоний ПСХ, чтобы определить наиболее подходящий или подходящий момент времени для начала дифференцировки (рис. 4A, B). Эффективность дифференцировки, предсказанная моделью случайного леса, сильно коррелирует с истинной эффективностью дифференцировки ( r Пирсона = 0,76, P < 0,0001) (рис. 4B). Обученная модель также выделяет признаки, которые наиболее важны для дифференциации. Среди всех морфологических признаков колонии стандартное отклонение, минимальное и минимальное/максимальное отношение межцентровых контурных расстояний (ПЗС), а также длина окружности, площадь, отношение площади к окружности, выпуклость и круглость являются 8 признаками с наибольшим весом. Взаимосвязь между этими особенностями и конечной эффективностью позволяет предположить, что первоначальные колонии ПСК с умеренной площадью и более длинными неровными перифериями, как правило, обладают более высокой эффективностью дифференцировки (рисунок 4А), что вдохновляет нас на повышение эффективности дифференцировки за счет увеличения времени обработки раствора для разложения с получением более мелких колоний с более длинными и неровными границами (см. этап протокола 1.3.1). Мониторинг колоний ПСХ на основе машинного обучения и оптимизированные операции пассирования клеток реализуют оптимизацию исходного состояния клетки.
На I стадии сердечной дифференцировки мы оценивали и корректировали дозу CHIR (индуктора для ранней сердечной дифференцировки) с помощью ML. Используя логистическую регрессию, доза CHIR может быть оценена на ранней стадии с использованием 0-12-часовых покадровых изображений яркого поля. Классификатор логистической регрессии достигает точности 93,1 %, точности 88,7 %, полноты 94,5 %, оценки F1 91,1 % и 97,2 % AUC при выборе длительности CHIR в 24 часа. Оценки отклонения (прогнозируемый результат) сильно коррелируют с «концентрацией ΔCIR» (истинный результат) для каждого условия дозы CHIR в экспериментах ( r Пирсона = 0,82, P < 0,0001) (рис. 4C, D), что позволяет предположить, что прогноз ML может отражать отклонение доз CHIR от оптимальных. При ранней оценке доз CHIR мы можем скорректировать продолжительность или концентрацию лечения CHIR до оптимального значения до 48 ч, что позволяет нам быстро исправить траекторию неправильно дифференцированной клетки и поддерживать дифференцировку CM с высокой эффективностью.
Мы также построили ML-модели для информативного распознавания CPC и CM по светлопольным изображениям на стадии II и III дифференцировки (рис. 5A-D). Вводя изображения живых клеток в светлом поле, обученные модели машинного обучения могут предсказывать региональное распределение ЦПК и КМ и оценивать окончательную эффективность дифференцировки неинвазивным способом. Для распознавания CPC маски сегментации CPC, предсказанные с помощью ResNeSt и Grad-CAM, совпадают с масками, аннотированными вручную (рис. 5A), со средним значением IoU 59,0%. Прогнозируемая доля областей ЦПК также может служить индикатором итоговой эффективности дифференцировки (r Пирсона = 0,88, P < 0,0001) (рисунок 5B). Для распознавания CM модель pix2pix может генерировать флуоресцентные изображения cTnT, которые аналогичны истинным (экспериментально полученным) флуоресцентным изображениям cTnT (рисунок 5C), с высокой корреляцией между прогнозируемым и истинным индексом эффективности дифференцировки всей скважины (r Пирсона = 0,93, P < 0,0001) (рисунок 5D). Такой подход позволяет избежать необратимых повреждений клеток, вызванных иммунофлуоресцентным окрашиванием или сортировкой в потоке. На основе фотоактивированного зонда (DACT-1) мы успешно добились эффективной регионально-селективной очистки CPC без биомаркеров (рис. 5E, F), что позволило проводить очистку нужного типа клеток в режиме реального времени в процессе дифференцировки.
Таким образом, используя визуализацию в светлом поле живых клеток и ML, методология реализует прогнозирование клеточной линии в реальном времени и оценку эффективности во всем процессе дифференцировки, модулируя и стабилизируя дифференцировку PSC.

Рисунок 1: Схема рабочего процесса дифференциации CM с помощью машинного обучения. Экспериментатор выполняет кардиологическую дифференцировку и получает покадровые изображения светлопольных клеток с микроскопа; изображения на каждом этапе дифференцировки КМ передаются обученным ML-моделям для прогнозирования; Используя прогноз в качестве обратной связи, экспериментаторы модулируют и оптимизируют схему дифференцировки в режиме реального времени для достижения стабильной и высокоэффективной дифференцировки. Масштабная линейка = 1 мм. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.

Рисунок 2: Получение изображения клетки. (A) Пример светлопольного изображения живой клетки со стадии PSC с 70% слиянием клеток. (B) Пример светлопольного изображения живых клеток со стадии ПСК с 80-90% слиянием клеток. (C) Пример светлопольного изображения живых клеток со стадии CPC. (D) Пример светлопольного изображения живых клеток со стадии КМ. (E) Пример яркого поля и флуоресценции после иммунофлуоресцентного окрашивания из одного и того же поля зрения. (А-Е) Масштабная линейка = 250 мкм. Сокращения: PSC = плюрипотентная стволовая клетка; CPC = сердечная прогениторная клетка; КМ = кардиомиоцит; cTnT = сердечный тропонин T. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этого рисунка.

Рисунок 3: Скриншоты для использования ML. (A-C) Репрезентативные скриншоты для ML на этапе PSC, включая (A) подготовку набора данных, (B) тестирование производительности модели и (C) интерпретацию важности признаков. (Д-Ж) Репрезентативные скриншоты для машинного обучения на этапе I, включая (D) подготовку набора данных и (E,F) оценку модели. (Г-И) Репрезентативные скриншоты для машинного обучения на этапе II, включая (G) подготовку набора данных, (H) обучение модели и (I) оценку модели. (Дж-Л) Репрезентативные скриншоты для машинного обучения на этапе III, включая (J) обучение модели и (K,L) оценку модели. Сокращения: ML = машинное обучение; PSC = плюрипотентная стволовая клетка. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.

Рисунок 4: Репрезентативные результаты на этапе PSC и этапе I для дифференциации CM на основе ML. (A) Результаты визуализации признаков на этапе PSC. Показана взаимосвязь между эффективностью дифференцировки и восемью наиболее важными признаками. Важность функции определяется обученной моделью машинного обучения. Диапазон каждой функции разделен на 20 ячеек. Дифференцировка Показатели эффективности для скважин в каждом бункере усредняются и отображаются цветом. Тенденция изменения цвета показывает, как каждый морфологический признак влияет на итоговую эффективность дифференцировки. Эти результаты в совокупности свидетельствуют о том, что умеренная площадь, более длинные окружности, более изменяющиеся расстояния между центральным контуром, более низкая окружность и более высокая выпуклость более благоприятны для дифференцировки. (B) Оценка эффективности ML на стадии PSC путем корреляционного анализа между истинным и прогнозируемым индексом эффективности дифференциации. Высокая корреляция указывает на то, что дифференцировочный потенциал колоний ПСК можно предсказать по его морфологическим особенностям. n = 584 скважины. (C) Оценка эффективности ML на стадии I с использованием корреляционного анализа между прогнозируемыми показателями отклонения и истинными концентрациями ΔCHIR для каждого условия дозы CHIR в партии. Оценка отклонения (в диапазоне от -1 до 1) прогнозируется неинвазивным методом машинного обучения с использованием потоков светлопольного изображения в диапазоне 0-12 часов. Концентрации ΔCHIR (..., -4 μM, -2 μM, 0, 2 μM, 4 μM, ...) экспериментально определяются по окончательным результатам дифференцировки для измерения фактического отклонения от оптимальных условий для каждого условия CHIR. Прогнозируемые оценки отклонения являются весьма показательными для фактических концентраций ΔCHIR, что позволяет предположить, что прогноз ML может служить сигналом для оценки и корректировки дозы CHIR. Синие и красные квадраты обозначают условия недостаточной и передозировки соответственно. (D) Оценка эффективности машинного обучения на этапе I с использованием межпакетной валидации. В каждом раунде одна партия используется для тестирования, а другие — для обучения, чтобы проверить способность моделей машинного обучения к обобщению на новых пакетах. Проведен корреляционный анализ между прогнозируемыми показателями отклонения и истинными концентрациями ΔCHIR (при длительности CHIR 24 ч). Цветом точек обозначены различные тестовые партии. n = 20 доз CHIR. Эта цифра была взята из Yang et al.35. Сокращения: ML = машинное обучение; PSC = плюрипотентная стволовая клетка; CHIR = CHIR99021. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этой цифры.

Рисунок 5: Репрезентативные результаты на этапе CPC и CM для дифференциации CM на основе ML. (A) Типичный результат ML для распознавания CPC на этапе II. На дисплее показаны изображения истинной флуоресценции cTnT на 12-й день (слева), вручную аннотированные области CPC (в центре) и области CPC, предсказанные ML с помощью изображений светлого поля на 6-й день (справа). Прогнозируемые результаты очень похожи на реальные экспериментальные результаты. Масштабная линейка = 1 мм. (B) Оценка эффективности ML на этапе II с использованием корреляционного анализа между истинным индексом эффективности дифференцировки (по флуоресцентным меткам 12-го дня cTnT) и прогнозируемым процентным соотношением областей CPC (по светлопольным изображениям 6-го дня). Высокая корреляция позволяет предположить, что эффективность дифференцировки может быть предсказана неинвазивным способом на стадии II. Истинные индексы эффективности дифференцировки нормализованы в диапазоне от 0% до 100%. n = 35 скважин. (C) Типичный результат ML для распознавания КМ на стадии III. Показаны истинные результаты флуоресценции cTnT (слева), прогнозируемые результаты флуоресценции cTnT (в центре) и тепловая карта для сравнения прогнозируемой и истинной интенсивностей флуоресценции в каждом пикселе (справа). Размер флуоресцентных изображений изменяется до 512 x 512 пикселей, а числа в ячейках тепловой карты представляют частотное количество пикселей на 100. Большая доля пикселей расположена вдоль диагональной линии тепловой карты, что указывает на то, что прогнозируемая и истинная интенсивности флуоресценции близки. Масштабная линейка = 1 мм. (D) Оценка эффективности ML на этапе III с использованием корреляционного анализа между истинным и прогнозируемым индексами эффективности дифференцировки. Истинные и прогнозируемые индексы эффективности дифференцировки нормализованы в диапазоне от 0% до 100%. n = 36 скважин. (E) Эффект очистки CPC на 6-й день с помощью изображения. После FACS и 6-дневного культивирования немеченые изображения-ЦПК демонстрируют высокую чистоту КМ по сравнению с мечеными DACT-1 не-ЦПК и клетками контрольной группы (CTL). Масштабная линейка = 100 мкм. (F) Количественный анализ эффекта очистки путем сравнения процентного соотношения клеток cTnT+ в (E). Данные – это средства ± SD. n = 5 изображений. * < 0,05; P < 0,0001 с помощью одностороннего ANOVA с последующим тестом множественных сравнений Даннетта. Эта цифра была взята из Yang et al.35. Сокращения: ML = машинное обучение; PSC = плюрипотентная стволовая клетка; CPC = сердечная прогениторная клетка; КМ = кардиомиоцит; cTnT = сердечный тропонин T. Пожалуйста, нажмите здесь, чтобы просмотреть увеличенную версию этого рисунка.
| Обнаружена проблема | Возможная причина | Решение |
| Модели машинного обучения плохо работают на обучающей выборке. | 1. Обучение ML-модели плохо сходится. 2. Для традиционного машинного обучения извлеченные особенности изображения недостаточно информативны, чтобы отражать состояния клеток и родословные. 3. Для глубокого обучения возможности представления спроектированной нейронной сети недостаточно для выполнения задачи. 4. Само задание сложно освоить. | 1. Настройте гиперпараметры, например, увеличьте количество эпох и измените скорость обучения. 2. Наблюдайте за изображениями, чтобы найти морфологические подсказки о состояниях клеток. Проектирование биологически правдоподобных особенностей. 3. Модифицируйте архитектуру сети для увеличения ее сложности. 4. Изучите набор данных и убедитесь, что особенности целевых ячеек можно легко идентифицировать. Если модель не справляется с задачей, попробуйте применить машинное обучение на этапе, где подсказки визуализации более ясны, или спроектируйте более простую задачу. |
| Модели машинного обучения плохо работают на обучающем наборе, но не на тестовом. | 1. Модель переплетает обучающую выборку. | 1. Обогатите обучающие наборы данных и повторно обучите модель. Увеличьте разнообразие обучающих наборов данных, включив в них больше клеточных линий, условий дифференцировки и визуализации. Для традиционного машинного обучения использование выбора признаков для уменьшения количества входных признаков также может увеличить способность модели к обобщению. |
| Модели машинного обучения плохо работают с новыми партиями или новыми клеточными линиями. | 1. Изменение параметров микроскопа и визуализации. 2. Морфологические особенности разных клеточных линий могут быть различными. | 1. Убедитесь, что устройство визуализации такое же, как и во время обучения модели. 2. Сбор помеченных данных, полученных от новых клеточных линий и/или новых условий визуализации, переобучение или тонкая настройка моделей машинного обучения. |
| Модуляция процесса дифференцировки с помощью машинного обучения, по-видимому, не улучшает результат дифференцировки. | 1. Вывод машинного обучения неточен. 2. Существуют проблемы с экспериментальными реагентами или процедурами. 3. Клеточная линия имеет основные проблемы, не способные к дифференцировке. | 1. Попробуйте выполнить описанные выше шаги по устранению неполадок. 2. Осмотрите лабораторные реактивы и экспериментальные методики. 3. Поменяйте клеточные линии. |
| Загрязнение клеточного типа все еще существует после очистки. | 1. Неточные результаты прогнозирования. 2. Были инкапсулированы некоторые нежелательные клетки, расположенные на краю очищенного участка. | 1. Оптимизируйте результаты, прогнозируемые с помощью машинного обучения. 2. Используйте результаты, предсказанные с помощью ML, более консервативно, т.е. целесообразно уменьшайте размер области КМ. |
| Плохое состояние клеток после очищения. | 1. Фототоксичность лазера. 2. Медленный процесс работы. 3. Повреждение клеток, вызванное пищеварением. 4. Повреждение клеток, вызванное процессом сортировки в потоке. | 1. Устраните нежелательные клетки с помощью лазерного облучения вместо клеток-мишеней. 2. Более быстрая работа. 3. Скорректируйте метод пассирования, например, снизьте концентрацию пищеварительных ферментов. 4. Отрегулируйте метод сортировки, например, уменьшите скорость потока в ячейке, установленную в процессе сортировки. |
Таблица 1: Таблица устранения неполадок.