Предобучение на симуляции ODE решает проблему нехватки данных в биопроизводстве

Группа исследователей представила на arXiv препринт, посвященный применению глубокого обучения в биопроизводстве. Главная проблема этой области — острая нехватка данных: эксперименты с биореакторами дороги, длятся неделями и редко публикуются, поэтому исследователи располагают ограниченным числом измерений. Однако накоплены обширные знания в виде биокинетических моделей — обыкновенных дифференциальных уравнений (ODE), описывающих рост микроорганизмов.

Авторы впервые систематически изучили, как эти знания можно внедрить в нейронную сеть. Они сравнили два подхода: data-level prior, при котором универсальный декодер предварительно обучается на искусственных кривых, сгенерированных ODE, и architecture-level prior, где ODE встроена прямо в архитектуру нейросети.

Эксперименты на 11 наборах данных для 7 видов микроорганизмов показали, что оба метода значительно превосходят базовые модели без предварительных знаний. Ключевой вывод — эти подходы взаимозаменяемы: предобученный на симуляции декодер достигает такой же точности, как и специализированная структура с встроенной ODE, обученная на реальных данных.

Таким образом, предварительное обучение на симулированных ODE-кривых предлагает простой и эффективный рецепт для глубокого обучения в условиях дефицита экспериментов. Метод не требует сложной инженерной перестройки нейросети и может быть легко применен в различных биотехнологических задачах.

Исследование открывает путь к более широкому использованию нейросетей в биопроизводстве, где традиционно доминируют классические подходы. По мнению авторов, внедрение даже самых простых форм априорных знаний существенно повышает качество предсказаний, что может ускорить отработку биотехнологических процессов.