The HydroGym reinforcement learning platform for fluid dynamics

Недавно команда Стивена Л. Брантона из Вашингтонского университета (США) сообщила о платформе обучения с подкреплением HydroGym для гидродинамики. Результаты были опубликованы в журнале Nature 19 августа 2026 года.

Эффективное управление потоками жидкости критически важно в таких областях, как транспорт, энергетика и медицина, — оно позволяет увеличить подъёмную силу, снизить сопротивление, улучшить смешивание и уменьшить шум. Однако потоки крайне сложно контролировать из-за их высокой размерности, нелинейности и многомасштабной динамики, и традиционные методы с трудом справляются с этими вызовами. Обучение с подкреплением уже достигло значительных успехов в таких областях, как предсказание сворачивания белков и сложные игры, где существуют общие бенчмарки и стандартизированные среды. В гидродинамике такая инфраструктура ранее отсутствовала, поэтому каждый контроллер обычно настраивался под одну геометрию и режим работы, что затрудняло накопление, перенос и сравнение результатов.

Исследовательская группа представляет HydroGym — не зависящую от решателя платформу обучения с подкреплением, предоставляющую более 60 верифицированных общедоступных сред для управления потоками, охватывающих широкий спектр течений от типичных ламинарных до сложных турбулентных, с систематическим изменением числа Рейнольдса от низких до высоких значений вплоть до Re = 4×10⁵, включая двумерные и трёхмерные вариации числа Маха. В этих средах агенты многократно находили устойчивые стратегии управления, включая манипуляцию пограничным слоем, подавление акустической обратной связи и перестройку турбулентного следа. Ключевым результатом является демонстрация концепции нулевого переноса (zero-shot transfer): агенты, обученные только в дешёвых суррогатных средах, были успешно развёрнуты в сложных реальных сценариях, например, на трёхмерном сегменте крыла.

По сравнению с прямой оптимизацией на крыле, исследователи добились снижения локального поверхностного трения на 38% при одновременном сокращении затрат на исследование на четыре порядка. Поскольку этот перенос использует сходство физики вблизи стенки, широта обобщения остаётся предметом дальнейшего изучения, что открывает новые пути для исследований обобщения стратегий в вычислительно дорогих средах моделирования. Предоставляя общую и расширяемую основу для воспроизводимых исследований, HydroGym переводит управление потоками от изолированных отдельных исследований к скоординированным коллективным действиям.