Новый метод HOST: робот учится навыку по одному видео за 29 секунд без дообучения

Новый метод HOST: робот учится навыку по одному видео за 29 секунд без дообучения

Исследовательская группа, связанная с компанией X Square Robot, представила метод HOST (Human-to-robot One-Shot Skill AcquisiTion). Разработка позволяет роботу освоить новый навык, просмотрев всего одно видео с человеком, и сразу применить его без изменения весов обученной нейросети. По данным авторов, среднее время усвоения составило 29 секунд, а успешность — 62%.

Ключевая особенность HOST в том, что демонстрация не используется как новый обучающий набор. Вместо этого система превращает видео в контекстную подсказку для уже обученной, но замороженной модели. Это и обеспечивает скорость: роботу не требуется циклов дообучения и множества повторений с разметкой.

Механика работы выглядит так. Сначала система оценивает, на каком этапе выполнения задачи находится человек на видео — например, перекладывает предмет из одной ёмкости в другую. Затем HOST предсказывает, как эта же стадия должна выглядеть с точки зрения самого робота, переводя демонстрацию в его собственную сенсорику. После этого выводится цепочка действий, которая должна привести к аналогичному результату.

Авторы сравнили HOST с двумя базовыми ситуациями. Без подсказки (zero-shot) робот справлялся с задачей в 17% случаев. При тонкой настройке на 50 демонстрациях успех выше, но процесс занимает в 507 раз больше времени. HOST улучшает результат на 45 процентных пунктов по сравнению с zero-shot, сохраняя скорость одноразового просмотра.

При этом 62% означают, что почти в четырёх случаях из десяти робот ошибается. Тесты проводились на собственных платформах и задачах разработчиков, без проверки на чужих роботах, в незнакомых помещениях или с другими типами объектов. До промышленной надёжности, по оценке авторов, ещё далеко.

Практический интерес для инженеров-робототехников представляет сам подход: замороженная политика, управляемая демонстрацией на этапе вывода, без циклов оптимизации. Если другие исследовательские группы воспроизведут результат и поднимут успешность до 85–90%, HOST может стать шаблоном для быстрой перенастройки промышленных манипуляторов.