Runway выпустила открытую модель Praxis-1 для управления роботами

Компания Runway представила Praxis-1 — специализированную модель, предназначенную для управления робототехническими системами. Разработчики опубликовали веса и исходный код проекта под лицензией Apache 2.0, что делает технологию доступной для широкого круга исследователей и инженеров.

В основе Praxis-1 лежит использование знаний, полученных в ходе обучения на видеоданных, для последующей трансляции этих навыков в физические действия роботов. Модель уже продемонстрировала высокие результаты, заняв лидирующую позицию в категории World Action Model на бенчмарке RoboLab-120, разработанном специалистами Nvidia.

Несмотря на успехи в интерпретации визуальной информации для манипуляций, текущая версия модели имеет функциональные ограничения. В частности, Praxis-1 пока не способна самостоятельно планировать сложные последовательности действий, требующие многоэтапного логического вывода. Разработчики позиционируют текущий релиз как важный этап интеграции видео-ИИ в сферу робототехники.

Для практиков это означает появление открытого инструмента, позволяющего использовать накопленные визуальные данные для обучения агентов взаимодействию с физическим миром. Доступность кода позволяет интегрировать модель в собственные робототехнические платформы для проведения экспериментов по автоматизации движений без необходимости создания проприетарных решений с нуля.