В основе разработки лежит модель Kandinsky 5.0 Video Lite, которую дообучили на массиве видеозаписей с камер промышленных роботов и автономного транспорта. Нейросеть создает пятисекундные ролики, демонстрирующие сложные производственные операции или дорожные инциденты. Благодаря методам обучения с подкреплением система точно передает геометрию предметов и динамику их движения.
Сбер научил нейросеть Kandinsky имитировать законы физики
Роботы и беспилотные автомобили смогут учиться на синтетических данных, которые максимально приближены к реальности. Новое семейство моделей Kandinsky WM 1.0 генерирует видеоролики, где объекты и их взаимодействия подчиняются физическим законам, что позволяет разработчикам безопасно моделировать опасные ситуации и редкие сценарии без необходимости записи реальных событий.
Такой подход решает проблему дефицита данных для обучения искусственного интеллекта в автономных системах. Использование синтетики сокращает расходы на сбор информации и ускоряет подготовку алгоритмов. Разработчики уже открыли доступ к коду и весам моделей по лицензии MIT. Технологию активно внедряют в Центре робототехники Сбера и институте AIRI для совершенствования дорожных симуляторов и обучения манипуляторов.
Комментарии (0)
Пока нет комментариев. Будьте первым!