Помнит минуты: релиз Matrix-Game 3.0, ИИ-движка интерактивного видео в 720p и 40 к/с
habr.comSkywork AI выпустила Matrix-Game 3.0 – новую версию интерактивной мир-модели с открытым исходным кодом. Главные цифры релиза: генерация видео в разрешении 720p со скоростью 40 кадров в секунду на модели с 5 млрд параметров, а также поддержка долгосрочной памяти, удерживающей контекст на протяжении минуты и более.Модель уже доступна на GitHub и Hugging Face.
Разработчики выложили не только веса, но и код, а также подробный технический отчет. Как и в случае с Matrix-Game 2.0, которая легла в основу мультиплеерной мир-модели Solaris от команды Saining Xie, новый релиз продолжает традицию полной открытости.Архитектура построена вокруг трёх компонентов:Промышленный движок данных – комбинация синтетических сцен на Unreal Engine, автоматически собранных данных из AAA-игр и аугментированных реальных видеороликов.
