Компания Lightricks открыла исходный код модели видеоанализа на основе ИИ LTX-2
habr.comИзраильская компания Lightricks открыла исходный код своей модели LTX-2 с 19 миллиардами параметров. Система генерирует синхронизированный аудио-видеоконтент на основе текстовых описаний и, как утверждается, работает быстрее, чем конкуренты.Согласно техническому отчету, модель генерирует до 20 секунд видео с синхронизированным стереозвуком из одного текстового запроса.
Это включает в себя синхронизированную с речью речь, фоновые звуки, звуковые эффекты и музыку, подобранную к каждой сцене. Полная версия LTX-2 достигает разрешения 4K с частотой до 50 кадров в секунду, сообщает Lightricks.Исследователи утверждают, что существующие подходы к генерации аудиовизуального контента принципиально ошибочны.
