HunyuanVideo-Foley — генерация звука для видео
habr.comВ видео-генерации давно есть проблема: ролик выглядит реалистично, но без синхронного звука всё ломается. Tencent сделали новую систему — HunyuanVideo-Foley.
Она умеет генерировать звук для видео так, чтобы он совпадал и по динамике, и по смыслу.Генерирует звуковое сопровождение для видео с нуля, без готовых библиотек эффектов.Учитывает контекст сцены: если персонаж идёт по снегу — будут шаги со скрипом, если летит космический корабль — гул турбин.Может создавать фоновую атмосферу (шум улицы, шелест деревьев, ветер и т.
