Google представила нейросеть VLOGGER для генерации анимированных роликов с реалистичной мимикой человека по фотографии
habr.comGoogle разработала нейросеть VLOGGER, которая способна генерировать анимированные ролики говорящего человека по одной статической фотографии и записи голоса.Нейросеть генерирует движение губ, моргание глаз, жесты руками и наклоны головы.
VLOGGER также можно использовать, чтобы отредактировать уже готовое видео (например, синхронизировать движения губ человека с речью на другом языке).«Наша цель — создать фотореалистичное видео переменной длины, изображающее речь целевого человека, включая его голову и жесты.