Разработчики выпустили ToonCrafter — нейросеть для генерации анимационных видео
habr.comРазработчики опубликовали нейросеть ToonCrafter, которая интерполирует два мультипликационных кадра, заполняя хронометраж между ними.
В итоге получаются короткие анимационные видео.ToonCrafter поддерживает несколько режимов генерации:в базовом режиме пользователь передаёт на вход начальный и конечный кадры анимации и получает короткий ролик;вместе с кадрами можно передать скетч с пошаговой анимацией, чтобы нейросеть использовала его в качестве шаблона;можно передать скетч с пошаговой анимацией и один готовый кадр в качестве референса, а нейросеть раскрасит набросок, используя цвета из примера.Пока ToonCrafter может генерировать видео с разрешением 320×512 пикселей.
