HeyGen: Создание реалистичных видео с заменой фона и клонированием голоса.
Новая модель HeyGen позволяет создавать реалистичные видео с заменой фона и клонированием голоса. Пользователь загрузил в нейросеть 30-секундный ролик, снятый дома на фоне стены. Модель запомнила лицо пользователя и клонировала его голос.
В результате было создано видео, где пользователь переместился в Париж. Видео получилось достаточно реалистичным, однако была отмечена неточность в отображении щелей между зубами.
С клонированием голоса возникли некоторые проблемы. Слова в озвучке пострадали, особенно во второй части видео. Предполагается, что отдельная запись и последующий монтаж аудио могут дать лучший результат, чем полная обработка нейросетью.
В целом, опыт работы с HeyGen оказался положительным. Пользователь планирует создать более качественный контент с помощью этой модели в ближайшее время.
Ещё новости:
