Нейросеть научила президента правдоподобно говорить под фонограмму
И теперь у каждого может появиться цифровой двойник.
Алгоритм исследователей из Вашингтонского университета позволяет создавать реалистичное видео с говорящим человеком на основе записи какого-либо голоса.
Новая разработка может улучшить видеосвязь, кинематограф и виртуальную реальность. Система основана на нейросети с обратной связью. Для обучения разработчики показали программе 17 часов видео с выступлениями Барака Обамы. Затем из записей извлекли отдельные фонемы. На их основе воссоздали мимику и артикуляцию. Цифровую область рта наложили на другой видеоряд, а движения губ, глаз и головы синхронизировали до естественного вида.
В демонстрационном ролике на видеоряд обращения Барака Обамы к американским гражданам добавлены аудиодорожки из других его выступлений.
Технология синтеза речи для видео существовала и раньше. Однако для этого использовались записи людей в экспериментальных условиях. Учёным впервые удалось совместить естественные и различные аудио- и видеозаписи реального человека.
Читать по теме:
#959595;">Хотите подсказать новость или поделиться экспертным мнением? Пишите: #959595;">news@cossa.ru
#959595;">Автор иконки на тизере: #959595;">Simon Child#959595;">, Noun Project

Упускаете лиды?
Уже сегодня ваш трафик может стать в разы полезнее — при малых затратах по сравнению с «большой» рекламной кампанией.
Ведь в идеале вы хотите работать со всеми, кто вообще интересовался продуктом. А так можно было?