INFP: Audio-Driven Interactive Head Generation in Dyadic Conversations
Bytedance продолжают изобретать способы оживлять картинки
Интерактивная генерация головы на основе звука для диадических (парных) разговоров
Получив две дорожки диалога и одно портретное изображение произвольного агента, INFP динамически синтезирует вербальные, невербальные и интерактивные видео агента с реалистичной мимикой и ритмичными движениями позы головы.
Короче, заставит портрет говорить, петь, человечно слушать
Работает в реальном времени, 40 fps на Nvidia Tesla A10
Применимо например для видеоконференций
Код ждем
#audio2video #talkinghead #image2video #portraitanimation #realtime
Bytedance продолжают изобретать способы оживлять картинки
Интерактивная генерация головы на основе звука для диадических (парных) разговоров
Получив две дорожки диалога и одно портретное изображение произвольного агента, INFP динамически синтезирует вербальные, невербальные и интерактивные видео агента с реалистичной мимикой и ритмичными движениями позы головы.
Короче, заставит портрет говорить, петь, человечно слушать
Работает в реальном времени, 40 fps на Nvidia Tesla A10
Применимо например для видеоконференций
Код ждем
#audio2video #talkinghead #image2video #portraitanimation #realtime
group-telegram.com/GreenNeuralRobots/5792
Create:
Last Update:
Last Update:
INFP: Audio-Driven Interactive Head Generation in Dyadic Conversations
Bytedance продолжают изобретать способы оживлять картинки
Интерактивная генерация головы на основе звука для диадических (парных) разговоров
Получив две дорожки диалога и одно портретное изображение произвольного агента, INFP динамически синтезирует вербальные, невербальные и интерактивные видео агента с реалистичной мимикой и ритмичными движениями позы головы.
Короче, заставит портрет говорить, петь, человечно слушать
Работает в реальном времени, 40 fps на Nvidia Tesla A10
Применимо например для видеоконференций
Код ждем
#audio2video #talkinghead #image2video #portraitanimation #realtime
Bytedance продолжают изобретать способы оживлять картинки
Интерактивная генерация головы на основе звука для диадических (парных) разговоров
Получив две дорожки диалога и одно портретное изображение произвольного агента, INFP динамически синтезирует вербальные, невербальные и интерактивные видео агента с реалистичной мимикой и ритмичными движениями позы головы.
Короче, заставит портрет говорить, петь, человечно слушать
Работает в реальном времени, 40 fps на Nvidia Tesla A10
Применимо например для видеоконференций
Код ждем
#audio2video #talkinghead #image2video #portraitanimation #realtime
BY Нейронавт | Нейросети в творчестве
Share with your friend now:
group-telegram.com/GreenNeuralRobots/5792