3 июля 2025

eur = 92.68 -0.07 (-0.07 %)

btc = 109 250.00$ 3 027.61 (2.85 %)

eth = 2 538.60$ 107.92 (4.44 %)

ton = 2.88$ 0.09 (3.12 %)

usd = 78.65 0.24 (0.30 %)

eur = 92.68 -0.07 (-0.07 %)

btc = 109 250.00$ 3 027.61 (2.85 %)

Nvidia научила нейросеть анимировать 3D-модель лица на основе голоса

1 минута на чтение
Nvidia научила нейросеть анимировать 3D-модель лица на основе голоса

Компания Nvidia научила нейросеть анимировать 3D-модель лица, используя для этого только голос. Технологию назвали Audio2Face, она реализует процесс автоматического монтажа.

Инструмент работает на открытой платформе физически корректного моделирования в реальном времени NVIDIA Omniverse. Программа берёт аудиофайл и создаёт на модели удивительно хорошо совпадающую анимацию, хорошо справляясь с большинством языков.

Демонстрационная версия использует модель персонажа Digital Mark, но для работы можно взять лицо с любыми чертами. Также анимацию, предназначенную для одного персонажа, можно перенести на другого — например, с человека на носорога.

Nvidia научила нейросеть анимировать 3D-модель лица на основе голоса

Компания начала выкладывать демонстрационные видео и обучающие ролики весной 2021 года, а теперь на сайте компании можно скачать открытую бета-версию программы. Технология может создавать анимацию как на основе готового файла, так и в реальном времени. Для этого нужно загрузить в приложение уже имеющуюся звуковую дорожку или говорить в микрофон.

Читать первым в Telegram-канале «Код Дурова»

Важные новости коротко — от GigaChat Max 
1-bg-изображение-0
img-content-1-изображение-0

GigaChat Max: коротко о главном

Как изменился Код Дурова вместе с GigaChat Max?

Узнай о всех возможностях в FAQ-статье 
e0b6fd34-769f-4450-8382-61b93987619e-изображение-0

GigaChat Max: коротко о главном

Глава Сбербанка не видит никаких перспектив цифрового рубля

Полная версия 
c0828077-7974-47a3-b9f3-c1236a1601b4-изображение-0

GigaChat Max: коротко о главном

Apple начала тестировать первый складной iPhone

Полная версия 

Реализовано через GigaChat Max 

Сейчас читают
Карьера
Блоги 369
OTP Bank
Т-Банк
Газпромбанк
X5 Tech
билайн
Сбер
МТС
Яндекс Практикум
Ozon Tech
Циан

Пользуясь сайтом, вы соглашаетесь с политикой конфиденциальности
и тем, что мы используем cookie-файлы