A NVIDIA é o Audio2face de código aberto, sua ferramenta movida a IA que gera animações faciais realistas para avatares 3D-todos baseados na entrada de áudio. A mudança significa que os desenvolvedores agora podem usar a ferramenta e sua estrutura subjacente para criar caracteres 3D realistas para seus jogos e aplicativos.
O Audio2face da NVIDIA funciona analisando os “recursos acústicos” de uma voz, permitindo que ela gere dados de animação que ele mapeia para as expressões faciais e o movimento dos lábios do Avatar 3D. A empresa observa que os desenvolvedores podem usar a ferramenta para criar caracteres 3D para conteúdo pré-roteirizado, bem como para transmissões de vida.
Alguns desenvolvedores já usaram o Audio2face em seus jogos, incluindo Chernobylite 2: Zona de exclusão Creator Farm51, bem como os desenvolvedores de Alien: Edição Evoluída por Incursão Rogue.
Além de abastecer os modelos Audio2face e os kits de desenvolvimento de software, a NVIDIA está disponibilizando o quadro de treinamento da ferramenta, permitindo que os usuários ajustem seus modelos para diferentes casos de uso.
Fonte -Theverge
