A IA generativa é capaz de criar expressões verbais e faciais mais realistas para humanos digitais do que nunca.
Esta semana, na GDC 2024, a NVIDIA anunciou que os principais desenvolvedores de aplicações de IA em uma ampla gama de setores estão usando as tecnologias dos humanos digitais da NVIDIA para criar avatares realistas para aplicações comerciais e personagens de jogos dinâmicos. A NVIDIA oferece aos desenvolvedores tecnologias humanas digitais de última geração, incluindo NVIDIA ACE para fala e animação, NVIDIA NeMo para linguagem e NVIDIA RTX para renderização com ray tracing.
Os desenvolvedores apresentaram novas demonstrações de tecnologia dos humanos digitais que usaram os microsserviços do NVIDIA ACE na GDC.
Abraçando o ACE: parceiros estão transformando pixels em personalidades
Os principais desenvolvedores humanos digitais e de jogos são pioneiros em maneiras pelas quais as tecnologias ACE e IA Generativa podem ser usadas para transformar as interações entre jogadores e NPCs em jogos e aplicações.
Os desenvolvedores que adotam o ACE incluem: Convai, Cyber Agent, Data Monsters, Deloitte, HippocraticAI, IGOODI, Inworld AI, Media.Monks, miHoYo, NetEase Games, Perfect World Games, Openstream, OurPalm, Quantiphi, Rakuten Securities, Slalom, SoftServe, Tencen, Avatares da Ubisoft, UneeQ e Sindicatos.
Demonstrações mostram novas das tecnologias de humanos digitais da NVIDIA
A NVIDIA trabalhou com os desenvolvedores Inworld AI e UneeQ em uma série de novas demonstrações para mostrar o potencial das tecnologias dos humanos digitais.
A Inworld AI criou o Covert Protocol em parceria com a NVIDIA, permitindo que os jogadores se tornem detetives particulares habilidosos, ampliando as possibilidades de interações com personagens não jogáveis. A demonstração utiliza o reconhecimento automático de fala (ASR) NVIDIA Riva e os microsserviços NVIDIA Audio2Face junto com o Inworld Engine.
O Inworld Engine reúne sistemas de cognição, percepção e comportamento para criar uma narrativa envolvente junto com ambientes e arte renderizados em RTX lindamente elaborados.
UneeQ é uma plataforma de humanos digitais especializada na criação de avatares 3D de alta fidelidade com tecnologia de IA para uma variedade de aplicações empresariais. Os humanos digitais da UneeQ potencializam experiências interativas para marcas, permitindo-lhes comunicar com os clientes em tempo real para lhes dar confiança nas suas compras. A UneeQ integrou o microsserviço NVIDIA Audio2Face em sua plataforma e combinou-o com Synanim ML para criar avatares altamente realistas para uma melhor experiência e envolvimento do cliente.
Novas tecnologias NVIDIA RTX para cenas dinâmicas
A NVIDIA RTX revolucionou os jogos há vários anos, oferecendo uma coleção de tecnologias de renderização que permitem o rastreamento de caminhos em jogos e aplicativos em tempo real.
A mais recente adição, Neural Radiance Cache (NRC), é um algoritmo RTX baseado em IA para lidar com iluminação indireta em cenas totalmente dinâmicas, sem a necessidade de pré-preparar iluminação estática para geometria e materiais.
Adicionando flexibilidade para os desenvolvedores, a NVIDIA está introduzindo o Spatial Hash Radiance Cache ( SHaRC ), que oferece benefícios semelhantes ao NRC, mas sem usar uma rede neural e com compatibilidade com qualquer GPU compatível com DirectX ou Vulkan ray tracing.
RTX On: Mais Títulos RTX e DLSS 3.5
Existem agora mais de 500 jogos e aplicações RTX que revolucionaram a forma como as pessoas jogam e criam com ray tracing, NVIDIA DLSS e tecnologias alimentadas por IA. E os jogadores têm muito o que esperar com mais ray tracing completo e títulos DLSS 3.5 chegando.
Nossa mais recente inovação, o NVIDIA DLSS 3.5, apresenta a nova tecnologia DLSS Ray Reconstruction. Quando ativado, o DLSS Ray Reconstruction substitui os denoisers de ray tracing ajustados manualmente por um novo modelo de IA unificado que aprimora o ray tracing em jogos suportados, elevando a qualidade da imagem a novos patamares.
O Ray Tracing Completo e o DLSS 3.5 estão chegando para Black Myth: Wukong e NARAKA: BLADEPOINT. Portal com RTX já está disponível com RTX DLSS 3.5, aprimorando seu já belo ray tracing completo. O DLSS 3.5 com Ray Reconstruction também chegará em breve ao NVIDIA RTX Remix Open Beta, permitindo que modders adicionem tecnologias RTX como ray tracing completo e DLSS 3.5 em jogos clássicos.
Star Wars Outlaws será lançado com DLSS 3 e efeitos por ray tracing. O Ray tracing junta-se ao DLSS 3 em Diablo IV em 26 de março. The First Berserker: Khazan será lançado com DLSS 3. E Sengoku Destiny introduziu suporte para DLSS 3 e já está disponível.
Veja nosso ecossistema de parceiros na GDC
A NVIDIA e nossos parceiros apresentarão o que há de mais recente em tecnologias humanas digitais durante a semana da GDC. Aqui está um breve resumo:
- Inworld AI (Estande P1615): Os participantes terão a chance de experimentar o Covert Protocol ao vivo na GDC.
- Oracle Cloud Infrastructure (Estande S941): Veja o Covert Protocol em ação e descubra a capacidade de “assistência de código” da Retrieval Augmented Generation (RAG). Registre-se e participe de um evento de networking exclusivo com especialistas em IA da Oracle e NVIDIA no dia 21 de março, aberto a mulheres e aliados da indústria de jogos para construir conexões com vozes líderes em IA.
- Dell Technologies e International Game Developer Association (Estande S1341): teste enquanto cria um asset pronto para jogos em uma workstation com grande memória de GPU. Fale com Sophie, uma assistente com tecnologia de IA criada pela UneeQ e desenvolvida pela NVIDIA ACE. Os participantes podem ver as mais recentes ferramentas de depuração e criação de perfil para criar jogos com ray tracing na mais recente demonstração de ray tracing da Nsight Graphics .
- AWS: Os desenvolvedores podem se registrar e se juntar à NVIDIA, AWS, estúdios de jogos e parceiros de tecnologia enquanto discutem a tecnologia de jogos usada para construir, inovar e maximizar o crescimento dos jogos atuais no AWS for Games Partner Showcase em 20 de março.
Passe por estas sessões principais:
- Transformando a jogabilidade com NPCs de IA : Esta sessão com Nathan Yu, diretor de produto da Inworld AI, Rajiv Gandhi, principal arquiteto de nuvem da Oracle Cloud e Yasmina Benkhoui, líder de parcerias estratégicas de IA generativa da NVIDIA, apresentará exemplos de sucesso de desenvolvedores usando NPCs de IA. para impulsionar os principais loops e mecânicas do jogo que mantêm os jogadores envolvidos e imersos. Os participantes obterão uma compreensão mais profunda do potencial dos NPCs de IA para criar experiências novas e envolventes para os jogadores.
- Alan Wake 2: Um mergulho profundo na tecnologia de rastreamento de caminho : Esta sessão fará um mergulho profundo no ray tracing e nas tecnologias NVIDIA DLSS Ray Reconstruction implementadas em Alan Wake 2 da Remedy Entertainment
Baixe nosso guia do show para manter este resumo em mãos durante o show.
O começo
Os desenvolvedores podem começar sua jornada no NVIDIA ACE inscrevendo-se em nosso programa de acesso antecipado para obter modelos de IA em desenvolvimento.
Se você quiser explorar os modelos disponíveis, avalie e acesse o NVIDIA NIM, um conjunto de microsserviços fáceis de usar projetados para acelerar a implantação de IA generativa, para RIVA ASR e Audio2Face em ai.nvidia.com hoje mesmo.
Os algoritmos NRC e SHARC da RTXGI também estão disponíveis agora como um ramo experimental.