Nota do editor: esta postagem faz parte da nossa série semanal In the NVIDIA Studio, que celebra artistas em destaque, oferece dicas e truques criativos e demonstra como a tecnologia NVIDIA Studio melhora os fluxos de trabalho criativos. Também estamos nos aprofundando nos novos recursos, tecnologias e recursos da GPU GeForce RTX Série 40 e em como eles aceleram drasticamente a criação de conteúdo.
Os novos notebooks NVIDIA Studio de 14 polegadas, equipados com GPUs GeForce RTX Série 40 dedicadas, oferecem aos criadores portabilidade máxima com um aumento significativo no desempenho em relação à última geração. O hardware dedicado à IA chamado Tensor Cores permite tarefas que economizam tempo em aplicativos populares como o Davinci Resolve. Os núcleos de rastreamento de raios, juntamente com nossa tecnologia de renderização neural, DLSS 3, aumentam o desempenho em aplicativos de renderização 3D em tempo real, como D5 Render e NVIDIA Omniverse.
A NVIDIA também introduziu um novo método para acelerar a codificação de vídeo. A Codificação de cena simultânea ( Simultaneous Scene Encoding) envia grupos independentes de frames, ou cenas, para cada codificador NVIDIA (NVENC). Com vários NVENCs totalmente utilizados, os tempos de exportação de vídeo podem ser reduzidos significativamente, sem afetar a qualidade da imagem. O primeiro software a integrar a tecnologia é o popular aplicativo de edição de vídeo CapCut.
O Studio Driver de maio já está pronto para download. O lançamento deste mês inclui suporte para atualizações do MAGIX VEGAS Pro, D5 Render e VLC Media Player – além do CapCut – além de otimizações de modelo IA para softwares populares.
A COMPUTEX, a maior feira anual de tecnologia da Ásia, trouxe uma enxurrada de novidades NVIDIA, trazendo aos criadores novas ferramentas e desempenho da plataforma NVIDIA Studio – e muito poder de IA.
Durante seu keynote na COMPUTEX, o fundador e CEO da NVIDIA, Jensen Huang, apresentou uma nova IA generativa para dar suporte ao desenvolvimento de jogos, o NVIDIA Avatar Cloud Engine (ACE) for Games. A plataforma adiciona inteligência a personagens não jogáveis (NPCs) em jogos, com interações de linguagem natural alimentadas por IA.
A demonstração da Kairos – uma aventura em conjunto com a Convai liderada pelo diretor criativo da NVIDIA, Gabriele Leone – demonstra como um único modelo pode se transformar em um personagem vivo, respirando e realista nessa semana no In the NVIDIA Studio.
Ultraportátil e com performance sensacional
Os notebooks NVIDIA Studio, equipados com a arquitetura NVIDIA Ada Lovelace, são os notebooks mais rápidos do mundo para criar e jogar.
Pela primeira vez, o desempenho e tecnologias GeForce RTX chegam a dispositivos de 14 polegadas. No processo, está transformando o mercado de ultraportáteis, oferecendo a melhor combinação de desempenho e portabilidade.
Essas potências criativas específicas fazem tudo. Apoiada pelo NVIDIA Studio, a plataforma sobrecarrega mais de 110 softwares criativos, oferece estabilidade duradoura com NVIDIA Studio Drivers e inclui um poderoso conjunto de software de estúdio com inteligência artificial, como NVIDIA Omniverse, Canvas e Broadcast.
As tecnologias Max-Q de quinta geração trazem um conjunto avançado de tecnologias baseadas em IA que otimizam o desempenho, a potência e a acústica do notebook para máxima eficiência. A duração da bateria aumenta em até 70%. O DLSS agora está otimizado para notebook , oferecendo aos criadores um desempenho de renderização 3D incrível com DLSS 3 optical multi-frame generation e super resolution em Omniverse e D5 Render, e em jogos de sucesso como Cyberpunk 2077.
A medida que o mercado de notebooks ultraportáteis esquenta, os fabricantes de notebooks oferecem aos criadores mais opções do que nunca. Os modelos anunciados recentemente, com mais a caminho, incluem o Acer Swift X 14, ASUS Zenbook Pro 14, GIGABYTE Aero 14, Lenovo Slim Pro 9i 14 e MSI Stealth 14.
Visite a Studio Shop para obter os mais recentes drivers NVIDIA Studio equipados com GeForce RTX e explore a variedade de produtos Studio de alto desempenho.
Enconding de cena Simultânea
O lançamento recente do Video Codec SDK 12.1 adicionou suporte para diversos enconders, o que pode reduzir o tempo de exportação pela metade. Nosso método de codificação anunciado anteriormente — que divide um quadro e envia cada seção para um codificador — agora tem uma API que os desenvolvedores de softwares podem expor a seus usuários finais. Anteriormente, a codificação dividida seria ativada automaticamente para vídeo 4K ou superior e as predefinições de exportação mais rápidas. Com esta atualização, os desenvolvedores podem simplesmente permitir que os usuários ativem essa opção.
Video Codec SDK 12.1 também apresenta um novo método de codificação: codificação de cena simultânea. Os softwares de vídeo podem dividir grupos de imagens ou cenas à medida que são enviadas para o pipeline de renderização. Cada grupo pode então ser renderizado independentemente e ordenado corretamente na saída final.
O resultado é um aumento significativo na velocidade de codificação — aproximadamente 80% para codificadores duplos e aumentos ainda maiores quando mais de dois NVENCs estão presentes, como na GPU profissional NVIDIA RTX 6000 Ada Generation. A qualidade da imagem também é aprimorada em comparação com os métodos atuais de codificação dividida, em que os quadros individuais são enviados para cada codificador e, em seguida, agrupados novamente na saída final.
Os usuários do CapCut serão os primeiros a experimentar esse benefício em GPUs RTX com dois ou mais encoders, começando com a versão atual do software, que já está disponível.
Diversas novidades no Studio Driver de maio
O Studio Driver de maio apresenta atualizações e otimizações significativas.
A MAGIX realizou uma parceria com a NVIDIA para mover sua linha de modelos VEGAS Pro AI para WinML, permitindo que os editores de vídeo apliquem efeitos de IA muito mais rapidamente.
O driver também otimiza recursos de IA para softwares executados em WinML, incluindo Adobe Photoshop, Lightroom, MAGIX Vegas Pro, ON1 e DxO, entre muitos outros.
O render de Ray Tracing em tempo real D5 Render também adicionou NVIDIA DLSS 3, oferecendo uma experiência de janela de visualização mais suave para navegar em cenas com movimento superfluido, beneficiando massivamente arquitetos, designers, designers de interiores e todos os artistas 3D profissionais.
NVIDIA RTX Video Super Resolution — tecnologia de upscaling de vídeo que usa AI e RTX Tensor Cores para melhorar a qualidade do vídeo — agora está totalmente integrada ao VLC Media Player, não exigindo mais um download separado. Saiba mais aqui.
Baixe GeForce Experience ou NVIDIA RTX Experience para obter a maneira mais fácil de atualizar sua máquina e ser notificado sobre os últimos lançamentos de driver.
Chegou o ACE for Games
Durante o keynote do fundador e CEO da NVIDIA, Jensen Huang, na COMPUTEX, apresentou o NVIDIA ACE for Games, uma nova invenção que adiciona inteligência aos NPCs em jogos com interações de linguagem natural alimentadas por IA.
Os desenvolvedores e estúdios de jogos podem usar o ACE for Games para criar e implantar modelos personalizados de IA de fala, conversação e animação em seus softwares e jogos. A tecnologia IA pode transformar mundos inteiros, dando nova vida a indivíduos, grupos ou personagens de uma cidade inteira – o céu é o limite.
O ACE for Games se baseia na tecnologia do NVIDIA Omniverse, uma plataforma aberta de desenvolvimento para criar e operar aplicativos metaversos, incluindo modelos de base de IA otimizados para fala, conversação e animação de personagens.
Isso inclui o NVIDIA NeMo para IA conversacional ajustada para personagens de jogos, NVIDIA Riva para reconhecimento automático de fala e conversão de texto em fala e Omniverse Audio2Face para criar instantaneamente animações faciais expressivas de personagens de jogos para corresponder a qualquer faixa de fala. O Audio2Face possui conectores Omniverse para Unreal Engine 5, para que os desenvolvedores possam adicionar animação facial diretamente aos personagens MetaHuman.
Ver para Crer: Kairos Demo
Huang estreou com o ACE for Games durante a COMPUTEX 2023 – e forneceu uma prévia do futuro dos jogos – em uma demonstração chamada Kairos.
A Convai, uma startup da NVIDIA Inception, é especializada em IA conversacional de ponta para mundos de jogos virtuais. A NVIDIA Lightspeed Studios, liderada pelo Diretor Criativo e artista 3D Gabriele Leone, criou a cena e a demonstração incrivelmente realistas. Juntos, eles mostraram a oportunidade que os desenvolvedores têm de usar o NVIDIA ACE for Games para criar NPCs.
Na demo, os jogadores interagem com Jin, dono e proprietário de uma loja de ramen. A loja fotorrealista foi modelada tendo como referência uma loja virtual de ramen construída no NVIDIA Omniverse.
Para isso, um artista da NVIDIA viajou para um restaurante de ramen real em Tóquio e coletou mais de 2.000 imagens e vídeos de referência em alta resolução. Cada um capturou aspectos das áreas distintas da cozinha para cozinhar, limpar, preparar e armazenar alimentos. “Provavelmente usamos 70% dos modelos existentes, 30% novos e 80% retexturas”, disse Leone.
Na loja de ramen digital, os objetos foram modelados no Autodesk 3ds Max com redução de ruído de IA acelerada por RTX e o Blender se beneficia do Ray Tracing OptiX acelerado por RTX para movimentos suaves e interativos na janela de visualização – tudo alimentado pelo arsenal da equipe de GPU GeForce RTX Série 40.
A fase de textura no Adobe Substance 3D Painter usou a tecnologia de renderização NVIDIA Iray com luz acelerada por RTX e oclusão de ambiente, criando grandes ativos em meros momentos.
Em seguida, o Omniverse e o aplicativo Audio2Face, por meio do Unreal Engine 5 Connector, permitiram que a equipe adicionasse animação facial e áudio diretamente ao NPC da loja de ramen.
Embora seja um NPC, Jin responde à linguagem natural de forma realista e consistente com a história de fundo da narrativa – tudo com a ajuda da IA generativa.
O trabalho de iluminação e animação foi feito no Unreal Engine 5 auxiliado pelo NVIDIA DLSS usando AI para melhorar os quadros renderizados em resolução mais baixa, mantendo os detalhes de alta fidelidade, aumentando novamente a interatividade na janela de visualização para a equipe.
“É justo dizer que sem as GPUs GeForce RTX e o Omniverse, este projeto teria sido impossível de ser concluído sem adicionar um tempo considerável” — Gabriele Leone
De repente, os NPCs ficaram muito mais envolventes. E eles nunca pareceram tão bons.
Sobre a NVIDIA
Desde sua fundação em 1993, a NVIDIA (NASDAQ: NVDA) tem sido pioneira em computação acelerada. A invenção da GPU pela empresa em 1999 desencadeou o crescimento do mercado de jogos para PC, redefiniu a computação gráfica e iniciou a era da IA moderna. A NVIDIA agora é uma empresa de computação full-stack com ofertas em escala de data center que estão reformulando o setor. Mais informações em https://nvidianews.nvidia.com/.
Acesse também:
Site oficial da NVIDIA no Brasil
Facebook: @NVIDIAGeForceBR
Twitter: @NVIDIAGeForceBR
Instagram: @NVIDIAGeForceBR
Youtube: @nvidiabrasil