Levando a IA à velocidade máxima: decifrando como as mais recentes ferramentas e aplicações com tecnologia RTX da NVIDIA ajudam os desenvolvedores a acelerar em PCs e Workstations com IA

As atualizações anunciadas na SIGGRAPH incluem uma atualização do ChatRTX e suporte ao Llama 3 para aprimorar a criação, a produtividade e o desenvolvimento de conteúdo de IA.
por Larissa Machado

Nota do editor: Esta postagem faz parte da série IA Decodificadaque desmistifica a IA ao tornar a tecnologia mais acessível e que apresenta novos hardware, software, ferramentas e acelerações para usuários de PC RTX.

A NVIDIA está destacando as mais recentes ferramentas e aplicaçõess com tecnologia NVIDIA RTX na SIGGRAPH, uma feira anual na quando se trata em gráficos e IA.

Essas tecnologias de IA fornecem técnicas avançadas de ray-tracing e renderização, permitindo gráficos altamente realistas e experiências imersivas em jogos, realidade virtual, animação e efeitos especiais cinematográficos. Os PCs e workstations RTX com IA estão ajudando a impulsionar o futuro da mídia digital interativa, criação de conteúdo, produtividade e desenvolvimento.

A magia da IA ​​presente no ACE

Durante um bate-papo informal na SIGGRAPH, o fundador e CEO da NVIDIA, Jensen Huang, apresentou “ James ” — um humano digital interativo criado em microsserviços NVIDIA NIM — que demonstra o potencial das interações com o cliente orientadas por IA.

Usando a tecnologia NVIDIA ACE e com base em um fluxo de trabalho de atendimento ao cliente, James é um assistente virtual que pode se conectar com pessoas usando emoções, humor e respostas contextualmente precisas. Em breve, os usuários poderão interagir com James em tempo real em ai.nvidia.com.

James é um assistente virtual desenvolvido com NVIDIA ACE.

A NVIDIA também apresentou os últimos avanços na plataforma NVIDIA Maxine AI para telepresença, bem como empresas adotando o NVIDIA ACE, um conjunto de tecnologias para dar vida a humanos digitais com IA generativa. Essas tecnologias permitem o desenvolvimento humano digital com modelos de IA para fala e tradução, visão, inteligência, animação e comportamento realistas e aparência realista.

Maxine apresenta duas tecnologias de IA que aprimoram a experiência humana digital em cenários de telepresença: Maxine 3D e Audio2Face-2D.

Os desenvolvedores podem aproveitar as tecnologias Maxine e ACE para gerar interações mais envolventes e naturais para pessoas que usam interfaces digitais em atendimento ao cliente, jogos e outras experiências interativas.

Aproveitando a IA avançada, as tecnologias NVIDIA ACE permitem que os desenvolvedores criem avatares que podem responder aos usuários em tempo real com animações, fala e emoções realistas. As GPUs RTX fornecem o poder computacional e a fidelidade gráfica necessários para renderizar avatares ACE com detalhes e fluidez impressionantes.

Com avanços contínuos e adoção crescente, a ACE está definindo novos padrões para a construção de mundos virtuais e estimulando a inovação em todos os setores. Os desenvolvedores que aproveitam o poder da ACE com GPUs RTX podem criar aplicativos mais imersivos e experiências avançadas de mídia digital interativas baseadas em IA.

Atualizações RTX liberam IA para criadores

Os PCs NVIDIA GeForce RTX e as workstations NVIDIA RTX estão recebendo uma atualização com acelerações de GPU que oferecem aos usuários experiências aprimoradas de criação de conteúdo de IA.

Para editores de vídeo, o RTX Video HDR agora está disponível por meio do Wondershare Filmora e do DaVinci Resolve. Com essa tecnologia, os usuários podem transformar qualquer conteúdo em vídeo de alta faixa dinâmica com cores mais ricas e mais detalhes em cenas claras e escuras — tornando-o ideal para vídeos de jogos, vlogs de viagem ou produção de filmes de eventos. A combinação do RTX Video HDR com o RTX Video Super Resolution melhora ainda mais a qualidade visual ao remover artefatos de codificação e aprimorar detalhes.

O RTX Video HDR requer uma GPU RTX conectada a um monitor ou TV compatível com HDR10. Usuários com um PC com GPU RTX podem enviar arquivos para o aplicativo de desktop Filmora e continuar a editar com aceleração RTX local, dobrando a velocidade do processo de exportação com codificadores duplos em GPUs GeForce RTX 4070 Ti ou superiores. O popular media player VLC adicionou em junho suporte para RTX Video Super Resolution e RTX Video HDR, adicionando reprodução de vídeo aprimorada por IA.

Leia este blog sobre edição de vídeo com tecnologia RTX e o FAQ do RTX Video para mais informações. Saiba mais sobre os recursos com tecnologia de IA do Wondershare Filmora.

Além disso, os artistas 3D estão ganhando mais aplicativos e ferramentas de IA que simplificam e aprimoram os fluxos de trabalho, incluindo Replikant, Adobe, Topaz e Getty Images.

Replikant, uma plataforma de animação 3D assistida por IA, está integrando NVIDIA Audio2Face, uma tecnologia ACE, para habilitar sincronização labial e animação facial aprimoradas. Aproveitando os modelos generativos acelerados pela NVIDIA, os usuários podem aproveitar visuais em tempo real aprimorados pela tecnologia RTX e NVIDIA DLSS. Replikant agora está disponível no Steam.

O Adobe Substance 3D Modeler adicionou o Search Asset Library by Shape, um recurso alimentado por IA projetado para simplificar a substituição e o aprimoramento de formas complexas usando modelos 3D existentes. Esse novo recurso acelera significativamente a prototipagem e aprimora os fluxos de trabalho de design.

Novos recursos de IA no Adobe Substance 3D integram capacidades avançadas de IA generativa, aprimorando suas ferramentas de texturização e criação de materiais. A Adobe lançou a primeira integração de suas capacidades de IA generativa Firefly no Substance 3D Sampler e Stager, tornando os fluxos de trabalho 3D mais perfeitos e produtivos para designers industriais, desenvolvedores de jogos e profissionais de efeitos visuais.

Para tarefas como geração de texto para textura e descrições de prompt, os usuários do Substance 3D podem gerar texturas fotorrealistas ou estilizadas. Essas texturas podem então ser aplicadas diretamente a modelos 3D. Os novos recursos Texto para Textura e Fundo Generativo aceleram significativamente tarefas de texturização e preparação 3D tradicionalmente demoradas e complexas.

Com tecnologia NVIDIA RTX Tensor Cores, o Substance 3D pode acelerar significativamente os cálculos e permite processos de design mais intuitivos e criativos. Este desenvolvimento se baseia na inovação da Adobe com atualizações da Creative Cloud com tecnologia Firefly em fluxos de trabalho do Substance 3D.

A Topaz AI adicionou aceleração NVIDIA TensorRT para fluxos de trabalho com várias GPUs, permitindo a paralelização entre várias GPUs para velocidades de renderização turbinadas — até 2x mais rápido com duas GPUs em um único sistema de GPU, e escalando ainda mais com GPUs adicionais.

A Getty Images atualizou seu serviço Generative AI by iStock com novos recursos para aprimorar a geração e a qualidade das imagens. Alimentado pelos modelos NVIDIA Edify, o aprimoramento mais recente oferece velocidades de geração definidas para atingir cerca de seis segundos para quatro imagens, dobrando o desempenho do modelo anterior, com velocidades na vanguarda do setor. As funcionalidades aprimoradas Text-2-Image e Image-2-Image fornecem resultados de maior qualidade e maior aderência aos prompts do usuário.

Usuários do Generative AI by iStock agora também podem designar configurações de câmera como distância focal (estreita, padrão ou ampla) e profundidade de campo (próximo ou distante). Melhorias na super-resolução do Generative AI melhoram a qualidade da imagem usando AI para criar novos pixels, melhorando significativamente a resolução sem tornar a imagem muito mais nítida.

IA incrível de LLM

O ChatRTX — uma demonstração tecnológica que conecta um grande modelo de linguagem (LLM), como o Llama do Meta, aos dados de um usuário para consultar rapidamente notas, documentos ou imagens — está passando por uma reformulação na interface do usuário (IU), oferecendo uma experiência mais limpa e refinada.

O ChatRTX também serve como um projeto de referência de código aberto que mostra aos desenvolvedores como criar aplicativos locais poderosos e aumentados de recuperação (RAG), acelerados pelo RTX.

O ChatRTX está passando por uma reformulação na interface (IU).

A versão mais recente do ChatRTX, lançada hoje, usa a estrutura Electron + Material UI, que permite que os desenvolvedores adicionem mais facilmente seus próprios elementos de UI ou estendam a funcionalidade da tecnologia. A atualização também inclui uma nova arquitetura que simplifica a integração de diferentes UIs e agiliza a construção de novos aplicativos de chat e RAG sobre a interface de programação de aplicativos de backend do ChatRTX.

Usuários finais podem baixar a versão mais recente do ChatRTX na página da web do ChatRTX . Desenvolvedores podem encontrar o código-fonte para a nova versão no repositório ChatRTX GitHub.

Os modelos Meta Llama 3.1-8B agora são otimizados para inferência em PCs NVIDIA GeForce RTX e estações de trabalho NVIDIA RTX. Esses modelos são suportados nativamente com NVIDIA TensorRT-LLM, software de código aberto que acelera o desempenho de inferência LLM.

Chatbots de IA da Dell: aproveitando o combustível do foguete RTX

A Dell está apresentando como as empresas podem impulsionar o desenvolvimento de IA com um chatbot RAG otimizado usando o NVIDIA AI Workbench e um microsserviço NVIDIA NIM para o Llama 3. Usando o NVIDIA AI Workbench Hybrid RAG Project, a Dell está demonstrando como o chatbot pode ser usado para conversar com dados empresariais incorporados em um banco de dados vetorial local, com inferência sendo executada de uma das três maneiras:

  • Localmente em um servidor Hugging Face TGI
  • Na nuvem usando endpoints de inferência NVIDIA
  • Em microsserviços NVIDIA NIM auto-hospedados

Saiba mais sobre o Projeto RAG Híbrido do AI Workbench . Os participantes do SIGGRAPH podem experimentar essa tecnologia em primeira mão no estande 301 da Dell Technologies.

HP AI Studio: inove mais rápido com CUDA-X e Galileo

Na SIGGRAPH, a HP está apresentando o Z by HP AI Studio, uma plataforma centralizada de ciência de dados. Anunciado em outubro de 2023, o AI Studio agora foi aprimorado com as mais recentes bibliotecas NVIDIA CUDA-X, bem como a recente parceria da HP com a Galileo, uma empresa de camada de confiança de IA generativa. Os principais benefícios incluem:

  • Implante projetos mais rapidamente: configure, conecte e compartilhe projetos locais e remotos rapidamente.
  • Colabore com facilidade: acesse e compartilhe dados, modelos e experimentos sem esforço.
  • Trabalhe do seu jeito: escolha onde trabalhar com seus dados, alternando facilmente entre os modos online e offline.

Projetado para aumentar a produtividade e agilizar o desenvolvimento de IA, o AI Studio permite que as equipes de ciência de dados se concentrem na inovação. Visite o estande 501 da HP para ver como o AI Studio com RAPIDS cuDF pode impulsionar o pré-processamento de dados para acelerar os pipelines de IA. Inscreva-se para obter acesso antecipado ao AI Studio.

Um aumento de velocidade RTX para Stable Diffusion

O Stable Diffusion 3.0, o modelo mais recente da Stability AI, foi otimizado com o TensorRT para fornecer um aumento de velocidade de 60%.

Um microsserviço NIM para Stable Diffusion 3 com desempenho otimizado está disponível para visualização em ai.nvidia.com.

Ainda dá tempo de se juntar à NVIDIA na SIGGRAPH para ver como a RTX AI está transformando o futuro da criação de conteúdo e experiências de mídia visual. A conferência vai até 1º de agosto.

A  IA generativa está transformando jogos, videoconferências e experiências interativas de todos os tipos. Entenda o que há de novo e o que vem por aí assinando a newsletter de IA Decodificada.