Nota do editor: Esta postagem faz parte da série IA Decodificada, que desmistifica a IA ao tornar a tecnologia mais acessível e que apresenta novos hardware, software, ferramentas e acelerações para usuários de PC RTX.
A NVIDIA está destacando as mais recentes ferramentas e aplicaçõess com tecnologia NVIDIA RTX na SIGGRAPH, uma feira anual na quando se trata em gráficos e IA.
Essas tecnologias de IA fornecem técnicas avançadas de ray-tracing e renderização, permitindo gráficos altamente realistas e experiências imersivas em jogos, realidade virtual, animação e efeitos especiais cinematográficos. Os PCs e workstations RTX com IA estão ajudando a impulsionar o futuro da mídia digital interativa, criação de conteúdo, produtividade e desenvolvimento.
A magia da IA presente no ACE
Durante um bate-papo informal na SIGGRAPH, o fundador e CEO da NVIDIA, Jensen Huang, apresentou “ James ” — um humano digital interativo criado em microsserviços NVIDIA NIM — que demonstra o potencial das interações com o cliente orientadas por IA.
Usando a tecnologia NVIDIA ACE e com base em um fluxo de trabalho de atendimento ao cliente, James é um assistente virtual que pode se conectar com pessoas usando emoções, humor e respostas contextualmente precisas. Em breve, os usuários poderão interagir com James em tempo real em ai.nvidia.com.
A NVIDIA também apresentou os últimos avanços na plataforma NVIDIA Maxine AI para telepresença, bem como empresas adotando o NVIDIA ACE, um conjunto de tecnologias para dar vida a humanos digitais com IA generativa. Essas tecnologias permitem o desenvolvimento humano digital com modelos de IA para fala e tradução, visão, inteligência, animação e comportamento realistas e aparência realista.
Maxine apresenta duas tecnologias de IA que aprimoram a experiência humana digital em cenários de telepresença: Maxine 3D e Audio2Face-2D.
Os desenvolvedores podem aproveitar as tecnologias Maxine e ACE para gerar interações mais envolventes e naturais para pessoas que usam interfaces digitais em atendimento ao cliente, jogos e outras experiências interativas.
Aproveitando a IA avançada, as tecnologias NVIDIA ACE permitem que os desenvolvedores criem avatares que podem responder aos usuários em tempo real com animações, fala e emoções realistas. As GPUs RTX fornecem o poder computacional e a fidelidade gráfica necessários para renderizar avatares ACE com detalhes e fluidez impressionantes.
Com avanços contínuos e adoção crescente, a ACE está definindo novos padrões para a construção de mundos virtuais e estimulando a inovação em todos os setores. Os desenvolvedores que aproveitam o poder da ACE com GPUs RTX podem criar aplicativos mais imersivos e experiências avançadas de mídia digital interativas baseadas em IA.
Atualizações RTX liberam IA para criadores
Os PCs NVIDIA GeForce RTX e as workstations NVIDIA RTX estão recebendo uma atualização com acelerações de GPU que oferecem aos usuários experiências aprimoradas de criação de conteúdo de IA.
Para editores de vídeo, o RTX Video HDR agora está disponível por meio do Wondershare Filmora e do DaVinci Resolve. Com essa tecnologia, os usuários podem transformar qualquer conteúdo em vídeo de alta faixa dinâmica com cores mais ricas e mais detalhes em cenas claras e escuras — tornando-o ideal para vídeos de jogos, vlogs de viagem ou produção de filmes de eventos. A combinação do RTX Video HDR com o RTX Video Super Resolution melhora ainda mais a qualidade visual ao remover artefatos de codificação e aprimorar detalhes.
O RTX Video HDR requer uma GPU RTX conectada a um monitor ou TV compatível com HDR10. Usuários com um PC com GPU RTX podem enviar arquivos para o aplicativo de desktop Filmora e continuar a editar com aceleração RTX local, dobrando a velocidade do processo de exportação com codificadores duplos em GPUs GeForce RTX 4070 Ti ou superiores. O popular media player VLC adicionou em junho suporte para RTX Video Super Resolution e RTX Video HDR, adicionando reprodução de vídeo aprimorada por IA.
Leia este blog sobre edição de vídeo com tecnologia RTX e o FAQ do RTX Video para mais informações. Saiba mais sobre os recursos com tecnologia de IA do Wondershare Filmora.
Além disso, os artistas 3D estão ganhando mais aplicativos e ferramentas de IA que simplificam e aprimoram os fluxos de trabalho, incluindo Replikant, Adobe, Topaz e Getty Images.
Replikant, uma plataforma de animação 3D assistida por IA, está integrando NVIDIA Audio2Face, uma tecnologia ACE, para habilitar sincronização labial e animação facial aprimoradas. Aproveitando os modelos generativos acelerados pela NVIDIA, os usuários podem aproveitar visuais em tempo real aprimorados pela tecnologia RTX e NVIDIA DLSS. Replikant agora está disponível no Steam.
O Adobe Substance 3D Modeler adicionou o Search Asset Library by Shape, um recurso alimentado por IA projetado para simplificar a substituição e o aprimoramento de formas complexas usando modelos 3D existentes. Esse novo recurso acelera significativamente a prototipagem e aprimora os fluxos de trabalho de design.
Novos recursos de IA no Adobe Substance 3D integram capacidades avançadas de IA generativa, aprimorando suas ferramentas de texturização e criação de materiais. A Adobe lançou a primeira integração de suas capacidades de IA generativa Firefly no Substance 3D Sampler e Stager, tornando os fluxos de trabalho 3D mais perfeitos e produtivos para designers industriais, desenvolvedores de jogos e profissionais de efeitos visuais.
Para tarefas como geração de texto para textura e descrições de prompt, os usuários do Substance 3D podem gerar texturas fotorrealistas ou estilizadas. Essas texturas podem então ser aplicadas diretamente a modelos 3D. Os novos recursos Texto para Textura e Fundo Generativo aceleram significativamente tarefas de texturização e preparação 3D tradicionalmente demoradas e complexas.
Com tecnologia NVIDIA RTX Tensor Cores, o Substance 3D pode acelerar significativamente os cálculos e permite processos de design mais intuitivos e criativos. Este desenvolvimento se baseia na inovação da Adobe com atualizações da Creative Cloud com tecnologia Firefly em fluxos de trabalho do Substance 3D.
A Topaz AI adicionou aceleração NVIDIA TensorRT para fluxos de trabalho com várias GPUs, permitindo a paralelização entre várias GPUs para velocidades de renderização turbinadas — até 2x mais rápido com duas GPUs em um único sistema de GPU, e escalando ainda mais com GPUs adicionais.
A Getty Images atualizou seu serviço Generative AI by iStock com novos recursos para aprimorar a geração e a qualidade das imagens. Alimentado pelos modelos NVIDIA Edify, o aprimoramento mais recente oferece velocidades de geração definidas para atingir cerca de seis segundos para quatro imagens, dobrando o desempenho do modelo anterior, com velocidades na vanguarda do setor. As funcionalidades aprimoradas Text-2-Image e Image-2-Image fornecem resultados de maior qualidade e maior aderência aos prompts do usuário.
Usuários do Generative AI by iStock agora também podem designar configurações de câmera como distância focal (estreita, padrão ou ampla) e profundidade de campo (próximo ou distante). Melhorias na super-resolução do Generative AI melhoram a qualidade da imagem usando AI para criar novos pixels, melhorando significativamente a resolução sem tornar a imagem muito mais nítida.
IA incrível de LLM
O ChatRTX — uma demonstração tecnológica que conecta um grande modelo de linguagem (LLM), como o Llama do Meta, aos dados de um usuário para consultar rapidamente notas, documentos ou imagens — está passando por uma reformulação na interface do usuário (IU), oferecendo uma experiência mais limpa e refinada.
O ChatRTX também serve como um projeto de referência de código aberto que mostra aos desenvolvedores como criar aplicativos locais poderosos e aumentados de recuperação (RAG), acelerados pelo RTX.
A versão mais recente do ChatRTX, lançada hoje, usa a estrutura Electron + Material UI, que permite que os desenvolvedores adicionem mais facilmente seus próprios elementos de UI ou estendam a funcionalidade da tecnologia. A atualização também inclui uma nova arquitetura que simplifica a integração de diferentes UIs e agiliza a construção de novos aplicativos de chat e RAG sobre a interface de programação de aplicativos de backend do ChatRTX.
Usuários finais podem baixar a versão mais recente do ChatRTX na página da web do ChatRTX . Desenvolvedores podem encontrar o código-fonte para a nova versão no repositório ChatRTX GitHub.
Os modelos Meta Llama 3.1-8B agora são otimizados para inferência em PCs NVIDIA GeForce RTX e estações de trabalho NVIDIA RTX. Esses modelos são suportados nativamente com NVIDIA TensorRT-LLM, software de código aberto que acelera o desempenho de inferência LLM.
Chatbots de IA da Dell: aproveitando o combustível do foguete RTX
A Dell está apresentando como as empresas podem impulsionar o desenvolvimento de IA com um chatbot RAG otimizado usando o NVIDIA AI Workbench e um microsserviço NVIDIA NIM para o Llama 3. Usando o NVIDIA AI Workbench Hybrid RAG Project, a Dell está demonstrando como o chatbot pode ser usado para conversar com dados empresariais incorporados em um banco de dados vetorial local, com inferência sendo executada de uma das três maneiras:
- Localmente em um servidor Hugging Face TGI
- Na nuvem usando endpoints de inferência NVIDIA
- Em microsserviços NVIDIA NIM auto-hospedados
Saiba mais sobre o Projeto RAG Híbrido do AI Workbench . Os participantes do SIGGRAPH podem experimentar essa tecnologia em primeira mão no estande 301 da Dell Technologies.
HP AI Studio: inove mais rápido com CUDA-X e Galileo
Na SIGGRAPH, a HP está apresentando o Z by HP AI Studio, uma plataforma centralizada de ciência de dados. Anunciado em outubro de 2023, o AI Studio agora foi aprimorado com as mais recentes bibliotecas NVIDIA CUDA-X, bem como a recente parceria da HP com a Galileo, uma empresa de camada de confiança de IA generativa. Os principais benefícios incluem:
- Implante projetos mais rapidamente: configure, conecte e compartilhe projetos locais e remotos rapidamente.
- Colabore com facilidade: acesse e compartilhe dados, modelos e experimentos sem esforço.
- Trabalhe do seu jeito: escolha onde trabalhar com seus dados, alternando facilmente entre os modos online e offline.
Projetado para aumentar a produtividade e agilizar o desenvolvimento de IA, o AI Studio permite que as equipes de ciência de dados se concentrem na inovação. Visite o estande 501 da HP para ver como o AI Studio com RAPIDS cuDF pode impulsionar o pré-processamento de dados para acelerar os pipelines de IA. Inscreva-se para obter acesso antecipado ao AI Studio.
Um aumento de velocidade RTX para Stable Diffusion
O Stable Diffusion 3.0, o modelo mais recente da Stability AI, foi otimizado com o TensorRT para fornecer um aumento de velocidade de 60%.
Um microsserviço NIM para Stable Diffusion 3 com desempenho otimizado está disponível para visualização em ai.nvidia.com.
Ainda dá tempo de se juntar à NVIDIA na SIGGRAPH para ver como a RTX AI está transformando o futuro da criação de conteúdo e experiências de mídia visual. A conferência vai até 1º de agosto.
A IA generativa está transformando jogos, videoconferências e experiências interativas de todos os tipos. Entenda o que há de novo e o que vem por aí assinando a newsletter de IA Decodificada.