Quão Longe a IA Pode Ver: ILM usa Omniverse DeepSearch para Criar o Céu Perfeito

A ferramenta de pesquisa habilitada para Omniverse AI permite que o estúdio lendário vasculhe um enorme banco de dados de cenas 3D.
por Richard Kerris

Para efeitos visuais de ponta e produção virtual, equipes criativas e estúdios se beneficiam de cenários e ambientes digitais que podem ser atualizados em tempo real.

Um elemento crucial em qualquer ambiente de produção virtual é uma cúpula celeste, geralmente usada para fornecer iluminação realista para ambientes virtuais e efeitos visuais na câmera. O lendário estúdio Industrial Light & Magic (ILM) está explorando o poder da IA para elevar seus céus a novas alturas com DeepSearch e Omniverse Enterprise habilitados para NVIDIA AI .

Capturar detalhes fotorrealistas de um céu pode ser complicado. Na SIGGRAPH de hoje, a ILM mostrou como sua equipe, com a ferramenta NVIDIA DeepSearch, usou linguagem natural para pesquisar rapidamente em uma enorme biblioteca de ativos e criar uma cativante cúpula celeste.

O vídeo mostra como o Omniverse Enterprise pode fornecer aos cineastas a máxima flexibilidade para desenvolver a aparência e a iluminação ideais para promover suas histórias. Isso ajuda os artistas a economizar tempo, aumentar a produtividade e acelerar a criatividade para produção virtual.

Depois de restringir os resultados da pesquisa, a equipe ILM testa os domos celestes restantes em realidade virtual para avaliar se o recurso será uma combinação perfeita para a foto. Ao usar a RV, a ILM pode aproximar a aparência do céu em um cenário de produção virtual.

O céu é o limite com AI

Uma extensa biblioteca com milhares de referências e recursos 3D oferece vantagens, mas também apresenta alguns desafios sem uma maneira eficiente de pesquisar todos os dados.

Normalmente, os usuários configuram pastas ou marcam itens com palavras-chave, o que pode consumir muito tempo. Isso é especialmente verdadeiro para um estúdio como o ILM, que tem mais de 40 anos de material em sua biblioteca de referência, incluindo fotografia, pinturas foscas, cenários e outros materiais que foram capturados ao longo das décadas.

Com centenas de milhares de partes de conteúdo não marcadas, é impraticável para a equipe de ILM pesquisá-las manualmente em um cronograma de produção.

O Omniverse DeepSearch, no entanto, permite que o ILM pesquise intuitivamente por meio de ativos não marcados usando texto ou uma imagem 2D. O DeepSearch usa IA para categorizar e encontrar imagens automaticamente, isso resulta em uma grande economia de tempo para a equipe de criação, eliminando a necessidade de marcar manualmente cada ativo.

Todas as imagens são cortesia da Industrial Light & Magic.

“Com o Omniverse DeepSearch, temos a capacidade de pesquisar dados em tempo real, o que é fundamental para a produção”, disse Landis Fields, principal criativo em tempo real da ILM. “E ser capaz de pesquisar recursos com linguagem natural permite que nossas equipes criativas encontrem facilmente o que estão procurando, ajudando-os a obter a aparência final de uma cena com muito mais eficiência do que antes.”

O DeepSearch também funciona em arquivos USD , para que a equipe ILM possa revisar os resultados da pesquisa e trazer imagens para o espaço 3D no Omniverse Enterprise. Os artistas poderiam então interagir com o ambiente 3D usando um headset VR.

Com NVIDIA DeepSearch e Omniverse Enterprise, a ILM tem o potencial de acelerar pipelines criativos, reduzir custos e aprimorar fluxos de trabalho de produção para criar conteúdo cativante para produções virtuais.