Indo Longe: Plataforma da NVIDIA Resolve Problemas de HPC no Edge

NVIDIA Holoscan, DPUs BlueField e MetroX-3 permitem acesso seguro, migração de dados e processamento de streaming em tempo real no edge.
por Geetika Gupta

A colaboração entre pesquisadores, assim como a própria comunidade científica, abrange o mundo inteiro.

Universidades e empresas que compartilham trabalhos à distância necessitam de um pipeline de linguagem comum e seguro para fazer com que todos os dispositivos, de microscópios e sensores a servidores e redes do campus, vejam e compreendam os dados que cada um está transmitindo. A quantidade crescente de dados que precisam ser armazenados, transmitidos e analisados apenas aumenta o desafio.

Para superar esse problema, a NVIDIA introduziu uma plataforma de computação de alto desempenho que combina computação no edge e AI para capturar e consolidar dados de transmissão de instrumentos científicos no edge e, em seguida, permitir que os dispositivos falem entre si em longas distâncias.

A plataforma consiste de três componentes principais. O NVIDIA Holoscan é um kit de desenvolvimento de software que cientistas de dados e especialistas da área podem usar para criar pipelines acelerados por GPU para sensores que transmitem dados. O MetroX-3 é um novo sistema de longa distância que amplia a conectividade da plataforma NVIDIA Quantum-2 InfiniBand. E as DPUs NVIDIA BlueField-3 oferecem migração de dados segura e inteligente.

Os pesquisadores agora podem usar a nova plataforma da NVIDIA para computação HPC no edge para se comunicar e colaborar na solução de problemas difíceis, além de reunir seus dispositivos e algoritmos diferentes para funcionar como um grande supercomputador.

Holoscan para HPC no Edge

Acelerado por plataformas de computação de GPU, incluindo os sistemas NVIDIA IGX, HGX e DGX, o NVIDIA Holoscan oferece o desempenho extremo necessário para processar enormes fluxos de dados gerados nos instrumentos científicos do mundo.

O NVIDIA Holoscan para HPC inclui novas APIs para C++ e Python, que os pesquisadores de HPC podem usar para criar workflows de processamento de dados de sensores que sejam flexíveis o suficiente para formatos sem imagens e dimensionáveis o suficiente para traduzir dados brutos em insights em tempo real.

O Holoscan também gerencia a alocação de memória para garantir trocas de dados sem cópia, desse modo, os desenvolvedores podem se concentrar na lógica do workflow sem se preocupar com o gerenciamento de I/O de arquivos e memória.

Os novos recursos do Holoscan estarão disponíveis para todos os desenvolvedores de HPC no mês que vem. Inscreva-se para receber notificações sobre o acesso antecipado ao SDK Holoscan 0.4.

O MetroX-3 Vai Longe

sistema de longa distância NVIDIA MetroX-3, disponível no mês que vem, amplia os recursos nativos do cloud mais atuais da plataforma NVIDIA Quantum-2 InfiniBand do edge ao núcleo do data center de HPC. Ele permite que GPUs entre locais compartilhem dados com segurança, pela rede InfiniBand, em até 40 quilômetros de distância.

Aproveitando o acesso remoto nativo direto à memória, os usuários podem migrar facilmente trabalhos de dados e computação de um mini-cluster conectado à InfiniBand para o data center principal ou combinar clusters de computação dispersos geograficamente para obter um maior desempenho geral e escalabilidade mais alta.

Usando o NVIDIA Unified Fabric Manager para gerenciar seus sistemas MetroX-3, os operadores de data center podem provisionar, monitorar e operar com eficiência em todas as redes de data center conectadas à InfiniBand.

BlueField para HPC Segura e Eficiente

As unidades de processamento de dados NVIDIA BlueField transferem, aceleram e isolam serviços avançados de rede, armazenamento e segurança para aumentar o desempenho e a eficiência da HPC moderna.

Durante a SC22, a empresa de software de sistemas Zettar demonstrará sua solução de migração de dados e descarregamento de armazenamento baseada na BlueField-3. O software da Zettar pode consolidar as tarefas de migração de dados a uma área de cobertura de data center de espaço em rack de 4U, o que hoje requer 13U com soluções baseadas em x86.

Saiba mais sobre a nova plataforma da NVIDIA para computação de HPC no edge.