Usando o Paralelismo de Dados para Treinar Modelos de IA Personalizados com Mais Rapidez

Introdução

Com GPUs e técnicas avançadas da NVIDIA, como paralelismo de dados, você pode treinar seus modelos de IA personalizados mais rapidamente.

O uso de várias GPUs em um único nó oferece um aumento de desempenho, mas as limitações de hardware podem restringir o número de GPUs disponíveis. Para superar isso, podemos aproveitar o treinamento distribuído em várias instâncias da Oracle Cloud Infrastructure (OCI) em que temos dois ou mais nós conectados por uma rede.

É aí que entra o paralelismo. Paralelismo envolve dividir a computação em partes menores que podem ser executadas simultaneamente em diferentes recursos de computação.

Demonstração

Pré-requisitos e configuração

1. Conta Oracle Cloud —página de cadastro
2. Oracle Cloud Infrastructure — documentação
3. VMI otimizado para GPU NVIDIA do Oracle Cloud Marketplace — documentação
4. Instâncias de GPU da Oracle Cloud — documentação

Conheça

• Etapas detalhadas e código de amostra no GitHub