Uso del paralelismo de datos para entrenar modelos de IA personalizados más rápido

Introducción

Con potentes GPU y técnicas de NVIDIA, como el paralelismo de datos, puedes entrenar tus modelos de IA personalizados más rápido.

El uso de varias GPU en un solo nodo ofrece un aumento del rendimiento, pero las limitaciones de hardware pueden restringir el número de GPU disponibles. Para superar esto, podemos aprovechar la formación distribuida en varias instancias de Oracle Cloud Infrastructure (OCI) donde tenemos dos o más nodos conectados a través de una red.

Aquí es donde entra el paralelismo. El paralelismo implica dividir el cálculo en partes más pequeñas que se pueden ejecutar simultáneamente en diferentes recursos informáticos.

Demostración

Requisitos y configuración

1. Cuenta de Oracle Cloud—página de registro
2. Oracle Cloud Infrastructure: documentación
3. VMI optimizado para GPU de Oracle Cloud Marketplace: documentación
4. Instancias de GPU de Oracle Cloud: documentación

Comience ahora

• Pasos detallados y código de ejemplo en GitHub