Los sistemas de archivos de alto rendimiento admiten cargas de trabajo que requieren la capacidad de leer y escribir datos con tasas de rendimiento extremadamente altas. Los sistemas de archivos HPC (HFS) de OCI están disponibles en Oracle Cloud Marketplace y facilitan el despliegue de diversos servidores de archivos de alto rendimiento líderes del sector. En tan solo tres clics, los clientes tienen un servidor de archivos activo a escala de petabytes con un rendimiento de gigabytes de doble dígito.
Al usar estas soluciones de HFS, puedes especificar los requisitos para tu sistema de archivos, incluidos:
A medida que especificas estos parámetros, la solución HFS Marketplace aplica parámetros predeterminados para reducir la complejidad del cliente y acortar el tiempo de despliegue. Por ejemplo, al crear un sistema de archivos reutilizable, seleccionará el almacenamiento NVMe local. Del mismo modo, para cargas de trabajo de archivos mixtas o pequeñas, personalizará los metadatos. Los sistemas de archivos pueden estar funcionando en menos de 15 minutos.
Con la solución HFS Marketplace, con unos pocos clics puedes desplegar BeeGFS, Lustre y GlusterFS.
Para los usuarios que requieren la máxima capacidad de configuración para un despliegue complejo, también ofrecemos pilas de Oracle Cloud Marketplace (interfaz gráfica de usuario basada en web) y plantillas de despliegue de inicio rápido de Oracle basadas en Terraform en Github. Simplemente, personaliza las plantillas de Terraform o las pilas de Marketplace para satisfacer tus necesidades y realiza el lanzamiento mediante el gestor de recursos.
Estas soluciones de almacenamiento de archivos compartidos, integradas en Oracle Cloud Infrastructure, proporcionan alto rendimiento y una latencia baja y uniforme, lo que soporta cargas de trabajo de alto rendimiento.
Consigue un rendimiento total de archivos de hasta 500 GB/s con instancias informáticas con hardware dedicado de HPC conectadas con redes de clusters locales de NVMe y 100 Gbps para una latencia baja.
Empieza a trabajar de forma rápida y sencilla con unos pocos clics para desplegar configuraciones estándar.
Las soluciones integrales basadas en scripts de Terraform incluyen todo lo que necesitas para que Lustre, GlusterFS o BeeGFS compatibles con POSIX estén activos y ejecutándose de forma rápida y sencilla.
Los clusters de servidores de archivos locales requieren grandes inversiones de capital, mientras que Oracle Cloud se puede ampliar de forma flexible para satisfacer las necesidades de almacenamiento y rendimiento de hasta 500 GB por segundo.
Los entornos preconfigurados de Oracle son útiles en muchos sectores de una amplia gama de aplicaciones, entre las que se incluyen:
La solución HFS se puede utilizar para crear un sistema de archivos POSIX al que se pueda acceder desde nodos de recursos informáticos locales mediante clientes nativos del sistema de archivos, NFSv3/NFSv4 o SMB para migrar datos a la nube de Oracle.
Las cargas de trabajo de HPC para simulaciones de bloqueos, Dinámica de fluidos computacional (CFD) y química computacional requieren cantidades masivas de datos de entrenamiento y a menudo utilizan almacenamiento de archivos compartido para admitir el procesamiento de conjuntos de datos simultáneamente.
Los conjuntos de datos para cargas de trabajo de IA y AA son grandes, y el almacenamiento de archivos debe proporcionar grandes cantidades de datos muy rápidamente para la formación y la validación en varios modelos a la vez.
Los flujos de trabajo de procesamiento de datos de medios, como la representación de video, los efectos visuales y la producción multimedia, necesitan los recursos informáticos y de almacenamiento para gestionar la creación de grandes cantidades de archivos de video a partir de grandes conjuntos de datos de recursos.
Los casos de uso de análisis de big data, incluidos la detección de fraudes y el análisis financiero, producen grandes volúmenes de datos que necesitan un almacenamiento de alto rendimiento para potenciar aplicaciones que hacen un uso intensivo de los datos.
"Oracle Cloud es el único proveedor principal de servicios en la nube que ofrece Spectrum Scale en una arquitectura de almacenamiento compartido en hardware dedicado. La oferta de Oracle se ha adaptado a las demandas de HPC y análisis de big data, y ofrece un rendimiento 10 veces superior al de las ofertas en la nube virtualizadas, y una flexibilidad, escalabilidad y capacidad de gestión mejoradas".
Michael Sedlmayer, Presidente, Re-Store
"Mi equipo ha probado SAS Grid en muchas nubes públicas. Nos complace decir que la infraestructura de Oracle Cloud fue capaz de proporcionar al sistema de archivos compartidos IBM Spectrum Scale el rendimiento de E/S que se necesita para SAS Grid".
Margaret Crevar, directora sénior, SAS Performance Lab, SAS
"La interfaz gráfica del sistema de archivos HPC (HFS) de OCI y su flujo de trabajo de aprovisionamiento del sistema de archivos, diseñados para estar centrados en el uso del cliente (espacio persistente o reutilizable, cargas de trabajo de archivos grandes, mixtas o pequeñas, etc.) en comparación con aquellos que se centran en la tecnología, reducen las barreras para poder desplegar rápidamente un sistema de archivos paralelo como BeeGFS en Oracle Cloud. Oracle Cloud ofrece recursos de infraestructura, como la red en cluster RoCEv2 RDMA de 100 Gbps, servicio de volumen en bloque compartido de conexión múltiple, unidades SSD NVMe locales conectadas a unidades de recursos informáticos y recursos informáticos con hardware dedicado para desplegar BeeGFS en muchas configuraciones diferentes y proporcionar un rendimiento global de gigabytes de triple dígito (500 GB/s) a un precio más bajo en comparación con otras nubes públicas".
Howard Weiss, fundador y director general de Pacific Teck
“Las tecnologías de redes de cluster y computación con hardware dedicado de Oracle permitieron a BeeGFS en Oracle Cloud superar el rendimiento (latencia y rendimiento ES) del sistema de archivos HPC local para cargas de trabajo MPAS a un precio muy bajo. Al utilizar la red RDMA de cluster de Oracle Cloud, BeeGFS logra un rendimiento de hasta 140 GB/s con solamente 14 servidores".
Simon Ponsford, director técnico de YellowDog
"La solución del sistema de archivos paralelo OCI de BeeGFS que usa RoCEv2 de 100 Gbps y almacenamiento NVMe local logró un rendimiento de escritura de E/S similar o mejor en comparación con el almacenamiento NVMe basado en Lustre en un sistema HPC DiRAC tradicional para la referencia de la aplicación cosmológica SWIFT según el tipo de archivo escrito. Para los archivos de instantáneas de 370 GB, OCI logró 6,2 GB/s y Lustre 7,0 GB/s y, para los archivos de reinicio de 994 GB, OCI logró 70 GB/s y Lustre, 29,2 GB/s".
Andrew Turner, director técnico de DiRAC, EPCC, Universidad de Edimburgo
Características | BeeGFS | GlusterFS | IBM Spectrum Scale | Lustre |
---|---|---|---|---|
Tipo de licencia | Código abierto y licencia comercial para características empresariales | Código abierto | Con licencia comercial | Código abierto |
Ampliable: almacenamiento y rendimiento | Sí | Sí | Sí | Sí |
Replicación | Sí* | Sí | Sí | Sí |
Alta disponibilidad | Sí | Sí | Sí | Sí |
Niveles de almacenamiento | Sí* | No, experimental | Sí | Sí |
POSIX | Sí | Sí | Sí | Sí |
Versión de NFS | v4 | v3, v4 | v3, v4 | v3, v4 |
Bloque de mensajes del servidor (SMB) | Sí | Sí | Sí | No |
Compatibilidad con RDMA | Sí | No | Sí, edición de borrado | No |
Soporte del sistema de archivos | Instrucción permanente y comunidad | Comunidad | IE | Instrucción permanente y comunidad |
Despliegue | HFS, inicio rápido de Oracle | HFS, inicio rápido de Oracle | Inicio rápido de Oracle | HFS, inicio rápido de Oracle |
* Función empresarial, disponible en software con licencia comercial. La edición de código abierto incluye todas las funciones empresariales para evaluarlas de forma gratuita para uso que no sea de producción.
SI: significa integrador de sistemas
Pinkesh Valdria, arquitecto principal de soluciones
Oracle Cloud Infrastructure quedó clasificado recientemente como el séptimo más rápido en el IO500, una referencia de E/S de almacenamiento de alto rendimiento ampliamente reconocida. La gran mayoría de los demás sistemas de la lista son entornos locales especializados, incluidos superordenadores utilizados en investigación. Logramos un rendimiento de E/S de escritura de 500 GB/s y 13,1 millones de IOPS en rendimiento de metadatos con un sistema de archivos paralelo de alto rendimiento que utiliza 270 nodos en una red de clústeres HPC que ejecuta el sistema de archivos BeeOND BeeGFS.
Lee el post completoCree, pruebe e implemente aplicaciones en Oracle Cloud—de manera gratuita. Regístrese una vez y obtenga acceso a dos ofertas gratuitas.
Mejore el rendimiento y la seguridad a la vez que reduce los costos de sus aplicaciones empresariales y de rendimiento intensivo.
Explore los recursos educativos sobre la nube con videos de capacitación, laboratorios de aprendizaje a su propio ritmo y certificaciones de Oracle Cloud Infrastructure.
Oracle Cloud Infrastructure combina la elasticidad y la utilidad de la nube pública con el control, la seguridad, el rendimiento y la previsibilidad de los entornos informáticos locales.