Oracle Cloud Infrastructure HPC File Systems(HFS)

고성능 파일 시스템은 매우 높은 처리율로 데이터를 읽고 쓸 수 있는 기능이 필요한 워크로드를 지원합니다. OCI HPC 파일 시스템(HFS)은 Oracle Cloud Marketplace에서 제공되며 업계 최고의 다양한 고성능 파일 서버를 쉽게 배포할 수 있도록 해줍니다. 단 세 번의 클릭만으로 페타바이트급의 파일 서버를 두 자릿수의 기가바이트 처리량으로 실행할 수 있습니다.

이러한 HFS 솔루션을 배포할 때

이러한 HFS 솔루션을 배포할 때 다음을 포함한 파일 시스템에 대한 요구 사항을 지정할 수 있습니다.

  • 유형(스크래치 또는 영구)
  • 작업 로드 유형(저용량, 혼합, 대용량 파일)
  • 파일 시스템 크기 조정(파일 서버 개수 및 스토리지 용량)

이러한 매개 변수를 지정하면 HFS Marketplace 솔루션이 기본 매개 변수를 적용하여 고객 복잡성을 줄이고 배포 시간을 단축시켜줍니다. 예를 들어 스크래치 파일 시스템을 구축하는 경우 로컬 NVMe 스토리지를 선택합니다. 마찬가지로 혼합 또는 저용량 파일 작업 로드의 경우 메타 데이터를 사용자 정의합니다. 파일 시스템을 15분 이내에 실행할 수 있습니다.

HFS Marketplace 솔루션을 사용하면 몇 번의 클릭만으로 BeeGFS, Lustre, GlusterFS를 배포할 수 있습니다.

HPC File Systems 배포하기

HFS 사용자 정의 가능 옵션

복잡한 배포를 위한 최대한의 설정 가능성이 필요한 사용자를 위해 Github에서 Oracle Cloud Marketplace Stacks(Web 기반 GUI) 및 Terraform 기반 Oracle Quickstart 배포 템플릿도 제공합니다. 요구 사항에 맞춰 Terraform 템플릿 또는 Marketplace 스택을 사용자 지정하고 리소스 관리자를 통해 실행하기만 하면 됩니다.

OCI HPC 기반 HFS의 이점

Oracle Cloud Infrastructure를 기반으로 구축된 이러한 공유 파일 저장소 솔루션은 높은 처리량과 낮은 지연성을 제공하여 고성능 워크로드를 지원합니다.

신속성

낮은 지연성을 위한 로컬 NVMe 및 100Gbps 클러스터 네트워킹을 사용하여 연결된 HPC 베어 메탈 컴퓨팅 인스턴스로 최대 500GB/s의 총 처리량을 달성할 수 있습니다.

손쉬운 사용

단 몇 번의 클릭만으로 표준 구성을 배포하여 빠르고 쉽게 시작하고 실행할 수 있습니다.

필요한 모든 것이 한곳에

Terraform 스크립트를 기반으로 한 일체형 솔루션에는 POSIX 호환 Lustre, GlusterFS 또는 BeeGFS를 빠르고 쉽게 시작하고 실행하는 데 필요한 모든 것이 포함되어 있습니다.

저비용

온프레미스 파일 서버 클러스터의 경우 대규모 자본 투자가 필요하지만 Oracle Cloud는 스토리지 및 성능 요구 사항을 초당 최대 500GB까지 충족하도록 탄력적으로 확장할 수 있습니다.

사용 사례

Oracle의 사전 구성된 환경은 다양한 산업 분야에서 다음을 포함한 광범위한 애플리케이션에 전반에 걸쳐 유용하게 활용되고 있습니다.

  • 클라우드로의 데이터 마이그레이션

    HFS는 POSIX 파일 시스템 구축에 사용될 수 있습니다. 이 시스템은 파일 시스템 전용 클라이언트, NFSv3/NFSv4 또는 SMB를 사용해 액세스할 수 있으며 데이터를 온프레미스 컴퓨트 노드에서 Oracle Cloud로 마이그레이션합니다.

  • 엔지니어링 및 과학적 컴퓨팅

    충돌 시뮬레이션, 전산 유체 역학(CFD), 전산 화학을 위한 HPC 워크로드는 대규모의 학습 데이터를 필요로 하며 공유 파일 저장소를 사용해 데이터세트 처리를 동시에 지원합니다.

  • 인공 지능과 머신러닝(ML)

    AI 및 ML 워크로드 데이터 세트는 그 크기가 크며 파일 저장소의 경우 여러 모델 전반에 걸쳐 동시에 학습과 검증을 실시해야 하기 때문에 방대한 양의 데이터를 매우 빠른 속도로 제공해야 합니다. OCI는 WEKA, Lustre, GlusterFS 등을 지원합니다.

  • 매체 처리 및 트랜스코딩

    동영상 렌더링, 시각 효과, 미디어 제작과 같은 매체 데이터 처리 워크플로우에는 대규모 리소스 데이터 세트에서 대량의 비디오 파일 생성을 처리하기 위한 컴퓨트 및 저장소 리소스가 필요합니다.

  • 빅데이터 및 재무 분석

    사기 감지, 재무 분석 등 빅 데이터 분석 사용 사례는 대량의 데이터를 생성합니다. 그리고 이 데이터는 데이터 집약적인 애플리케이션 구동을 위한 고성능 저장소를 필요로 합니다.

"Oracle Cloud는 베어메탈 하드웨어의 공유 스토리지 아키텍처에서 Spectrum Scale을 제공하는 유일한 대형 클라우드 제공업체입니다. 이 Oracle 제품은 HPC의 요구 및 빅 데이터 분석에 맞춰 조정되었으며, 가상화된 클라우드 제품 대비 높은 성능과 향상된 유연성, 확장성, 관리 용이성을 제공합니다."

Michael Sedlmayer Re-Store, President

“우리 팀은 수많은 퍼블릭 클라우드에서 SAS Grid 테스트를 실시했습니다. 그 결과 Oracle Cloud의 인프라스트럭쳐는 SAS Grid에 필요한 I/O 처리량을 IBM Spectrum Scale 공유 파일 시스템에 공급해준다는 것이 확인되어 정말 만족스럽습니다."

Margaret Crevar SAS, SAS Performance Lab, Sr Manager

"OCI HPC 파일 시스템(HFS) 그래픽 인터페이스와 파일 시스템 프로비저닝 워크플로우는 고객 사용 사례(스크래치 또는 영구 공간, 대용량, 혼합 또는 저용량 파일 작업 로드 등) 중심으로 설계되어 기술 중심으로 설계된 솔루션에 비해 Oracle Cloud 기반 BeeGFS와 같은 병렬 파일 시스템의 신속한 배포를 방해하는 장벽이 줄어들었습니다. Oracle Cloud는 100Gbps RDMA RoCEv2 클러스터형 네트워크, 다중 연결 공유 블록 볼륨 서비스, 컴퓨트 및 베어메탈 컴퓨트 구성에 연결된 로컬 NVMe SSD를 제공하며, 여러 다양한 구성에 BeeGFS를 배포하고, 타 퍼블릭 클라우드 공급업체보다 저렴한 가격에 3자리 수에 달하는 GB급 처리량(500GB/초)을 제공합니다.”

Howard Weiss Pacific Teck, 설립자 겸 Managing Director

“Oracle의 베어메탈 컴퓨팅 및 클러스터형 네트워킹 기술 덕분에 Oracle Cloud 기반 BeeGFS가 매우 저렴한 가격으로 MPAS 작업 로드의 온프레미스 HPC 파일 시스템 성능(대기 시간 및 IO 처리량)을 능가할 수 있었습니다. Oracle Cloud의 Cluster Network RDMA 네트워크를 사용하는 BeeGFS는 단 14대의 서버로 최대 140GB/s의 성능을 보여줍니다."

Simon Ponsford YellowDog, CTO

"100Gbps RoCEv2 및 로컬 NVMe 저장소를 사용하는 BeeGFS의 OCI 병렬 파일 시스템 솔루션은 작성된 파일 유형에 따라 기존 DiRACHPC 시스템의 Lustre 기반 NVMe 저장소와 비슷하거나 더 높은 IO 쓰기 처리 성능을 달성했습니다. 370GB 스냅샷 파일의 경우 OCI는 6.2GB/s, Lustre는 7.0GB/s를 달성했으며, 994GB 재시작 파일의 경우 OCI는 70GB/s, Lustre는 29.2GB/s를 달성했습니다."

Andrew Turner The University of Edinburgh, EPCC, DiRAC Technical Manager

OCI에서의 HPC 파일 시스템 - 특징 비교

특징 BeeGFS GlusterFS IBM Spectrum Scale Lustre
라이선스 유형 오픈 소스 및 앤터프라이즈 기능을 위한 상용 라이선스 오픈소스 상용 라이선스 오픈소스
확장 가능성 - 스토리지 및 성능 해당 해당 해당 해당
복제 해당* 해당 해당 해당
고가용성 해당 해당 해당 해당
스토리지 계층화 해당* 해당 없음, 실험 버전 해당 해당
POSIX 해당 해당 해당 해당
NFS 버전 v4 v3, v4 v3, v4 v3, v4
서버 메시지 블록(SMB) 해당 해당 해당 해당 없음
RDMA 지원 해당 해당 없음 해당, Erasure 에디션 해당 없음
Filesystem 지원 SI 및 커뮤니티 커뮤니티 SI SI 및 커뮤니티
배포 HFS, Oracle Quickstart HFS, Oracle Quickstart Oracle Quickstart HFS, Oracle Quickstart

* - 상업용 라이센스 소프트웨어에서 사용할 수 있는 엔터프라이즈 기능 오픈 소스 에디션에는 비프로덕션 용도로 무료로 사용할 수 있는 모든 엔터프라이즈 기능이 포함되어 있습니다.
SI – 시스템 통합 업체(System Integrator)를 뜻합니다.

2022년 4월 15일

초당 2테라바이트의 성능을 제공하는 OCI 기반 WEKA

Pinkesh Valdria, 수석 솔루션 설계자

Oracle과 WEKA는 자랑스러운 마음으로 Oracle Cloud Infrastructure(OCI)에서 WEKA를 사용할 수 있게 되었음을 발표합니다. 양사는 OCI 베어메탈 인스턴스에서 WEKA를 실행하여 고객사의 중요한 워크로드를 위한 최고 수준의 성능을 제공하고자 협력해 왔습니다. 그밖에도, S3 호환 OCI Object Storage를 저비용 계층으로 사용하여 WEKA를 위한 투명한 스토리지 계층 정책을 검증하였습니다. 이 옵션 덕분에 고객은 고성능 파일 시스템 내에서 로컬 NVMe SSD를 사용해 핫 데이터를, 객체 스토리지를 사용해 웜 또는 콜드 데이터를 페타바이트 규모로 운영할 수 있게 되었습니다.

게시물 전문 읽어보기

추천 블로그

리소스

Oracle Cloud 시작하기


Oracle Cloud Free Tier

Oracle Cloud를 사용한 애플리케이션 구축, 테스트, 배포를 무료로 체험해 보세요. 한 번 가입으로 두 가지 무료 혜택을 즐길 수 있습니다.

Oracle Cloud 무료 체험하기

클라우드 교육—Oracle Cloud Infrastructure(OCI)

Oracle Cloud Infrastructure(OCI) 학습 동영상, 자가 학습 실습 및 인증을 제공하는 클라우드 교육 리소스를 살펴보세요.

무엇을 배울 수 있는지 알아보기

Oracle Cloud Infrastructure(OCI) 살펴보기

Oracle Cloud Infrastructure(OCI)는 퍼블릭 클라우드의 탄력성과 유용성을 온프레미스 컴퓨팅 환경의 제어, 보안, 성능, 예측 가능성과 결합합니다.

가이드 읽어보기(PDF)