Azure Native Qumulo 이제 EU, 영국 및 캐나다에서 사용 가능 – 상세 보기

Qumulo 분산 파일 스토리지: 고성능 컴퓨팅(HPC) 환경의 요구 사항을 충족하도록 특별히 제작됨

작성자 :
중요한 분석 및 결과를 제공하는 것이 가장 중요한 환경에서 HPC 워크로드는 스토리지 시스템에 엄청나게 의존합니다.

고성능 컴퓨팅(HPC) 시장은 아마도 오늘날 IT 세계에서 가장 빠르게 성장하는 부문일 것입니다. 하이페리온 리서치 는 44년까지 전체 HPC 시장이 2023억 달러에 이를 것으로 예측하고 그 중 스토리지 관련 투자가 7.8억 달러를 차지할 것으로 예상합니다.

Hyperion의 연구에서 세 가지 핵심 사항은 다음과 같습니다.

  1. 스토리지 시스템은 점점 더 중요해질 것입니다.
  2. HPC 워크로드를 위한 클라우드 컴퓨팅은 빠르게 성장할 것입니다.
  3. 인공지능(AI)은 그 무엇보다 빠르게 성장할 것입니다.

빠르게 성장하는 인공지능(AI)

위에서 언급했듯이 AI는 빠르게 성장하고 있습니다. 의 보고서를 기반으로 그랜드 뷰 리서치, 인공 지능 시장은 57.2년에서 2017년까지 2025%의 CAGR로 성장할 것입니다(35.8억 달러에 도달). 분석 회사는 다음과 같이 말합니다.

“인공지능(AI)은 산업혁명, 컴퓨터 시대, 스마트폰 기술의 출현과 같은 과거의 발전과 마찬가지로 차세대의 엄청난 기술 발전으로 간주됩니다.” Grand View는 또한 "높은 정부 자금의 가용성, 주요 업체의 존재 및 강력한 기술 기반"으로 인해 북미가 특히 AI 배포를 지배할 것으로 예상된다고 지적합니다.

HPC 시장은 생명 과학 및 의학, 기후 연구, 지진 감지 및 구조론, 자동 운전, 물리학 및 천체 물리학, 농업 및 에너지를 포함한 많은 연구 영역을 다룹니다.

최고의 엔터프라이즈 데이터 스토리지 솔루션 비정형 데이터의 경우 주요 연구 정보를 외삽하기 위해 종종 수억 또는 수십억 개의 작은 데이터 포인트로 구성되는 HPC 워크로드에 대한 엄청난 양의 데이터를 처리할 수 있는 분산 파일 시스템입니다. 또한 IoT(사물 인터넷) 혁신은 이러한 데이터 포인트를 기록적인 수준으로 캡처하는 데 도움이 됩니다. 오늘날 사용되는 센서는 다양한 전자 장치에 걸쳐 있습니다. 자치 차량 스마트 시티, 산업 제조 및 공급망에 이르기까지 분석을 위해 중앙 집중식 시스템에 실시간으로 방대한 양의 데이터를 스트리밍하고 있습니다.

AI, 머신 러닝(ML), 3D 이미징과 같은 기술의 지속적인 성장으로 조직이 관리하고 저장해야 하는 데이터의 크기와 양은 계속해서 페타바이트 규모(및 그 이상)로 폭발적으로 증가할 것입니다.

차세대 스케일 아웃 NAS를 개발할 때 Qumulo는 HPC 관련 요구 사항을 충족하기 위해 몇 가지 주요 목표를 염두에 두었습니다.

조직이 필요할 때 중단 없이 쉽게 확장하여 빠른 데이터 증가 및 확장에 보조를 맞춰야 하기 때문에 스토리지 시스템은 더욱 중요해지고 있습니다. Qumulo의 분산 파일 시스템 — Qumulo 코어 — 노드 기반 아키텍처를 활용하여 조직이 온프레미스 및 클라우드 환경에서 성능과 용량을 모두 확장할 수 있습니다. Qumulo의 소프트웨어 정의 스토리지 아키텍처는 Qumulo 하드웨어 또는 사전 검증된 업계 표준 하드웨어로 구성된 노드 클러스터를 활용합니다. HPE or 후지쯔, 모든 NVMe, 활성 아카이브 및 클라우드 등을 포함한 여러 플랫폼 옵션을 제공합니다.

중요한 분석 및 결과 제공이 가장 중요한 HPC 환경에서 HPC 워크로드는 스토리지 시스템에 엄청나게 의존합니다.

HPC 워크로드의 성능 요구 사항을 충족하기 위해 Qumulo의 모든 NVMe 플랫폼은 HPC 환경에서 특히 유용한 매우 짧은 대기 시간으로 업계 최고의 IOPS를 제공합니다. 대기 시간은 HPC 환경의 IOP만큼 중요하므로 시스템이 많은 수의 트랜잭션을 빠르게 처리할 수 있습니다.

Qumulo의 파일 시스템은 다음과 같이 설계되었습니다. 작은 파일을 큰 파일만큼 효율적으로 처리. 이것은 다른 블록에 적용된 "차단" 크기 제한을 제거합니다. 스케일 아웃 NAS 솔루션. 성능을 향상시키기 위해 많은 파일 시스템이 더 큰 블록 크기를 사용하는데, 이는 큰 파일에는 적합하지만 작은 파일에는 매우 비효율적입니다. 각 블록에는 하나의 파일만 포함될 수 있기 때문입니다. 이는 잠재적으로 엄청난 용량 낭비로 이어집니다. Qumulo에는 문제가 되지 않습니다!

상술 한 바와 같이, 클라우드 컴퓨팅 옵션 점점 더 중요해지고 있습니다. 데이터 세트의 크기가 증가하고 AI 및 ML의 컴퓨팅 집약적 특성으로 인해 조직에서는 클라우드를 활용하고 있습니다. 조직은 Qumulo의 단일 플랫폼을 사용하여 컴퓨팅 성능 처리, 향상된 협업 및 데이터 저장을 위해 필요할 때 AWS 또는 GCP 클라우드 환경으로 워크로드를 원활하게 확장할 수 있습니다.

HPC 환경에서 데이터 보호의 중요성

이 산업에서는 데이터 보호 및 가용성도 중요합니다. 쿠물로 제안 업계 최고의 데이터 보호 이레이저 코딩을 사용합니다. 데이터는 드라이브 장애로부터 보호하기 위해 여러 노드에 효율적으로 분산됩니다. 드라이브 오류가 발생하는 경우 기존 RAID 솔루션과 달리 재구축하는 동안 성능이 영향을 받지 않습니다. 이레이저 코딩 또한 RAID보다 복원력을 위해 더 적은 용량(일반적으로 33% 더 적은 공간)이 필요합니다.

또한 Qumulo의 소프트웨어에는 다음이 포함됩니다. 데이터 맹목성을 제거하기 위한 실시간 분석, 수십억 개의 파일에 대한 즉각적인 가시성을 제공합니다. 이 귀중한 기술을 통해 조직은 전체 스토리지 시스템에 대한 실시간 정보를 제어할 수 있으므로 사용량 및 용량 추세를 예측하고 현재 및 미래의 스토리지 요구 사항을 보다 능동적으로 관리할 수 있습니다.

Qumulo의 분산 파일 시스템 소프트웨어는 데이터 센터 및 공용 클라우드를 위한 최고 성능의 파일 스토리지 시스템을 제공하여 오늘날의 규모 요구 사항을 충족하도록 처음부터 설계되었습니다.

데이터가 변경되었습니다. 그렇다면 오늘날 HPC의 까다로운 요구 사항을 위해 이상적으로 설계된 현대적인 파일 스토리지 기술이 존재하는데 XNUMX년 전에 설계된 스토리지 기술을 계속 사용하는 이유는 무엇입니까? Qumulo는 온프레미스 및 클라우드에서 강력한 기능을 제공하고 모든 환경에서 비정형 데이터를 관리할 수 있는 근본적으로 간단한 방법을 제공하도록 설계된 유일한 파일 기반 확장형 NAS입니다.

Current 쿠물로 고객 생명 과학 및 과학 연구 분야에서 운영되는 HPC 산업에는 다음이 포함됩니다. NREL (National Renewable Energy Laboratory), Carnegie Institution for Science, CID Research, Brigham and Women's Hospital의 Channing Division of Network Medicine, DarwinHealth, Inc., Augusta University의 Georgia Cancer Center, University of Washington의 IHME(Institute for Health Metrics and Evaluation), Johns Hopkins Genomics Johns Hopkins University, Progenity, Inc., UConn Health, University of Utah Scientific Computing and Imaging (SCI) Institute… 그리고 Qumulo를 사용하여 데이터 집약적인 워크플로를 가속화하고 새로운 과학 및 의학 혁신의 발견을 가속화하는 많은 다른 기업에서.

관련 게시물

위쪽으로 스크롤