와이카토 대학교가 미래를 위한 기반을 어떻게 다졌는가
Qumulo를 통해 연구 데이터 인프라를 현대화하여 관리를 간소화하고, 복원력을 강화하며, 향후 성장을 뒷받침합니다.
와이카토 대학교는 연구, 교육, 행정 업무 전반에 걸쳐 수억 개의 파일을 지원하는, 여전히 원래 이름인 ‘Isilon’으로 흔히 불리는 노후화된 Dell PowerScale 환경을 교체해야 했습니다. 이 대학은 이 프로젝트를 단순한 동급 하드웨어 교체로 취급하기보다는, 기업용 파일 스토리지를 어떻게 운영, 활용, 확장 및 관리해야 하는지에 대해 재고할 기회로 삼았습니다.
이 대학은 HPE GreenLake에서 구동되는 Qumulo를 채택하여, 증가하는 연구 수요를 지원하면서도 엔터프라이즈 스토리지의 운영 부담을 줄일 수 있도록 설계된 사용량 기반 다중 사이트 아키텍처를 구축했습니다. 이 대학은 약 540TB에 달하는 3억 2,700만 개의 파일을 Isilon에서 Qumulo로 마이그레이션했으며, 학업 및 연구 요구 사항을 고려하여 전환 과정을 신중하게 단계별로 진행함으로써 업무 차질을 최소화했습니다.
현재 이 대학은 주요 환경인 해밀턴과 오클랜드에 위치한 보조 재해 복구 사이트 전반에 걸쳐 Qumulo를 운영하고 있습니다. 이 인프라는 현재의 연구 및 학술 업무 부하를 지원할 뿐만 아니라, 대학 측이 S3 활용을 확대하고, 데이터 분석 및 라이프사이클 관리를 개선하며, 외부 연구 협력을 지원하고, 요구 사항이 변화함에 따라 데이터를 추가 위치나 클라우드로 확장할 수 있는 선택지를 제공합니다.
과제: Isilon 시스템 교체 작업이 스토리지 전략을 재검토할 기회로 이어졌다
이 대학은 기업용 파일 스토리지 인프라의 일환으로 Isilon을 사용해 왔습니다. 해당 환경의 수명이 다해감에 따라, 인프라 팀은 이를 대체할 대안을 결정해야 했습니다. 대학 측은 단순히 동일한 플랫폼의 차세대 버전을 자동으로 도입하는 대신, 다른 아키텍처가 대학의 장기적인 인프라 전략을 더 잘 뒷받침할 수 있을지 평가했습니다.
이러한 규모 때문에 그 결정은 매우 중요했습니다. 대학은 3억 2,700만 개의 파일, 140개의 SMB 공유 폴더, 30개의 NFS 공유 폴더에 걸쳐 약 540TB의 데이터를 관리하고 있었습니다. 연구 데이터는 계속 증가하는 한편, 교육, 연구 및 행정 서비스는 해당 정보에 대한 안정적인 접근에 의존하고 있었습니다. 새로운 시스템으로 교체할 때는 익숙한 SMB 및 NFS 접근 방식을 유지해야 했을 뿐만 아니라, 학사 일정과 활발한 연구 업무량에 맞춰야 했기 때문에, 서비스 중단이나 최종 전환을 위한 여유는 거의 없었습니다.
또한 이 대학은 운영의 간소화, 용량 사용 현황에 대한 명확한 가시성, 강력한 재해 복구 기능, 그리고 보다 유연한 확장성을 원했습니다. 대학 측은 예측된 미래 용량을 바탕으로 또 다른 대규모 초기 자본 투자를 하는 대신, HPE GreenLake를 통해 사용량 기반의 운영 비용(OpEx) 구조로 전환하기를 원했습니다.
데이터 사용 현황을 보다 명확하게 파악하는 것도 또 다른 고려 사항이었습니다. 대학 측은 어떤 분야에서 용량을 많이 사용하고 있는지, 어디에서 사용량이 증가하고 있는지, 그리고 궁극적으로는 인프라 비용을 이를 발생시키는 부서와 어떻게 더 밀접하게 연계할 수 있을지 파악하고자 했습니다. 따라서 Isilon을 교체하는 것은 단순히 새로운 스토리지를 구입하는 것을 넘어, 연구 데이터를 위한 새로운 운영 모델을 구축할 수 있는 기회가 되었습니다.
왜 쿠뮬로인가요?
Qumulo는 연구진과 애플리케이션이 이미 익숙한 워크플로우를 포기할 필요 없이 대학의 파일 인프라를 현대화할 수 있는 방법을 제공했습니다. 이 플랫폼은 HPE GreenLake 사용량 기반 모델 내에서 통합된 SMB 및 NFS 서비스, 스냅샷, 복제, 액세스 제어, 실시간 용량 가시성을 제공합니다.
이 대학은 기존의 기업용 파일 액세스 방식을 유지하면서, 내부적으로는 관리 업무를 간소화하고 있습니다. 용량은 단순히 주기적으로 대규모 하드웨어를 구매하는 방식이 아닌, 수요에 따라 유연하게 확장되며, Qumulo 아키텍처는 요구 사항이 필연적으로 변화함에 따라 대학의 현재 환경을 넘어 확장할 수 있는 옵션을 제공합니다. 핵심 요구 사항 중 하나는 코어, 엣지, 클라우드 전반에 걸쳐 민첩성을 제공하는 데이터 기반입니다.
또한, 대학 측은 수억 개에 달하는 기존 파일을 Isilon에서 이전하면서도, 이 저장 장치 전환 과정이 연구자들에게 큰 차질을 초래하지 않을 것이라는 확신을 가져야 했습니다.
Isilon에서 540 TB 및 3억 2,700만 개의 파일을 이전
이 대학은 140개의 SMB 공유 폴더와 30개의 NFS 공유 폴더를 포함해, 약 3억 2,700만 개의 파일로 구성된 약 540TB의 데이터를 마이그레이션해야 했습니다. 이 프로젝트는 학사 일정과 활발히 진행 중인 연구 업무를 고려해야 했기 때문에, 시스템 중단 및 최종 전환을 진행할 수 있는 기간이 매우 제한적이었습니다.
이 대학은 단계적 접근 방식을 통해 워크로드를 통제된 단계별로 이전함으로써, 데이터 무결성을 유지하고 권한을 보존하며 운영 중단을 최소화하면서 불과 몇 달 만에 마이그레이션을 완료했습니다. Atempo Miria는 25Gb 네트워크를 통해 데이터를 이전했습니다. 이 대학은 학업 및 연구 요구 사항에 부합하는 마이그레이션 속도를 선택했으나, 더 짧은 기간 내에 완료해야 할 경우 이 솔루션을 통해 마이그레이션 속도를 높일 수 있습니다.
Qumulo는 각 고객의 환경과 요구 사항에 따라 다양한 마이그레이션 기술과 방식을 지원합니다. 이 대학의 마이그레이션 이후, Qumulo는 Dell PowerScale을 비롯한 타사 NAS 플랫폼에서 대규모 마이그레이션을 간소화하기 위해 설계된 고속 데이터 이동 엔진인 Qumulo SLURP(Simple Lightweight Universal Replication Program)를 도입했습니다. 이 대학이 마이그레이션을 수행했을 당시에는 SLURP가 아직 제공되지 않았습니다.
어떤 마이그레이션 기술을 사용하든, 본 대학의 사례는 중요한 점을 보여줍니다. 즉, 대용량 파일 환경을 Isilon이나 NetApp에서 이전하더라도 해당 데이터를 사용하는 사용자나 애플리케이션에 지장을 줄 필요는 없다는 것입니다. 다음과 같이 와이카토 대학교 디지털 인프라 담당 책임자 로버트 유르겐센,는 이러한 변화를 다음과 같이 설명했다:
“거의 차질 없이 진행되었습니다. 평소와 다름없이 업무가 이어졌죠. 연구원들은 이실론(Isilon)을 사용할 때와 본질적으로 동일한 방식으로 스토리지를 계속 활용했습니다. 기반 인프라가 바뀌었음에도 불구하고, SMB 및 NFS 워크플로우는 여전히 익숙한 그대로였습니다.”
Isilon에서 벗어나려는 조직에게 이러한 연속성은 중요합니다. 스토리지 현대화 프로젝트가 반드시 사용자나 워크로드 현대화 프로젝트로 이어질 필요는 없습니다.
스토리지 관리 부담은 줄이고, 인프라 유연성은 높이기
구 환경과 신 환경 간의 차이는 내부적으로 더욱 뚜렷해졌습니다. 대학의 목표 중 하나는 엔터프라이즈 스토리지 운영에 필요한 전문적인 관리 업무를 줄이는 것이었습니다. 현재 대학에서는 Qumulo에만 전념하는 전담 스토리지 관리자가 필요하지 않습니다. 대신, 더 광범위한 인프라 팀이 이 업무를 손쉽게 분담하고 있습니다.
유르겐센은 이 플랫폼이 매우 직관적이어서 추가 팀원들이 수개월에 걸친 전문적인 교육 없이도 쉽게 익힐 수 있었다고 말했다. 현재 인프라 조직 소속 직원 3~4명이 큐뮬로(Qumulo)를 능숙하게 다루고 있어, 단일 스토리지 전문가에 대한 의존도가 줄어들었다.
본 대학의 업그레이드 과정도 비슷한 양상을 보였습니다. Qumulo의 지원팀이 소프트웨어 업그레이드 및 보안 업데이트를 지원해 주었으며, 그 과정은 매우 간단했습니다. 그 결과, 스토리지 문제로 인해 인프라 팀이 끊임없이 신경을 써야 하는 상황 없이도 방대한 연구 데이터를 지원할 수 있는 환경이 조성되었습니다.
연구 데이터에 대한 가시성 제고
스토리지 플랫폼을 현대화함으로써 대학은 관리 중인 데이터에 대한 더 깊은 통찰력을 얻게 되었습니다. Qumulo는 사용량과 성능에 대한 가시성을 제공하며, 대학의 인프라 팀은 환경에 대한 더 심층적인 통찰력을 얻기 위해 Qumulo API와 추가적인 시각화 기능을 모색하고 있습니다.
연구 기관의 경우, 용량 관리는 단순히 사용 가능한 용량이 몇 테라바이트 남았는지 파악하는 것 이상의 의미를 지닙니다. 대학 측은 누가 용량을 사용하고 있는지, 개별 분야의 용량이 얼마나 빠르게 증가하고 있는지, 그리고 주 저장 장치를 차지하고 있는 데이터가 여전히 활발히 사용되고 있는지 파악하고자 합니다.
유르겐센은 인프라 팀이 예를 들어, 수년 동안 한 번도 접근되지 않은 150TB 규모의 데이터를 보유한 연구 그룹을 식별할 수 있는 미래를 묘사했다. 이러한 정보는 해당 데이터가 여전히 주 저장 공간을 차지해야 하는지, 다른 계층으로 이동할 수 있는지, 아니면 활성 연구에 사용할 수 있도록 용량을 회수할 수 있는지에 대한 논의를 뒷받침할 수 있다. 대학 측은 단순히 스토리지를 추가로 구매하는 방식으로 데이터 증가에 대응하기보다는, 데이터 활용 방식을 바탕으로 인프라 관련 결정을 내리기를 원합니다.
Qumulo를 기존 파일 스토리지의 범위를 넘어 확장하기
이 대학은 이미 Qumulo를 기존의 SMB 및 NFS 파일 서비스 이상의 용도로 활용하고 있습니다. 한 가지 예로, 대학의 학습 관리 시스템에서 인프라 팀은 Qumulo의 S3 기능을 활용하여 지원 및 개발 환경을 위해 운영 데이터의 읽기 전용 라이브 복사본을 생성했습니다.
이전에는 이러한 환경을 유지 관리하기 위해 프로덕션 내보내기 데이터를 해당 환경으로 반복적으로 이동시켜야 하는 경우가 있었습니다. 새로운 접근 방식은 공통의 스테이징 지점을 제공함으로써, 프로덕션 내보내기 데이터를 환경 간에 지속적으로 이동시켜야 할 필요성을 줄여줍니다. 이는 대학이 Qumulo를 단순히 대체된 Isilon 환경을 재현하는 것 이상의 용도로 활용할 수 있는 초기 사례입니다.
데이터 주권과 선택의 중요성
본 대학의 현대화 전략은 모든 것을 퍼블릭 클라우드로 이전하는 것을 전제로 하지 않습니다. 연구 환경의 일부에 대해서는 거버넌스 및 데이터 주권 문제를 고려할 때 데이터를 온프레미스에 보관하는 것이 여전히 중요합니다. 연구 데이터 세트에는 의료 데이터나 마오리족 관련 데이터 등 민감한 정보가 포함될 수 있으며, 이 경우 대학은 정보가 어디에 저장되고 어떻게 관리될지 신중하게 고려해야 합니다.
이 때문에 대학 측이 Isilon 대체 솔루션을 평가할 때 강력한 온프레미스 아키텍처가 중요한 요구 사항으로 대두되었습니다. 동시에, 대학 측은 현재의 인프라 결정이 미래의 선택지를 제한하는 것을 원치 않았습니다. Jurgensen은 요구 사항이 변화함에 따라 Qumulo 환경을 확장하는 데 가치를 두고 있으며, 이는 온프레미스 위치 추가, 클라우드 인프라, 에지 연구 거점, 또는 이 모든 것의 조합을 의미할 수 있습니다.
미래: 연구 데이터를 연구자들에게 더 가까이 다가가게 하기
대학 연구는 기관, 지역, 국가를 초월한 협력이 점점 더 중요해지고 있습니다. 와이카토 대학교는 전 세계의 연구자 및 기관과 협력하고 있으며, 외부 연구자들이 협업에 필요한 데이터 세트에 접근하기 위해 VPN 연결이나 기관 인증 정보, 기타 수단을 반드시 확보해야 할 때, 기존의 원격 접속 방식은 업무에 차질을 빚을 수 있습니다.
대학 측은 필요한 거버넌스 및 인프라 통제 체계를 유지하면서도, 현대적인 파일 공유 서비스에 가까운 경험을 제공할 수 있는 방안을 모색하고 있습니다. 또 다른 가능성은 모든 공동 연구자가 해밀턴으로 접속해야 하는 대신, 해당 데이터셋을 다루는 연구자 근처에 적절한 데이터셋을 배치하는 것입니다.
“핵심 우선순위는 외부 연구자들과의 협업을 훨씬 더 원활하게 만드는 것입니다. 우리의 요구 사항이 변화함에 따라, Qumulo가 이를 해결하고 앞으로 닥칠 어떤 상황에도 대처할 수 있는 올바른 데이터 플랫폼을 제공해 주었다고 확신합니다.” – 로버트 유르겐센
따라서 대학 측은 쿠뮬로(Qumulo)의 전체 제품군, 특히 광범위한 S3 서비스, 분산 데이터 액세스, 모니터링, 싱글 사인온(SSO) 통합, 계층화, 아카이빙, 클라우드 연결, 랜섬웨어 보호 및 사이버 복구 기능을 면밀히 검토하고 있습니다. Jurgensen은 대학의 요구 사항이 변화함에 따라 추가적인 위치로 “Qumulo의 기반 구조”를 확장하는 것이 더 큰 기회라고 설명했습니다.
목표는 단순히 클라우드를 도입하는 것이 아닙니다. 접근성, 경제성, 성능, 협업, 거버넌스 등을 고려하여 대학이 데이터를 어디에 저장할지 더 많은 선택권을 갖도록 하는 것입니다.
비즈니스에 미치는 영향
540 TB가 Isilon에서 이전되었습니다. 이 팀은 연구, 교육 및 행정 서비스의 연속성을 유지하면서 140개의 SMB 공유 폴더와 30개의 NFS 공유 폴더에 걸쳐 약 3억 2,700만 개의 파일을 마이그레이션했습니다.
사용자에게 미치는 불편을 최소화합니다. 연구진은 기반 인프라가 바뀌었음에도 불구하고, 익숙한 SMB 및 NFS 워크플로를 통해 계속해서 데이터에 접근했습니다.
두 곳에서의 복원력. Qumulo는 대학의 주요 해밀턴 환경과 오클랜드 재해 복구 사이트 전반에서 운영되며, 각 사이트에 10개의 노드가 배치되어 있고 준실시간 복제 기능을 갖추고 있습니다.
전문적인 스토리지 관리에 대한 의존도를 낮춥니다. 전담 스토리지 전문가에게만 의존하지 않고, 여러 인프라 팀 구성원이 Qumulo를 관리할 수 있습니다.
연구 데이터에 대한 가시성 제고. 용량 및 활용도 정보는 데이터 증가, 보존, 계층화 및 향후 인프라 요구 사항에 대해 더 나은 의사 결정을 내리는 데 기초가 됩니다.
향후 연구 협력을 위한 플랫폼. 본 대학은 S3, 분산 액세스, 계층화, 아카이빙, 클라우드 통합, 모니터링, SSO 및 기타 사이버 복구 기능들이 점점 더 분산화되고 있는 연구 활동을 어떻게 지원할 수 있을지 모색하고 있습니다.
핵심 요점: Isilon을 포기한다고 해서 반드시 사용자에게 불편을 초래해야 하는 것은 아닙니다.
와이카토 대학교의 사례는 기존 Isilon 환경을 교체해야 할 필요가 생기면서 시작되었습니다. 대학 측은 단순히 동일한 아키텍처의 차세대 제품을 구매하는 대신, 이번 시스템 교체를 계기로 엔터프라이즈 파일 스토리지의 구매, 관리, 확장, 보호 및 활용 방식을 재검토했습니다.
이 대학은 연구원들이 익숙한 SMB 및 NFS 워크플로우를 계속 활용하면서, 약 540TB와 3억 2,700만 개의 파일을 Isilon에서 Qumulo로 이전했습니다. 이 대학은 스토리지 관리 업무를 인프라 팀 전체에 보다 효율적으로 분산하고, 두 거점에 걸쳐 복원력을 구축했으며, 요구 사항이 변화함에 따라 인프라를 보다 유연하게 활용할 수 있도록 HPE GreenLake 모델을 도입했습니다.
Isilon, NetApp 또는 기타 플랫폼에서 벗어나기를 고려 중인 조직들에게 와이카토 대학교의 사례는, 기반 스토리지 플랫폼을 변경한다고 해서 데이터를 사용하는 인력과 애플리케이션에 차질이 생길 필요는 없음을 보여줍니다. 이번 마이그레이션은 시작에 불과했습니다. 이제 이 대학은 연구 데이터, 협업, 라이프사이클 관리, 클라우드 확장 및 인프라에 대한 접근 방식과 함께 발전해 나갈 수 있는 플랫폼을 갖추게 되었습니다.