
Atempo Miria를 사용하여 Azure Native Qumulo로 마이그레이션하기
이 솔루션은 혼합 스토리지 플랫폼 간에 파일 데이터를 원활하게 마이그레이션하여 고성능 데이터 이동을 제공하고 데이터 무결성을 보장하며 레거시 NAS에서 ANQ 인스턴스로의 데이터 마이그레이션 프로젝트를 성공적으로 완료할 수 있도록 지원합니다.
Atempo Miria를 사용하여 Azure 네이티브 Qumulo 확장 가능한 파일 서비스로 마이그레이션
서로 다른 스토리지 플랫폼과 파일 시스템 아키텍처 간의 파일 마이그레이션은 복잡한 프로세스가 될 수 있습니다. 이 문서에서는 Atempo Miria를 사용하여 타사 NAS 시스템에서 Azure Native Qumulo(ANQ)로 파일 데이터를 마이그레이션하는 솔루션에 대해 설명합니다. Atempo Miria는 이기종 NAS 환경에서 플랫폼에 구애받지 않는 대규모 파일 마이그레이션 서비스를 제공합니다. 이 솔루션은 혼합 스토리지 플랫폼 간에 파일 데이터를 원활하게 마이그레이션하여 고성능 데이터 이동을 제공하고 데이터 무결성을 보장하며 레거시 NAS에서 ANQ 인스턴스로의 데이터 마이그레이션 프로젝트를 성공적으로 완료할 수 있도록 지원합니다.
아템포 미리아를 통한 ANQ로의 마이그레이션의 이점
아키텍처
이 솔루션은 구성 가능한 성능 옵션과 함께 Azure에 배포되며, 다음 다이어그램과 같이 Azure Native Qumulo의 엑사바이트급 파일 데이터 플랫폼과 Atempo Miria를 결합합니다.
솔루션 아키텍처
이 솔루션은 가상 네트워크 게이트웨이를 비롯한 고객 리소스가 있는 단일 Azure 지역의 Azure 고객 테넌트에 배포됩니다.
Atempo Miria는 최적화된 데이터 전송, 병렬화, 멀티스레딩, 빠른 개체 수정 식별을 위한 FastScan 기술, 자동 파일 마이그레이션, 반복적인 마이그레이션 주기, 무결성 검사, 성능 조정 등 몇 가지 주요 기능을 제공합니다. 또한 소스 스토리지와 대상 스토리지를 지속적으로 비교하여 데이터 안정성을 유지하고 동기화 중 해싱 메커니즘을 사용하는 기능도 제공합니다.
Miria 서버는 데이터 마이그레이션 프로세스를 위한 중앙 관리 구성 요소입니다.
Atempo Miria 데이터 무버는 데이터 이동을 관리하며 마이그레이션 작업의 글로벌 성능을 위한 핵심 구성 요소입니다. 한 세트의 데이터 이동기는 기존 레거시 NAS 시스템 옆에 배포됩니다. 두 번째 데이터 이동기 세트는 최적의 성능을 위해 고객의 Azure 테넌트에 배치되어 대기 시간 문제 없이 전처리 및 후처리 작업을 수행할 수 있습니다.
솔루션에 사용된 ANQ 클러스터는 Qumulo의 Azure 테넌트에 배포됩니다.
ANQ 클러스터에 대한 액세스는 고객의 Azure 테넌트에 있는 전용 서브넷에서 VNet 인젝션을 통해 활성화되며, 이는 Qumulo 테넌트에 있는 고객의 전용 ANQ 클러스터에 연결됩니다. ANQ 클러스터의 모든 데이터는 고객의 위임된 서브넷의 네트워크 인터페이스를 통해서만 액세스할 수 있습니다. 참고: Qumulo는 ANQ 인스턴스의 어떤 데이터에도 액세스할 수 없습니다.
여기를 클릭하여 솔루션의 고해상도 Visio 다이어그램을 다운로드하세요.
솔루션 워크플로
마이그레이션 프로젝트는 3단계로 구성됩니다:
1단계: 첫 번째 동기화: 초기 데이터 전송을 시작하고 소스의 첫 번째 스냅샷을 수행합니다. 이 스냅샷은 기준 시점으로 사용됩니다. 그런 다음 전송은 소스 스토리지 데이터를 대상 스토리지로 복사합니다.
2단계: 증분 동기화: 는 이전 증분 동기화 이후 소스 스토리지에 적용된 모든 수정 사항을 대상 스토리지로 전파합니다.
3단계: 최종 동기화(컷오버): 소스 NAS 플랫폼의 데이터에 대한 프로덕션 액세스가 중단된 상태에서 대상 스토리지로 데이터 마이그레이션을 완료합니다.
선택 사항 4단계: 예약 동기화: 특정 온프레미스 데이터 센터 애플리케이션에 레거시 NAS 시스템을 계속 사용하는 경우, 레거시 NAS 시스템과 ANQ 간의 데이터 일관성을 보장하는 것이 필수적입니다. Miria의 동기화 기능을 사용하면 한 시스템의 모든 데이터 변경 사항이 다른 시스템과 동기화되도록 할 수 있습니다.
Miria 서버는 배포된 Miria 데이터 무버를 관리합니다. NFS 워크로드와 SMB 워크로드는 데이터 이동기에 대해 서로 다른 OS 배포가 필요합니다. Miria 서버 자체는 Linux 또는 Windows OS에 배포할 수 있습니다.
데이터 이동기를 Linux 풀 또는 Windows 풀 내에서 결합하여 중복성을 추가하고(한 데이터 이동기에 장애가 발생한 경우), 전체 처리량을 늘리거나, 대규모 데이터 세트의 마이그레이션 시간을 단축할 수 있습니다.
온-프레미스 데이터 이동기와 Azure 기반 환경 간의 액세스는 Azure VPN 게이트웨이 또는 ExpressRoute 연결을 통해 이루어질 수 있습니다.
모든 파일에 대한 전체 액세스 권한을 보장하려면 레거시 NAS 시스템과 ANQ 인스턴스 모두에서 관리자 또는 루트 수준 사용자 계정을 사용하여 Atempo Miria 서비스를 실행해야 합니다.
FastScan, SnapStor 및 통합 스냅샷 관리 옵션을 지원하려면 레거시 NAS 및 ANQ 스토리지에 대한 API 연결이 필요합니다. (고급 스토리지 통합을 사용하면 동기화 작업을 통해 NFS 내보내기 또는 SMB 공유 및 해당 구성 설정을 레거시 NAS에서 ANQ 클러스터로 복제할 수 있습니다. Isilon, OceanStor, Nutanix NAS 및 GPFS 공유 파일 시스템에서 마이그레이션할 때 Qumulo 외에도 FastScan 기능을 사용할 수 있습니다.
레거시 NAS 시스템에 SMB 데이터와 NFS 데이터가 모두 포함되어 있는 경우, NTFS 및 POSIX 권한이 포함된 데이터 세트를 마이그레이션할 수 있습니다. SMB 데이터를 옮길 때는 Windows 풀의 데이터 이동기를 사용합니다. NFS를 통해 공유되는 소스 파일의 경우, Linux 풀에서 데이터 이동기를 선택해야 합니다. 단일 데이터 집합이 POSIX 및 ACL 권한을 통해 공유되는 교차 프로토콜 권한의 경우 마이그레이션을 성공적으로 수행하려면 추가 단계가 필요할 수 있습니다. 초기 동기화(및 데이터의 POSIX 권한 구조 마이그레이션)는 Linux 풀의 데이터 이동기를 사용하여 수행할 수 있습니다. NFS 프로토콜의 오버헤드가 낮기 때문에 일반적으로 NFS 우선 접근 방식이 더 빠른 방법입니다. 그런 다음, Windows 풀의 데이터 이동기에 추가 작업을 만들어 동일한 데이터에 대한 NTFS 권한을 마이그레이션할 수 있습니다.
레거시 NAS에서 하나 또는 여러 개의 소스 디렉터리를 선택하고 ANQ에서 해당 대상을 지정합니다. .스냅샷 및 .스냅샷 디렉터리에 대한 디렉터리 정의는 제외하도록 주의하세요.
동기화 유형 - 에코는 소스 디렉터리에서 대상 디렉터리로 동기화를 적용합니다.
병렬화는 데이터를 마이그레이션하기 위해 여러 개의 동시 스트림을 생성하여 마이그레이션 기간을 단축합니다. 스캔 프로세스 중에 임계값에 도달할 때마다 새 작업이 시작됩니다. 임계값은 시간 제한, 파일 선택 크기, 파일 수 또는 이들의 조합일 수 있습니다.
성능 및 충돌 방지 요구 사항에 따라 무결성 검사에 적합한 해싱 알고리즘을 선택하세요.
ANQ에서 SMB 공유 또는 NFS 내보내기에 대한 클라이언트 연결을 테스트합니다.
작업은 수동으로 예약하거나 시작할 수 있는 자동 작업입니다. 작업은 Miria 작업의 범위, 처리하는 데이터의 소스 및 대상, 스케줄을 정의합니다. 일정은 레거시 NAS 시스템과 ANQ 간에 자동 작업이 시작되는 시간을 정의합니다.
구성 요소
솔루션 아키텍처는 다음과 같은 구성 요소로 이루어져 있습니다:
Azure 네이티브 Qumulo 확장 가능한 파일 서비스 클러스터를 사용하여 솔루션을 사용하여 생성된 모든 콘텐츠에 대한 통합 데이터 스토리지를 제공합니다
아템포 미리아 를 사용하여 로컬 스토리지에서 ANQ로 데이터를 마이그레이션할 수 있습니다.
Miria 서비스
Miria 데이터 무버(에이전트)(최소 16코어 CPU, 32GB 메모리, 10GbE 네트워크)
레거시 NAS(예: 온프레미스 Dell EMC Isilon/PowerScale)
고려 사항
Atempo Miria를 사용하여 Azure Native Qumulo 확장 가능한 파일 서비스로 파일을 마이그레이션하려면 계획 및 설계 프로세스에 다음과 같은 고려 사항을 포함해야 합니다.
잠재적 사용 사례
데이터 마이그레이션: 클라우드 마이그레이션은 애플리케이션과 데이터를 온프레미스 시스템에서 퍼블릭 클라우드로 옮기는 과정입니다. 하지만 시중의 레거시 NAS 옵션은 퍼블릭 클라우드에서의 기능이나 확장성이 제한적입니다. ANQ는 Azure에서 향상된 기능과 확장성을 제공합니다. Atempo Miria는 데이터 무결성을 보장하면서 파일 데이터를 ANQ로 고성능 마이그레이션할 수 있도록 지원합니다.
재해 복구: ANQ는 보조 DR 사이트로 활용되어 조직이 데이터를 클라우드로 복제할 수 있습니다. 재해가 발생하여 기본 온프레미스 사이트에 영향을 미치는 경우, 조직은 ANQ에 복제된 데이터로 전환하여 중단을 최소화하면서 운영을 계속할 수 있습니다. Atempo Miria FastScan 기능은 소스 레거시 NAS에서 복제할 파일을 빠르게 감지합니다.
확장성 및 성능
엔터프라이즈 설계자 및 기타 이해관계자는 Qumulo 및 Atempo Miria를 사용하여 데이터 마이그레이션 솔루션을 계획할 때 솔루션에 다음 사항을 포함할 수 있습니다:
용량 및 성장 - ANQ는 필요에 따라 쉽게 확장할 수 있으므로 데이터를 생성하거나 마이그레이션하는 것만으로 필요한 만큼 용량을 추가할 수 있습니다.
Atempo 도구를 사용하면 완전한 자동화, 로드 밸런싱, 매크로 및 마이크로 레벨 보고 기능을 통해 파일, 폴더, ACL 데이터를 레거시 NAS에서 ANQ로 마이그레이션할 수 있습니다. 멀티 스트리밍, 멀티 스레딩 Atempo Miria 데이터 무버 덕분에 도구의 성능을 확장할 수 있습니다.
처리량 - ANQ를 사용하면 필요에 따라 1GB/s 단위로 처리량을 조정하여 항상 필요한 처리량을 확보할 수 있습니다.
Miria 소프트웨어를 사용하면 소스 스토리지와 대상 스토리지 간의 전송 속도가 엔드투엔드 연결의 네트워크 속도에 근접할 수 있습니다. 데이터 유형과 레이아웃에 따라 성능이 영향을 받을 수 있습니다. 특정 데이터 세트 내에 작은 파일이 많거나 디렉터리 수가 많으면 데이터 무버의 부하가 증가하여 전체 처리량이 느려질 수 있습니다.
보안
Azure Native Qumulo 확장 가능한 파일 서비스는 완전히 라우팅 가능하고 안전하며 리소스만 볼 수 있는 VNet Injection을 사용하여 Azure 환경에 연결합니다. 사용자 환경과 ANQ 클러스터 간에 IP 공간을 조정할 필요가 없습니다.
솔루션의 보안이 업계 모범 사례, 기업 내부 정책 및 해당 법률/규제 요건을 준수하도록 설계 및 구현 과정에서 주의를 기울여야 합니다.
솔루션의 다른 모든 측면에 대해서는 고객이 해당 업계 및 지역에 적용되는 모든 법적 및 규제 요건을 충족하도록 솔루션의 보안을 계획, 구현 및 유지 관리할 책임이 있습니다.
비용 최적화비용 최적화는 솔루션에서 발생하는 실제 비용의 가치를 최대화하면서 불필요한 비용을 최소화하는 것을 의미합니다. 자세한 내용은 비용 최적화 기둥 개요 페이지로 이동합니다.
Azure의 종량제 모델을 사용하면 필요할 때 용량을 사용하도록 리소스를 확장하여 비용을 최적화할 수 있습니다. 따라서 리소스를 과도하게 프로비저닝하지 않고도 비용을 효율적으로 관리할 수 있습니다.
Qumulo의 비용은 Azure Native Qumulo 확장 가능한 파일 서비스의 데이터 양과 성능 티어에 따라 다릅니다. 자세한 내용은 다음을 참조하세요 Azure 네이티브 Qumulo 확장 가능한 파일 서비스 가격.
Miria의 아키텍처는 확장성과 병렬화된 데이터 흐름을 제공하도록 설계되었습니다. 더 많은 용량과 더 높은 성능이 필요한 경우, 필요에 맞게 다른 데이터 무버를 추가하기만 하면 됩니다.
가용성
조직마다 동일한 애플리케이션에 대해서도 가용성 및 복구성 요구 사항이 다를 수 있습니다. 가용성이란 솔루션이 구축된 성능 수준에서 서비스를 지속적으로 제공할 수 있는 솔루션의 기능을 의미합니다.
데이터 및 스토리지 가용성
ANQ 배포에는 기본 하드웨어의 장애로부터 데이터 가용성을 보장하기 위해 데이터 레벨에 내장된 이중화 기능이 포함되어 있습니다. 실수로 인한 삭제, 손상, 멀웨어 또는 기타 사이버 공격으로부터 데이터를 보호하기 위해 ANQ에는 파일 시스템 내의 모든 수준에서 스냅샷을 생성하여 데이터의 특정 시점, 읽기 전용 사본을 생성하는 기능이 포함되어 있습니다.
ANQ는 Azure, 다른 클라우드 또는 온프레미스에서 호스팅할 수 있는 보조 Qumulo 스토리지 인스턴스로의 데이터 복제를 지원합니다. ANQ는 파일 기반 백업 솔루션과 호환되어 외부 데이터를 보호할 수 있습니다.
서비스 안정성 및 연속성
마이그레이션하는 데이터의 범위와 중요도에 따라 일부 상황에서는 단계적 접근 방식이 적절할 수 있습니다. 단계적 접근 방식은 레거시 스토리지의 전체 콘텐츠를 한 번에 마이그레이션하는 것이 아니라, 중요도가 낮은 소규모 데이터 세트를 사용하여 더 크고 중요한 데이터로 이동하기 전에 프로세스를 개발하고 마무리하는 방식으로 한 번에 하나의 워크플로우를 마이그레이션하는 것입니다.
이 접근 방식의 추가적인 이점은 마이그레이션 작업에서 발생할 수 있는 모든 문제가 단일 워크플로 또는 데이터 집합으로 범위가 제한된다는 점입니다.
이 시나리오 배포
ANQ 배포에 대한 가이드는 다음을 참조하세요 Azure Native Qumulo 확장 가능한 파일 서비스 시작하기 및 배포.
인바운드 및 아웃바운드 네트워킹에 대한 자세한 내용은 다음을 참조하세요 큐뮬로 코어에 필요한 네트워킹 포트.
구성 및 모니터링에 대한 자세한 정보 아템포 미리아
기여자
이 문서는 Qumulo에서 유지 관리합니다. 이 문서는 원래 다음 기여자가 작성했습니다.
주요 작성자:
베라트 G. 울루알라란 | Qumulo의 솔루션 아키텍트
다음 단계
qumulo를 통해 클라우드로 이전하는 것이 좋은 5가지 이유
마이그레이션용 Miria 스토리지 마이그레이션 프로세스 개요
아템포 미리아: 대용량 데이터 및 파일 마이그레이션 및 복사
관련 리소스
Azure 네이티브 Qumulo 확장 가능한 파일 서비스 (마켓플레이스)
Azure 네이티브 Qumulo 확장 가능한 파일 서비스
Azure 네이티브 Qumulo 확장 가능한 파일 서비스 가이드
클라우드에서 엑사바이트급 파일 데이터로 하이브리드 미래 지원
엔터프라이즈 인프라가 SaaS의 속도로 혁신해야 하는 이유
획기적인 간소화를 위한 하이브리드 클라우드 파일 시스템 구축
마이그레이션을 위한 아템포 미리아 - 웨비나 따라잡기: 구성 및 모니터링 데모
대용량 데이터 및 파일 마이그레이션 및 복사
비정형 데이터 마이그레이션 계획 세우기