Atempo Miria를 사용하여 Azure 네이티브 Qumulo 확장 가능 파일 서비스로 마이그레이션

다양한 스토리지 플랫폼과 파일 시스템 아키텍처 간의 파일 마이그레이션은 복잡한 프로세스가 될 수 있습니다. 이 문서에서는 Atempo Miria를 사용하여 타사 NAS 시스템의 파일 데이터를 ANQ(Azure Native Qumulo)로 마이그레이션하는 솔루션에 대해 설명합니다. Atempo Miria는 이기종 NAS 환경에서 대규모로 플랫폼에 구애받지 않는 파일 마이그레이션 서비스를 제공합니다. 이 솔루션은 혼합 스토리지 플랫폼 간 파일 데이터의 원활한 마이그레이션을 촉진하고, 고성능 데이터 이동을 제공하고, 데이터 무결성을 보장하며, 레거시 NAS에서 ANQ 인스턴스로의 데이터 마이그레이션 프로젝트를 성공적으로 완료할 수 있도록 지원합니다.

Atempo Miria를 통해 ANQ로 마이그레이션할 때의 이점

확장성	단일 ANQ 인스턴스는 단일 네임스페이스에서 엑사바이트 크기 이상으로 확장될 수 있습니다. Miria는 무제한 규모의 고성능 데이터 이동을 위해 설계되어 기존 NAS 시스템에서 ANQ로 수십억 개의 파일을 마이그레이션하는 프로세스를 단순화합니다.
비용 효율성	ANQ의 전체 TCO는 규모 측면에서도 온프레미스 파일 서비스와 비슷합니다. 고객은 사용하는 동안 사용한 용량과 처리량에 대해서만 비용을 지불합니다. 지능형 멀티스레딩 및 병렬화 기능을 갖춘 Miria for Migration은 파일 마이그레이션을 더욱 원활하고 빠르게 만들어 긴 마이그레이션 주기를 없애고 비용을 최적화합니다. Data Mover를 추가하거나 제거해도 Miria 라이센스에 대한 추가 비용이 발생하지 않습니다.
퍼포먼스	ANQ는 다른 클라우드 기반 파일 플랫폼보다 성능이 뛰어나 대부분의 워크로드에 대해 더 높은 처리량과 더 낮은 대기 시간을 제공합니다. ANQ는 또한 버스트 처리에 필요한 만큼 일시적으로 증가된 처리량을 지원합니다. Isilon/PowerScale, GPFS 등에서 ANQ로의 마이그레이션을 가속화하기 위해 주요 스토리지 공급업체의 Fastscan 통합을 통한 뛰어난 성능. 간단히 Data Mover를 솔루션에 추가하거나 제거하여 전체 처리량을 늘리거나 줄입니다. FastScan을 사용하면 마지막 마이그레이션 주기 이후 생성, 수정 또는 삭제된 파일을 신속하게 감지할 수 있습니다.
글로벌 도달 범위	ANQ는 전 세계 하나 이상의 Azure 지역에 배포될 수 있습니다. Miria Data Mover는 더 나은 성능을 위해 데이터 센터 및 ANQ와 동일한 Azure 지역에 배포될 수 있습니다.
컴플라이언스	Miria Migration은 할당된 액세스 권한으로 파일을 수집하고 대상 스토리지 및 프로토콜에 대한 전체 데이터 및 액세스 무결성을 보장합니다.
관리 단순성	프로세스의 각 단계에 대한 자세한 보고서를 통해 마이그레이션 수렴 지점을 계산할 수 있으며, 이를 통해 마이그레이션해야 할 데이터의 양과 해결해야 할 문제를 알 수 있습니다. 동일한 솔루션을 사용하면 마이그레이션 프로세스를 새 스토리지에 대한 데이터 보호로 전환할 수 있습니다.

아키텍처

이 솔루션은 구성 가능한 성능 옵션을 사용하여 Azure에 배포되며 다음 다이어그램과 같이 Azure Native Qumulo의 엑사바이트 규모 파일 데이터 플랫폼과 Atempo Miria를 결합합니다.

솔루션 아키텍처

이 솔루션은 가상 네트워크 게이트웨이를 포함한 고객 리소스가 있는 단일 Azure 지역의 Azure 고객 테넌트에 배포됩니다.
Atempo Miria는 최적화된 데이터 전송, 병렬화, 멀티스레딩, 빠른 개체 수정 식별을 위한 FastScan 기술, 자동 파일 마이그레이션, 반복 마이그레이션 주기, 무결성 검사 및 성능 조정을 포함한 여러 가지 주요 기능을 제공합니다. 또한 소스와 타겟 스토리지를 지속적으로 비교하고 동기화 중에 해싱 메커니즘을 사용하는 기능을 통해 데이터 신뢰성을 유지합니다.
Miria 서버는 데이터 마이그레이션 프로세스를 위한 중앙 관리 구성 요소입니다.
Atempo Miria Data Mover는 데이터 이동을 관리하며 마이그레이션 작업의 글로벌 성능을 위한 핵심 구성 요소입니다. Data Mover 세트 하나가 기존 레거시 NAS 시스템 옆에 구축됩니다. 두 번째 Data Mover 세트는 최적의 성능을 위해 고객의 Azure 테넌트에 있으므로 대기 시간 문제 없이 작업을 사전 처리 및 사후 처리할 수 있습니다.
솔루션에 사용되는 ANQ 클러스터는 Qumulo의 Azure 테넌트에 배포됩니다.
ANQ 클러스터에 대한 액세스는 Qumulo 테넌트에 있는 고객의 전용 ANQ 클러스터에 연결되는 고객 Azure 테넌트의 전용 서브넷에서 VNet 주입을 통해 활성화됩니다. ANQ 클러스터의 모든 데이터는 고객이 위임한 서브넷의 네트워크 인터페이스를 통해서만 액세스할 수 있습니다. 참고: Qumulo는 ANQ 인스턴스의 데이터에 액세스할 수 없습니다.

여기에서 지금 확인해 보세요. 솔루션의 고해상도 Visio 다이어그램을 다운로드하세요.

솔루션 워크플로

마이그레이션 프로젝트는 3단계로 구성됩니다.

1단계: 첫 번째 동기화: 초기 데이터 전송을 시작하고 소스의 첫 번째 스냅샷을 수행합니다. 스냅샷은 참조 시점으로 사용됩니다. 그런 다음 전송은 소스 스토리지 데이터를 대상 스토리지에 복사합니다.

2단계: 증분 동기화: 이전 증분 동기화 이후 소스 스토리지에 대한 모든 수정 사항을 대상 스토리지에 전파합니다.

3단계: 최종 동기화(컷오버): 소스 NAS 플랫폼의 데이터에 대한 프로덕션 액세스가 중단되는 동안 대상 스토리지로의 데이터 마이그레이션을 완료합니다.

선택 사항 4단계: 예약된 동기화: 레거시 NAS 시스템이 특정 온프레미스 데이터 센터 애플리케이션에 계속 사용되는 경우 레거시 NAS 시스템과 ANQ 간의 데이터 일관성을 보장하는 것이 중요합니다. Miria의 동기화 기능을 사용하면 한 시스템의 모든 데이터 변경 사항이 다른 시스템과 동기화되도록 할 수 있습니다.

Miria 서버는 배포된 Miria Data Mover를 관리합니다. NFS 워크로드와 SMB 워크로드에는 Data Mover에 대해 서로 다른 OS 배포가 필요합니다. Miria 서버 자체는 Linux 또는 Windows OS에 배포할 수 있습니다.
Data Mover를 Linux 풀 또는 Windows 풀 내에서 결합하여 중복성을 추가하거나(하나의 Data Mover에 오류가 발생한 경우) 전체 처리량을 높이거나 대규모 데이터 세트의 마이그레이션 시간을 단축할 수 있습니다.
온-프레미스 Data Mover와 Azure 기반 환경 간의 액세스는 Azure VPN Gateway 또는 ExpressRoute 연결을 통해 이루어질 수 있습니다.
Atempo Miria 서비스는 모든 파일에 대한 전체 액세스를 보장하기 위해 레거시 NAS 시스템과 ANQ 인스턴스 모두에서 관리자 또는 루트 수준 사용자 계정을 사용하여 실행해야 합니다.
FastScan, SnapStor 및 통합 스냅샷 관리 옵션을 지원하려면 레거시 NAS 및 ANQ 스토리지에 대한 API 연결이 필요합니다. () 고급 스토리지 통합을 사용하면 동기화 작업을 통해 NFS 내보내기 또는 SMB 공유와 해당 구성 설정을 레거시 NAS에서 ANQ 클러스터로 복제할 수 있습니다. Qumulo 외에도 Isilon, OceanStor, Nutanix NAS 및 GPFS 공유 파일 시스템에서 마이그레이션할 때 FastScan 기능을 사용할 수 있습니다.
레거시 NAS 시스템에 SMB 및 NFS 데이터가 모두 포함되어 있는 경우 NTFS 및 POSIX 권한이 포함된 데이터 세트를 마이그레이션할 수 있습니다. SMB 데이터를 이동할 때 Windows 풀의 Data Mover를 사용합니다. NFS를 통해 공유되는 소스 파일의 경우 Data Mover는 Linux 풀에서 선택해야 합니다. 단일 데이터 세트가 POSIX 및 ACL 권한을 통해 공유되는 교차 프로토콜 권한을 성공적으로 마이그레이션하려면 추가 단계가 필요할 수 있습니다. 초기 동기화(및 데이터의 POSIX 권한 구조 마이그레이션)는 Linux 풀의 Data Mover를 사용하여 수행할 수 있습니다. NFS 프로토콜의 오버헤드가 낮기 때문에 일반적으로 NFS 우선 접근 방식이 더 빠른 방법입니다. 이후에 Windows 풀의 Data Mover에 추가 작업을 생성하여 동일한 데이터에 대한 NTFS 권한을 마이그레이션할 수 있습니다.
레거시 NAS에서 하나 이상의 소스 디렉터리를 선택하고 ANQ에서 해당 대상을 지정합니다. .snapshot 및 .snapshots 디렉터리에 대한 디렉터리 정의를 제외하도록 주의하세요.
동기화 유형 – Echo는 소스 디렉터리에서 대상 디렉터리로 동기화를 적용합니다.
병렬화는 데이터를 마이그레이션하기 위해 여러 개의 동시 스트림을 생성하여 마이그레이션 창을 단축합니다. 스캔 프로세스 중에 임계값에 도달할 때마다 새 작업이 시작됩니다. 임계값은 시간 제한, 파일 선택 크기, 파일 수 또는 이들의 조합일 수 있습니다.
성능 및 충돌 방지 요구 사항에 따라 무결성 검사를 위한 올바른 해싱 알고리즘을 선택합니다.
ANQ에서 SMB 공유 및/또는 NFS 내보내기에 대한 클라이언트 연결을 테스트합니다.
작업은 수동으로 예약하거나 시작할 수 있는 자동 작업입니다. 작업은 Miria 작업의 범위, 작업이 처리하는 데이터의 소스와 대상, 일정을 정의합니다. 일정은 기존 NAS 시스템과 ANQ 간에 자동 작업이 시작되는 시간을 정의합니다.

구성 요소들

솔루션 아키텍처는 다음 구성 요소로 구성됩니다.

Azure 네이티브 Qumulo 확장 가능 파일 서비스 솔루션을 사용하여 생성된 모든 콘텐츠에 대한 통합 데이터 스토리지를 제공하는 클러스터
아템포 미리아 로컬 스토리지에서 ANQ로 데이터를 마이그레이션합니다.
- 미리아 서비스
- Miria Data Mover(에이전트)(최소 16코어 CPU, 32GB 메모리 및 10GbE 네트워크)
Azure Express 경로 및 / 또는 Azure VPN 게이트웨이
Azure VNet 주입
Azure 가상 네트워크
기존 NAS(예: 온프레미스 Dell EMC Isilon/PowerScale)

고려

Atempo Miria를 사용하여 Azure 네이티브 Qumulo 확장 가능 파일 서비스로 파일을 마이그레이션할 때는 계획 및 설계 프로세스에서 다음 고려 사항을 포함해야 합니다.

잠재적 사용 사례

데이터 이동: 클라우드 마이그레이션은 애플리케이션과 데이터를 온프레미스 시스템에서 퍼블릭 클라우드로 이동하는 프로세스입니다. 그러나 시중에 나와 있는 레거시 NAS 옵션은 퍼블릭 클라우드에서 기능이나 확장성이 제한되어 있습니다. ANQ는 Azure에서 향상된 기능과 확장성을 제공합니다. Atempo Miria는 데이터 무결성을 보장하면서 파일 데이터를 ANQ로 고성능 마이그레이션하는 것을 촉진합니다.
재해 복구: ANQ를 보조 DR 사이트로 활용하여 조직이 데이터를 클라우드에 복제할 수 있습니다. 기본 온프레미스 사이트에 영향을 미치는 재해가 발생하는 경우 조직은 ANQ의 복제된 데이터로 전환하고 중단을 최소화하면서 운영을 계속할 수 있습니다. Atempo Miria FastScan 기능은 소스 레거시 NAS에서 복제할 파일을 신속하게 감지합니다.

확장 성 및 성능

Qumulo 및 Atempo Miria를 사용하여 데이터 마이그레이션 솔루션을 계획할 때 엔터프라이즈 설계자 및 기타 이해관계자는 솔루션에 다음을 포함할 수 있습니다.

용량 및 성장 – ANQ는 필요에 따라 쉽게 확장되므로 데이터를 생성하거나 마이그레이션하는 것만으로 필요한 만큼의 용량을 추가할 수 있습니다.
Atempo 도구를 사용하면 완전 자동화, 로드 밸런싱, 거시적 및 미시적 수준 보고를 통해 파일, 폴더 및 ACL 데이터를 레거시 NAS에서 ANQ로 마이그레이션할 수 있습니다. 멀티스트리밍, 멀티스레딩 Atempo Miria Data Mover 덕분에 도구의 성능을 확장할 수 있습니다.
처리량 – ANQ를 사용하면 필요에 따라 1GB/s 단위로 처리량을 조정하여 항상 필요한 처리량의 가용성을 보장할 수 있습니다.
Miria 소프트웨어를 사용하면 소스와 대상 스토리지 간의 전송 속도가 종단 간 연결의 네트워크 속도에 근접할 수 있습니다. 성능은 데이터 유형 및 레이아웃에 의해 영향을 받을 수 있습니다. 특정 데이터 세트 내의 작은 파일 수가 많거나 디렉토리 수가 많으면 Data Mover의 로드가 증가하여 전체 처리량이 느려질 수 있습니다.

보안

Azure 네이티브 Qumulo 확장 가능 파일 서비스는 완전히 라우팅 가능하고 안전하며 리소스에만 표시되는 VNet 주입을 사용하여 Azure 환경에 연결합니다. 사용자 환경과 ANQ 클러스터 간의 IP 공간 조정은 필요하지 않습니다.

솔루션의 보안이 업계 모범 사례, 기업 내부 정책 및 관련 법률/규정 요구 사항을 준수하도록 설계 및 구현 중에 주의를 기울여야 합니다.

솔루션의 다른 모든 측면에서 고객은 해당 산업 및 위치에 적용되는 모든 법적 및 규제 요구 사항을 충족하기 위해 솔루션의 보안을 계획, 구현 및 유지 관리할 책임이 있습니다.

비용 최적화

비용 최적화란 솔루션에 발생하는 실제 비용의 가치를 최대화하면서 불필요한 비용을 최소화하는 것을 의미합니다. 자세한 내용은 다음을 방문하세요. 비용 최적화 원칙 개요 페이지.

Azure의 종량제 모델을 사용하면 필요할 때 용량을 사용하도록 리소스 크기를 조정하여 비용을 최적화할 수 있습니다. 이를 통해 리소스를 과도하게 프로비저닝하지 않고도 비용을 효율적으로 관리할 수 있습니다.
Qumulo 비용은 Azure 네이티브 Qumulo 확장 가능 파일 서비스 및 성능 계층의 데이터 양에 따라 달라집니다. 자세한 내용은 다음을 참조하세요. Azure 기본 Qumulo 확장 가능 파일 서비스 가격.
Miria의 아키텍처는 확장성을 고려하고 병렬화된 데이터 흐름을 제공하도록 설계되었습니다. 더 많은 성능과 더 높은 성능이 필요한 경우 필요에 맞게 다른 Data Mover를 추가하기만 하면 됩니다.

유효성

동일한 애플리케이션이라도 조직마다 가용성 및 복구 가능성 요구 사항이 다를 수 있습니다. 가용성이라는 용어는 구축된 성능 수준에서 서비스를 지속적으로 제공하는 솔루션의 능력을 나타냅니다.

데이터 및 스토리지 가용성

ANQ 배포에는 기본 하드웨어 오류에 대비한 데이터 가용성을 보장하기 위해 데이터 수준에 내장된 중복성이 포함되어 있습니다. 우발적인 삭제, 손상, 맬웨어 또는 기타 사이버 공격으로부터 데이터를 보호하기 위해 ANQ에는 파일 시스템 내의 모든 수준에서 스냅샷을 찍어 데이터의 특정 시점 읽기 전용 복사본을 생성하는 기능이 포함되어 있습니다.

ANQ는 Azure, 다른 클라우드 또는 온-프레미스에서 호스팅될 수 있는 보조 Qumulo 스토리지 인스턴스로의 데이터 복제를 지원합니다. ANQ는 파일 기반 백업 솔루션과 호환되어 외부 데이터 보호가 가능합니다.

서비스 안정성 및 연속성

마이그레이션되는 데이터의 범위와 중요도에 따라 일부 상황에서는 단계적 접근 방식이 적절할 수 있습니다. 단일 작업으로 레거시 스토리지의 전체 콘텐츠를 마이그레이션하는 대신 단계적 접근 방식에서는 더 크고 더 중요한 데이터로 이동하기 전에 더 작고 덜 중요한 데이터 세트를 사용하여 프로세스를 개발하고 마무리하는 방식으로 한 번에 하나의 워크플로를 마이그레이션합니다.

이 접근 방식의 또 다른 이점은 마이그레이션 작업에서 발생할 수 있는 모든 문제의 범위가 단일 워크플로 또는 데이터 세트로 제한된다는 것입니다.