Préparer le terrain
Dans les environnements en nuage d'aujourd'hui, le stockage est plus qu'une simple infrastructure : c'est le cœur des applications critiques. De l'interprétation sismique dans le secteur de l'énergie à d'autres charges de travail scientifiques de haute performance, les organisations doivent réduire le temps de prise de décision, qu'il s'agisse d'identifier des ressources énergétiques économiquement récupérables ou d'accélérer d'autres découvertes scientifiques à forte intensité de données.
C'est pourquoi Daniel Gomes, ingénieur principal chez Qumulo, spécialisé dans les charges de travail pétrolières et gazières, a réalisé une analyse comparative des performances entre Cloud Native Qumulo et Amazon FSx pour NetApp ONTAP (FSxN). Daniel a conçu ces tests pour refléter les conditions du monde réel, en utilisant des modèles de clients et des tailles d'ensembles de données couramment observés dans les charges de travail d'interprétation du pétrole et du gaz.
Les résultats : Qumulo a constamment surpassé FSxN dans les scénarios mono-client et multi-clients, en particulier lorsque la concurrence et l'intensité de la lecture augmentaient. La méthodologie a été conçue pour capturer les conditions caractéristiques des applications d'interprétation du pétrole et du gaz - y compris, mais sans s'y limiter, celles utilisées par l'un des plus grands fournisseurs mondiaux de plates-formes d'interprétation géoscientifique et sismique - ainsi que d'autres industries ayant des exigences similaires en matière de performances des systèmes de fichiers. L'objectif de Daniels était de créer des références fiables et reproductibles qui puissent informer à la fois les attentes des clients et les décisions techniques.
L'importance des tests de référence
Les tests de référence sont essentiels car les risques liés aux comportements inconnus, à l'imprévisibilité et à l'allongement de la durée des projets ont un impact direct sur le délai de prise de décision pour de nombreux objectifs du projet. Les tests de référence définissent des attentes réalistes en matière de performances, aident les équipes à identifier les goulets d'étranglement et permettent un dépannage et une résolution plus rapides. En comparant les capacités de Qumulo à celles de NetApp dans AWS, ce benchmark offre une comparaison transparente et pratique entre les deux principaux fournisseurs de services de données non structurées dans l'écosystème d'interprétation de la subsurface. C'est exactement ce que propose ce benchmark : une comparaison de référence transparente et cloud-native entre Qumulo et FSxN sur AWS.
Conception des essais
Clients : Red Hat Enterprise Linux (RHEL) sur AWS EC2 g4dn.16xlarge instances
Outillage : fio (v3.36) avec des profils d'E/S acceptés par l'industrie
Jeux de données : 50GB par test, reflétant la taille typique des projets du secteur de l'énergie (10GB-150GB)
Protocoles : NFSv3 avec des options de montage standardisées sur les deux plates-formes
Charges de travail : Lectures/écritures séquentielles et aléatoires dans le cadre d'une concurrence à un seul client et à six clients
Du côté du stockage :
Qumulo : Un cluster à trois nœuds avec NeuralCache, NVMe et cache gp3, soutenu par S3 Intelligent Tiering.
FSxN : Système HA à deux contrôleurs testé à des niveaux de débit de 1,5, 3 et 6 Go/s avec le cache maximum activé.
50 % de coûts en moins : Le système Qumulo utilisé pour les tests se vendrait environ 50 % moins cher que la solution FSxN.
Résultats
Principaux résultats
1. Qumulo évolue avec les clients
À mesure que la charge des clients augmentait, les performances de Qumulo s'accroissaient, tandis que celles de FSxN plafonnaient.
Lecture séquentielle à six clients (64k) :
Qumulo : 11,57 GB/s (190K IOPS)
FSxN (niveau 6 GBps) : 4.98 GB/s (82K IOPS)
2. NeuralCache offre un avantage constant
Même lorsque le FSxN était doté d'une mémoire cache maximale, l'architecture NeuralCache de Qumulo a surpassé les performances dans les charges de travail lourdes en lecture et a maintenu la concurrence sans complexité.
3. Écritures : Proche, mais Qumulo l'emporte à l'échelle
FSxN a montré sa force dans certaines écritures à client unique, mais Qumulo a pris de l'avance à mesure que la concurrence augmentait :
Écriture aléatoire à six clients (64k) :
Qumulo : 1,65 GB/s (28K IOPS)
FSxN (niveau 6 GBps) : 1.19 GB/s (20K IOPS)
4. Simplicité et rapidité
Déploiement : Qumulo s'est mis en place en ~5 minutes contre ~19 minutes pour FSxN
Mise à l'échelle : L'ajout de nœuds Qumulo ou l'ajustement des types EC2 ne prend que quelques minutes, contre une heure ou plus pour les changements de débit du FSxN
Facilité de gestion : Qumulo évolue de manière transparente dans un espace de noms unique ; FSxN nécessite plusieurs systèmes de fichiers et machines virtuelles de stockage pour atteindre les mêmes performances
Ce que cela signifie pour les entreprises
Qumulo propose aux organisations ayant des charges de travail exigeantes et multi-utilisateurs, comme les applications d'interprétation du pétrole et du gaz :
Débit et IOPS plus élevés dans des conditions de concurrence réelles
Réduction de la complexité opérationnelle grâce à un déploiement et une mise à l'échelle plus rapides
Simplicité à l'épreuve du temps pour les équipes gérant une croissance à l'échelle du pétaoctet
Coût réduit pour les équipes qui cherchent à maximiser leur budget
En revanche, FSxN nécessite davantage de réglages manuels et reste à la traîne de Qumulo dans des domaines de performance critiques.
Le mot de la fin
Ce benchmark sur AWS le montre clairement : Qumulo est le meilleur choix pour des charges de travail de données de fichiers évolutives et performantes dans le nuage pour l'interprétation sismique.
Que vous soyez dans le secteur de l'énergie et de l'interprétation sismique ou dans tout autre secteur où la concurrence et les performances de lecture sont cruciales, Qumulo offre le débit, l'agilité et la simplicité nécessaires pour que vos applications fonctionnent à des niveaux optimaux. Qumulo a déjà permis des migrations à l'échelle du pétaoctet des solutions cloud de NetApp vers l'architecture Cloud Native Qumulo (CNQ). Après avoir effectué ce changement, les organisations utilisant CNQ signalent des coûts d'exploitation réduits, une prise de décision plus rapide et une plus grande flexibilité technologique avec de nouvelles applications et des outils d'IA.
Vous souhaitez consulter l'intégralité des résultats et de la méthodologie de l'analyse comparative ? Contactez-nous pour plus d'informations à l'adresse suivante info@qumulo.com.