A Qumulo tem como missão redefinir o que significa “Scale Anywhere™” sem sacrificar o desempenho ou o custo. As opções disponíveis atualmente para executar cargas de trabalho de arquivos na nuvem podem ser consideradas limitadas em termos de escala e desempenho, com suporte mínimo ou inexistente para recursos empresariais essenciais, ou com custos proibitivos. A solução da Qumulo resolve todos esses desafios, proporcionando aos nossos clientes uma experiência e um conjunto de recursos idênticos em todas as implantações, seja ao escalar a infraestrutura local ou ao expandir cargas de trabalho para a nuvem pública.
Neste blog, vamos nos aprofundar nos benefícios do armazenamento Qumulo, explorando como nossa capacidade de atender a cargas de trabalho de alto desempenho se tornou um divisor de águas para diversos setores verticais e casos de uso nativos da nuvem. Estamos animados em mostrar como o Qumulo oferece o maior valor para executar cargas de trabalho multiprotocolo em qualquer lugar.
Desempenho de referência
A arquitetura exclusiva da Qumulo oferece desempenho consistente, sustentável e impressionante. A Qumulo otimizou o equilíbrio entre desempenho e custo em sua arquitetura híbrida central, na qual os dados inativos residem em armazenamento em disco de baixo custo, mas são acessados com a velocidade de um SSD e da memória. Como resultado, o algoritmo de pré-busca altamente otimizado da Qumulo monitora as solicitações de leitura, antecipa quais blocos de dados provavelmente serão solicitados em seguida e os pré-busca na memória do sistema para um acesso ainda mais rápido do que a camada de SSD pode oferecer. O efeito líquido para os clientes da Qumulo (e suas cargas de trabalho) é uma experiência incrível e altamente previsível, com a grande maioria das operações de leitura sendo atendida com latência inferior a 1 ms.
Coletamos dados de métricas de desempenho em toda a nossa frota de produção ao longo de um período de dois meses e agregamos os resultados, que são simplesmente impressionantes. No gráfico abaixo, retratamos com precisão a experiência atual de nossos clientes com base nos mais de 1.000 clientes que implantaram o Qumulo.
Para resumir nossas conclusões:
Mais de 90% de todas as leituras são atendidas com latência <= 1 ms. Dentro desses 90%:
a. 50% de todas as operações de leitura são atendidas a partir da memória do sistema – mais rápido do que os SSDs
b. 25% de todas as leituras são realizadas em <0,1 ms!
c. 48% das leituras ocorrem em 0,25 ms, seja da memória do sistema ou de SSDs
d. 20% ocorrem entre 0,5 e 1 msApenas 10% de todas as leituras foram feitas a partir do disco, e mais da metade delas ainda apresentam latência de 2 ms ou menos — o que continua sendo bastante impressionante
Vamos examinar mais de perto alguns dos indicadores de desempenho que alcançamos em ambientes locais e na nuvem.
Para cargas de trabalho nativas da nuvem, com capacidade de pico, computação de pico ou baseadas em recuperação de desastres (DR), os clientes podem escolher em qual das nuvens públicas mais populares usar o Qumulo como sua opção padrão de armazenamento. O Qumulo anunciou recentemente seu serviço gerenciado, Qumulo nativo do Azure, como um serviço disponível para o público em geral, com lançamentos em outras regiões previstos para breve. O ANQ não só oferece capacidade praticamente ilimitada em um único namespace, como também as velocidades de transferência podem chegar a 21 GBps. Se o resultado do benchmark da ANQ já não fosse impressionante o suficiente, os clientes que utilizam Qumulo na AWS pode levar cargas de trabalho com alto volume de processamento a um nível impressionante 60 GBps! Você não encontrará nenhuma outra opção no mercado hoje que se compare ao desempenho nativo da nuvem da Qumulo para armazenamento de arquivos em escala horizontal.
Para cargas de trabalho exigentes que requerem alto desempenho no local, realizamos recentemente testes de desempenho que demonstram todo o potencial da execução do software Qumulo em hardware exclusivamente NVMe.
Teste de desempenho com capacidade de 245 TB
Leituras em fluxo único do NFS v3 – 4.070,37 MB/s
Leituras em fluxo de 128 no NFS v3 – 22.420,74 MB/s
Gravação em fluxo único do NFS v3 – 2.439,86 MB/s
Gravações em 128 fluxos no NFS v3 – 18.832,45 MB/s
Esses números, embora sejam muito impressionantes, representam apenas um instantâneo no tempo. Continuaremos a alcançar um desempenho cada vez melhor à medida que novas inovações em hardware comum forem surgindo no mercado.
Por fim, mais uma característica valiosa que costuma ser ignorada no Qumulo: não importa se o sistema está operando a 1% ou a 99,9% da capacidade total – o desempenho NÃO é prejudicado, escalonando-se linearmente à medida que nova capacidade é adicionada. Os clientes da Qumulo obtêm o valor total de tudo pelo que pagam.
Desempenho nos setores-alvo
Mídia e Entretenimento
O setor de mídia e entretenimento depende de alta taxa de processamento em todos os fluxos de trabalho: animação, renderização, edição e transmissão de conteúdo em alta definição. Em qualquer um desses casos de uso, manter uma taxa de processamento sustentada em paralelo e atingir picos de desempenho podem ser igualmente desafiadores. É por isso que 9 das 10 maiores empresas de mídia e entretenimento do mundo Confie na Qumulo. Nosso desempenho consistentemente alto garante que a criatividade flua sem esforço, atingindo até 60 GB/s para cargas de trabalho nativas da nuvem e de pico, nas quais a infraestrutura pode ser rapidamente provisionada para um projeto específico e, em seguida, desativada quando ele for concluído.
“Ter espaço de armazenamento suficiente e manter a taxa de transferência no nível mais alto são grandes desafios para qualquer estúdio de efeitos visuais”, disse James Morgan, administrador de sistemas e suporte da MARZ. “A expansão também é um grande desafio para nós, ou melhor, era. Não precisamos mais nos preocupar com isso, já que a expansão no Qumulo é muito fácil.”
Recentemente, publicamos um blog com números de desempenho que demonstram uma carga de trabalho sintética (utilizando o software de benchmarking Black Magic) com o Qumulo na AWS, onde nosso recurso multicanal SMB3 foi capaz de manter velocidades de transferência de ~2,3 GB/s e chegou até a saturar um link de 10 Gbps via SMB sem qualquer ajuste especial. Esse teste mostrou que o Qumulo pode aproveitar ao máximo os recursos multicanal do SMB, permitindo que os clientes agora executem formatos de vídeo 4K e 8K.
Uma menção que merece destaque: recentemente, tivemos um cliente do setor de Mídia e Entretenimento, localizado em Vancouver, que desejava realizar um teste de pico para garantir que houvesse capacidade e margem de segurança suficientes, caso fosse necessário. Esse cliente conseguiu atingir um resultado surpreendente 1 milhão de IOPS e 9 GiB/s em um cluster do Qumulo na AWS.
Ciências da Vida e Saúde
No mundo das ciências da vida e da saúde, o tempo é essencial; médicos, profissionais clínicos e cientistas buscam resultados imediatos para que possam proporcionar melhores resultados aos pacientes. O armazenamento de PACS e PACS VNA (arquivo independente de fornecedor) é uma das cargas de trabalho que mais crescem na Qumulo, com cada vez mais hospitais e centros de radiologia confiando à Qumulo os dados de seus pacientes. E agora que o Qumulo nativo do Azure está em conformidade com a HIPAA, os clientes têm mais flexibilidade para armazenar cópias secundárias de imagens DICOM na nuvem pública.
Os clientes do setor de saúde podem migrar facilmente seus aplicativos PACS existentes, pois a Qumulo possui certificação ou parcerias com os principais fornecedores de PACS do setor, que, juntos, detêm mais de 70% da participação no mercado mundial. Como prova disso, coletamos uma amostra de dados de produção em tempo real de clientes que executam suas cargas de trabalho de PACS e PACS VNA. Você pode ver na imagem abaixo que a Qumulo nunca deixa os médicos esperando para realizar exames radiológicos urgentes – as aplicações PACS neste exemplo operam predominantemente com tempos de leitura inferiores a um milissegundo.
Seja 1 ou 1.000 hospitais, a Qumulo é capaz de armazenar, escalar e oferecer a mesma experiência a todos os usuários de maneira uniforme.
“A recuperação de imagens radiológicas arquivadas há muito tempo é muito mais rápida no Qumulo do que era no Isilon. A ponto de os radiologistas terem realmente percebido a diferença e perguntado o que havíamos feito.”
– Jason Cherry, diretor de Serviços de Tecnologia da Informação, Lexington Medical
O desempenho excepcional da Qumulo ajuda pesquisadores e profissionais da área médica a processar grandes volumes de dados. Seja no sequenciamento genômico, na descoberta de medicamentos ou na análise de imagens de radiologia médica, a Qumulo acelera a pesquisa, levando a avanços mais rápidos e melhores resultados no atendimento aos pacientes.
Backup e arquivamento
Operações de backup de alto desempenho são fundamentais para as organizações, pois afetam diretamente a disponibilidade dos dados e os tempos de recuperação. Em um mundo onde os ataques de ransomware aumentam ano após ano, o tempo necessário tanto para o backup quanto para a restauração de dados tornou-se crucial para recuperar os dados após a mitigação de um ataque. A API snapdiff da Qumulo oferece a capacidade de realizar um backup completo, seguido por backups incrementais rápidos. Alguns de nossos parceiros se integram diretamente à API da Qumulo para identificar as alterações entre dois instantâneos – isso permite que eles aproveitem a velocidade impressionante dos backups incrementais sem a sobrecarga de uma varredura da árvore do sistema de arquivos.
Usar o Qumulo como fonte ou destino de backup é fácil de configurar e simples de operar. O Qumulo oferece suporte a backups via NFS e SMB, e cada vez mais clientes estão aproveitando nosso suporte ao S3 para realizar backups. Utilizando uma carga de trabalho sintética de backup em nós totalmente NVMe, nossa implementação do S3 atingiu 1 GB/s para operações de backup e 2 GB/s para operações de restauração.
“Nossas equipes estão satisfeitas e se sentem à vontade ao usar o Qumulo como seu sistema centralizado de dados. O departamento de TI também está satisfeito, pois temos um único local para procurar arquivos e outro para fazer backups. Além disso, as análises do Qumulo nos proporcionam visibilidade instantânea sobre nossos dados e usuários.”
– Aidan Taub, Diretor de Sistemas e Tecnologia
Conclusão
Na busca por um desempenho com custo-benefício verdadeiramente imbatível, a Qumulo se destaca, superando seus concorrentes com velocidade e taxa de transferência notáveis, ao mesmo tempo em que oferece opções para Scale Anywhere™. Com seus recursos líderes do setor, a Qumulo tornou-se o sistema de gerenciamento de dados preferido por diversos setores verticais e casos de uso nativos da nuvem. De mídia e entretenimento a ciências da vida e serviços financeiros, a Qumulo está aprimorando a experiência do cliente a passos largos, com novidades ainda mais empolgantes por vir à medida que continuamos a inovar e romper barreiras, oferecendo soluções que se adaptam a qualquer ambiente (Scale Anywhere™).