Qumulo LogoQumulo Logo

Blog

O Scale Anywhere™ requer um plano de controle e um plano de dados unificados

Em 2009, quando eu ainda trabalhava na Isilon, os clientes clamavam por uma maneira de interligar vários clusters do OneFS. O objetivo deles era gerenciar todos os seus dados, independentemente da localização ou do protocolo, por meio de uma única plataforma unificada.

Reuni uma equipe dos nossos melhores engenheiros do OneFS para uma sessão abrangente de brainstorming. Nossa conclusão é que o OneFS não poderia atender às solicitações dos clientes. O OneFS era um sistema de arquivos baseado no kernel que carecia de uma estrutura de camadas bem definida. Dessa forma, construir o que os clientes desejavam era, na melhor das hipóteses, uma tarefa hercúlea e, na pior, impossível.

Treze anos depois, sou agora o diretor de tecnologia (CTO) da Qumulo. Dack Busch, Um líder de GTM talentoso (e com profundo conhecimento técnico) disse que estava recebendo pedidos que, no fundo, eram exatamente os mesmos dos clientes da Qumulo. Minha reação inicial? Eu já passei por isso. Não é viável.

Mas então analisamos mais a fundo e percebemos que algo havia mudado. A Qumulo possuía um sistema de arquivos avançado e moderno, baseado no espaço do usuário, com uma arquitetura de software primorosamente estruturada em camadas. Talvez…

Os clientes são o nosso campo magnético

Essa é uma verdade fundamental na Qumulo. Em outras palavras, as necessidades dos nossos clientes nos levam a reagir da mesma forma que um ímã faz com que as limalhas de ferro se alinhem. Pular? Quão alto?

Em uma série de eventos com clientes em Los Angeles, Manhattan e Toronto, as equipes de engenharia e de produto da Qumulo analisaram a fundo essa “solicitação”. Eis o que concluímos…

  • Verdade nº 1: Os dados não estruturados estão em toda parte. Sabemos que os dados não estruturados representam a maior parte de todos os dados.

    Mas a novidade está no local onde os dados não estruturados são gerados, gerenciados e consumidos.

    • Borda. Vemos isso hoje em locais remotos de filmagem de filmes, lojas de varejo, pontos de atendimento à saúde e bases operacionais avançadas dentro de nossa infraestrutura de Defesa Nacional. Atualmente, é comum vermos centenas de terabytes de dados não estruturados armazenados em locais periféricos individuais.

    • Nuvem. As empresas distribuem seus fluxos de trabalho para aproveitar a nuvem pública em momentos de pico de demanda, utilizam a nuvem para arquivamento e replicação e — o que é importante — acessam dados da borda na nuvem para criar e aperfeiçoar modelos de IA.

    • Núcleo. E sim, os data centers locais vieram para ficar, apesar dos desejos iniciais mais fervorosos dos provedores de nuvem.

  • Verdade nº 2: Os aplicativos – e os usuários – estão distribuídos. Há décadas, vem ocorrendo uma mudança inexorável em direção a um mundo distribuído – usuários trabalhando de qualquer lugar e aplicativos sendo disponibilizados em qualquer lugar.


  • Verdade nº 3: Agilidade de dados. É fácil perceber por que fornecer às pessoas certas acesso aos dados certos no momento certo é fundamental para o sucesso dos negócios. Mas “importante” não é sinônimo de “fácil”. Na verdade, como os dados estão crescendo muito mais rápido do que a largura de banda, esse é um problema extremamente difícil, que só está ficando mais complicado de resolver.


  • Verdade nº 4: Os dados estão corrompidos. Essa foi a grande verdade que ouvimos. Os clientes estão nos dizendo, com toda a clareza, que gerenciar vários silos de dados distribuídos globalmente entre locais de borda, núcleo e nuvem é um verdadeiro saco.

    Não é que os clientes não estejam tentando resolver isso — eles estão. Mas os clientes simplesmente não conseguem resolver isso sozinhos. Eles precisam que os fornecedores de armazenamento criem uma solução elegante, de dentro para fora, que resolva esse problema de forma sistêmica, universal e simples.

Felizmente, a Qumulo tem uma solução!

Apresentamos o Qumulo Global Namespace (Q-GNS) – O plano de dados unificado da plataforma de dados não estruturados Qumulo Scale Anywhere™.

Para os usuários, o Qumulo Global Namespace (Q-GNS) não poderia ser mais simples. Basta ativá-lo e todos os seus dados — cada bit deles — passam a funcionar como se estivessem localmente. Mas o que isso significa?

Em termos simples, todos os seus arquivos podem aparecer em um diretório local. Isso significa que um arquivo local, um arquivo na nuvem ou um arquivo que esteja na sua fábrica do outro lado do mundo todos “parecem” estar ali, na sua estrutura de diretórios local.

E se eles estiverem muito, muito distantes e eu tiver uma conexão um pouco lenta? Mesmo assim, isso não faz diferença. Em primeiro lugar, o Q-GNS conta com um protocolo de comunicação otimizado para redes que economiza largura de banda e custos entre os locais, ao mesmo tempo em que garante a disponibilidade local em tempo hábil dos dados remotos.

Mas o Q-GNS traz ainda mais recursos para oferecer a velocidade de arquivos locais de que você precisa. A lógica de pré-busca da Qumulo prevê quais serão os próximos dados que você vai ler e os busca antecipadamente para você. Isso reduz a transferência de dados entre locais, ao mesmo tempo em que garante acesso local quase instantâneo aos dados remotos. Essa lógica de pré-busca é boa mesmo? Bem, ela foi treinada com mais de uma década de dados do mundo real. Então, sim, é realmente impressionante.

E se outros funcionários tentarem acessar o arquivo ao mesmo tempo? Isso não seria um problema? Não. O bloqueio de leitura/gravação refinado do Q-GNS e o gerenciamento inteligente do cache entre instâncias distintas do Qumulo garantem que usuários e aplicativos locais tenham acesso instantâneo aos dados remotos, ao mesmo tempo em que asseguram a consistência global dos dados.

E não se esqueça: como seus dados estão armazenados na plataforma Qumulo Scale Anywhere™, você tem acesso a todo o amplo conjunto de serviços de dados da Qumulo, como:

  • Acesso multiprotocolo

  • Integrações de segurança corporativa

  • Instantâneos

  • Cotas

  • Replicação

O que dá para fazer com isso?

A resposta é simples: administre sua empresa da maneira como as empresas modernas precisam funcionar — com uma plataforma Scale Anywhere™ que permite conectar dados, usuários e aplicativos de qualquer lugar. Isso significa que as organizações podem usar o Q-GNS para fazer o que antes era impossível com qualquer solução primária de armazenamento corporativo:

  • Reduza custos e complexidade ao mesmo tempo em que aumenta a segurança, centralizando os dados no Qumulo — seja na nuvem ou no local — e oferecendo acesso local de alto desempenho por meio de instâncias menores do Qumulo em todos os locais remotos: na borda, no núcleo e na nuvem.

  • Aumente a agilidade das equipes, facilitando o trabalho de equipes distribuídas e fluxos de trabalho. O Q-GNS oferece acesso local imediato e em tempo real a dados remotos, possibilitando fluxos de colaboração remota do tipo “Follow the Sun”/trabalho remoto.

  • Simplifique os fluxos de trabalho híbridos, tornando os dados locais acessíveis aos aplicativos que utilizam serviços em nuvem. Diga adeus à necessidade de refatorar aplicativos locais para que funcionem na nuvem.

Exemplos de casos de uso

Aqui estão alguns exemplos reais de como nossos clientes estão utilizando o Q-GNS atualmente…

  • Saúde e Imagem Médica: Veja como Hospital Infantil de Dayton pretende aproveitar o Q-GNS e o Azure Native Qumulo para repensar seus fluxos de trabalho de PACS/PACS-VNA

  • IA/ML: Transfira dados localmente para serviços em nuvem, como o Azure OpenAI Services, para um pré-treinamento rápido e a execução em grande escala de modelos de big data.

  • Fluxos de produção “Follow-the-Sun” para mídia e entretenimento: Forneça visualizações instantâneas em tempo real de extensos diretórios de projetos para diversos locais ao redor do mundo. Faça o “pré-aquecimento” e armazene dados em cache de forma proativa.

  • Mídia e Entretenimento: Renderização em massa na nuvem: Replique a partir do repositório de ativos local e utilize frameworks de renderização populares, como o Deadline, para processar tarefas de renderização.

  • Acesso remoto para os setores de Varejo, Jurídico, Bancário, Mídia e Entretenimento e Ações Corporativas: Conceda acesso aos funcionários em todo o mundo, transferindo os dados para todos os locais remotos.

  • Ingestão de dados na borda nos setores de manufatura, varejo, automotivo, SLED/FED: Envie dados provenientes de sistemas de vigilância por vídeo, sensores ou veículos para um Qumulo local que se conecta ao núcleo.

  • Pesquisa Científica e Genômica: Permitir que pesquisadores de diversas instituições trabalhem em conjunto com conjuntos de dados genômicos extensos, sem a necessidade de transferir grandes volumes de dados entre locais.

  • Gerenciamento e arquivamento de dados: Configure um cache de alto desempenho para acesso local a um arquivo ativo de grande escala, seja ele local ou na nuvem pública.

Quando estará disponível?

O Qumulo Global Namespace está atualmente em fase de pré-produção, em pré-visualização privada, com vários clientes da Qumulo. Estamos um pouco sobrecarregados com todo esse interesse e, no momento, não podemos aceitar mais clientes para a pré-visualização privada.

Ele estará amplamente disponível, pronto para produção, em modo de pré-visualização pública em fevereiro de 2024. Essa primeira versão oferecerá suporte a um desempenho eficiente e consistente somente leitura acesso local a dados remotos.

Esperamos lançar soluções de alto desempenho e consistentes leitura/gravação acesso local a dados remotos no segundo semestre de 2024. Entre em contato conosco (ou me mande uma mensagem direta pelo LinkedIn) caso queira participar da prévia exclusiva desta versão.

Quanto vai custar?

Ainda não finalizamos o modelo de preços. No entanto, e se você, como cliente, implementar isso em produção antes de finalizarmos os preços? Nesse caso, permitiremos que você continue usando o que implementou em produção gratuitamente, desde que continue sendo um cliente em situação regular, como forma de agradecimento. Considere isso nossa forma de expressar gratidão a vocês, nossos valiosos clientes, sem os quais não teríamos razão de ser.

Os clientes podem utilizar o Qumulo Global Namespace como um serviço independente ou combiná-lo com ANQ e ANQ Cold para oferecer um modelo operacional de TI verdadeiramente híbrido e atender a locais distribuídos globalmente a partir de uma única plataforma comum capaz de Scale Anywhere™.

Apresentando o Nexus

Também gostaria de anunciar que, a partir desta quinta-feira, 7 de dezembro de 2023, estará amplamente disponível Nexus, o plano de controle unificado da plataforma de dados não estruturados Qumulo Scale Anywhere™.

Um serviço baseado na nuvem, Nexus oferece um único painel de controle para monitorar e gerenciar com segurança todos os seus sistemas Qumulo, independentemente de onde estejam, desde a borda até o núcleo e na nuvem. Por se tratar de uma oferta de SaaS baseada na nuvem, você pode esperar atualizações nos recursos e funcionalidades a cada duas semanas.

E sim, isso está incluído na sua assinatura do Qumulo.

Confira os links a seguir para saber mais

Vídeo de demonstração do Q-GNS

Vídeo do Hospital Infantil de Dayton

O Scale Anywhere™ precisa de um plano de controle e de da...